Історія «Стогів сіна» не обійшлася без відомих магнатів. Першою власницею картини була Берта Оноре Палмер, яка купила її у 1892 році. Будучи дружиною багатого бізнесмена Чикаго Поттера Палмера, вона мала можливість вільно інвестувати у великі твори мистецтва.
Місіс Палмер вперше побачила краєвид на масштабній виставці Моне в Парижі в 1891 році і закохалася в картину. Через рік вона придбала роботу у дилера Поля Дюрана-Рюеля. Того ж року вона збиралася продати шедевр паризькому музею, але до листопада передумала. «Стога сіна» разом із вісьмома іншими роботами з цієї серії вирушили з нею до Сполучених Штатів.
Протягом усього життя місіс Палмер залишалася захопленим шанувальником творчості Моне. Крім «Стогів сіна» вона володіла чотирма «Тополями», трьома «Руанськими соборами» та трьома краєвидами із серії «Ранок на Сені».
Після смерті Берти Палмер вся колекція робіт XIX століття стала частиною зборів її сина та невістки – Оноре та Грейс Палмер. У 2019 році в історії картини відбулася чергова історична зміна варти.