درویش خان اسفندیارپور، مردی بود کر و لال که با خانواده‌اش در ۴۰ کیلومتری سیرجان از طریق چوپانی و باغ داری زندگی می‌کرد. او پس از اصلاحات ارضی در سال ۱۳۴۰ برای اعتراض بخاطر از دست دادن املاکش، دست از باغ داری برداشت تا اینکه همه درختان زمین باقی مانده او (پس از تقسیم اراضی) خشک شدند. او به همه شاخه‌های درخت‌های میوه سنگ آویزان کرده بود و از آنها چون میوه حقیقی مراقبت می‌کرد. در سال ۱۳۵۵ پرویز کیمیاوی فیلمی را بنام باغ سنگی از این باغ باشرکت درویش خان اسفندیارپور ساخت که برنده جایزه خرس نقره‌ای جشنواره بین‌المللی فیلم برلین شد./درویش خان اسفندیارپور در سن ۹۰ سالگی در ۱۹ فروردین ۱۳۸۶ درگذشت و پیکرش در این باغ دفن گردید.