นายดุสิต ช่วงชิต ศิลปินอิสระ เจ้าของสวนผีดุ เล่าให้ฟังว่า เพื่อนที่เป็นอาจารย์หมอจะนำสื่อการเรียนการสอน ที่เป็นศีรษะคน หรือโครงกระดูก ที่ชำรุดเสียหายไปทิ้ง ตนเองจึงมีแนวคิดที่จะมาทำเป็นหุ่นรณรงค์เมาไม่ขับ หรือสัจธรรม เกิด แก่ เจ็บ ตาย แต่กลับพบว่าบ้านญาติที่อยู่ติดกันมีคนร้ายเข้ามาก่อเหตุลักทรัพย์ จึงเปลี่ยนแนวคิด ทำเป็นหุ่นผี หลากหลายรูปแบบ เช่น ผีไร้ญาติ ผีตายทั้งกลม ผีเด็ก ผีหลอก ผีแม่มด ผีกระสือ ผีทหาร เป็นต้น นำมาติดไว้ตั้งแต่ประตูทางเข้า และตามบริเวณตัวบ้าน พร้อมกับขึ้นป้ายว่า สวนผีดุ เพื่อป้องกันคนร้ายไม่ให้เข้ามาก่อเหตุ และเพื่อความสบายใจของเจ้าของบ้านด้วย ในช่วงแรกที่นำมาติดตั้ง ชาวบ้านที่ขับรถผ่านไปมาไม่ทันสังเกตุโดยเฉพาะในช่วงเวลากลางคืนถึงกับกรี๊ดเสียงหลงเพราะตกใจกลัว มีหลายคนถึงกับมาบอกให้นำหุ่นผีที่ติดไว้หน้าบ้านออกเพราะลูกหลานกลัว