ในปี พ.ศ. 2491 หลวงปู่ศรี มหาวิโร ท่านได้จาริกวิเวกออกจากวัดพูลศรีสารคาม (วัดประชาบำรุง) มายังวัดป่ากุง ซึ่งในขณะนั้นเป็นวัดที่ร้างเก่าแก่มาก มีพื้นที่ประมาณ 150 ไร่ และมีมาตั้งแต่ปี พ.ศ. 2313 ขึ้นชื่อว่าเป็นพื้นที่อาถรรพ์ ไม่มีใครกล้าเข้ามาบุกรุก ชาวบ้านต่างบอกเป็นเสียงเดียวกันว่าผีดุมาก เจ้าที่แรง
ในพื้นที่ทั้งหมด 150 ไร่นี้ เป็นที่อาถรรพ์ใครคิดจะไปทำอะไรในป่านั้นจะต้องมีอันเป็นไป ปวดหัวตัวร้อนเป็นไข้ บางรายถึงตาย แค่เอากิ่งไม้แห้งหรือเอาไม้ไปปลูกบ้านก็ไม่ได้ หรือจะไปตัดต้นไม้ก็ไม่ได้ เพราะผีดุมาก เจ้าที่แรง เช้าบ้านเลยต้องทิ้งให้เป็นพื้นที่ป่ารกร้างอย่างนี้มาหลายชั่วอายุคนแล้ว