กุฏิใหญ่ หรือ กุฏิิหลวงพ่อห้อย มีลักษณะเป็นอาคารทรงไทยที่ได้รับอิทธิพลมาจากประเทศในทวีปยุโรป คือ มีหลังคาทรงปั้นหยาดูแบนและเตี้ย โดยสร้างในเนวตามตะวันและมีความยาวถึง ๑๒ ห้อง ด้านหน้าทิศตะวันออกมีมุขโถงยื่นออกมา ส่วนใต้ถุนพื้นที่ปล่อยโล่ง ตัวอาคารชั้นบนมีฝาปะกนแบบฝาเสี้ยมล้อมรอบทุกด้าน  ฝาแบบนี้สามารถพับและเปิดปิดได้ตามต้องการ พื้นที่ภายในยังสามารถแบ่งกั้นเป็นห้องได้อีก ส่วนบนของฝาปะกนตกแต่งด้วยลายไม้ฉลุเพื่อใช้เป็นช่องระบายลมด้วยลวดลายฝรั่งที่เรียกว่า "ลายขนมปังขิง" ซึ่งมีความสวยงามมาก อาคารหลังนี้สร้างขึ้นในสมัยพระครูไพศาลธรรมวาที (ห้อย บุญฺญสฺส) ทราบมาว่าในการสร้างใช้เงินถึง ๔๐,๐๐๐ บาท (สี่หมื่นบาทถ้วน) และเป็นอาคารที่ทันสมัยมากในครั้งนั้น โดยมีผู้บริจาคทรัพย์ร่วมสร้างซึ่งมีรายชื่อปรากฏอยู่ที่ต้นเสาปูนทุกต้น อาคารดังกล่าวเคยเป็นที่อยู่จำพรรษาของพระครูไพศาลธรรมวาที (ห้อย ปุญฺญสฺส)