ที่มาของอาถรรพ์ขื่อบ้าน สืบเนื่องมาจากในสมัยก่อน คนโบราณมักจะโค่นต้นไม้ใหญ่ในป่ามาสร้างบ้านเรือน โดยทำพิธีขอขมาและขออนุญาตดวงวิญญาณที่สถิตย์อยู่ในต้นไม้ ไม่ว่าจะเป็นนางไม้ เทพาอารักษ์ ด้วยเหตุนี้เอง เมื่อนำไม้มาสร้างบ้าน จึงทำให้มีวิญญาณติดมาด้วย
จึงทำให้คนโบราณสอนลูกหลานไม่ให้นอนหรือนั่งใต้ขื่อ เพราะอาจจะพบเจอกับอาถรรพ์ร้าย หรือพบเจอกับสิ่งไม่ดี เช่น ฝันร้าย เห็นผี ผีอำ หรืออาการปวดตามร่างกาย
การห้ามนอนใต้ขื่อนั้น ถือเป็นกุศโลบายของคนสมัยก่อน เพราะขื่อบ้านต้องแบกรับน้ำหนักไว้ค่อนข้างมาก หากชำรุดขึ้นมา อาจทำให้เกิดอันตรายจนถึงแก่ชีวิตกับคนที่นอนใต้ขื่อนั่นเอง แต่ในปัจจุบันมักจะสร้างบ้านโดยมีผนังฝ้าเพดาน ทำให้มองไม่เห็นขื่อ ซึ่งมีความเชื่อว่า จะช่วยแก้ไขปัญหาเกี่ยวกับความเชื่อนี้ได้ เพราะหากนอนใต้ขื่อ แต่ไม่เห็นขื่อ ก็จะไม่เจ็บป่วย ไม่โดนผีหลอก ไม่ถูกผีอำ ฉะนั้นบ้านใครที่เห็นขื่อแบบชัดเจนก็ควรหาฝ้าเพดานมาปิดไว้ เพราะเมื่อมองไม่เห็นขื่อแล้ว ก็ย่อมเกิดความสบายใจแก่ผู้อยู่อาศัย
ในตำราฮวงจุ้ยก็เช่นกัน ถ้าขื่อปรากฏอยู่ตรงหน้าประตูบ้านก็ไม่ดี เชื่อว่าจะทับให้โชคลาภไม่ไหลเข้าบ้าน