ปราสาทบ้านน้อยห้วยพะใย เป็นปราสาทที่มีแนวกำแพง 2 ชั้น กำแพงชั้นนอกเป็นกำแพงดิน นอกคันดินเดิมน่าจะเป็นคูน้ำล้อมรอบ แต่ปัจจุบันตื้นเขินขึ้น ส่วนกำแพงชั้นในก่อด้วยศิลาแลงและมีทางเข้าทางเดียว คือ ซุ้มประตูทางทิศตะวันออก ภายในแบ่งเป็น 3 ห้อง แต่สภาพในปัจจุบัน ประตูทางเข้าและกำแพงทั้งสองชั้นพังทลายหมด ปราสาทบ้านน้อยห้วยพะใย ยังเป็นอโรคยาศาล ที่ใช้เป็นสถานที่ในการรักษาโรค สามารถรักษาทั้งกษัตริย์ และประชาชนในสมัยโบราณ เปรียบเหมือนกับโรงพยาบาลในสมัยปัจจุบัน