“พนมสวาย” เป็นคำภาษาพื้นเมืองสุรินทร์ “พนม” แปลว่าภูเขา “สวาย” แปลว่า “มะม่วง” ในหมู่พนมสวายประกอบด้วยภูเขา 3 ลูกติดต่อกันมีชื่อพื้นเมืองเรียกแตกต่างกันไป ได้แก่ “พนมกรอล” แปลว่า “เขาคอก” “พนมเปร๊า แปลว่า “เขาชาย” “พนมสรัย” แปลว่า “เขาหญิง” รวมกันทั้ง 3 ลูก มีชื่อว่า เขาพนมสวาย