ในตำนานกล่าวไว้ว่า นางพันธุรัตเป็นยักษ์รับพระสังข์มาเป็นบุตรบุญธรรมโดยนางและบริวารแปลงร่างเป็นมนุษย์ วันหนึ่งพระสังข์ได้เข้าไปในเขตหวงห้ามลงไปชุบตัวในบ่อทองเอาชุดเจ้าเงาะและของวิเศษเหาะหนี นางพันธุรัต กลับมาไม่พบพระสังข์ก็ออกตามหา นางพยายามอ้อนวอนให้พระสังข์กลับแต่ไม่เป็นผล นางพันธุรัตเสียใจ จนอก แตกตายตามตำนานเมืองเพชร พอนางพันธุรัตตาย พระสังข์ก็ได้จัดการทำศพ ร่างของนางก็กลายเป็นภูเขา ชาวบ้านจึงเรียกภูเขาลูกนี้ว่า “เขานางนอนหรือเขานางพันธุรัต” จนถึงทุกวันนี้