ในสมัยที่พระบาทสมเด็จพระจอมเกล้าเจ้าอยู่หัวฯ เสด็จประพาสหัวเมือง เมื่อถึงอำเภอเสาไห้ ได้โปรดเกล้าฯ บูรณะปฏิสังขรณ์วัดแห่งนี้ และสถาปนาเป็นพระอารามหลวง มีคำเล่าลือกันว่าวันดีคืนดีจะเห็นดวงแก้วสุกสว่างเหนือวิหารวัดเขาแก้ว ถือว่าเป็นการแสดงปาฏิหาริย์ของสิ่งศักดิ์สิทธิ์ที่บรรจุในองค์พระเจดีย์ ในเจดีย์ปรางค์ห้ายอดองค์เล็กซึ่งตั้งอยู่ระหว่างหอระฆัง และเจดีย์องค์ใหญ่เป็นที่ประดิษฐานพระพุทธรูปทรงเครื่อง พระพุทธรูปปางป่าเลไลก์ และ พระพุทธบาทซึ่งล้วนมีลักษณะงดงาม