มีเจดีย์ปะการังประดิษฐานอยู่บนเขาธาตุ ตามตำนานกล่าวว่าเจดีย์นี้ได้ทำการก่อสร้างหลังจากสร้างพระบรมธาตุเมืองนครศรีธรรมราชเสร็จเรียบร้อยโดยผู้มีจิตศรัทธาจากเมืองไชยาได้รวบรวมเงินทองและของมีค่าต่าง ๆ เพื่อไปบรรจุที่พระบรมธาตุเมืองนคร แต่ได้ก่อสร้างเสร็จเรียบร้อยแล้วผู้มีจิตศรัทธาดังกล่าวจึงได้ร่วมใจกันสร้างเจดีย์ขึ้นบนเขาธาตุ ซึ่งสร้างด้วยหินปะการังทั้งองค์ องค์เจดีย์เป็นรูปโอคว่ำ มีเส้นผ่าศูนย์กลางประมาณ 5-6 เมตร รอบ ๆ เจดีย์มีพระพุทธรูปแกะสลักหินทรายแดงประดิษฐานบริเวณเจดีย์ เชื่อว่าคงเป็นแหล่งอารยธรรมทางด้านพุทธศาสนาสมัยหนึ่งในบริเวณอ่าวทางตอนเหนือของคาบสมุทรนี้