春秋时期，孔子曾经登临此山以观东海，人们为了纪念他，就将此山更名为孔望山。在这座山上，既有儒教创始人孔老夫子登高望海的足迹，还有佛教在中国最早的石窟，上面刻着释迦牟尼涅槃的庄严场面，更有道教西王母高高在上俯瞰众生的雕像。