该遗址位于县城东三公里的马鞍山。1960年中国科学院古脊椎与古人类研究所专家曾亲临挖掘，在马鞍山的东胜岩、浦地岸和石背山的红窟洞发现了人骨化石一批。其中东胜岩发现了一块颞骨的鼓室部、两枚牙齿及一段右侧股骨上段。葡地岩发现了三小块顶骨、额骨的眶上缘和一块额骨的眉间部分。与这些人类骨骼一同出土的还有第四纪晚期的哺乳动物化石。据中国科学院古脊椎动物与古人类研究所专家的鉴定，“灵山人”化石已有已至二万年历史，属更新世末期新人阶段的化石。广东省人民委员会于1962年7月7日公布马鞍山为第一批广东省文物保护单位，命名为“灵山人化石产地”。灵山县人民政府于1987年11月公布该遗址为灵山县文物保护单位。