송광사 터고려 명종 25년에 지눌이 금오도에 절을 세운 기록이 있어 이곳 절터를 송광사 터로 추정할 수 있다. 전설에 의하면 지눌이 모후산에 올라 좋은 절터를 찾기 위하여 나무로 조각한 새 세 마리를 날려 보냈는데, 한 마리는 순천 송광사 국사전에, 한 마리는 여수 금오도에, 한 마리는 고흥 송광암에 앉았다고 하며, 이것을 삼송광이라고 부른다고 한다.