탑골의 탑이야기가 있는 곳은 진도군 여귀산 동남쪽 18번 국도가 지나가는 도로변이다. 탑리 마을 입구이며 여귀산 돌탑길인 이곳에는 석가탑을 비롯하여 종탑 형식의 돌탑과 원탁 형식으로 쌓은 돌탑 그리고 돌에 새긴 수묵화들이 전시되어 있어 이곳을 지나는 여행객들의 이목을 끄는 곳이다. 이곳에는 탑 이야기를 알리는 표석이 설치되어 있는데 주 내용은 남신과 여신이 힘자랑을 하다 자꾸 지는 남신이 여신의 탑들을 허물고 이기게 되었다는 것이다. 후에 이들의 화해를 위해 더 많은 돌탑을 쌓았다고 한다.
여귀산 자락의 경치 좋은 언덕에 쌓여 있는 돌탑들과 다소곳이 마련된 정자는 지나는 이들에게 휴식할 수 있게 해주고 자연의 아름다움을 느낄 수 있게 해준다. 뒤로는 여귀산이 둘러싸고 있고 앞으로는 드넓은 바다를 볼 수 있는 곳이라 이곳에 차를 세우고 둘러보면 좋을 것이다. 이곳 앞으로 보이는 섬이 상구자도, 하구자도이며 그 뒤로 보길도와 완도의 모습도 볼 수 있다. 잘 꾸며진 돌탑공원과 함께 진도 앞바다를 조망할 수 있는 좋은 여행지이다.