60세 이상의 전직 관리와 학자들의 수양처로 인의예지신의 구현을 목적으로 하는 수양처로 일종의 경로당과 같은 기능을 한다. 조선 시대부터 일제 강점기까지 영암 원로들의 고견을 모으는 장소로 이용되었다. 수성사라는 액호는 1655년 향토 주민의 귀감이 되는 장소라 하여 조정으로부터 하사 받은 것이라고 전해지고 있고, 원래 성안에 있다가 성밖의 성황사 쪽으로 이전했다고 하나 모두 확실하지는 않다. 현재의 장소는 원래 조선시대 때 단군과 영암을 수호하는 신령을 모시는 부군당으로 보이는데 1953년에 이곳에 세워졌다. 2005년 4월 낡은 건물을 헐고 다시 지었다. 수성사 뒤로는 단군성전이 있어 매년 개천절에 단군제를 봉행하며, 부군당에 지내는 제사도 조선시대 때는 이곳에서 주관했던 것으로 보인다.
수성사에는 팽나무 5본, 은행나무 2본 등 모두 7본이 보호수로 지정되었는데 수령은 300살이 넘는다. 수성사 사장은 영암 사포계장을 겸임하는 전통이 있다.