대한불교조계종 제21교구 본사인 송광사(松廣寺)의 말사이다. 417년(눌지왕 1)에 아도(阿道)가 창건하여 ‘보현사(普賢寺)’라 하였다 하나, 지리적인 위치로 보아 창건자의 신빙성은 없다. 임진왜란 때 모두 불탄 뒤 1644년(인조 22)에 벽천(碧川)이 중창하고 능가사로 이름을 바꾸었다.
벽천은 원래 90세의 나이로 지리산에서 수도하고 있었는데, 어느 날 밤 꿈에 부처님이 나타나서 절을 지어 중생을 제도하라는 계시를 받고 이곳에 능가사를 신축하였다고 한다. 그 뒤 1768년(영조 44)과 1863년(철종 14)에 각각 중수하였으며, 1993년에 응진전을, 1995년에 사천왕문을 각각 수리하여 오늘에 이르고 있다.
현존하는 당우로는 정면 5칸, 측면 3칸에 팔작지붕을 한 2001년 보물로 지정된 고흥 능가사 대웅전을 비롯하여 응진당 · 종각 · 천왕문(天王門) · 요사채 등이 있다. 국가유산으로는 350여 년 전에 나무로 만든 뒤 개금한 불상 8위와 나무로 만든 뒤 도분(塗粉)한 불상 22위, 1978년 전라남도 유형문화재(현, 유형문화유산)로 지정된 높이 157㎝의 능가사 범종과 4.5m의 목조사천왕상(木造四天王像), 귀부(龜趺) 위에 세워진 높이 5.1m의 고흥 능가사 사적비가 1978년 전라남도 유형문화재로 지정되었다.
이 중 사적비는 1726년(영조 2)에 건립한 것으로 불교의 유래와 절의 역사를 기록해놓은 귀중한 자료이다. 전설에 의하면 이 비석은 원래 탑 앞에 있었는데, 덕목이 도술을 부려 절 뒤로 옮겨놓았다고 한다. 이 밖에도 절의 경내에는 광희(廣熙) · 사영당(泗影堂) · 추계당(秋溪堂) 등의 부도(浮屠) 8기가 있다.
영조 때 이중환(李重煥)의 기록에 의하면 옛날 일본 류큐(琉球:지금의 오키나와)의 태자가 표류하다가 이곳에 이르렀는데, 이 절의 관세음보살에게 기도하면서 고국으로 돌아가게 해달라고 빌었더니 7일 만에 승려가 나타나서 태자를 끼고 파도를 넘어갔다고 하며, 절의 승려들이 법당 벽에 그 모양을 그려놓았던 것이 영조 때까지 남아 있었다고 전한다. 부속암자로는 만경암(萬景庵)과 서불암(西佛庵)이 있었다고 하나 현존하지 않는다.