관산서당은 1620년(광해군 12)에 지방 유림의 공의로 정구 선생, 강흔 선생, 안여경 선생의 학문과 덕행을 추모하기 위해 창건하여 위패를 모셨다. 1711년(숙종 37)에 [관산]이라고 임금이 서원 이름을 지어 새긴 편액을 내려 사액서원으로 승격되었으며, 선현 배향과 지방 교육의 일익을 담당하였다. 그 뒤 1868년(고종 5) 흥선대원군의 서원 철폐령으로 훼철되었다.
서당 좌측방에는 두짝, 우측방에는 외짝의 세살문을 달았고 대청의 뒷벽에는 판장문을 달아 고급스럽지 않지만 소박한 형태이다. 3량 가구 형식으로 중앙부에 대들보를 걸고 전면의 퇴 칸에는 퇴보를 걸어 연결하였으며 큰 장식은 보이지 않는다.
서당 처마는 홑처마이고 지붕은 박공지붕 형식이다. 건립기록을 찾을 수 없으나 1900년 전후에 건립된 것으로 판단되며, 퇴칸의 사용이나 간결한 가구 기법 및 장식적 기법 등 조선 후기 건축양식과 기법을 볼 수 있는 건물로 학술 가치가 있다.