소계서원은 조선 태종 때 유학자인 안몽득 선생과 그의 아들 안우, 안주, 안택 3형제, 임진왜란 공신 안근, 안수, 안시명, 안이명, 안신명 등을 추모하기 위하여 1783년(정조 7년) 광주 안씨 문중에서 건립한 서원이다.
서원은 국립 교육기관인 향교와 함께 유교의 경전을 가르치던 사설 교육기관이다. 교육활동 외에 선현에게 제사 지내는 일도 함께하였다. 교육 기능보다는 선현에 대한 제례 기능이 강조된 것이 사우이지만 조선 후기에는 서원과 사우의 구분이 모호해졌다. 서원이 제례 위주의 사우가 되기도 하고, 사우가 서원처럼 되기도 하여 소계서원을 소계사라고 부르기도 했다.
소계서원 복원지에 따르면 1783년에 창건되었으나 화재로 소실되고, 1866년(고종 3) 재건되었지만 1868년 서원철폐령에 의해 훼철되었다고 한다. 1945년 광복 이후 지역 유림의 발의로 단을 세우고 강당을 중건하여 오늘에 이르고 있다. 소계서원에는 [소계세고], [석하집], [회헌선생실기] 등 고서가 보관되어 있다.