이 서원은 조선 중기 학자 청계 김진(1500~1580) 선생과 그의 아들 5형제의 유덕을 추모하고 후학을 양성할 목적으로 1709년 사림과 자손들의 공의에 의하여 세워졌다. 1871년 서원철폐령에 의하여 훼철되어, 중건과 이전을 거듭하여 현재의 모습인 강당과 주사만 남아 있다. 당초에는 임하면 사의동에 위치하였으나 임하댐 건설로 인해 1987년 현 위치로 옮겨졌다.
강당은 정면 6칸, 측면 2칸의 제법 규모가 큰 편에 속한다. 자연석 기단 위에 자연석 주초를 놓고 그 위에 원주와 각주를 혼용해서 세웠는데 중앙 대청은 정면 4칸으로 매우 넓게 하였다. 대청을 중심으로 해서 좌우에 통칸 온돌방이 드리워져 있어 일반적인 강당 평면형식이다. 우물마루 상부는 5량가로 구성되어 있으며 박공지붕이다. 건물 정면에는 ′경덕사′라는 편액이 있는데 이것은 묘우의 현판을 강당에 옮긴 것으로 보인다.
현재 교육 기능은 사라지고 매년 3월과 9월 중정에 향사를 지낸다. 사빈서원 입구 경원루 앞에는 널리 배우고 독실하게 실천하자라는 뜻의 [박학독행] 비석이 새겨져 있으며, 옆에는 유교 문화를 계승하고 선비 양성을 위해 지은 금장각 도서관이 있다.