Pref.)備前国第一の禅寺と称される。参道より総門・三門・仏殿が一直線上に配されている。仏殿に向かって右に鐘楼・左に鼓楼が配されている。鼓楼の奥(仏殿向かって左)に経蔵、経蔵の背後に開山塔(開山堂)がある。仏殿向かって右には方丈があり、方丈奥に池泉回遊式庭園がある。この庭園は絶外と津田永忠によって造営された。墓所向かって左奥の丘陵中腹に三重塔がある。現在は伽藍向かって左に大光院(日蓮宗)、右に天台寺(天台宗)が残っているのみである。現在も修行僧を受け入れている。現在の修行僧は住職の原田正道(英語版)を除いて全て海外より来日した人々である。岡山の市街地で時折、雲水姿の托鉢僧を見かけるが、彼らは曹源寺の修行僧である。庫裡書院の東庭で、二千五百五十坪という広大な池庭であり、一応山畔にかけて回遊できるように設計されているが、それでいて鑑賞本位の様式とされている。池庭の地割は一種の曲玉式で、東部の山畔が大きい出島となり、これを西部池畔から眺めると、東部の出島が中島のように見られる。これは江戸初期の典型的な地割である。この出島には、上部から落水の滝が三段式に作られている。その石組もなかなか剛健な手法が用いられているが、現状では庭木が繁茂していて、三段式の滝の石組が判然と見られない。下部の護岸石組も、向かって右方出島の石組も、剛健であり、池中の岩島は少々変化している。別に投老軒の茶亭が池畔にある。歴代藩主、斉輝など池田家一族の墓所となっている。