加園城は県道２４０号線沿いで、加園郵便局のすぐ北側にある比高30ｍほどの山上にあった。郵便局の近くには「石灰会社前」というバス停があるが、その名の通り、石灰岩の発掘のために山の南側の部分がかなり削られてしまっている。かろうじて遺構には掛かっていないようにも思われるが、実際には南側にも何らかの遺構があったのかもしれない。中心となる１郭は長軸５０ｍほどの郭である。周囲には土塁がめぐらされ、殊に北の尾根続きの方角では高さが５ｍほどもある部分もある。また１郭の周囲には横堀が巡らされているが、これも深い所では８ｍほどもある大規模なものである。
１郭の南端には虎口状の遺構が残る。現状では横堀から上る道が付けられているが、本来は２郭と木橋で接続していたものと思われる。
横堀を挟んで１郭の北側には周囲を土塁で囲んだ方10ｍほどの小郭がある。周囲の土塁と前面の堀切などから考えると、北の尾根から来る敵を迎え撃つための馬出し的な部分であった可能性もある。その堀切の先にももう１本の堀切があり城域は終わる。
１郭下の横堀は西側で一部切れており、竪堀となって（あ）の部分に落ちている。（あ）の脇には横堀があり、また４郭に接続する土橋がクランクしていることから、ここに虎口関連の仕掛けがあったものと推測できる。南側の下から登ってくると、７、６、５の郭の脇を順次通って道が上っていく。上った所が（あ）の部分というわけである。ここから１郭下に上ってこられると簡単に１郭に到達できてしまうので、本来は１郭下の腰曲輪をずっと歩いて、２郭下の土橋の外側の馬出し状部分に出るようになっていたのではないだろうか。７の郭は凹型にへこんでおり、これは敵を誘い込んで叩くためのスペースであったとも考えられる。またこの部分には湧水点もあるらしく、湿っぽい郭である。
西側の尾根には４の郭がある。長軸20ｍほどの郭であるが、西側には高土塁を回し、北側下には２段の横堀を配している。裏側になってしまっているので鳥瞰図では描かれていないが、下の横堀から竪堀が落ちていっている。
２郭の周囲にもしっかりと横堀が巡らされているが、その東下には８の郭がある。そこから東下に降りる途中にはいくつかの平坦地や堀、土塁などが複雑に組み合わされて入るようだが、なにしろヤブがひどいので、正確な形状を把握することができない。しかし、こちら側にも登城道があり、堀や土塁を複雑に組み合わせていたのは確かなようだ。
このように加園城は、大規模な堀や土塁を組み合わせた戦国末期の城である。南摩地区の城とは、横堀の多用、主郭南端の内枡形という点では共通しているが、高土塁を多用しているという面ではちょっと違った様相を見せている。
加園城から見た独鈷山城。城の大半が削られてしまっている。現在も削られ続けており、数年後には完全に消滅してしまうのかもしれない。山上には段々の数郭と３本の堀切を用いた砦といっていい規模の城郭があったという。加園城の詰めの城とも言われているが、加園城の形態と比べると、かなり古い時代の城のようである。加園城の物見の砦というように考えるのがあっていそうである。