城山古墳群と小枝山古墳群が城跡と推定され、鎌倉時代の土豪、稲井瀬弘義など稲井瀬氏の居城と伝える。

稲吉集落史では寺内村の小村、小枝村に所在としているが所在地の特定はなされていない。

稲吉集落の北に城山（じょやま）の字が見え、別名に「小枝城」、毛利家に伝わる文書などでは「稲石城」とする。

宇田川村史では稲がよく作られることから「稲吉」を称したとされ、大山寺縁起にも記述が見えるとしている。

稲寄とも記載していることから米の集積地であったとも考えられる。

名和氏紀事には名和庄の西方二里ばかりの処に稲吉村があり、稲井瀬に似せた地名であるとしている。

城山（城山古墳群）及び小枝山（小枝山古墳群）には多数の古墳や石室が存在する。

城域には湧き水も多数存在し、東の山中から土管など水路を使って水を引いていた伝承を裏付けるよう筒状の土管が出土している。そのため、表土付近に見られる井戸跡のような穴は石室が埋まったものや風倒木跡とも考えられる。

1333年（元弘3年/正慶2年）

佐々木清高の求めに応じ、幕府方として船上山で戦った稲井瀬弘義が戦死した後の稲吉村と稲井瀬氏の動向は不明。

予てから不仲であった名和氏によって粛清、排除されたと考えられる。

1524年（大永4年）

伯耆山名氏が伯耆国を支配した頃より藤原氏の一族が城主であったと伝える。

尼子経久による伯耆侵攻（大永の五月崩れ）では西伯耆の諸城が落とされる中、当城も尼子方の軍勢によって包囲されるが山中に土管を敷き、飲み水を確保するなど籠城の備えは万全で難攻不落の城砦であったとしている。

尼子方に包囲され籠城戦が続く中、城主の母が息子の助命と引き換えに当城の水源が後方の山中にあると尼子方に教えたことにより城内は水を絶たれ落城する。

尼子の兵は助命の約束を破り城主を殺害し、尼子氏が伯耆国を支配した頃は大山寺経悟院が領有したと伝えている。

伯耆国北尾城にも似た伝承が残るが当城に伝わる伝承の方が時代は古い。

北尾城の伝承では時代が天正年間、籠城したのは毛利方で水源（トヨヶ口）は行松氏が聞き出すなど相違点が見える。

他にも伝承として伯耆国岸本要害から別所一族が移ってきたとも伝えられている。

宇田川村史 稲石城址の項

1569年（永禄12年）

山中幸盛らによる第一次尼子再興戦では大山寺経悟院が尼子方への援助として当城、伯耆国末吉城、伯耆国淀江城と呼応し毛利方へ反旗を翻している。

この時、尼子方へ与した拠点（伯耆三城）のひとつとして挙げられる。

1571年（元亀2年8月）

山中幸盛が伯耆国寺内城から敗走或いは末吉城で捕縛された頃に当城も落城と考えられる。

1591年（天正19年）

吉川広家の領地に「七十五貫 稲吉」と見える。（吉川広家領地付立 吉川家文書）