岐阜県は古くから地芝居(歌舞伎)が盛んに行われており、数多くの芝居小屋があります。特に東濃地方は盛んで、各地で地芝居が行われてきました。飯地町もその一つです。

飯地には天保年間まで遡る地芝居の歴史があります。飯地には六つの集落(五明、福原尾、沢尻、杉之沢、南、西山)があり、明治期には各集落のそれぞれの神社に拝殿型の舞台があり、地芝居が上演されてきました。

やがて第２次世界大戦となり、地芝居はいったん下火となります。しかし、戦後の復興による地芝居復活の機運と、昭和20年代に各地で起こった公民館運動を背景に、住民の強い希望により1951年(昭和26年)に飯地公民館兼地芝居小屋として現在の『五毛座』が建築されました。

同年の10月23日には落成式及び杮落し歌舞伎、翌24日には牛岡三太夫一座による歌舞伎が行われ、当時の一大イベントであったようです。

1952年(昭和27年)には現在の飯地五毛座歌舞伎保存会につながる「歌舞伎同好会」が結成されました。

その後、公民館は地元の青年の教育の場、保育園、また結婚式場としても使用されてきましたが、1983年(昭和58年)に別の場所に飯地公民館が新築されたため、旧公民館はその所在する自治会が「五毛（ごもう）」（地名は五明）という名であることから「五毛座」（ごもうざ）と命名され、歌舞伎（地芝居）専用の施設となりました。

2003年(平成15年) には、老朽化に伴う改修工事が行われました。

2010年(平成22年) には、「旧飯地公民館」として国登録有形文化財に指定されます。

2024年(令和6年)4月 大規模改修により、外壁、床、天井、音響設備、照明のLED化や、楽屋の増築が行われました。同年の4月12日には、記念式典と中村屋一座による杮落とし公演が行われました。(出演者：中村勘九郎、中村七之助、中村鶴松、中村いてう　他)

地元の集会などにも使用され、今なお民俗文化の伝承と交流の場であり続けています。建物には厨房が併設され、この地域の特産物加工場や朝市にも利用されています。

最近では、音楽ライブや落語・講談のイベントのほか、2025年(令和7年)5月にはポーランドのジャズグループ「レマンチク ゴリツキ サルネツキ トリオ」による公演などが開催され、様々な活用が進められています。