Hallo Nick,
es heißt tatsächlich so, siehe Duden.
Die Frauenkirche Dresden ist die Kirche, die nach einer Frau, nämlich Maria, benannt wurde,
das Frauenzimmer war(en) ursprünglich die Gemächer [=Plural] einer Fürstin, danach deren Gefolge, heute scherzhaft die Bezeichnung für eine Frau.
Gruß
Pumene