Das Gasthaus zum (braunen) Hirschen stand bis 1887 in der Gabelung von Schwabacher Straße und Hirschenstraße am Kohlenmarkt.

Das heutige Gebäude (Hirschenstraße 2) wurde 1888 als stattliches Wohn- und Geschäftshaus errichtet und trägt seinem Namen mit einem Hirschgeweih am Giebel zum Kohlenmarkt Rechnung.