In Augsburgs Prachtstraße erbaute Jakob Fugger der Reiche in den Jahren 1512 bis 1515 sein Stadthaus. Der sog. Stadtpalast besitzt vier Innenhöfe (u.a. den Damenhof), die jeweils von Wohngebäuden oder von Lagerräumen umschlossen sind.

Von 1512 bis 1515 ließ Jakob Fugger der Reiche an der Stelle von zwei abgerissenen Gebäuden am Weinmarkt (heute Maximilianstraße) ein einheitliches Gebäude errichten. Weitere angrenzende Häuser wurden ab 1517 hinzuerworben und in den Komplex dieses Stadtpalastes integriert. Gedenktafeln an der Hausfassade erinnern daran, dass hier das Fuggersche Firmenimperium gelenkt wurde und dass 1518 in den Fuggerhäusern der Reformator Martin Luther von Kardinal Cajetan verhört wurde. Im Zentrum der Fassadenfront findet man das so genannte „Adlertor“, das darauf hinweist, dass die Fuggerhäuser ein kaiserliches Quartier waren.