Het keizerlijk kasteel, de voormalige residentie van keizer Karel IV, ligt midden in de stad op een eiland in de Pegnitz. In de heraldische kamer, die uniek is in Europa, zijn 112 in steen gehouwen en geschilderde wapenschilden te bewonderen.