Das Torgauer Schloss wird als Wahrzeichen der Stadt Torgau international mit dem Ende des 2. Weltkrieges durch die Begegnung der Alliierten Streitkräfte in Verbindung gebracht. Am 25. April 1945 trafen nahe Torgau die Rote Armee und die US-Streitkräfte aufeinander. Das Foto vom Handschlag eines amerikanischen und sowjetischen Soldaten in Torgau erlangte weltweite Bekanntheit und entfaltet bis heute eine Symbolkraft, die international anerkannt ist.

Das Erinnern an diese Begegnung wird im sogenannten „Elbe-Day“ wachgehalten. Zudem steht zwischen Schloss und Elbe das „Denkmal der Begegnung“, das auf der anderen Elbseite durch Fahnenmasten flankiert wird. Die alte Elbbrücke wurde im Krieg gesprengt. Einige Sandsteine dieser Brücke wurden in das Gewölbe der Unterkirche der ebenfalls 1945 zerstörten und 2005 wieder eingeweihten Dresdner Frauenkirche eingebaut.