Das Schloss besaß ursprünglich drei Türme, einen Hauptturm im Westflügel über dem Schweizer Tor sowie jeweils einen an den Seitenflügeln über der Schlosskirche und über dem Opernhaus.
Der Hauptturm besaß ursprünglich nur ein Uhrwerk mit Glocke und bekam 1741 ein eigenes Glockenspiel. Hofseitig ist er mit einem fast zwei Meter hohen, palmengeschmückten Buchstaben „A“ verziert. Dieser verweist auf den Begründer des Weißenfelser Schlosses – Herzog August von Sachsen.
1932 brannte der Turm ab und wurde in leicht veränderter Form wiederhergestellt. Die Türme am Nord- und Südflügel existieren nicht mehr. Der Südturm musste aus statischen Gründen schon lange vor 1746 abgetragen werden, der Abriss des Nordturms erfolgte 1819.
