med få chanser att delta i politiken för väljarna i Sachsen eller ta emot något land från sin äldre bror Frederick Augustus III, levde Anton under skuggorna. Ingen Kurfurst i Sachsen efter Johann Georg jag gav appanages till sina yngre söner.
under de första åren av hans äldre brors regeringstid som väljare var Anthony den tredje i raden, föregås endast av sin äldre bror Charles. Charles död (8 September 1781) gjorde honom till nästa i raden till väljarna som kronprins (de: Kronprinz); detta berodde på att alla graviditeter av Elektressen Amalie, förutom en dotter, slutade i en stillbirth.
hans faster, Dauphine i Frankrike, hade velat engagera sin dotter Marie Z Jacobphyrine i Frankrike till Anthony; Marie Z Jacobphyrine dog 1755 och övergav planer. En annan fransk kandidat var Marie Z Brasiliphyrines syster Marie Clothilde (senare drottning av Sardinien) men återigen hände ingenting.
i Turin den 29 September 1781 (genom ombud) och igen i Dresden den 24 oktober 1781 (personligen) gifte sig Anthony först med prinsessan Maria Carolina av Savoy, dotter till kungen Victor Amadeus III av Sardinien och Maria Antonietta av Spanien. Caroline dog efter bara ett års äktenskap, den 28 December 1782 efter att ha undergått smittkoppor. De hade inga barn.
i Florens den 8 September 1787 (genom ombud) och igen i Dresden den 18 oktober 1787 (personligen) gick Anthony in i sitt andra äktenskap med ärkehertiginnan Maria Theresia av Österrike (Maria Theresia Josephe Charlotte Johanna), dotter till storhertigen Leopold I av Toscana, senare kejsare Leopold II. Mozarts opera Don Giovanni var ursprungligen avsedd att framföras för att hedra sin brud för ett besök i Prag den 14 oktober 1787, när hon reste mellan Wien och Dresden för den personliga ceremonin, och librettos trycktes med omnämnande av namnen på både Anton och ärkehertiginnan. Premiären kunde dock inte ordnas i tid, så operaen Figaros äktenskap ersattes på uttryckliga order av brudens farbror, kejsaren Joseph II. Valet av Figaros äktenskap ansågs olämpligt för en ny brud av många observatörer, och ärkehertiginnan lämnade operateatern tidigt utan att se hela arbetet utfört. Mozart klagade bittert över intrigerna kring denna händelse i ett brev till sin vän Gottfried von Jacquin som skrevs i etapper mellan 15 oktober och 25 oktober 1787. Anthony var närvarande i Prag i September 1791 för den första föreställningen av Mozarts opera La clemenza di Tito, som skrevs som en del av kröningsceremonierna för hans svärfar, kejsaren Leopold II, som kung av Böhmen.
paret hade fyra barn, men ingen överlevde till två års ålder:
- Maria Ludovika Auguste Fredericka Therese Franziska Johanna Aloysia Nepomucena Ignatia Anna Josepha Xaveria Franziska de Paula Barbara (F. D. Dresden, 14 mars 1795-d. Dresden, 25 April 1796)
- Frederick Augustus (F. och d. Dresden den 5 April 1796)
- Maria Johanna Ludovica Anna Amalia Nepomucena Aloysia Ignatia Xaveria Josepha Franziska De Chantal Eva Apollonia Magdalena Crescentia Vincentia (född Dresden den 5 April 1798 – Dresden den 30 oktober 1799)
- Maria Theresia (född Dresden den 15 oktober 1799)
Elektress Amalie födde för sista gången 1797 till ett annat dödfött barn. Efter detta blev det uppenbart att Anthony skulle lyckas till väljarna i Sachsen, som höjdes till kungariket 1806.
