med få chancer for at deltage i politik for Vælgerne i Sachsen eller modtage noget land fra sin ældre bror Frederick Augustus III, levede Anton under skyggerne. Ingen kurfyrste i Sachsen efter Johann Georg I gav appanages til sine yngre sønner.
i løbet af de første år af hans ældre brors regeringstid som vælger var Anthony den tredje i køen, kun forud for sin ældre bror Charles. Charles ‘ død (8. September 1781) gjorde ham til den næste i køen til vælgerne som kronprins; dette skyldtes, at alle graviditeter af elektroden Amalie, bortset fra en datter, endte i en dødfødsel.
hans tante, Frankrigs Dauphine, havde ønsket at engagere sin datter Marie af Frankrig til Anthony; Marie af Frankrig døde i 1755 og opgav planerne. En anden fransk kandidat var søster Marie Clothyrine Marie Clothilde (senere dronning af Sardinien), men igen skete der intet.
i Torino den 29.September 1781 (ved fuldmagt) og igen i Dresden den 24. oktober 1781 (personligt) giftede Anthony sig først med prinsessen Maria Carolina af Savoy, datter af kongen Victor Amadeus III af Sardinien og Maria Antonietta af Spanien. Caroline døde efter kun et års ægteskab, den 28.December 1782 efter at have bukket under for kopper. De havde ingen børn.
i Florence den 8.September 1787 (ved fuldmagt) og igen i Dresden den 18. oktober 1787 (personligt) trådte Anthony ind i sit andet ægteskab med Ærkehertuginden Maria Theresia af Østrig (Maria Theresia Josephe Charlotte Johanna), datter af Storhertugen Leopold I af Toscana, senere kejser Leopold II. Don Giovanni var oprindeligt beregnet til at blive udført til ære for sin brud til et besøg i Prag den 14.oktober 1787, da hun rejste mellem Vienna og Dresden til den personlige ceremoni, og librettos blev trykt med omtale af navnene på både Anton og ærkehertuginden. Premieren kunne imidlertid ikke arrangeres i tide, så operaen Figaros ægteskab blev erstattet på udtrykkelige ordrer fra brudens onkel, kejseren Joseph II. Valget af Figaros ægteskab blev betragtet som ukorrekt for en ny brud af mange observatører, og ærkehertuginden forlod operateatret tidligt uden at se hele arbejdet udført. Han klagede bittert over intrigerne omkring denne hændelse i et brev til sin ven Gottfried von Jaccin, der blev skrevet i etaper mellem 15.oktober og 25. oktober 1787. Anthony var til stede i Prag i September 1791 for uropførelsen af operaen La Clemens di Tito, som blev skrevet som en del af kroningsceremonierne for hans svigerfar, kejseren Leopold II, som konge af Bøhmen.
parret havde fire børn, men ingen overlevede til en alder af to:
- Maria Ludovika Auguste Fredericka Therese Johanna Aloysia Nepomucena Ignatia Anna Josepha de Paula Barbara (f. Dresden, 14. marts 1795-D. Dresden, 25. April 1796)
- Frederick Augustus (F.og d. Dresden, 5. April 1796)
- Maria Johanna Ludovica Anna Amalia Nepomucena Aloysia Ignatia Josepha Frans De Chantal Eva Apollonia Magdalena Crescentia Vincentia (B. Dresden, 5. April 1798 – D. Dresden, 30. oktober 1799)
- Maria Theresia (B. og D. Dresden, 15. oktober 1799)
Elektress Amalie fødte for sidste gang i 1797 et andet dødfødt barn. Efter dette blev det tydeligt, at Anthony ville lykkes for Vælgerne i Sachsen, som blev rejst til Kongerige i 1806.
