com poucas chances de participar da política do eleitorado da Saxônia ou receber qualquer terra de seu irmão mais velho Frederick Augustus III, Anton viveu sob as sombras. Nenhum Eleitor da Saxônia depois de Johann Georg eu dei appanages a seus filhos mais novos.Durante os primeiros anos do reinado de seu irmão mais velho como eleitor, Anthony foi o terceiro na fila, precedido apenas por seu irmão mais velho Charles. A morte de Carlos (8 de setembro de 1781) fez dele o próximo na fila do eleitorado como príncipe herdeiro (de: Kronprinz); isso porque todas as gravidezes da eleita Amalie, exceto uma filha, terminaram em natimorto.
Sua tia, o Dauphine, França, queria se envolver sua filha Marie Zéphyrine da França para Anthony; Marie Zéphyrine morreu em 1755, abandonando os planos. Outra candidata francesa foi Marie Zéphyrine’s irmã Marie Clothilde (mais tarde Rainha da Sardenha), mas novamente nada aconteceu.
Em Turim, em 29 de setembro de 1781 (por procuração) e, novamente, em Dresden, em 24 de outubro de 1781 (em pessoa), Anthony casado primeiro com a Princesa Maria Carolina de Saboia, filha do Rei Victor-Amadeus III da Sardenha e Maria Antonietta de Espanha. Caroline morreu após apenas um ano de casamento, em 28 de dezembro de 1782, tendo sucumbido à varíola. Eles não tinham filhos.
Em Florença, em 8 de setembro de 1787 (por procuração) e, novamente, em Dresden, em 18 de outubro de 1787 (em pessoa), Anthony entrou em seu segundo casamento, para o Archduchess Maria Theresia da Áustria (Maria Theresia Josephe Charlotte Johanna), filha do Grão-Duque Leopoldo I da Toscana, mais tarde Imperador Leopoldo II. A Ópera de Mozart Don Giovanni foi originalmente planejada para ser apresentada em homenagem a sua noiva para uma visita a praga em 14 de outubro de 1787, enquanto ela viajava entre Viena e Dresden para a cerimônia presencial, e libretos foram impressos com menção dos nomes de Anton e da arquiduquesa. A estréia não pôde ser arranjada a tempo, no entanto, então a ópera O Casamento de Figaro foi substituído por ordens expressas do tio da noiva, o imperador José II. A escolha do casamento de Figaro foi considerada imprópria para uma nova noiva por muitos observadores, e a arquiduquesa deixou o teatro de ópera cedo sem ver todo o trabalho realizado. Mozart reclamou amargamente das intrigas em torno deste incidente em uma carta a seu amigo Gottfried von Jacquin que foi escrita em etapas entre 15 de outubro e 25 de outubro de 1787. Anthony esteve presente em Praga em setembro de 1791 para a primeira apresentação da Ópera de Mozart La clemenza di Tito, que foi escrita como parte das cerimônias de coroação de seu sogro, o imperador Leopoldo II, como Rei da Boêmia.
O casal teve quatro filhos, mas nenhum sobreviveu a dois anos de idade:
- Maria Ludovika Auguste Fredericka Teresa Franziska Johanna Aloysia Nepomucena Ignatia Anna Josepha Xaveria Franziska de Paula Barbara (b. Oportunidades de hotéis de Dresden, de 14 de Março de 1795 – d. Oportunidades de hotéis de Dresden, de 25 de abril de 1796)
- Frederico Augusto b. e d. Em Dresden, a 5 de abril de 1796)
- Maria Johanna Ludovica Anna Amalia Nepomucena Aloysia Ignatia Xaveria Josepha Franziska de Chantal Eva Apollonia Magdalena Crescentia Vincentia (b. Em Dresden, a 5 de abril de 1798 – d. Oportunidades de hotéis de Dresden, de 30 de outubro de 1799)
- Maria Theresia (b. e d. Oportunidades de hotéis de Dresden, a 15 de outubro 1799)
Electress Amalie deu nascimento para a última vez em 1797, para outra na morte do feto. Depois disso, ficou claro que Antônio sucederia ao eleitorado da Saxônia, que foi elevado ao reino em 1806.