Desidéria preferia passar seu tempo em Paris e dessa forma ficava longos períodos longe de seu marido, porém ocasionalmente ia visitá-lo durante suas campanhas militares pela Europa. Bernadotte acabou eleito Príncipe Herdeiro da Suécia em 1810 e ela viajou para a Suécia com o filho no ano seguinte, porém não gostou do país e acabou voltando para a França pouco depois alegando "problemas de saúde". Desidéria frequentou a corte de Napoleão e depois a de Luís XVIII durante esse período, permanecendo no país mesmo depois de ter se tornado rainha consorte em 1818 com a ascensão de seu marido.

Por volta da década de 1820, ela acabou se apaixonando por Armand Emmanuel du Plessis, 5.º Duque de Richelieu e primeiro ministro francês, que não retribuiu os sentimentos, mas que mesmo assim não foi o suficiente para impedir algumas controvérsias tanto na França quanto na Suécia. Desidéria voltou para a Suécia em 1823 acompanhado do filho e sua noiva a princesa Josefina de Leuchtenberg. Sua relação com Carlos João era um pouco distante, porém amigável. Ela surpreendeu a corte sueca por sua informalidade, chamando o rei de "Bernadotte", visitando-o pela manhã de camisola enquanto ele se encontrava com ministros, certas vezes também à noite, e as vezes caçoando dele sempre que ameaçava punir alguém.