Déclarer un médecin référent situé dans un autre département

Après le départ à la retraite de mon médecin référent, situé en Essonne, je n’ai pas trouvé de remplaçant dans ce département. Partant du fait que je passe 6 mois de l’année dans ma résidence secondaire située dans l’Aude, j’ai pu trouver un médecin qui accepte d’être médecin référent. Puis-je déclarer ce médecin comme médecin référent et rester à ma caisse d’assurance maladie en Essonne où j’ai encore de nombreux spécialistes qui me suivent médicalement.