Fin arrêt travail et invalidité

Bonjour,

Au mois de Mars 2018, après 22 mois d'arrêt maladie pour dépression, je me rends à une convocation (la troisième) du Service Médical.
D'emblée le Médecin Conseil veut me mettre en invalidité car mon état est stabilisé. Je prends en compte sa proposition mais j'insiste pour laisser une chance supplémentaire à un retour à mon poste par l'intermédiaire d'un mi-temps thérapeutique ; si ce dernier est refusé par mon employeur, j'accepterai la mise en invalidité.
Au mois de Juin, le mi-temps thérapeutique est refusé. Je me rapproche de la Médecine du Travail qui m'invite à revoir le Médecin Conseil afin de l'en informer et accepter sa proposition pour la mise en invalidité.
Il y a une semaine, je rencontre le même Médecin Conseil et là il change de discours : il met fin à mon arrêt de travail mais me propose une mise en invalidité ; il était 10h15.
A 14h55, il m'appelle pour me dire qu'il met fin à mon arrêt maladie mais en plus il ne m'accorde plus le statut d'invalidité... !!
Il argumente ce changement par cette phrase : "Cela vous fera du bien d'être confronté à la réalité !!"
Mon état s'était dégradé depuis le refus en mi-temps thérapeutique par l'employeur et là le Médecin Conseil me met encore plus la tête sous l'eau.
Que puis-je faire face à cette injustice ?