Invalidité Cat 2 et désinscription Pôle Emploi

Bonjour à toutes et à tous.
En Invalidité Catégorie 2 depuis quelques années, je me rends bien compte que je ne peux plus travailler et je souhaite quitter Pôle Emploi.
Je ne perçois pas d'ARE, ne travaille plus depuis quelques années également.
Y a-t-il un risque d'incidence sur le versement de ma pension d'invalidité ? Je ne vois pas pourquoi mais je préfère demander.
Quel courrier type dois-je envoyer à la Cpam de mon département pour les prévenir ? Ils savent que je suis sans emploi mais en quittant pôle emploi, je suppose que je dois prévenir la Cpam non ?
Merci d'avance. Cordialement.