Afin de pouvoir utiliser la souris pour faire des copiés/collés dans VIM il faut désactiver le mode visuel.
Jusqu’à présent je devais le faire à chaque ouverture de VIM avec la commande suivante :

set mouse-=a

Je me suis enfin décidé à trouver une solution permanente sur Debian.
On crée/ouvre le fichier suivant :

vi ~/.vimrc

Et on ajoute les lignes suivantes dans le fichier

source /usr/share/vim/vim81/defaults.vim
set mouse-=a

Cela aura pour effet de charger la configuration par défaut de VIM, notamment la couleur et de surcharger le paramètre de la souris.
Lors du changement de version il faudra adapter le « vim81 »