Bonjour Mouss,
Bon ce n'est pas cela. Tant pis.
Si j'ai bien compris, vous parlez de trois moments où il vient avec vous sur le canapé. Puis, le reste du temps, vous ne le voyez pas, il vous évite et s'il y a rencontre, il s'enfuit. C'est bien cela ?
Quand il est hors de votre vue, il se réfugie où ? Se frotte-t-il au bas des meubles ? Faites-vous le ménage de fond en comble et nettoyez-vous le bas des portes, etc ...?
En vrac quelques idées : A-t-il une seconde panière ? A-t-il une couverture "peillou" ? Doudou si vous préférez, ( peillou est de l'occitan .En fait c'est peille,une harde si vous voulez mais enfant je parlais de mon peillou). C'est une couverture que l'on garde longtemps sans la laver ( on peut la secouer, la brosser pour enlever les poils) mais elle doit conserver son odeur. Des petits objets avec son odeur seraient aussi très importants.
Une fois, deux couvertures "peillou" à point (il en faut une de rotation) , vous pourriez en mettre une dans une seconde panière dans votre chambre et lui montrer le chemin, en "semant" quelques uns de ses petits objets jouets doudou ou des croquettes/friandises (ou les deux en alternance, un objet, une friandise..).
Le motiver à suivre ce chemin avec un jeu ficelle, tout doucement à heures régulières pourrait aider peut-être. Par exemple après un des "moments- canapé". Et s'il s'arrête à l'entrée de votre chambre, vous continuez un peu à jouer à ce niveau et la prochaine fois, vous avancerez de quelques centimètres et ainsi de suite, jour après jour, jusqu'à la panière.
Il faut qu'il reprenne possession de son "territoire". Il y a du y avoir un traumatisme pendant votre absence ( peut-être des travaux à l'extérieur ou dans un autre appartement). Je ne suis pas sûre que ce soit lié à votre départ, sinon vous n'auriez pas ces contacts sur le canapé (juste mon opinion).
Vous pourriez aussi mettre une étoffe contre vous la nuit comme un mouchoir qui prendrait votre odeur naturelle et que vous lui confierez, ce mouchoir deviendrait une odeur rassurante, importante. Cela paraît très "animal' mais nous sommes des animaux. Nous avons perdu beaucoup de notre capacité à analyser nos sens et pourtant l'odorat est très important aussi chez les humains ( à la perte d'un être cher, beaucoup de gens vous parleront de l'odeur qu'ils aiment garder de l'être disparu. Petite, je sais que je ne voulais pas que ma maman me lave mon nounours et je ne suis pas la seule enfant à avoir agi ainsi). Comme dit l'odorat (après l'ouïe) est un sens très développé et essentiel chez le chat qui ne voit pas très bien.
Voilà encore quelques idées mais il faudra persister si vous souhaitez en appliquer car les chats prennent leur temps ( quand il y a eu un traumatisme , ils restent méfiants longtemps) et ce sont des animaux d'habitude.
Vous avez déjà cette qualité d'être régulière et de ne pas le forcer mais maintenant il faut de la patience

.
Bonne journée à vous et à votre protégé.