Virement d'une somme d'argent importante

Bonjour à tous,

Un ami d'enfance m'a prêté la somme de 20000 euros afin de me relever financièrement, le virement a été fait d'un compte du luxembourg à mon compte en décembre 2008.
Je lui rembourse par virement chaque mois 50 euros, il ne m'en demande pas plus.
J'ai appelé les services des impôts pour me mettre en règle car le premier virement n'a commencé qu'en juin cette année, les impôts m'ont dit que nous n'étions pas obligés de déclarer quoi que ce soit vu qu'ils ne considéraient pas cela comme un revenu, je n'ai donc rien déclarer sur ma feuille d'imposition.
Suis-je dans la légalité ? La banque va-elle les informer de ce virement ? Ce n'est pas une donation mais la somme versée chaque mois n'est-elle pas assez élevée ?
Merci de vos réponses, je suis assez inquiet.