Gérer la provenance des sons

Bonjour,
Je monte un film dans Première Pro.
L'enregistrement sonore étant de très mauvaise qualité, j'ai décidé de "refaire" tous les sons. Donc, je télécharge plein de bruitages (bruits de pas, bruits de vent, voix enregistrées, etc.) que je mets ensuite dans le montage.
Mais j'ai un problème. Même si je règle tous les volumes comme il faut, le rendu ne fait pas naturel du tout. En fait, j'ai compris que c'est parce que la provenance des sons ne ressort pas.
Par exemple, à un moment, j'ai un personnage qu'on appelle (sans qu'on puisse discerner la source de l'appel), et il tourne la tête vers le fond du champ (parce que l'appel est censé venir de là). Mais le problème, c'est qu'on dirait que le son vient de devant la caméra. Du coup on comprend pas pourquoi il tourne la tête vers l'arrière.
Comment faire pour qu'on ait l'impression que le son vient de tout au fond de l'environnement ?
Bien entendu, ce problème s'applique à quasiment tous les sons.

Comment peut-on gérer la provenance des sons ?
Merci.