Je suppose qu'elles arrivent aux serveur asterisk.
Une mauvaise supposition, asterisk negocie les ports selon ces paramètres dans rtp.conf Il faut tout simplement que votre plage rtp ne coincide pas avec votre autre serveur sip. Si c'est la cas il faut le changer, et effectuer une redirection de port de rtp differente pour chaque serveur.