позвони с софтового клиента (с компа) через эту связку (установив буфер побольше), если проблема сохранится крутить увы ничего не надо - проблема в канале: возможно потери пакетов, возможно очень большой разброс времени доставки.
не зная , как минимум, что за канал используется и какой провайдер IP телефонии - сложно что то сказать.