Сервер телефонии Asterisk с оболочкой TrixBox периодически провисает (теряет пакеты)

Добрый день. С недавних пор столкнулся с следующей штукой. Пользователи стали жаловаться на секундные провисания связи, обрывы и помехи при разговоре. Запустил на сервере телефонии tcpdump. Первое что бросилось в глаза, это наличие около 2% packets droped by kernel.
Затем при разборе этих логов в wireshark на локальную сеть постоянно ошибки:
TCP: ACKed segment that wasn't captured (common at capture start) и
TCP: Previous segment not captured (common at capture start)
При тестировании внешней сети этой ошибки не выскакивает, но периодически абонентов плохо слышно либо они пропадают. При разборе детализации звонка, видно что либо проскакивает высокий jitter либо один потерянный пакетик проскакивает и абонент на четверть секунды пропадает. Но тут можно грешить на проблемы из вне, и мы вроде как бессильны. Так же хочу заметить, что периодически абоненты переходят в состояние занято, хотя сами звонить могут. Перезагрузка trixbox помогает, и почти наверняка это происходит при бэкапировании этого сервера ( на висфере).
Так же провёл несколько тестов с помощью iperf на разных участках сети. В принципе, периодически проявляется небольшой lost, не знаю стоит ли переживать. Jitter стабильно около 1.
На внешнюю при увеличении потока трафика потери увеличиваются, несколько раз jitter подскакивал выше 50, так же не знаю стоит ли беспокоится.
В общем, хотелось бы услышать мнение шарящих людей, стоит ли переживать по поводу ошибок уведомлений и предупреждений wireshark и прочего софта, а так же в какую сторону двигаться дабы докопаться до проблемы и найти её решение?
Заранее благодарен.