всё тормозилось из за обработки tcp, немного изменил и исправил.
теперь на локалхосте работают 450 клиентов.
а с удалённым всё также, видимо действительно забивается сеть.
iperf показал что пропускная способность до него 70кбс.