もうやってたのかもしれないけど、メイン機と宅内サーバー間でも起きる話ならまずはルーターの下にスイッチングハブ1台入れてルーターからそのLAN内のトラフィックをなるべく切り離して切り分けするべきなのでは