Вы пробовали прямое соединение с одного ПК через электрический адаптер без маршрутизатора на первом этаже? Если скорость высокая, то причиной может быть маршрутизатор (какой поставщик / модель?). Возможно, что он должен фрагментировать все IP-пакеты (другого размера MTU), и буфер переполняется, и должны выполняться повторные передачи. Вы можете проверить это, используя Wireshark с обеих сторон «электрического провода».
Поскольку вы не пишете, какой маршрутизатор вы используете, трудно догадаться о конфигурации (по умолчанию?).