Какая машина подходит для маршрутизатора с пропускной способностью 40 Гбит/с на границе сети?

Я только что провёл несколько тестов, и производительность на одно ядро играет ОГРОМНУЮ роль. Лучший процессор по соотношению цена/качество, который я нашёл — это 8600k, я могу достичь скорости более 70 Гбит/с на Hyper-V.

Просто решил поделиться впечатлениями, так как давно интересуюсь, насколько жизнеспособны CHR и интерфейсы 40G. Хотел в лаборатории попробовать заменить мои ядровые роутеры 1072 на CHR/40G. У меня есть пара серверов Dell R430 с двухъядерными 8-ядерными процессорами Xeon (2,1 ГГц) в лаборатории и свитч Nexus 3064. Купил пару карт intel XL710 и собрал лабораторию. В каждом сервере стояла карта XL710, которая подключалась к 40G портам на свитче Nexus. Порты на свитче просто настроены как транковые.

Установил последнюю версию VMWARE 6.7 и CHR 6.44, используя ova с сайта Mikrotik. CHR получил доступ ко всем vCPU, всего 32 (так как hyperthreading включен), 16 ГБ оперативки и диск 10G. Для CHR была выдана Trial-лицензия Unlimited.

Для теста хотел загрузить полный конфиг своих ядровых роутеров, чтобы попробовать имитировать реальную нагрузку в моём случае. На обоих роутерах примерно 16 входящих firewall правил, 11 правил переадресации, указывающих на 25 списков адресов. Задействовано 32 IP-адреса и 24 интерфейса в OSPF, хотя для теста соседство есть только по одному интерфейсу между роутерами через свитч.

Роутеры также включают IPv6: около 9 входящих правил, указывающих на один список адресов, и в OSPFv3 столько же интерфейсов, сколько и в OSPFv2. Единственный IPv6 адрес на роутере — loopback.

Поскольку других устройств с 40G интерфейсами не было, тестировал только BT с одного CHR через свитч на другой CHR. Тесты проводил и по TCP, и по UDP, с одного loopback адреса на loopback другого роутера. То есть трафик шел по OSPF-маршруту через свитч.

Для VLAN, по которому идет OSPF-маршрут между роутерами, менял MTU, чтобы проверить разный размер пакетов. Запускал двунаправленные BT-тесты. Максимальный MTU, который мог проверить — 8996, так как VMWARE поддерживает до 9000, минус VLAN — получается 8996.

Вот первые результаты:

MTU 700  
UDP: 3,2 Гбит/с в обе стороны  
TCP: 4,4 Гбит/с / 3,7 Гбит/с  

MTU 1500  
UDP: 7 Гбит/с / 7 Гбит/с  
TCP: 7,4 Гбит/с / 7,1 Гбит/с  

MTU 8996  
UDP: 36 Гбит/с / 31 Гбит/с  
TCP: 12 Гбит/с / 12 Гбит/с  

Понимаю, что мой кейс и метод тестирования могут быть неидеальными — просто были лишние комплектующие, и хотелось проверить, что получится. Думаю, результаты кому-то тоже могут быть полезны, так как мало информации о CHR и 40G.

Если у вас есть идеи для тестов — пишите, лаборатория будет доступна еще пару дней. Правда, на следующей неделе я уеду из города.

Отключил гиперпоточность и настроил CHR на использование 16 vCPU, затем повторил те же тесты. Результаты ниже. В своих лабораторных тестах я обнаружил, что гиперпоточность приносит пользу, хотя видел много постов, где советуют её отключать. Очевидно, мой тест BT между двумя роутерами — это не реалистичный сценарий работы, и в этом может быть разница. Но я не знаю другого простого способа смоделировать реальный трафик в лабораторных условиях.  
MTU 700 UDP: 3.2G/2G TCP: 3.5G/3.5G  
MTU 1500 UDP: 5G/3.5G TCP: 6G/6G  
MTU 8996 UDP: 16G/16G TCP: 8G/8G

У тебя, похоже, стабильные результаты как с гиперпоточностью, так и без неё (кроме последней настройки MTU). Мне интересно, не упираешься ли ты в ограничение где-то ещё? Ты можешь попробовать запустить iperf на паре виртуальных машин?