глубина должна быть меньше 800, т.к. некоторые рельсы до 800 не дотягиваются точно

ну вот по идее уже на эте тему должны быть бест-практикс )

бест-практикс - привезти новое оборудование, сдвинуть каркас под него

как ты оборудование работает же, не выключать же его. я уж не говорю про гемор от такого

Рулетка?

рулетка есть, вот и вопрос сколько отмерить то.. в сантиметрах... ну или в милиметрах

Измерить работающее оборудование/салазки?

нет гарантии что новое оббборудование будет идентично тому, которое есть в наличии

Всем привет!

Всем привет!

и тебе привет )

Имеется задача собрать на базе FreeBSD и карты X710 netflow сервер

root@netflow03:~ # pciconf -lv

none1@pci0:3:0:0: class=0x020000 card=0x00018086 chip=0x15728086 rev=0x02 hdr=0x00 vendor = 'Intel Corporation' device = 'Ethernet Controller X710 for 10GbE SFP+' class = network subclass = ethernet none2@pci0:3:0:1: class=0x020000 card=0x00008086 chip=0x15728086 rev=0x02 hdr=0x00 vendor = 'Intel Corporation' device = 'Ethernet Controller X710 for 10GbE SFP+' class = network subclass = ethernet none3@pci0:3:0:2: class=0x020000 card=0x00008086 chip=0x15728086 rev=0x02 hdr=0x00 vendor = 'Intel Corporation' device = 'Ethernet Controller X710 for 10GbE SFP+' class = network subclass = ethernet none4@pci0:3:0:3: class=0x020000 card=0x00008086 chip=0x15728086 rev=0x02 hdr=0x00 vendor = 'Intel Corporation' device = 'Ethernet Controller X710 for 10GbE SFP+' class = network subclass = ethernet

root@netflow03:~ # devctl attach pci0:3:0:0 devctl: Failed to attach pci0:3:0:0: Input/output error root@netflow03:~ # devctl attach pci0:3:0:1 devctl: Failed to attach pci0:3:0:1: Input/output error root@netflow03:~ # devctl attach pci0:3:0:2 devctl: Failed to attach pci0:3:0:2: Input/output error root@netflow03:~ # devctl attach pci0:3:0:3 devctl: Failed to attach pci0:3:0:3: Input/output error

Это с картой беда, или глюк какой?

FreeBSD netflow03.xxxx.local 11.1-RELEASE FreeBSD 11.1-RELEASE #0 r321309: Fri Jul 21 02:08:28 UTC 2017 root@releng2.nyi.freebsd.org:/usr/obj/usr/src/sys/GENERIC amd64

kldload if_ixl

kldload if_ixl

вроде в GENERIC включён...

в 11-STABLE

а у человека - RELEASE

interface ixl.1 already present in the KLD 'kernel'! linker_load_file: Unsupported file type interface ixl.1 already present in the KLD 'kernel'! linker_load_file: Unsupported file type

Поставить 11-STABLE?

kldload if_ixlv

в 11-STABLE оно очно есть

root@netflow03:~ # kldload if_ixlv kldload: can't load if_ixlv: module already loaded or in kernel

/* Device IDs */ #define I40E_DEV_ID_SFP_XL710 0x1572 #define I40E_DEV_ID_QEMU 0x1574 #define I40E_DEV_ID_KX_B 0x1580 #define I40E_DEV_ID_KX_C 0x1581 #define I40E_DEV_ID_QSFP_A 0x1583

оно ?

Понял, ставлю STABLE

I40E_DEV_ID_SFP_XL710 0x1572

Да

Понял, ставлю STABLE

покажи dmesg пока не снёс )

pcib3: <ACPI PCI-PCI bridge> irq 36 at device 6.0 on pci0 pci3: <ACPI PCI bus> on pcib3 ixl0: <Intel(R) Ethernet Connection 700 Series PF Driver, Version - 1.9.5> mem 0xdc800000-0xdcffffff,0xdc7f8000-0xdc7fffff irq 36 at device 0.0 on pci3 ixl0: using 1024 tx descriptors and 1024 rx descriptors ixl0: Unable to initialize Admin Queue, error I40E_ERR_ADMIN_QUEUE_CRITICAL_ERROR device_attach: ixl0 attach returned 5 ixl0: <Intel(R) Ethernet Connection 700 Series PF Driver, Version - 1.9.5> mem 0xdb800000-0xdbffffff,0xdc7f0000-0xdc7f7fff irq 36 at device 0.1 on pci3 ixl0: using 1024 tx descriptors and 1024 rx descriptors ixl0: Unable to initialize Admin Queue, error I40E_ERR_ADMIN_QUEUE_CRITICAL_ERROR device_attach: ixl0 attach returned 5 ixl0: <Intel(R) Ethernet Connection 700 Series PF Driver, Version - 1.9.5> mem 0xdb000000-0xdb7fffff,0xdc7e8000-0xdc7effff irq 36 at device 0.2 on pci3 ixl0: using 1024 tx descriptors and 1024 rx descriptors ixl0: Unable to initialize Admin Queue, error I40E_ERR_ADMIN_QUEUE_CRITICAL_ERROR device_attach: ixl0 attach returned 5 ixl0: <Intel(R) Ethernet Connection 700 Series PF Driver, Version - 1.9.5> mem 0xda800000-0xdaffffff,0xdc7e0000-0xdc7e7fff irq 36 at device 0.3 on pci3 ixl0: using 1024 tx descriptors and 1024 rx descriptors ixl0: Unable to initialize Admin Queue, error I40E_ERR_ADMIN_QUEUE_CRITICAL_ERROR device_attach: ixl0 attach returned 5

ixl0: Unable to initialize Admin Queue, error I40E_ERR_ADMIN_QUEUE_CRITICAL_ERROR device_attach: ixl0 attach returned 5 - вот attach и не прошёл.

hw.ixl.max_queues Set the number of queues (each a TX/RX pair) for the port, this allows one to override the autocalculation if it is set to 0.

как вариант

но я бы как минимум - обновил до 11-STABLE

но я бы как минимум - обновил до 11-STABLE

Да, поступлю так

а ядро точно 11.1?

Спасибо!

root@netflow03:~ # freebsd-version -k 11.1-RELEASE root@netflow03:~ # freebsd-version -u 11.1-RELEASE

root@netflow03:~ # freebsd-version -k 11.1-RELEASE root@netflow03:~ # freebsd-version -u 11.1-RELEASE

просто не понимаю откуда CRITICAL_ERROR, если его добавили только вот-вот

январь 2018

Драйвер, я крайний поставил

С сайта интела

Может из-за этого

Но, и по дефолту карточка не запускалась.

а есть код крайнего драйвера?

root@netflow03:/usr/ports/net # ls -la | egrep intel-ixl-kmod drwxr-xr-x 3 root wheel 512 Jan 29 14:31 intel-ixl-kmod

Наврал, не сайта, а из портов

https://communities.intel.com/thread/117266

https://downloadcenter.intel.com/download/24769/Non-Volatile-Memory-NVM-Update-Utility-for-Intel-Ethernet-Converged-Network-Adapter-XL710-and-X710-Series?product=83965

https://sourceforge.net/p/e1000/bugs/

root@netflow03:/usr/local/src/NVMUpdatePackage/710_Series/XL710/FreeBSDx64 # ./nvmupdate64e Intel(R) Ethernet NVM Update Tool NVMUpdate version 1.30.22.1 Copyright (C) 2013 - 2017 Intel Corporation. WARNING: To avoid damage to your device, do not stop the update or reboot or power off the system during this update. Inventory in progress. Please wait [*|........] Num Description Ver. DevId S:B Status === ======================================== ===== ===== ====== =============== 01) HP NC362i Integrated DP Gigabit Server 1.5 10C9 00:006 Update not Adapter available 02) Intel(R) Ethernet Converged Network 1572 00:003 Access error Adapter X710-4 Tool execution completed with the following status: Device not found Press any key to exit.

root@netflow03:/usr/local/src/NVMUpdatePackage/710_Series/XL710/FreeBSDx64 # ./nvmupdate64e Intel(R) Ethernet NVM Update Tool NVMUpdate version 1.30.22.1 Copyright (C) 2013 - 2017 Intel Corporation. WARNING: To avoid damage to your device, do not stop the update or reboot or power off the system during this update. Inventory in progress. Please wait [*|........] Num Description Ver. DevId S:B Status === ======================================== ===== ===== ====== =============== 01) HP NC362i Integrated DP Gigabit Server 1.5 10C9 00:006 Update not Adapter available 02) Intel(R) Ethernet Converged Network 1572 00:003 Access error Adapter X710-4 Tool execution completed with the following status: Device not found Press any key to exit.

попробуй включить debug

то есть sysctl hw.ixl.shared_debug_mask

к примеру проставить в 0x0F000000 - это всё что к admin queue :)

и повторить attach

Так sysctl hw.ixl.shared_debug_mask 0x0F000000 ?

hw.ixl.shared_debug_mask: 0 sysctl: unknown oid '0x0F000000'

Known Limitations ================= Network Memory Buffer allocation —------------------------------ FreeBSD may have a low number of network memory buffers (mbufs) by default. If your mbuf value is too low, it may cause the driver to fail to initialize and/or cause the system to become unresponsive. You can check to see if the system is mbuf-starved by running 'netstat -m'. Increase the number of mbufs by editing the lines below in /etc/sysctl.conf: kern.ipc.nmbclusters kern.ipc.nmbjumbop kern.ipc.nmbjumbo9 kern.ipc.nmbjumbo16 kern.ipc.nmbufs

hw.ixl.shared_debug_mask: 0 sysctl: unknown oid '0x0F000000'

sysctl hw.ixl.shared_debug_mask=0x0F000000

Понял

Я тут нуб, а вывод по dmesg?

ERROR: S client not available

Больше информации не стало там

Больше информации не стало там

мм... а sysctl hw.ixl.shared_debug_mask поменялся?

# sysctl hw.ixl.shared_debug_mask=0x0F000000 sysctl: oid 'hw.ixl.shared_debug_mask' is a read only tunable sysctl: Tunable values are set in /boot/loader.conf

подтюнь, ребутнись и тогда уж dmesg

pcib3: <ACPI PCI-PCI bridge> irq 36 at device 6.0 on pci0 pci3: <ACPI PCI bus> on pcib3 ixl0: <Intel(R) Ethernet Connection 700 Series PF Driver, Version - 1.9.5> mem 0xdc800000-0xdcffffff,0xdc7f8000-0xdc7fffff irq 36 at device 0.0 on pci3 ixl0: using 1024 tx descriptors and 1024 rx descriptors ixl0: AQTX: desc and buffer: ixl0: AQ CMD: opcode 0x0001, flags 0x2000, datalen 0x0000, retval 0x0000 ixl0: cookie (h,l) 0x00000000 0x00000000 ixl0: param (0,1) 0x00000000 0x00000000 ixl0: addr (h,l) 0x00000000 0x00000000 ixl0: AQTX: desc and buffer writeback: ixl0: AQ CMD: opcode 0x0001, flags 0x2000, datalen 0x0000, retval 0x0000 ixl0: cookie (h,l) 0x00000000 0x00000000 ixl0: param (0,1) 0x00000000 0x00000000 ixl0: addr (h,l) 0x00000000 0x00000000 ixl0: AQTX: AQ Critical error. ixl0: Unable to initialize Admin Queue, error I40E_ERR_ADMIN_QUEUE_CRITICAL_ERROR device_attach: ixl0 attach returned 5

Теперь больше информации

ставлю STABLE?

ставлю STABLE?

больше похоже что что-то не так с самой картой. просто драйвер последний, при первом обращении флаги слетают в Critical состояние.

Может с материнской платой?

Старый сервер

@dmitryluhtionov что скажете? :)

HP ProLiant DL165 G5p

Чипсет ServerWorks HT2100 и HT1000

Thu 16:25:22 <%dadv> в листах идёт серьёзный заруб на тему зависания фряшеньки на рыженах на простых задачах типа сборки портов

Чипсет ServerWorks HT2100 и HT1000

А никак в Intel нельзя написать с таким вопросом?

Придётся

Пока поставлю другую ОС, что бы понять работает карта или нет

Вообще другую

)

Пока поставлю другую ОС, что бы понять работает карта или нет

резонно

Thu 16:25:22 <%dadv> в листах идёт серьёзный заруб на тему зависания фряшеньки на рыженах на простых задачах типа сборки портов

накупют говна и страдають

накупют говна и страдають

я видел только один bug репорт. Рязань в целом интересная штука, хотел попробовать

накупют говна и страдають

Что поделаешь, если freebsd на x86 заточен

Что поделаешь, если freebsd на x86 заточен

на правах рекламы: mips-ы и arm-ы вроде норм работают!

тсс... не пали контору :)

Tier 2: Developmental Architectures Tier 2 platforms are not supported by the security officer and release engineering teams.

Именно что "вроде норм"

вам вот лиш бы чё ляпнуть или есть что по делу?

https://www.youtube.com/channel/UCKXUSm2Ij-1AIRKnDY7bu5w

чё там?