<?xml version="1.0"?>
<feed xmlns="http://www.w3.org/2005/Atom" xml:lang="ru">
	<id>https://kb.truesystem.ru/api.php?action=feedcontributions&amp;feedformat=atom&amp;user=NosachevD</id>
	<title>База знаний True System - Вклад [ru]</title>
	<link rel="self" type="application/atom+xml" href="https://kb.truesystem.ru/api.php?action=feedcontributions&amp;feedformat=atom&amp;user=NosachevD"/>
	<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php/%D0%A1%D0%BB%D1%83%D0%B6%D0%B5%D0%B1%D0%BD%D0%B0%D1%8F:%D0%92%D0%BA%D0%BB%D0%B0%D0%B4/NosachevD"/>
	<updated>2026-05-05T17:47:29Z</updated>
	<subtitle>Вклад</subtitle>
	<generator>MediaWiki 1.38.2</generator>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=98</id>
		<title>Broadcom P210P/P210TP</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=98"/>
		<updated>2026-04-11T14:39:17Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: /* Решение */&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210p Broadcom P210P BCM957412A4120AC] — 2-портовый контроллер 10GbE SFP+.&lt;br /&gt;
&lt;br /&gt;
* [https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210tp Broadcom P210TP BCM957416A4160] — 2-портовый контроллер 10GbE 10GBASE-T.&lt;br /&gt;
&lt;br /&gt;
== Проблема ==&lt;br /&gt;
Возможная проблема с некоторыми экземплярами — контроллер работает, но невозможна настройка через niccli (сообщение ''Card not in operational state''). Обновление прошивки под Windows Server при этом недоступно.&lt;br /&gt;
&lt;br /&gt;
== Решение ==&lt;br /&gt;
Обновление прошивки возможно в Linux.&lt;br /&gt;
&lt;br /&gt;
=== Дополнение от 04.2026 (новая архитектура драйвера) ===&lt;br /&gt;
Аналогичная проблема, карточка P210TP выдает статус Card not in operational state, не прошивается ни в Windows, ни в Linux (Alma 9.7, под id 1 и 2 здесь — набортные интерфейсы материнской платы Supermicro X13DEI-T на том же чипе):&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(NA)    Card not in operational state   0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(NA)    Card not in operational state   0000:98:00.1   NIC    PCI&lt;br /&gt;
&lt;br /&gt;
sudo niccli -i 3 fw --update -f BCM957416A4160C.pkg --yes&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update&lt;br /&gt;
          is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - N/A : Package Version on NVM - N/A&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:98:00:0&lt;br /&gt;
Device 0000:98:00:0 : Installing package file BCM957416A4160C.pkg&lt;br /&gt;
Device 0000:98:00:0 : will be updated to package version 236.1.155.0&lt;br /&gt;
Firmware Update is in progress. Please wait ...&lt;br /&gt;
#&lt;br /&gt;
&lt;br /&gt;
Package installation failed.&lt;br /&gt;
&lt;br /&gt;
EXIT CODE : 0B00303A&lt;br /&gt;
DESCRIPTION : Firmware image update failed&lt;br /&gt;
 Command fw failed.&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Причина: niccli не может завершить обновление прошивки с драйвером из ядра.&lt;br /&gt;
&lt;br /&gt;
* Ставим модуль драйвера от Broadcom. Утилита nic_wizard не подходит, так как предназначена только для официально поддерживаемых дистрибутивов — поставим вручную через DKMS:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo dnf install -y epel-release&lt;br /&gt;
sudo dnf config-manager --set-enabled crb&lt;br /&gt;
sudo dnf install -y dkms gcc make kernel-devel kernel-headers&lt;br /&gt;
sudo reboot&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Устанавливаем dkms-драйвер, проверяем версию модуля:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo dnf install bnxt_en-1.10.3.236.1.155.0-1dkms.noarch.rpm&lt;br /&gt;
&lt;br /&gt;
modinfo bnxt_en&lt;br /&gt;
&lt;br /&gt;
filename:       /lib/modules/5.14.0-611.45.1.el9_7.x86_64/extra/bnxt_en.ko.xz&lt;br /&gt;
version:        1.10.3-236.1.155.0&lt;br /&gt;
description:    Broadcom NetXtreme-C/E/S network driver&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
* С новым драйвером отображается ревизия&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(B1)    Card not in operational state   0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(B1)    Card not in operational state   0000:98:00.1   NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
и всё шьется&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli -i 3 fw --update -f BCM957416A4160C.pkg --yes&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update&lt;br /&gt;
          is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - 216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:98:00:0&lt;br /&gt;
Device 0000:98:00:0 : Installing package file BCM957416A4160C.pkg&lt;br /&gt;
Device 0000:98:00:0 : will be updated to package version 236.1.155.0&lt;br /&gt;
Firmware Update is in progress. Please wait ...&lt;br /&gt;
######################################&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot or device reset is needed for the firmware update to take effect.&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
* После прошивки нужна '''холодная перезагрузка''' или power cycle.&lt;br /&gt;
&amp;lt;pre&amp;gt; &lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(B1)    E4:3D:1A:DC:9D:A0  236.1.126.0  0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(B1)    E4:3D:1A:DC:9D:A1  236.1.126.0  0000:98:00.1   NIC    PCI&lt;br /&gt;
&lt;br /&gt;
sudo niccli --dev 3 show&lt;br /&gt;
&lt;br /&gt;
NIC State                           : Down&lt;br /&gt;
Device Type                         : WHITNEY+&lt;br /&gt;
PCI Vendor ID                       : 0x14E4&lt;br /&gt;
PCI Device ID                       : 0x16D8&lt;br /&gt;
PCI Revision ID                     : 0x1&lt;br /&gt;
PCI Subsys Vendor ID                : 0x14E4&lt;br /&gt;
PCI Subsys Device ID                : 0x1602&lt;br /&gt;
Device Interface Name               : ens5f0np0&lt;br /&gt;
MAC Address                         : E4:3D:1A:DC:9D:A0&lt;br /&gt;
Base MAC Address                    : E4:3D:1A:DC:9D:A0&lt;br /&gt;
Serial Number                       : A41602135002P6FV&lt;br /&gt;
Part Number                         : BCM957416A4160&lt;br /&gt;
PCI Address                         : 0000:98:00.0&lt;br /&gt;
Chip Number                         : BCM57416&lt;br /&gt;
Chip Name                           : WHITNEY+&lt;br /&gt;
Description                         : Broadcom BCM57412 2x10GbT PCIe Ethernet NIC&lt;br /&gt;
Firmware Name                       : CHIMP_FW&lt;br /&gt;
Firmware Version                    : 236.1.126.0&lt;br /&gt;
RoCE Firmware Version               : 236.1.126.0&lt;br /&gt;
HWRM Interface Spec                 : 1.10.3&lt;br /&gt;
Kong mailbox channel                : Disabled&lt;br /&gt;
Active Package Version              : 236.1.155.0&lt;br /&gt;
Package Version on NVM              : 236.1.155.0&lt;br /&gt;
Active NVM config version           : 216.0.0&lt;br /&gt;
NVM config version                  : 216.0.0&lt;br /&gt;
Reboot Required                     : No&lt;br /&gt;
HCRM Profile ID                     : 1&lt;br /&gt;
HCRM Profile Version                : 1.0.8&lt;br /&gt;
Firmware Reset Counter              : 0&lt;br /&gt;
Error Recovery Counter              : 0&lt;br /&gt;
Crash Dump Timestamp                : Not Available&lt;br /&gt;
Secure Boot                         : Enabled&lt;br /&gt;
Secure Firmware Update              : Enabled&lt;br /&gt;
Secure SOC Enabled                  : No&lt;br /&gt;
Device Temperature                  : 50 Celsius&lt;br /&gt;
PHY Temperature                     : 51 Celsius&lt;br /&gt;
Optical Module Temperature          : Not Available&lt;br /&gt;
Device Health                       : Good&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
=== Старая архитектура драйвера (&amp;lt;2024 год, sliff) ===&lt;br /&gt;
&lt;br /&gt;
* Устанавливаем поддерживаемый дистрибутив Linux (что-нибудь RHEL-совместимое — например, Alma).&lt;br /&gt;
* Ставим kernel-devel, dkms из EPEL, с сайта Broadcom — niccli. В архиве вместе с niccli будет дополнительный модуль sliff для работы с контроллерами через niccli.&lt;br /&gt;
* Проблема до прошивки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    Card not in operational state   00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    Card not in operational state   00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Собираем модуль sliff, прошиваем контроллер:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
$ sudo niccli -dev 1 install BCM957412A4120AC.pkg&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - v216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:af:00:0&lt;br /&gt;
Device 0000:af:00:0 : Installing package file BCM957412A4120AC.pkg&lt;br /&gt;
Device 0000:af:00:0 : will be updated to package version v228.1.111.0&lt;br /&gt;
&lt;br /&gt;
Do you want to continue (y/n)?y&lt;br /&gt;
#################################&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot is needed for firmware update to take effect.&lt;br /&gt;
FW package update SUCCESS!&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Проверяем после перезагрузки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    14:23:F2:A0:A6:F0  228.0.116.0  00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    14:23:F2:A0:A6:F1  228.0.116.0  00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
[[Категория:Broadcom]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=Broadcom_P210P&amp;diff=97</id>
		<title>Broadcom P210P</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=Broadcom_P210P&amp;diff=97"/>
		<updated>2026-04-11T14:37:08Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: NosachevD переименовал страницу Broadcom P210P в Broadcom P210P/P210TP&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;#перенаправление [[Broadcom P210P/P210TP]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=96</id>
		<title>Broadcom P210P/P210TP</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=96"/>
		<updated>2026-04-11T14:37:08Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: NosachevD переименовал страницу Broadcom P210P в Broadcom P210P/P210TP&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210p Broadcom P210P BCM957412A4120AC] — 2-портовый контроллер 10GbE SFP+.&lt;br /&gt;
&lt;br /&gt;
* [https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210tp Broadcom P210TP BCM957416A4160] — 2-портовый контроллер 10GbE 10GBASE-T.&lt;br /&gt;
&lt;br /&gt;
== Проблема ==&lt;br /&gt;
Возможная проблема с некоторыми экземплярами — контроллер работает, но невозможна настройка через niccli (сообщение ''Card not in operational state''). Обновление прошивки под Windows Server при этом недоступно.&lt;br /&gt;
&lt;br /&gt;
== Решение ==&lt;br /&gt;
Обновление прошивки возможно в Linux.&lt;br /&gt;
&lt;br /&gt;
=== Дополнение от 04.2026 (новая архитектура драйвера) ===&lt;br /&gt;
Аналогичная проблема, карточка P210TP выдает статус Card not in operational state, не прошивается ни в Windows, ни в Linux (Alma 9.7, под id 1 и 2 здесь — набортные интерфейсы материнской платы Supermicro X13DEI-T на том же чипе):&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(NA)    Card not in operational state   0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(NA)    Card not in operational state   0000:98:00.1   NIC    PCI&lt;br /&gt;
&lt;br /&gt;
sudo niccli -i 3 fw --update -f BCM957416A4160C.pkg --yes&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update&lt;br /&gt;
          is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - N/A : Package Version on NVM - N/A&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:98:00:0&lt;br /&gt;
Device 0000:98:00:0 : Installing package file BCM957416A4160C.pkg&lt;br /&gt;
Device 0000:98:00:0 : will be updated to package version 236.1.155.0&lt;br /&gt;
Firmware Update is in progress. Please wait ...&lt;br /&gt;
#&lt;br /&gt;
&lt;br /&gt;
Package installation failed.&lt;br /&gt;
&lt;br /&gt;
EXIT CODE : 0B00303A&lt;br /&gt;
DESCRIPTION : Firmware image update failed&lt;br /&gt;
 Command fw failed.&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Решение:&lt;br /&gt;
* Ставим модуль драйвера от Broadcom. Утилита nic_wizard не подходит, так как предназначена только для официально поддерживаемых дистрибутивов — поставим вручную через DKMS:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo dnf install -y epel-release&lt;br /&gt;
sudo dnf config-manager --set-enabled crb&lt;br /&gt;
sudo dnf install -y dkms gcc make kernel-devel kernel-headers&lt;br /&gt;
sudo reboot&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Устанавливаем dkms-драйвер, проверяем версию модуля:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo dnf install bnxt_en-1.10.3.236.1.155.0-1dkms.noarch.rpm&lt;br /&gt;
&lt;br /&gt;
modinfo bnxt_en&lt;br /&gt;
&lt;br /&gt;
filename:       /lib/modules/5.14.0-611.45.1.el9_7.x86_64/extra/bnxt_en.ko.xz&lt;br /&gt;
version:        1.10.3-236.1.155.0&lt;br /&gt;
description:    Broadcom NetXtreme-C/E/S network driver&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
* С новым драйвером отображается ревизия&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(B1)    Card not in operational state   0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(B1)    Card not in operational state   0000:98:00.1   NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
и всё шьется&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli -i 3 fw --update -f BCM957416A4160C.pkg --yes&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update&lt;br /&gt;
          is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - 216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:98:00:0&lt;br /&gt;
Device 0000:98:00:0 : Installing package file BCM957416A4160C.pkg&lt;br /&gt;
Device 0000:98:00:0 : will be updated to package version 236.1.155.0&lt;br /&gt;
Firmware Update is in progress. Please wait ...&lt;br /&gt;
######################################&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot or device reset is needed for the firmware update to take effect.&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
* После прошивки нужна '''холодная перезагрузка''' или power cycle.&lt;br /&gt;
&amp;lt;pre&amp;gt; &lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(B1)    E4:3D:1A:DC:9D:A0  236.1.126.0  0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(B1)    E4:3D:1A:DC:9D:A1  236.1.126.0  0000:98:00.1   NIC    PCI&lt;br /&gt;
&lt;br /&gt;
sudo niccli --dev 3 show&lt;br /&gt;
&lt;br /&gt;
NIC State                           : Down&lt;br /&gt;
Device Type                         : WHITNEY+&lt;br /&gt;
PCI Vendor ID                       : 0x14E4&lt;br /&gt;
PCI Device ID                       : 0x16D8&lt;br /&gt;
PCI Revision ID                     : 0x1&lt;br /&gt;
PCI Subsys Vendor ID                : 0x14E4&lt;br /&gt;
PCI Subsys Device ID                : 0x1602&lt;br /&gt;
Device Interface Name               : ens5f0np0&lt;br /&gt;
MAC Address                         : E4:3D:1A:DC:9D:A0&lt;br /&gt;
Base MAC Address                    : E4:3D:1A:DC:9D:A0&lt;br /&gt;
Serial Number                       : A41602135002P6FV&lt;br /&gt;
Part Number                         : BCM957416A4160&lt;br /&gt;
PCI Address                         : 0000:98:00.0&lt;br /&gt;
Chip Number                         : BCM57416&lt;br /&gt;
Chip Name                           : WHITNEY+&lt;br /&gt;
Description                         : Broadcom BCM57412 2x10GbT PCIe Ethernet NIC&lt;br /&gt;
Firmware Name                       : CHIMP_FW&lt;br /&gt;
Firmware Version                    : 236.1.126.0&lt;br /&gt;
RoCE Firmware Version               : 236.1.126.0&lt;br /&gt;
HWRM Interface Spec                 : 1.10.3&lt;br /&gt;
Kong mailbox channel                : Disabled&lt;br /&gt;
Active Package Version              : 236.1.155.0&lt;br /&gt;
Package Version on NVM              : 236.1.155.0&lt;br /&gt;
Active NVM config version           : 216.0.0&lt;br /&gt;
NVM config version                  : 216.0.0&lt;br /&gt;
Reboot Required                     : No&lt;br /&gt;
HCRM Profile ID                     : 1&lt;br /&gt;
HCRM Profile Version                : 1.0.8&lt;br /&gt;
Firmware Reset Counter              : 0&lt;br /&gt;
Error Recovery Counter              : 0&lt;br /&gt;
Crash Dump Timestamp                : Not Available&lt;br /&gt;
Secure Boot                         : Enabled&lt;br /&gt;
Secure Firmware Update              : Enabled&lt;br /&gt;
Secure SOC Enabled                  : No&lt;br /&gt;
Device Temperature                  : 50 Celsius&lt;br /&gt;
PHY Temperature                     : 51 Celsius&lt;br /&gt;
Optical Module Temperature          : Not Available&lt;br /&gt;
Device Health                       : Good&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
=== Старая архитектура драйвера (&amp;lt;2024 год, sliff) ===&lt;br /&gt;
&lt;br /&gt;
* Устанавливаем поддерживаемый дистрибутив Linux (что-нибудь RHEL-совместимое — например, Alma).&lt;br /&gt;
* Ставим kernel-devel, dkms из EPEL, с сайта Broadcom — niccli. В архиве вместе с niccli будет дополнительный модуль sliff для работы с контроллерами через niccli.&lt;br /&gt;
* Проблема до прошивки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    Card not in operational state   00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    Card not in operational state   00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Собираем модуль sliff, прошиваем контроллер:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
$ sudo niccli -dev 1 install BCM957412A4120AC.pkg&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - v216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:af:00:0&lt;br /&gt;
Device 0000:af:00:0 : Installing package file BCM957412A4120AC.pkg&lt;br /&gt;
Device 0000:af:00:0 : will be updated to package version v228.1.111.0&lt;br /&gt;
&lt;br /&gt;
Do you want to continue (y/n)?y&lt;br /&gt;
#################################&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot is needed for firmware update to take effect.&lt;br /&gt;
FW package update SUCCESS!&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Проверяем после перезагрузки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    14:23:F2:A0:A6:F0  228.0.116.0  00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    14:23:F2:A0:A6:F1  228.0.116.0  00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
[[Категория:Broadcom]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=95</id>
		<title>Broadcom P210P/P210TP</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=95"/>
		<updated>2026-04-11T14:36:50Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210p Broadcom P210P BCM957412A4120AC] — 2-портовый контроллер 10GbE SFP+.&lt;br /&gt;
&lt;br /&gt;
* [https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210tp Broadcom P210TP BCM957416A4160] — 2-портовый контроллер 10GbE 10GBASE-T.&lt;br /&gt;
&lt;br /&gt;
== Проблема ==&lt;br /&gt;
Возможная проблема с некоторыми экземплярами — контроллер работает, но невозможна настройка через niccli (сообщение ''Card not in operational state''). Обновление прошивки под Windows Server при этом недоступно.&lt;br /&gt;
&lt;br /&gt;
== Решение ==&lt;br /&gt;
Обновление прошивки возможно в Linux.&lt;br /&gt;
&lt;br /&gt;
=== Дополнение от 04.2026 (новая архитектура драйвера) ===&lt;br /&gt;
Аналогичная проблема, карточка P210TP выдает статус Card not in operational state, не прошивается ни в Windows, ни в Linux (Alma 9.7, под id 1 и 2 здесь — набортные интерфейсы материнской платы Supermicro X13DEI-T на том же чипе):&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(NA)    Card not in operational state   0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(NA)    Card not in operational state   0000:98:00.1   NIC    PCI&lt;br /&gt;
&lt;br /&gt;
sudo niccli -i 3 fw --update -f BCM957416A4160C.pkg --yes&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update&lt;br /&gt;
          is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - N/A : Package Version on NVM - N/A&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:98:00:0&lt;br /&gt;
Device 0000:98:00:0 : Installing package file BCM957416A4160C.pkg&lt;br /&gt;
Device 0000:98:00:0 : will be updated to package version 236.1.155.0&lt;br /&gt;
Firmware Update is in progress. Please wait ...&lt;br /&gt;
#&lt;br /&gt;
&lt;br /&gt;
Package installation failed.&lt;br /&gt;
&lt;br /&gt;
EXIT CODE : 0B00303A&lt;br /&gt;
DESCRIPTION : Firmware image update failed&lt;br /&gt;
 Command fw failed.&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Решение:&lt;br /&gt;
* Ставим модуль драйвера от Broadcom. Утилита nic_wizard не подходит, так как предназначена только для официально поддерживаемых дистрибутивов — поставим вручную через DKMS:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo dnf install -y epel-release&lt;br /&gt;
sudo dnf config-manager --set-enabled crb&lt;br /&gt;
sudo dnf install -y dkms gcc make kernel-devel kernel-headers&lt;br /&gt;
sudo reboot&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Устанавливаем dkms-драйвер, проверяем версию модуля:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo dnf install bnxt_en-1.10.3.236.1.155.0-1dkms.noarch.rpm&lt;br /&gt;
&lt;br /&gt;
modinfo bnxt_en&lt;br /&gt;
&lt;br /&gt;
filename:       /lib/modules/5.14.0-611.45.1.el9_7.x86_64/extra/bnxt_en.ko.xz&lt;br /&gt;
version:        1.10.3-236.1.155.0&lt;br /&gt;
description:    Broadcom NetXtreme-C/E/S network driver&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
* С новым драйвером отображается ревизия&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(B1)    Card not in operational state   0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(B1)    Card not in operational state   0000:98:00.1   NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
и всё шьется&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli -i 3 fw --update -f BCM957416A4160C.pkg --yes&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update&lt;br /&gt;
          is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - 216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:98:00:0&lt;br /&gt;
Device 0000:98:00:0 : Installing package file BCM957416A4160C.pkg&lt;br /&gt;
Device 0000:98:00:0 : will be updated to package version 236.1.155.0&lt;br /&gt;
Firmware Update is in progress. Please wait ...&lt;br /&gt;
######################################&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot or device reset is needed for the firmware update to take effect.&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
* После прошивки нужна '''холодная перезагрузка''' или power cycle.&lt;br /&gt;
&amp;lt;pre&amp;gt; &lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(B1)    E4:3D:1A:DC:9D:A0  236.1.126.0  0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(B1)    E4:3D:1A:DC:9D:A1  236.1.126.0  0000:98:00.1   NIC    PCI&lt;br /&gt;
&lt;br /&gt;
sudo niccli --dev 3 show&lt;br /&gt;
&lt;br /&gt;
NIC State                           : Down&lt;br /&gt;
Device Type                         : WHITNEY+&lt;br /&gt;
PCI Vendor ID                       : 0x14E4&lt;br /&gt;
PCI Device ID                       : 0x16D8&lt;br /&gt;
PCI Revision ID                     : 0x1&lt;br /&gt;
PCI Subsys Vendor ID                : 0x14E4&lt;br /&gt;
PCI Subsys Device ID                : 0x1602&lt;br /&gt;
Device Interface Name               : ens5f0np0&lt;br /&gt;
MAC Address                         : E4:3D:1A:DC:9D:A0&lt;br /&gt;
Base MAC Address                    : E4:3D:1A:DC:9D:A0&lt;br /&gt;
Serial Number                       : A41602135002P6FV&lt;br /&gt;
Part Number                         : BCM957416A4160&lt;br /&gt;
PCI Address                         : 0000:98:00.0&lt;br /&gt;
Chip Number                         : BCM57416&lt;br /&gt;
Chip Name                           : WHITNEY+&lt;br /&gt;
Description                         : Broadcom BCM57412 2x10GbT PCIe Ethernet NIC&lt;br /&gt;
Firmware Name                       : CHIMP_FW&lt;br /&gt;
Firmware Version                    : 236.1.126.0&lt;br /&gt;
RoCE Firmware Version               : 236.1.126.0&lt;br /&gt;
HWRM Interface Spec                 : 1.10.3&lt;br /&gt;
Kong mailbox channel                : Disabled&lt;br /&gt;
Active Package Version              : 236.1.155.0&lt;br /&gt;
Package Version on NVM              : 236.1.155.0&lt;br /&gt;
Active NVM config version           : 216.0.0&lt;br /&gt;
NVM config version                  : 216.0.0&lt;br /&gt;
Reboot Required                     : No&lt;br /&gt;
HCRM Profile ID                     : 1&lt;br /&gt;
HCRM Profile Version                : 1.0.8&lt;br /&gt;
Firmware Reset Counter              : 0&lt;br /&gt;
Error Recovery Counter              : 0&lt;br /&gt;
Crash Dump Timestamp                : Not Available&lt;br /&gt;
Secure Boot                         : Enabled&lt;br /&gt;
Secure Firmware Update              : Enabled&lt;br /&gt;
Secure SOC Enabled                  : No&lt;br /&gt;
Device Temperature                  : 50 Celsius&lt;br /&gt;
PHY Temperature                     : 51 Celsius&lt;br /&gt;
Optical Module Temperature          : Not Available&lt;br /&gt;
Device Health                       : Good&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
=== Старая архитектура драйвера (&amp;lt;2024 год, sliff) ===&lt;br /&gt;
&lt;br /&gt;
* Устанавливаем поддерживаемый дистрибутив Linux (что-нибудь RHEL-совместимое — например, Alma).&lt;br /&gt;
* Ставим kernel-devel, dkms из EPEL, с сайта Broadcom — niccli. В архиве вместе с niccli будет дополнительный модуль sliff для работы с контроллерами через niccli.&lt;br /&gt;
* Проблема до прошивки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    Card not in operational state   00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    Card not in operational state   00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Собираем модуль sliff, прошиваем контроллер:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
$ sudo niccli -dev 1 install BCM957412A4120AC.pkg&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - v216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:af:00:0&lt;br /&gt;
Device 0000:af:00:0 : Installing package file BCM957412A4120AC.pkg&lt;br /&gt;
Device 0000:af:00:0 : will be updated to package version v228.1.111.0&lt;br /&gt;
&lt;br /&gt;
Do you want to continue (y/n)?y&lt;br /&gt;
#################################&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot is needed for firmware update to take effect.&lt;br /&gt;
FW package update SUCCESS!&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Проверяем после перезагрузки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    14:23:F2:A0:A6:F0  228.0.116.0  00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    14:23:F2:A0:A6:F1  228.0.116.0  00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
[[Категория:Broadcom]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=94</id>
		<title>Broadcom P210P/P210TP</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=94"/>
		<updated>2026-04-11T14:35:16Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: /* Решение */&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;[https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210p Broadcom P210P BCM957412A4120AC] — 2-портовый контроллер 10GbE SFP+.&lt;br /&gt;
&lt;br /&gt;
== Проблема ==&lt;br /&gt;
Возможная проблема с некоторыми экземплярами — контроллер работает, но невозможна настройка через niccli (сообщение ''Card not in operational state''). Обновление прошивки под Windows Server при этом недоступно.&lt;br /&gt;
&lt;br /&gt;
== Решение ==&lt;br /&gt;
Обновление прошивки возможно в Linux.&lt;br /&gt;
&lt;br /&gt;
=== Дополнение от 04.2026 (новая архитектура драйвера) ===&lt;br /&gt;
Аналогичная проблема, карточка P210TP выдает статус Card not in operational state, не прошивается ни в Windows, ни в Linux (Alma 9.7, под id 1 и 2 здесь — набортные интерфейсы материнской платы Supermicro X13DEI-T на том же чипе):&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(NA)    Card not in operational state   0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(NA)    Card not in operational state   0000:98:00.1   NIC    PCI&lt;br /&gt;
&lt;br /&gt;
sudo niccli -i 3 fw --update -f BCM957416A4160C.pkg --yes&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update&lt;br /&gt;
          is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - N/A : Package Version on NVM - N/A&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:98:00:0&lt;br /&gt;
Device 0000:98:00:0 : Installing package file BCM957416A4160C.pkg&lt;br /&gt;
Device 0000:98:00:0 : will be updated to package version 236.1.155.0&lt;br /&gt;
Firmware Update is in progress. Please wait ...&lt;br /&gt;
#&lt;br /&gt;
&lt;br /&gt;
Package installation failed.&lt;br /&gt;
&lt;br /&gt;
EXIT CODE : 0B00303A&lt;br /&gt;
DESCRIPTION : Firmware image update failed&lt;br /&gt;
 Command fw failed.&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Решение:&lt;br /&gt;
* Ставим модуль драйвера от Broadcom. Утилита nic_wizard не подходит, так как предназначена только для официально поддерживаемых дистрибутивов — поставим вручную через DKMS:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo dnf install -y epel-release&lt;br /&gt;
sudo dnf config-manager --set-enabled crb&lt;br /&gt;
sudo dnf install -y dkms gcc make kernel-devel kernel-headers&lt;br /&gt;
sudo reboot&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Устанавливаем dkms-драйвер, проверяем версию модуля:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo dnf install bnxt_en-1.10.3.236.1.155.0-1dkms.noarch.rpm&lt;br /&gt;
&lt;br /&gt;
modinfo bnxt_en&lt;br /&gt;
&lt;br /&gt;
filename:       /lib/modules/5.14.0-611.45.1.el9_7.x86_64/extra/bnxt_en.ko.xz&lt;br /&gt;
version:        1.10.3-236.1.155.0&lt;br /&gt;
description:    Broadcom NetXtreme-C/E/S network driver&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
* С новым драйвером отображается ревизия&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(B1)    Card not in operational state   0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(B1)    Card not in operational state   0000:98:00.1   NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
и всё шьется&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli -i 3 fw --update -f BCM957416A4160C.pkg --yes&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update&lt;br /&gt;
          is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - 216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:98:00:0&lt;br /&gt;
Device 0000:98:00:0 : Installing package file BCM957416A4160C.pkg&lt;br /&gt;
Device 0000:98:00:0 : will be updated to package version 236.1.155.0&lt;br /&gt;
Firmware Update is in progress. Please wait ...&lt;br /&gt;
######################################&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot or device reset is needed for the firmware update to take effect.&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
* После прошивки нужна '''холодная перезагрузка''' или power cycle.&lt;br /&gt;
&amp;lt;pre&amp;gt; &lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
     BoardId(Rev)    MAC Address        FwVersion    PCIAddr        Type   Mode&lt;br /&gt;
  1) BCM57416(B1)    7C:C2:55:87:1F:F6  226.0.145.0  0000:3E:00.0   NIC    PCI&lt;br /&gt;
  2) BCM57416(B1)    7C:C2:55:87:1F:F7  226.0.145.0  0000:3E:00.1   NIC    PCI&lt;br /&gt;
  3) BCM57416(B1)    E4:3D:1A:DC:9D:A0  236.1.126.0  0000:98:00.0   NIC    PCI&lt;br /&gt;
  4) BCM57416(B1)    E4:3D:1A:DC:9D:A1  236.1.126.0  0000:98:00.1   NIC    PCI&lt;br /&gt;
&lt;br /&gt;
sudo niccli --dev 3 show&lt;br /&gt;
&lt;br /&gt;
NIC State                           : Down&lt;br /&gt;
Device Type                         : WHITNEY+&lt;br /&gt;
PCI Vendor ID                       : 0x14E4&lt;br /&gt;
PCI Device ID                       : 0x16D8&lt;br /&gt;
PCI Revision ID                     : 0x1&lt;br /&gt;
PCI Subsys Vendor ID                : 0x14E4&lt;br /&gt;
PCI Subsys Device ID                : 0x1602&lt;br /&gt;
Device Interface Name               : ens5f0np0&lt;br /&gt;
MAC Address                         : E4:3D:1A:DC:9D:A0&lt;br /&gt;
Base MAC Address                    : E4:3D:1A:DC:9D:A0&lt;br /&gt;
Serial Number                       : A41602135002P6FV&lt;br /&gt;
Part Number                         : BCM957416A4160&lt;br /&gt;
PCI Address                         : 0000:98:00.0&lt;br /&gt;
Chip Number                         : BCM57416&lt;br /&gt;
Chip Name                           : WHITNEY+&lt;br /&gt;
Description                         : Broadcom BCM57412 2x10GbT PCIe Ethernet NIC&lt;br /&gt;
Firmware Name                       : CHIMP_FW&lt;br /&gt;
Firmware Version                    : 236.1.126.0&lt;br /&gt;
RoCE Firmware Version               : 236.1.126.0&lt;br /&gt;
HWRM Interface Spec                 : 1.10.3&lt;br /&gt;
Kong mailbox channel                : Disabled&lt;br /&gt;
Active Package Version              : 236.1.155.0&lt;br /&gt;
Package Version on NVM              : 236.1.155.0&lt;br /&gt;
Active NVM config version           : 216.0.0&lt;br /&gt;
NVM config version                  : 216.0.0&lt;br /&gt;
Reboot Required                     : No&lt;br /&gt;
HCRM Profile ID                     : 1&lt;br /&gt;
HCRM Profile Version                : 1.0.8&lt;br /&gt;
Firmware Reset Counter              : 0&lt;br /&gt;
Error Recovery Counter              : 0&lt;br /&gt;
Crash Dump Timestamp                : Not Available&lt;br /&gt;
Secure Boot                         : Enabled&lt;br /&gt;
Secure Firmware Update              : Enabled&lt;br /&gt;
Secure SOC Enabled                  : No&lt;br /&gt;
Device Temperature                  : 50 Celsius&lt;br /&gt;
PHY Temperature                     : 51 Celsius&lt;br /&gt;
Optical Module Temperature          : Not Available&lt;br /&gt;
Device Health                       : Good&lt;br /&gt;
&amp;lt;/pre&amp;gt; &lt;br /&gt;
&lt;br /&gt;
=== Старая архитектура драйвера (&amp;lt;2024 год, sliff) ===&lt;br /&gt;
&lt;br /&gt;
* Устанавливаем поддерживаемый дистрибутив Linux (что-нибудь RHEL-совместимое — например, Alma).&lt;br /&gt;
* Ставим kernel-devel, dkms из EPEL, с сайта Broadcom — niccli. В архиве вместе с niccli будет дополнительный модуль sliff для работы с контроллерами через niccli.&lt;br /&gt;
* Проблема до прошивки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    Card not in operational state   00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    Card not in operational state   00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Собираем модуль sliff, прошиваем контроллер:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
$ sudo niccli -dev 1 install BCM957412A4120AC.pkg&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - v216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:af:00:0&lt;br /&gt;
Device 0000:af:00:0 : Installing package file BCM957412A4120AC.pkg&lt;br /&gt;
Device 0000:af:00:0 : will be updated to package version v228.1.111.0&lt;br /&gt;
&lt;br /&gt;
Do you want to continue (y/n)?y&lt;br /&gt;
#################################&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot is needed for firmware update to take effect.&lt;br /&gt;
FW package update SUCCESS!&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Проверяем после перезагрузки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    14:23:F2:A0:A6:F0  228.0.116.0  00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    14:23:F2:A0:A6:F1  228.0.116.0  00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
[[Категория:Broadcom]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=93</id>
		<title>Заглавная страница</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=93"/>
		<updated>2025-11-25T09:08:02Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [[Контроллеры SAS]]&lt;br /&gt;
* [[IPMI]]&lt;br /&gt;
* [[NVMe]]&lt;br /&gt;
* [[815TQ-563CB]]&lt;br /&gt;
* [[Infortrend ES DS]]&lt;br /&gt;
* [[Нагрузочное тестирование]]&lt;br /&gt;
* [[LGA4677]]&lt;br /&gt;
* [[QLogic QLE269x]]&lt;br /&gt;
* [[Broadcom P210P]]&lt;br /&gt;
* [[SYS-741GE-TNRT]]&lt;br /&gt;
* [[Общие проблемы совместимости]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=92</id>
		<title>Заглавная страница</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=92"/>
		<updated>2025-07-11T12:29:15Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [[Контроллеры SAS]]&lt;br /&gt;
* [[IPMI]]&lt;br /&gt;
* [[NVMe]]&lt;br /&gt;
* [[815TQ-563CB]]&lt;br /&gt;
* [[Infortrend ES DS]]&lt;br /&gt;
* [[Нагрузочное тестирование]]&lt;br /&gt;
* [[LGA4677]]&lt;br /&gt;
* [[QLogic QLE269x]]&lt;br /&gt;
* [[Broadcom P210P]]&lt;br /&gt;
* [[SYS-741GE-TNRT]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9A%D0%BE%D0%BD%D1%82%D1%80%D0%BE%D0%BB%D0%BB%D0%B5%D1%80%D1%8B_SAS&amp;diff=91</id>
		<title>Контроллеры SAS</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9A%D0%BE%D0%BD%D1%82%D1%80%D0%BE%D0%BB%D0%BB%D0%B5%D1%80%D1%8B_SAS&amp;diff=91"/>
		<updated>2025-07-11T12:29:07Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;= Broadcom =&lt;br /&gt;
== RAID ==&lt;br /&gt;
=== 93xx ===&lt;br /&gt;
* 9361-8i: несовместимость с Supermicro X13Sxx/X13Dxx.&lt;br /&gt;
Broadcom 9361 и Supermicro на том же RoC (AOC/AOM-S3108) выдают в лог после каждой загрузки сообщение о внештатном сбросе:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
seqNum: 0x00000188&lt;br /&gt;
Seconds since last reboot: 1&lt;br /&gt;
Code: 0x00000159&lt;br /&gt;
Class: 2&lt;br /&gt;
Locale: 0x20&lt;br /&gt;
Event Description: Controller encountered an error and was reset&lt;br /&gt;
Event Data:&lt;br /&gt;
===========&lt;br /&gt;
None&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
На работоспособность предположительно не влияет (никаких проблем под нагрузкой, всё управляется нормально через StorCLI/LSA, сообщение в лог добавляется только при перезагрузке).&lt;br /&gt;
&lt;br /&gt;
О проблеме также сообщают в [https://www.supermicro.com/support/faqs/faq.cfm?faq=38439 Supermicro FAQ ID 38439].&lt;br /&gt;
&lt;br /&gt;
Решение: не использовать контроллеры на базе 3108, с 9460 и дальше проблема не наблюдается.&lt;br /&gt;
&lt;br /&gt;
* 9361-4i/8i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+SAS+9361-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
=== 94xx ===&lt;br /&gt;
* 9440-8i: инициализация массива&lt;br /&gt;
На контроллерах 9440-8i наблюдается снижение скорости полной инициализации (full init, контроллер пишет нули) с любыми дисками и на любых массивах (RAID-5/1/10). После 82–83% судя по записям в termlog контроллер запускает Secure Erase на дисках, из-за чего производительность инициализации снижается в 4–5 раз, но в итоге завершается успешно. &lt;br /&gt;
&lt;br /&gt;
Этого не происходит при фоновой инициализации (bgi = background init). Достаточно создать VD с обычными параметрами (fast init, в свойствах контроллера не выключать auto bgi).&lt;br /&gt;
* 9440-8i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+9440-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
* 9460-8i/16i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+9460-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
=== 95xx ===&lt;br /&gt;
=== 96xx ===&lt;br /&gt;
== HBA ==&lt;br /&gt;
= Adaptec =&lt;br /&gt;
== Прочее ==&lt;br /&gt;
* [[Бэкплейны SAS3 и foreign configuration|Бэкплейны SAS3 и foreign configuration на контроллерах Broadcom 93xx/94xx/95xx]]&lt;br /&gt;
* [[Кабели SFF-8643 - 4x SATA + SGPIO]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9A%D0%BE%D0%BD%D1%82%D1%80%D0%BE%D0%BB%D0%BB%D0%B5%D1%80%D1%8B_SAS&amp;diff=90</id>
		<title>Контроллеры SAS</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9A%D0%BE%D0%BD%D1%82%D1%80%D0%BE%D0%BB%D0%BB%D0%B5%D1%80%D1%8B_SAS&amp;diff=90"/>
		<updated>2025-07-11T09:59:27Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;= Broadcom =&lt;br /&gt;
== RAID ==&lt;br /&gt;
=== 93xx ===&lt;br /&gt;
* 9361-8i: несовместимость с Supermicro X13Sxx/X13Dxx.&lt;br /&gt;
Broadcom 9361 и Supermicro на том же RoC (AOC/AOM-S3108) выдают в лог после каждой загрузки сообщение о внештатном сбросе:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
seqNum: 0x00000188&lt;br /&gt;
Seconds since last reboot: 1&lt;br /&gt;
Code: 0x00000159&lt;br /&gt;
Class: 2&lt;br /&gt;
Locale: 0x20&lt;br /&gt;
Event Description: Controller encountered an error and was reset&lt;br /&gt;
Event Data:&lt;br /&gt;
===========&lt;br /&gt;
None&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
На работоспособность предположительно не влияет (никаких проблем под нагрузкой, всё управляется нормально через StorCLI/LSA, сообщение в лог добавляется только при перезагрузке).&lt;br /&gt;
&lt;br /&gt;
О проблеме также сообщают в [https://www.supermicro.com/support/faqs/faq.cfm?faq=38439 Supermicro FAQ ID 38439].&lt;br /&gt;
&lt;br /&gt;
Решение: не использовать контроллеры на базе 3108, с 9460 и дальше проблема не наблюдается.&lt;br /&gt;
&lt;br /&gt;
* 9361-4i/8i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+SAS+9361-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
=== 94xx ===&lt;br /&gt;
* 9440-8i: инициализация массива&lt;br /&gt;
На контроллерах 9440-8i наблюдается снижение скорости полной инициализации (full init, контроллер пишет нули) с любыми дисками и на любых массивах (RAID-5/1/10). После 82–83% судя по записям в termlog контроллер запускает Secure Erase на дисках, из-за чего производительность инициализации снижается в 4–5 раз, но в итоге завершается успешно. &lt;br /&gt;
&lt;br /&gt;
Этого не происходит при фоновой инициализации (bgi = background init). Достаточно создать VD с обычными параметрами (fast init, в свойствах контроллера не выключать auto bgi).&lt;br /&gt;
* 9440-8i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+9440-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
* 9460-8i/16i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+9460-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
=== 95xx ===&lt;br /&gt;
=== 96xx ===&lt;br /&gt;
* [[Бэкплейны SAS3 и foreign configuration|Бэкплейны SAS3 и foreign configuration на контроллерах Broadcom 93xx/94xx/95xx]]&lt;br /&gt;
== HBA ==&lt;br /&gt;
= Adaptec =&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9A%D0%BE%D0%BD%D1%82%D1%80%D0%BE%D0%BB%D0%BB%D0%B5%D1%80%D1%8B_SAS&amp;diff=89</id>
		<title>Контроллеры SAS</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9A%D0%BE%D0%BD%D1%82%D1%80%D0%BE%D0%BB%D0%BB%D0%B5%D1%80%D1%8B_SAS&amp;diff=89"/>
		<updated>2025-07-11T09:55:25Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;= Broadcom =&lt;br /&gt;
== RAID ==&lt;br /&gt;
=== 93xx ===&lt;br /&gt;
* 9361-8i: несовместимость с Supermicro X13Sxx/X13Dxx.&lt;br /&gt;
Broadcom 9361 и Supermicro на том же RoC (AOC/AOM-S3108) выдают в лог после каждой загрузки сообщение о внештатном сбросе:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
seqNum: 0x00000188&lt;br /&gt;
Seconds since last reboot: 1&lt;br /&gt;
Code: 0x00000159&lt;br /&gt;
Class: 2&lt;br /&gt;
Locale: 0x20&lt;br /&gt;
Event Description: Controller encountered an error and was reset&lt;br /&gt;
Event Data:&lt;br /&gt;
===========&lt;br /&gt;
None&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
На работоспособность предположительно не влияет (никаких проблем под нагрузкой, всё управляется нормально через StorCLI/LSA, сообщение в лог добавляется только при перезагрузке).&lt;br /&gt;
&lt;br /&gt;
О проблеме также сообщают в [https://www.supermicro.com/support/faqs/faq.cfm?faq=38439 Supermicro FAQ ID 38439].&lt;br /&gt;
&lt;br /&gt;
Решение: не использовать контроллеры на базе 3108, с 9460 и дальше проблема не наблюдается.&lt;br /&gt;
&lt;br /&gt;
* 9361-4i/8i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+SAS+9361-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
=== 94xx ===&lt;br /&gt;
* 9440-8i: инициализация массива&lt;br /&gt;
На контроллерах 9440-8i наблюдается снижение скорости полной инициализации (full init, контроллер пишет нули) с любыми дисками и на любых массивах (RAID-5/1/10). После 82–83% судя по записям в termlog контроллер запускает Secure Erase на дисках, из-за чего производительность инициализации снижается в 4–5 раз, но в итоге завершается успешно. &lt;br /&gt;
&lt;br /&gt;
Этого не происходит при фоновой инициализации (bgi = background init). Достаточно создать VD с обычными параметрами (fast init, в свойствах контроллера не выключать auto bgi).&lt;br /&gt;
* 9440-8i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+9440-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
* 9460-8i/16i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+9460-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
=== 95xx ===&lt;br /&gt;
=== 96xx ===&lt;br /&gt;
== HBA ==&lt;br /&gt;
= Adaptec =&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9A%D0%BE%D0%BD%D1%82%D1%80%D0%BE%D0%BB%D0%BB%D0%B5%D1%80%D1%8B_SAS&amp;diff=88</id>
		<title>Контроллеры SAS</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9A%D0%BE%D0%BD%D1%82%D1%80%D0%BE%D0%BB%D0%BB%D0%B5%D1%80%D1%8B_SAS&amp;diff=88"/>
		<updated>2025-07-11T09:49:18Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Новая страница: «= Broadcom = == RAID == === 93xx === * 9361-8i: несовместимость с Supermicro X13Sxx/X13Dxx. Broadcom 9361 и Supermicro на том же RoC (AOC/AOM-S3108) выдают в лог после каждой загрузки сообщение о внештатном сбросе: &amp;lt;pre&amp;gt; seqNum: 0x00000188 Seconds since last reboot: 1 Code: 0x00000159 Class: 2 Locale: 0x20 Event Description: Controller encountered an error and was reset Event Data...»&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;= Broadcom =&lt;br /&gt;
== RAID ==&lt;br /&gt;
=== 93xx ===&lt;br /&gt;
* 9361-8i: несовместимость с Supermicro X13Sxx/X13Dxx.&lt;br /&gt;
Broadcom 9361 и Supermicro на том же RoC (AOC/AOM-S3108) выдают в лог после каждой загрузки сообщение о внештатном сбросе:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
seqNum: 0x00000188&lt;br /&gt;
Seconds since last reboot: 1&lt;br /&gt;
Code: 0x00000159&lt;br /&gt;
Class: 2&lt;br /&gt;
Locale: 0x20&lt;br /&gt;
Event Description: Controller encountered an error and was reset&lt;br /&gt;
Event Data:&lt;br /&gt;
===========&lt;br /&gt;
None&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
На работоспособность предположительно не влияет (никаких проблем под нагрузкой, всё управляется нормально через StorCLI/LSA, сообщение в лог добавляется только при перезагрузке).&lt;br /&gt;
&lt;br /&gt;
О проблеме также сообщают в [https://www.supermicro.com/support/faqs/faq.cfm?faq=38439 Supermicro FAQ ID 38439].&lt;br /&gt;
&lt;br /&gt;
Решение: не использовать контроллеры на базе 3108, с 9460 и дальше проблема не наблюдается.&lt;br /&gt;
&lt;br /&gt;
* 9361-4i/8i: [https://www.broadcom.com/support/download-search?pg=Legacy+Products&amp;amp;pf=Legacy+RAID+Controllers&amp;amp;pn=MegaRAID+SAS+9361-8i&amp;amp;pa=&amp;amp;po=&amp;amp;dk=&amp;amp;pl=&amp;amp;l=false драйверы, прошивки, ПО, документация].&lt;br /&gt;
=== 94xx ===&lt;br /&gt;
* 9440-8i: инициализация массива&lt;br /&gt;
=== 95xx ===&lt;br /&gt;
=== 96xx ===&lt;br /&gt;
== HBA ==&lt;br /&gt;
= Adaptec =&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9A%D0%B0%D0%B1%D0%B5%D0%BB%D0%B8_SFF-8643_-_4x_SATA_%2B_SGPIO&amp;diff=87</id>
		<title>Кабели SFF-8643 - 4x SATA + SGPIO</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9A%D0%B0%D0%B1%D0%B5%D0%BB%D0%B8_SFF-8643_-_4x_SATA_%2B_SGPIO&amp;diff=87"/>
		<updated>2024-11-19T12:17:03Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: /* Модификация кабелей ACD-SFF8643-SATASB-08M */&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Описание проблемы ==&lt;br /&gt;
Не работает SGPIO с некоторыми кабелями SAS. В частности, индикация (подсветка дисков).&lt;br /&gt;
&lt;br /&gt;
== Причина ==&lt;br /&gt;
Соответствие контактов, отвечающих за SGPIO между SFF-8643 и 8-контактным разъемом DuPont не стандартизировано. Цоколевка, работающая с бэкплейнами Supermicro выглядит так (вид контактами к себе):&lt;br /&gt;
&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
SFF-8643&lt;br /&gt;
&lt;br /&gt;
,-----------------,&lt;br /&gt;
|           1   5 |&lt;br /&gt;
|-----------|---| |&lt;br /&gt;
|           2   6 |&lt;br /&gt;
|                 |&lt;br /&gt;
|           3   7 |&lt;br /&gt;
|-----------|---| |&lt;br /&gt;
|           4   8 |&lt;br /&gt;
'-----------------'&lt;br /&gt;
&lt;br /&gt;
SGPIO&lt;br /&gt;
&lt;br /&gt;
5 6 7 8&lt;br /&gt;
1 2 3 4&lt;br /&gt;
^&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
== Модификация кабелей ACD-SFF8643-SATASB-08M, L285HM016-SD-R==&lt;br /&gt;
# Разрезать термоусадку.&lt;br /&gt;
# Пометить маркером первый провод двух 4-проводных шлейфов.&lt;br /&gt;
# Разобрать разъем, вставить контакты в следующей последовательности (изначальная последовательность 5678, 1234):&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
2 4 6 8&lt;br /&gt;
1 3 5 7&lt;br /&gt;
^&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
== Модификация кабелей Amphenol RHS36-3395 ==&lt;br /&gt;
# Снять ленту рядом с разъемом SGPIO.&lt;br /&gt;
# Пометить маркером первый провод 8-проводного шлейфа.&lt;br /&gt;
# Разобрать разъем, вставить контакты в следующей последовательности:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
7 3 4 8&lt;br /&gt;
6 2 5 1&lt;br /&gt;
^&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=SYS-741GE-TNRT&amp;diff=86</id>
		<title>SYS-741GE-TNRT</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=SYS-741GE-TNRT&amp;diff=86"/>
		<updated>2024-07-18T11:23:28Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;Платформа Supermicro [https://www.supermicro.com/en/products/system/gpu/tower/sys-741ge-tnrt SYS-741GE-TNRT].&lt;br /&gt;
&lt;br /&gt;
== Кабели питания GPU ==&lt;br /&gt;
Используется модульный PDB (PDB-PT747-DSG) с разъемами MicroHi 2x4.&lt;br /&gt;
&lt;br /&gt;
Нужны следующие кабели:&lt;br /&gt;
* CBL-PWEX-1173-20 (20 cm in length, for PCIe slots 7 and 9)&lt;br /&gt;
* CBL-PWEX-1173-50 (50 cm in length, for PCIe slots 2 and 4)&lt;br /&gt;
&lt;br /&gt;
Описание: Supermicro CBL-PWEX-1173-20 Power Extension Cable MicroHi 2x4F/P3.0 to PCIe 2x(3+1)F (6/8 pin (отсоединяемый ряд) GPU)&lt;br /&gt;
&lt;br /&gt;
[[Категория: Платформы Supermicro]]&lt;br /&gt;
[[Категория: GPU]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=SYS-741GE-TNRT&amp;diff=85</id>
		<title>SYS-741GE-TNRT</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=SYS-741GE-TNRT&amp;diff=85"/>
		<updated>2024-07-18T11:23:01Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Новая страница: «Платформа Supermicro [https://www.supermicro.com/en/products/system/gpu/tower/sys-741ge-tnrt SYS-741GE-TNRT].  == Кабели питания GPU == Используется модульный PDB (PDB-PT747-DSG) с разъемами MicroHi 2x4.  Нужны следующие кабели: * CBL-PWEX-1173-20 (20 cm in length, for PCIe slots 7 and 9) * CBL-PWEX-1173-50 (50 cm in length, for PCIe slots 2 and 4)  Описание: Supermicro CBL-PWEX...»&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;Платформа Supermicro [https://www.supermicro.com/en/products/system/gpu/tower/sys-741ge-tnrt SYS-741GE-TNRT].&lt;br /&gt;
&lt;br /&gt;
== Кабели питания GPU ==&lt;br /&gt;
Используется модульный PDB (PDB-PT747-DSG) с разъемами MicroHi 2x4.&lt;br /&gt;
&lt;br /&gt;
Нужны следующие кабели:&lt;br /&gt;
* CBL-PWEX-1173-20 (20 cm in length, for PCIe slots 7 and 9)&lt;br /&gt;
* CBL-PWEX-1173-50 (50 cm in length, for PCIe slots 2 and 4)&lt;br /&gt;
&lt;br /&gt;
Описание: Supermicro CBL-PWEX-1173-20 Power Extension Cable MicroHi 2x4F/P3.0 to PCIe 2x(3+1)F (6/8 pin (отсоединяемый ряд) GPU)&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=84</id>
		<title>Заглавная страница</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=84"/>
		<updated>2024-07-18T11:20:03Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [[Контроллеры SAS]]&lt;br /&gt;
* [[Кабели SFF-8643 - 4x SATA + SGPIO]]&lt;br /&gt;
* [[IPMI]]&lt;br /&gt;
* [[NVMe]]&lt;br /&gt;
* [[815TQ-563CB]]&lt;br /&gt;
* [[Infortrend ES DS]]&lt;br /&gt;
* [[Нагрузочное тестирование]]&lt;br /&gt;
* [[LGA4677]]&lt;br /&gt;
* [[QLogic QLE269x]]&lt;br /&gt;
* [[Broadcom P210P]]&lt;br /&gt;
* [[Бэкплейны SAS3 и foreign configuration]]&lt;br /&gt;
* [[SYS-741GE-TNRT]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=83</id>
		<title>Broadcom P210P/P210TP</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=83"/>
		<updated>2024-03-26T09:04:57Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;[https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210p Broadcom P210P BCM957412A4120AC] — 2-портовый контроллер 10GbE SFP+.&lt;br /&gt;
&lt;br /&gt;
== Проблема ==&lt;br /&gt;
Возможная проблема с некоторыми экземплярами — контроллер работает, но невозможна настройка через niccli (сообщение ''Card not in operational state''). Обновление прошивки под Windows Server при этом недоступно.&lt;br /&gt;
&lt;br /&gt;
== Решение ==&lt;br /&gt;
Обновление прошивки возможно в Linux.&lt;br /&gt;
&lt;br /&gt;
* Устанавливаем поддерживаемый дистрибутив Linux (что-нибудь RHEL-совместимое — например, Alma).&lt;br /&gt;
* Ставим kernel-devel, dkms из EPEL, с сайта Broadcom — niccli. В архиве вместе с niccli будет дополнительный модуль sliff для работы с контроллерами через niccli.&lt;br /&gt;
* Проблема до прошивки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    Card not in operational state   00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    Card not in operational state   00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Собираем модуль sliff, прошиваем контроллер:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
$ sudo niccli -dev 1 install BCM957412A4120AC.pkg&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - v216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:af:00:0&lt;br /&gt;
Device 0000:af:00:0 : Installing package file BCM957412A4120AC.pkg&lt;br /&gt;
Device 0000:af:00:0 : will be updated to package version v228.1.111.0&lt;br /&gt;
&lt;br /&gt;
Do you want to continue (y/n)?y&lt;br /&gt;
#################################&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot is needed for firmware update to take effect.&lt;br /&gt;
FW package update SUCCESS!&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
* Проверяем после перезагрузки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    14:23:F2:A0:A6:F0  228.0.116.0  00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    14:23:F2:A0:A6:F1  228.0.116.0  00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
[[Категория:Broadcom]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=82</id>
		<title>Broadcom P210P/P210TP</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=82"/>
		<updated>2024-03-26T09:03:23Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;[https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210p Broadcom P210P BCM957412A4120AC] — 2-портовый контроллер 10GbE SFP+.&lt;br /&gt;
&lt;br /&gt;
== Проблема ==&lt;br /&gt;
Возможная проблема с некоторыми экземплярами — контроллер работает, но невозможна настройка через niccli (сообщение ''Card not in operational state''). Обновление прошивки под Windows Server при этом недоступно.&lt;br /&gt;
&lt;br /&gt;
== Решение ==&lt;br /&gt;
Обновление прошивки возможно в Linux.&lt;br /&gt;
&lt;br /&gt;
# Устанавливаем поддерживаемый дистрибутив Linux (что-нибудь RHEL-совместимое — например, Alma).&lt;br /&gt;
# Ставим kernel-devel, dkms из EPEL, с сайта Broadcom — niccli. В архиве вместе с niccli будет дополнительный модуль sliff для работы с контроллерами через niccli.&lt;br /&gt;
# Проблема до прошивки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    Card not in operational state   00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    Card not in operational state   00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
# Собираем модуль sliff, прошиваем контроллер:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
$ sudo niccli -dev 1 install BCM957412A4120AC.pkg&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - v216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:af:00:0&lt;br /&gt;
Device 0000:af:00:0 : Installing package file BCM957412A4120AC.pkg&lt;br /&gt;
Device 0000:af:00:0 : will be updated to package version v228.1.111.0&lt;br /&gt;
&lt;br /&gt;
Do you want to continue (y/n)?y&lt;br /&gt;
#################################&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot is needed for firmware update to take effect.&lt;br /&gt;
FW package update SUCCESS!&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
# Проверяем после перезагрузки:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
sudo niccli --list&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
     BoardId     MAC Address        FwVersion    PCIAddr      Type   Mode&lt;br /&gt;
  1) BCM57412    14:23:F2:A0:A6:F0  228.0.116.0  00:AF:00:00  NIC    PCI&lt;br /&gt;
  2) BCM57412    14:23:F2:A0:A6:F1  228.0.116.0  00:AF:00:01  NIC    PCI&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
[[Категория:Broadcom]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=81</id>
		<title>Broadcom P210P/P210TP</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=Broadcom_P210P/P210TP&amp;diff=81"/>
		<updated>2024-03-26T09:01:57Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Новая страница: «[https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210p Broadcom P210P BCM957412A4120AC] — 2-портовый контроллер 10GbE SFP+.  == Проблема == Возможная проблема с некоторыми экземплярами — контроллер работает, но невозможна настройка через niccli (сообщение ''Card not in operational state''). Обновление...»&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;[https://www.broadcom.com/products/ethernet-connectivity/network-adapters/p210p Broadcom P210P BCM957412A4120AC] — 2-портовый контроллер 10GbE SFP+.&lt;br /&gt;
&lt;br /&gt;
== Проблема ==&lt;br /&gt;
Возможная проблема с некоторыми экземплярами — контроллер работает, но невозможна настройка через niccli (сообщение ''Card not in operational state''). Обновление прошивки под Windows Server при этом недоступно.&lt;br /&gt;
&lt;br /&gt;
== Решение ==&lt;br /&gt;
Обновление прошивки возможно в Linux.&lt;br /&gt;
&lt;br /&gt;
# Устанавливаем поддерживаемый дистрибутив Linux (что-нибудь RHEL-совместимое — например, Alma).&lt;br /&gt;
# Ставим kernel-devel, dkms из EPEL, с сайта Broadcom — niccli. В архиве вместе с niccli будет дополнительный модуль sliff для работы с контроллерами через niccli.&lt;br /&gt;
# Собираем модуль sliff, прошиваем контроллер:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
$ sudo niccli -dev 1 install BCM957412A4120AC.pkg&lt;br /&gt;
&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
Scrutiny NIC CLI v228.0.132.0 - Broadcom Inc. (c) 2023 (Bld-61.52.25.90.16.0)&lt;br /&gt;
-------------------------------------------------------------------------------&lt;br /&gt;
&lt;br /&gt;
WARNING : Don't perform power cycle or reboot the system while firmware update is in progress as the device may become inoperable.&lt;br /&gt;
&lt;br /&gt;
Active Package Version - 216.0.333.11 : Package Version on NVM - v216.0.333.11&lt;br /&gt;
&lt;br /&gt;
NetXtreme-E Controller at PCI Domain 0000:af:00:0&lt;br /&gt;
Device 0000:af:00:0 : Installing package file BCM957412A4120AC.pkg&lt;br /&gt;
Device 0000:af:00:0 : will be updated to package version v228.1.111.0&lt;br /&gt;
&lt;br /&gt;
Do you want to continue (y/n)?y&lt;br /&gt;
#################################&lt;br /&gt;
&lt;br /&gt;
&lt;br /&gt;
Firmware update is completed.&lt;br /&gt;
A system reboot is needed for firmware update to take effect.&lt;br /&gt;
FW package update SUCCESS!&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
[[Категория:Broadcom]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=80</id>
		<title>Заглавная страница</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=80"/>
		<updated>2024-03-26T08:07:17Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [[Контроллеры SAS]]&lt;br /&gt;
* [[Кабели SFF-8643 - 4x SATA + SGPIO]]&lt;br /&gt;
* [[IPMI]]&lt;br /&gt;
* [[NVMe]]&lt;br /&gt;
* [[815TQ-563CB]]&lt;br /&gt;
* [[Infortrend ES DS]]&lt;br /&gt;
* [[Нагрузочное тестирование]]&lt;br /&gt;
* [[LGA4677]]&lt;br /&gt;
* [[QLogic QLE269x]]&lt;br /&gt;
* [[Broadcom P210P]]&lt;br /&gt;
* [[Бэкплейны SAS3 и foreign configuration]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=LGA4677&amp;diff=79</id>
		<title>LGA4677</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=LGA4677&amp;diff=79"/>
		<updated>2023-12-27T10:00:00Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;Процессоры Intel Sapphire Rapids (Xeon Scalable 4-го поколения) устанавливаются в разъем LGA4677. Так же, как и Ice Lake, процессоры крепятся к радиатору при помощи рамки, затем процессор с радиатором устанавливается в направляющие разъема.&lt;br /&gt;
&lt;br /&gt;
Существует три типа корпусов и соответствующих рамок:&lt;br /&gt;
* '''MCC''', рамка '''E1B'''. Процессоры до 32 ядер.&lt;br /&gt;
* '''XCC''', рамка '''E1A'''. Процессоры до 60 ядер, под крышкой расположено 4 кристалла.&lt;br /&gt;
* '''Max (HBM)''', рамка '''E1C'''. Процессоры до 56 ядер, под крышкой расположено 4 кристалла и дополнительная встроенная память (64 ГБ HBM2) — Xeon Max 9xxx.&lt;br /&gt;
&lt;br /&gt;
Маркировку можно найти на самой рамке, плюс E1B можно легко отличить по металлическим «ушам» для направляющих.&lt;br /&gt;
&lt;br /&gt;
&amp;lt;gallery&amp;gt;&lt;br /&gt;
4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Launch-SKU-List.jpg|Номенклатура процессоров Sapphire Rapids&lt;br /&gt;
LGA4677_cpu_carriers.png|Рамки для LGA4677&lt;br /&gt;
LGA4677_cpu_bottom.png|Процессоры, вид снизу&lt;br /&gt;
LGA4677_cpu_types.png|Корпуса MCC, XCC, Max. Расположение ключей&lt;br /&gt;
LGA4677_cpu_carriers_asmbly.png|Рамки с установленными процессорами&lt;br /&gt;
Intel-Vision-2022-Sapphire-Rapids-HBM-Top-2.jpg|Процессор Xeon Max со снятой крышкой&lt;br /&gt;
&amp;lt;/gallery&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9A%D0%B0%D0%B1%D0%B5%D0%BB%D0%B8_SFF-8643_-_4x_SATA_%2B_SGPIO&amp;diff=78</id>
		<title>Кабели SFF-8643 - 4x SATA + SGPIO</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9A%D0%B0%D0%B1%D0%B5%D0%BB%D0%B8_SFF-8643_-_4x_SATA_%2B_SGPIO&amp;diff=78"/>
		<updated>2023-12-15T14:07:09Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: /* Модификация кабелей ACD-SFF8643-SATASB-08M */&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Описание проблемы ==&lt;br /&gt;
Не работает SGPIO с некоторыми кабелями SAS. В частности, индикация (подсветка дисков).&lt;br /&gt;
&lt;br /&gt;
== Причина ==&lt;br /&gt;
Соответствие контактов, отвечающих за SGPIO между SFF-8643 и 8-контактным разъемом DuPont не стандартизировано. Цоколевка, работающая с бэкплейнами Supermicro выглядит так (вид контактами к себе):&lt;br /&gt;
&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
SFF-8643&lt;br /&gt;
&lt;br /&gt;
,-----------------,&lt;br /&gt;
|           1   5 |&lt;br /&gt;
|-----------|---| |&lt;br /&gt;
|           2   6 |&lt;br /&gt;
|                 |&lt;br /&gt;
|           3   7 |&lt;br /&gt;
|-----------|---| |&lt;br /&gt;
|           4   8 |&lt;br /&gt;
'-----------------'&lt;br /&gt;
&lt;br /&gt;
SGPIO&lt;br /&gt;
&lt;br /&gt;
5 6 7 8&lt;br /&gt;
1 2 3 4&lt;br /&gt;
^&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
== Модификация кабелей ACD-SFF8643-SATASB-08M ==&lt;br /&gt;
# Разрезать термоусадку.&lt;br /&gt;
# Пометить маркером первый провод двух 4-проводных шлейфов.&lt;br /&gt;
# Разобрать разъем, вставить контакты в следующей последовательности (изначальная последовательность 5678, 1234):&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
2 4 6 8&lt;br /&gt;
1 3 5 7&lt;br /&gt;
^&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
== Модификация кабелей Amphenol RHS36-3395 ==&lt;br /&gt;
# Снять ленту рядом с разъемом SGPIO.&lt;br /&gt;
# Пометить маркером первый провод 8-проводного шлейфа.&lt;br /&gt;
# Разобрать разъем, вставить контакты в следующей последовательности:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
7 3 4 8&lt;br /&gt;
6 2 5 1&lt;br /&gt;
^&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%91%D1%8D%D0%BA%D0%BF%D0%BB%D0%B5%D0%B9%D0%BD%D1%8B_SAS3_%D0%B8_foreign_configuration&amp;diff=77</id>
		<title>Бэкплейны SAS3 и foreign configuration</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%91%D1%8D%D0%BA%D0%BF%D0%BB%D0%B5%D0%B9%D0%BD%D1%8B_SAS3_%D0%B8_foreign_configuration&amp;diff=77"/>
		<updated>2023-08-30T10:39:19Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;&lt;br /&gt;
==Оборудование==&lt;br /&gt;
* Бэкплейны Supermicro SAS3 первого поколения (без поддержки NVMe): BPN-SAS3-826EL1/EL2, BPN-SAS3-836, BPN-SAS3-846. BPN-SAS3-216 не тестировался.&lt;br /&gt;
* Контроллеры SAS/SATA RAID: Broadcom 9341, 9440, 9460. Серия 95xx не тестировалась.&lt;br /&gt;
&lt;br /&gt;
==Проблема==&lt;br /&gt;
Из-за долгого старта экспандера контроллер теряет конфигурацию (конфигурация переходит в foreign).&lt;br /&gt;
&lt;br /&gt;
==Воспроизведение==&lt;br /&gt;
# Создать один или несколько VD.&lt;br /&gt;
# Выключить/включить питание. Проблема не проявляется после отключения питания от БП (из-за запуска BMC успевает загрузиться экспандер).&lt;br /&gt;
# Через средства управления контроллером (storcli, LSA, Hii) можно увидеть исчезновение VD.&lt;br /&gt;
# VD можно вернуть через импорт foreign configuration.&lt;br /&gt;
&lt;br /&gt;
==Устранение проблемы==&lt;br /&gt;
* Последняя серия прошивок для этих бэкплейнов — 66.16.xx. Она не устраняет эту проблему.&lt;br /&gt;
* Единственное решение — использование новых экспандеров (BPN-SAS3-826EL1-N4, BPN-SAS3-846EL1-N8).&lt;br /&gt;
* Компромиссный вариант — использовать контроллеры 9361 или аналогичные на базе RoC 3108.&lt;br /&gt;
* Программный вариант. Загрузка ОС не с дисковой группы, подключенной к экспандеру (пара дисков на задней корзине или на другом контроллере, M.2, SATA DOM). В автозагрузку добавить импорт конфигурации:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
storcli /c0/fall import&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&amp;lt;gallery&amp;gt;&lt;br /&gt;
MR Hii foreign import.jpg|Диски определились, VD нет&lt;br /&gt;
MR Hii foreign import-1.jpg|View foreign configuration&lt;br /&gt;
MR Hii foreign import-2.jpg|Preview foreign configuration&lt;br /&gt;
MR Hii foreign import-3.jpg|Import foreign configuration&lt;br /&gt;
MR Hii foreign import-4.jpg|Confirm&lt;br /&gt;
MR Hii foreign import-5.jpg|VD появились&lt;br /&gt;
&amp;lt;/gallery&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-5.jpg&amp;diff=76</id>
		<title>Файл:MR Hii foreign import-5.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-5.jpg&amp;diff=76"/>
		<updated>2023-08-30T10:36:34Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: 9440, импорт конфигурации после отвала дисков&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
9440, импорт конфигурации после отвала дисков&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-4.jpg&amp;diff=75</id>
		<title>Файл:MR Hii foreign import-4.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-4.jpg&amp;diff=75"/>
		<updated>2023-08-30T10:36:26Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: 9440, импорт конфигурации после отвала дисков&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
9440, импорт конфигурации после отвала дисков&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-3.jpg&amp;diff=74</id>
		<title>Файл:MR Hii foreign import-3.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-3.jpg&amp;diff=74"/>
		<updated>2023-08-30T10:36:18Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: 9440, импорт конфигурации после отвала дисков&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
9440, импорт конфигурации после отвала дисков&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-2.jpg&amp;diff=73</id>
		<title>Файл:MR Hii foreign import-2.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-2.jpg&amp;diff=73"/>
		<updated>2023-08-30T10:36:07Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: 9440, импорт конфигурации после отвала дисков&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
9440, импорт конфигурации после отвала дисков&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-1.jpg&amp;diff=72</id>
		<title>Файл:MR Hii foreign import-1.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import-1.jpg&amp;diff=72"/>
		<updated>2023-08-30T10:35:55Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: 9440, импорт конфигурации после отвала дисков&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
9440, импорт конфигурации после отвала дисков&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import.jpg&amp;diff=71</id>
		<title>Файл:MR Hii foreign import.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:MR_Hii_foreign_import.jpg&amp;diff=71"/>
		<updated>2023-08-30T10:35:44Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: 9440, импорт конфигурации после отвала дисков&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
9440, импорт конфигурации после отвала дисков&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%91%D1%8D%D0%BA%D0%BF%D0%BB%D0%B5%D0%B9%D0%BD%D1%8B_SAS3_%D0%B8_foreign_configuration&amp;diff=70</id>
		<title>Бэкплейны SAS3 и foreign configuration</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%91%D1%8D%D0%BA%D0%BF%D0%BB%D0%B5%D0%B9%D0%BD%D1%8B_SAS3_%D0%B8_foreign_configuration&amp;diff=70"/>
		<updated>2023-08-30T10:21:07Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Новая страница: « ==Оборудование== * Бэкплейны Supermicro SAS3 первого поколения (без поддержки NVMe): BPN-SAS3-826EL1/EL2, BPN-SAS3-836, BPN-SAS3-846. BPN-SAS3-216 не тестировался. * Контроллеры SAS/SATA RAID: Broadcom 9341, 9440, 9460. Серия 95xx не тестировалась.  ==Проблема== Из-за долгого старта экспандера контроллер теряет к...»&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;&lt;br /&gt;
==Оборудование==&lt;br /&gt;
* Бэкплейны Supermicro SAS3 первого поколения (без поддержки NVMe): BPN-SAS3-826EL1/EL2, BPN-SAS3-836, BPN-SAS3-846. BPN-SAS3-216 не тестировался.&lt;br /&gt;
* Контроллеры SAS/SATA RAID: Broadcom 9341, 9440, 9460. Серия 95xx не тестировалась.&lt;br /&gt;
&lt;br /&gt;
==Проблема==&lt;br /&gt;
Из-за долгого старта экспандера контроллер теряет конфигурацию (конфигурация переходит в foreign).&lt;br /&gt;
&lt;br /&gt;
==Воспроизведение==&lt;br /&gt;
# Создать один или несколько VD.&lt;br /&gt;
# Выключить/включить питание. Проблема не проявляется после отключения питания от БП (из-за запуска BMC успевает загрузиться экспандер).&lt;br /&gt;
# Через средства управления контроллером (storcli, LSA, Hii) можно увидеть исчезновение VD.&lt;br /&gt;
# VD можно вернуть через импорт foreign configuration.&lt;br /&gt;
&lt;br /&gt;
==Устранение проблемы==&lt;br /&gt;
* Последняя серия прошивок для этих бэкплейнов — 66.16.xx. Она не устраняет эту проблему.&lt;br /&gt;
* Единственное решение — использование новых экспандеров (BPN-SAS3-826EL1-N4, BPN-SAS3-846EL1-N8).&lt;br /&gt;
* Компромиссный вариант — использовать контроллеры 9361 или аналогичные на базе RoC 3108.&lt;br /&gt;
* Программный вариант. Загрузка ОС не с дисковой группы, подключенной к экспандеру (пара дисков на задней корзине или на другом контроллере, M.2, SATA DOM). В автозагрузку добавить импорт конфигурации:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
storcli /c0/fall import&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=69</id>
		<title>Заглавная страница</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=69"/>
		<updated>2023-08-30T09:41:26Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [[Контроллеры SAS]]&lt;br /&gt;
* [[Кабели SFF-8643 - 4x SATA + SGPIO]]&lt;br /&gt;
* [[IPMI]]&lt;br /&gt;
* [[NVMe]]&lt;br /&gt;
* [[815TQ-563CB]]&lt;br /&gt;
* [[Infortrend ES DS]]&lt;br /&gt;
* [[Нагрузочное тестирование]]&lt;br /&gt;
* [[LGA4677]]&lt;br /&gt;
* [[QLogic QLE269x]]&lt;br /&gt;
* [[Бэкплейны SAS3 и foreign configuration]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=QLogic_QLE269x&amp;diff=68</id>
		<title>QLogic QLE269x</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=QLogic_QLE269x&amp;diff=68"/>
		<updated>2023-08-29T09:57:58Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;QLogic QLE2690, QLE2692 — 32 Гб FC HBA. &lt;br /&gt;
&lt;br /&gt;
Так же, как и с моделями 16 Гб (QLE267x), существует проблема с прошивками, связанная, скорее всего, с продажей OEM-моделей под видом обычных QLogic.&lt;br /&gt;
&lt;br /&gt;
Обновление прошивки может понадобиться для использования HBA в режиме target и/или для обновления функционала (FC-NVMe и т. п.)&lt;br /&gt;
&lt;br /&gt;
При попытке прошивки через EFlash одного из «неправильных» QLE2692:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
UPDATE.NSH&amp;gt;&lt;br /&gt;
 &lt;br /&gt;
26xx/27xx Flash Update Tool&lt;br /&gt;
 &lt;br /&gt;
This tool will update the HBA Flash on x64 systems.&lt;br /&gt;
 &lt;br /&gt;
Flashing Multiboot Image ...&lt;br /&gt;
 &lt;br /&gt;
EFlash Version: 1.18&lt;br /&gt;
Adapter: [0] - QLogic 2600/2700 at PciRoot(0x0)/Pci(0x3,0x0)/Pci(0x0,0x0)&lt;br /&gt;
&lt;br /&gt;
Old MultiBoot Version: 01.47.04&lt;br /&gt;
New MultiBoot Version: 10.02.08&lt;br /&gt;
&lt;br /&gt;
Update failed.&lt;br /&gt;
&lt;br /&gt;
MBI update failed!&lt;br /&gt;
&lt;br /&gt;
HBA Update Complete.&lt;br /&gt;
 &lt;br /&gt;
Please reboot the system for the changes to take effect.&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Версии FW:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
&amp;gt;EFlash -a 1 -s FLASH_VER&lt;br /&gt;
&lt;br /&gt;
EFlash Version: 1.18&lt;br /&gt;
&lt;br /&gt;
Adapter: 1&lt;br /&gt;
&lt;br /&gt;
Flash Version Info:&lt;br /&gt;
&lt;br /&gt;
MultiBoot:  1.47.04&lt;br /&gt;
BIOS:       3.62(PRI),  0.00(SEC)&lt;br /&gt;
UEFI:       7.31(PRI),  0.00(SEC)&lt;br /&gt;
FCode:      0.00(PRI),  0.00(SEC)&lt;br /&gt;
RISC FW:    9.07.00(PRI), 255.255.255(SEC)&lt;br /&gt;
&lt;br /&gt;
Active Image Set: Primary&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Решение: использовать Broadcom Emulex там, где нет привязки именно к QLogic (например, Open-E):&lt;br /&gt;
* 16 Гб: LPe31002&lt;br /&gt;
* 32 Гб: LPe32002&lt;br /&gt;
&lt;br /&gt;
[[Category:Fibre Channel]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=QLogic_QLE269x&amp;diff=67</id>
		<title>QLogic QLE269x</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=QLogic_QLE269x&amp;diff=67"/>
		<updated>2023-08-29T09:56:23Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Новая страница: «QLogic QLE2690, QLE2692 — 32 Гб FC HBA.   Так же, как и с моделями 16 Гб (QLE267x), существует проблема с прошивками, связанная, скорее всего, с продажей OEM-моделей под видом обычных QLogic.  При попытке прошивки через EFlash одного из «неправильных» QLE2692: &amp;lt;pre&amp;gt; UPDATE.NSH&amp;gt;   26xx/27xx Flash Update Tool...»&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;QLogic QLE2690, QLE2692 — 32 Гб FC HBA. &lt;br /&gt;
&lt;br /&gt;
Так же, как и с моделями 16 Гб (QLE267x), существует проблема с прошивками, связанная, скорее всего, с продажей OEM-моделей под видом обычных QLogic.&lt;br /&gt;
&lt;br /&gt;
При попытке прошивки через EFlash одного из «неправильных» QLE2692:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
UPDATE.NSH&amp;gt;&lt;br /&gt;
 &lt;br /&gt;
26xx/27xx Flash Update Tool&lt;br /&gt;
 &lt;br /&gt;
This tool will update the HBA Flash on x64 systems.&lt;br /&gt;
 &lt;br /&gt;
Flashing Multiboot Image ...&lt;br /&gt;
 &lt;br /&gt;
EFlash Version: 1.18&lt;br /&gt;
Adapter: [0] - QLogic 2600/2700 at PciRoot(0x0)/Pci(0x3,0x0)/Pci(0x0,0x0)&lt;br /&gt;
&lt;br /&gt;
Old MultiBoot Version: 01.47.04&lt;br /&gt;
New MultiBoot Version: 10.02.08&lt;br /&gt;
&lt;br /&gt;
Update failed.&lt;br /&gt;
&lt;br /&gt;
MBI update failed!&lt;br /&gt;
&lt;br /&gt;
HBA Update Complete.&lt;br /&gt;
 &lt;br /&gt;
Please reboot the system for the changes to take effect.&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Версии FW:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
&amp;gt;EFlash -a 1 -s FLASH_VER&lt;br /&gt;
&lt;br /&gt;
EFlash Version: 1.18&lt;br /&gt;
&lt;br /&gt;
Adapter: 1&lt;br /&gt;
&lt;br /&gt;
Flash Version Info:&lt;br /&gt;
&lt;br /&gt;
MultiBoot:  1.47.04&lt;br /&gt;
BIOS:       3.62(PRI),  0.00(SEC)&lt;br /&gt;
UEFI:       7.31(PRI),  0.00(SEC)&lt;br /&gt;
FCode:      0.00(PRI),  0.00(SEC)&lt;br /&gt;
RISC FW:    9.07.00(PRI), 255.255.255(SEC)&lt;br /&gt;
&lt;br /&gt;
Active Image Set: Primary&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Решение: использовать Broadcom Emulex там, где нет привязки именно к QLogic (например, Open-E):&lt;br /&gt;
* 16 Гб: LPe31002&lt;br /&gt;
* 32 Гб: LPe32002&lt;br /&gt;
&lt;br /&gt;
[[Category:Fibre Channel]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=66</id>
		<title>Заглавная страница</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=66"/>
		<updated>2023-08-29T09:49:40Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [[Контроллеры SAS]]&lt;br /&gt;
* [[Кабели SFF-8643 - 4x SATA + SGPIO]]&lt;br /&gt;
* [[IPMI]]&lt;br /&gt;
* [[NVMe]]&lt;br /&gt;
* [[815TQ-563CB]]&lt;br /&gt;
* [[Infortrend ES DS]]&lt;br /&gt;
* [[Нагрузочное тестирование]]&lt;br /&gt;
* [[LGA4677]]&lt;br /&gt;
* [[QLogic QLE269x]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=LGA4677&amp;diff=65</id>
		<title>LGA4677</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=LGA4677&amp;diff=65"/>
		<updated>2023-08-21T12:14:12Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;Процессоры Intel Sapphire Rapids (Xeon Scalable 4-го поколения) устанавливаются в разъем LGA4677. Так же, как и Ice Lake, процессоры крепятся к радиатору при помощи рамки, затем процессор с радиатором устанавливается в направляющие разъема.&lt;br /&gt;
&lt;br /&gt;
Существует три типа корпусов и соответствующих рамок:&lt;br /&gt;
* '''MCC''', рамка '''E1B'''. Процессоры до 32 ядер.&lt;br /&gt;
* '''XCC''', рамка '''E1A'''. Процессоры до 60 ядер, под крышкой расположено 4 кристалла.&lt;br /&gt;
* '''Max (HBM)''', рамка '''E1C'''. Процессоры до 56 ядер, под крышкой расположено 4 кристалла и дополнительная встроенная память (64 ГБ HBM2) — Xeon Max 9xxx.&lt;br /&gt;
&lt;br /&gt;
Маркировка можно найти на самой рамке, плюс E1B можно легко отличить по металлическим «ушам» для направляющих.&lt;br /&gt;
&lt;br /&gt;
&amp;lt;gallery&amp;gt;&lt;br /&gt;
4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Launch-SKU-List.jpg|Номенклатура процессоров Sapphire Rapids&lt;br /&gt;
LGA4677_cpu_carriers.png|Рамки для LGA4677&lt;br /&gt;
LGA4677_cpu_bottom.png|Процессоры, вид снизу&lt;br /&gt;
LGA4677_cpu_types.png|Корпуса MCC, XCC, Max. Расположение ключей&lt;br /&gt;
LGA4677_cpu_carriers_asmbly.png|Рамки с установленными процессорами&lt;br /&gt;
Intel-Vision-2022-Sapphire-Rapids-HBM-Top-2.jpg|Процессор Xeon Max со снятой крышкой&lt;br /&gt;
&amp;lt;/gallery&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=LGA4677&amp;diff=64</id>
		<title>LGA4677</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=LGA4677&amp;diff=64"/>
		<updated>2023-08-21T12:05:36Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;Процессоры Intel Sapphire Rapids (Xeon Scalable 4-го поколения) устанавливаются в разъем LGA4677. Так же, как и Ice Lake, процессоры крепятся к радиатору при помощи рамки, затем процессор с радиатором устанавливается в направляющие разъема.&lt;br /&gt;
&lt;br /&gt;
Существует три типа корпусов и соответствующих рамок:&lt;br /&gt;
* '''MCC''', рамка '''E1B'''. Процессоры до 32 ядер.&lt;br /&gt;
* '''XCC''', рамка '''E1A'''. Процессоры до 60 ядер, под крышкой расположено 4 кристалла.&lt;br /&gt;
* '''Max (HBM)''', рамка '''E1C'''. Процессоры до 56 ядер, под крышкой расположено 4 кристалла и дополнительная встроенная память (64 МБ HBM2) — Xeon Max 9xxx.&lt;br /&gt;
&lt;br /&gt;
Маркировка можно найти на самой рамке, плюс E1B можно легко отличить по металлическим «ушам» для направляющих.&lt;br /&gt;
&lt;br /&gt;
&amp;lt;gallery&amp;gt;&lt;br /&gt;
4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Launch-SKU-List.jpg|Номенклатура процессоров Sapphire Rapids&lt;br /&gt;
LGA4677_cpu_carriers.png|Рамки для LGA4677&lt;br /&gt;
LGA4677_cpu_bottom.png|Процессоры, вид снизу&lt;br /&gt;
LGA4677_cpu_types.png|Корпуса MCC, XCC, Max. Расположение ключей&lt;br /&gt;
LGA4677_cpu_carriers_asmbly.png|Рамки с установленными процессорами&lt;br /&gt;
Intel-Vision-2022-Sapphire-Rapids-HBM-Top-2.jpg|Процессор Xeon Max со снятой крышкой&lt;br /&gt;
&amp;lt;/gallery&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=LGA4677&amp;diff=63</id>
		<title>LGA4677</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=LGA4677&amp;diff=63"/>
		<updated>2023-08-21T09:09:03Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Новая страница: «Процессоры Intel Sapphire Rapids (Xeon Scalable 4-го поколения) устанавливаются в разъем LGA4677. Так же, как и Ice Lake, процессоры крепятся к радиатору при помощи рамки, затем процессор с радиатором устанавливается в направляющие разъема.  Существует три типа корпусов и соот...»&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;Процессоры Intel Sapphire Rapids (Xeon Scalable 4-го поколения) устанавливаются в разъем LGA4677. Так же, как и Ice Lake, процессоры крепятся к радиатору при помощи рамки, затем процессор с радиатором устанавливается в направляющие разъема.&lt;br /&gt;
&lt;br /&gt;
Существует три типа корпусов и соответствующих рамок:&lt;br /&gt;
* '''MCC''', рамка '''E1B'''. Процессоры до 32 ядер (исключение — 8452Y, 36 ядер).&lt;br /&gt;
* '''XCC''', рамка '''E1A'''. Процессоры до 60 ядер, под крышкой расположено 4 кристалла.&lt;br /&gt;
* '''Max (HBM)''', рамка '''E1C'''. Процессоры до 56 ядер, под крышкой расположено 4 кристалла и дополнительная встроенная память (64 МБ HBM2) — Xeon Max 9xxx.&lt;br /&gt;
&lt;br /&gt;
Маркировка можно найти на самой рамке, плюс E1B можно легко отличить по металлическим «ушам» для направляющих.&lt;br /&gt;
&lt;br /&gt;
&amp;lt;gallery&amp;gt;&lt;br /&gt;
4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Launch-SKU-List.jpg|Номенклатура процессоров Sapphire Rapids&lt;br /&gt;
LGA4677_cpu_carriers.png|Рамки для LGA4677&lt;br /&gt;
LGA4677_cpu_bottom.png|Процессоры, вид снизу&lt;br /&gt;
LGA4677_cpu_types.png|Корпуса MCC, XCC, Max. Расположение ключей&lt;br /&gt;
LGA4677_cpu_carriers_asmbly.png|Рамки с установленными процессорами&lt;br /&gt;
Intel-Vision-2022-Sapphire-Rapids-HBM-Top-2.jpg|Процессор Xeon Max со снятой крышкой&lt;br /&gt;
&amp;lt;/gallery&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:E1B_frame.jpg&amp;diff=62</id>
		<title>Файл:E1B frame.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:E1B_frame.jpg&amp;diff=62"/>
		<updated>2023-08-21T09:04:05Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Рамка E1B&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Рамка E1B&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Launch-SKU-List.jpg&amp;diff=61</id>
		<title>Файл:4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Launch-SKU-List.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Launch-SKU-List.jpg&amp;diff=61"/>
		<updated>2023-08-21T08:37:25Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Sapphire Rapids SKU 2&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Sapphire Rapids SKU 2&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:Intel-Sapphire-Rapids-Launch-SKU-List.jpg&amp;diff=60</id>
		<title>Файл:Intel-Sapphire-Rapids-Launch-SKU-List.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:Intel-Sapphire-Rapids-Launch-SKU-List.jpg&amp;diff=60"/>
		<updated>2023-08-21T08:36:35Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Sapphire Rapids партномера&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Sapphire Rapids партномера&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_types.png&amp;diff=59</id>
		<title>Файл:LGA4677 cpu types.png</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_types.png&amp;diff=59"/>
		<updated>2023-08-21T08:32:41Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Процессоры Sapphire Rapids&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Процессоры Sapphire Rapids&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_carriers2.png&amp;diff=58</id>
		<title>Файл:LGA4677 cpu carriers2.png</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_carriers2.png&amp;diff=58"/>
		<updated>2023-08-21T08:32:26Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Рамки для процессоров Sapphire Rapids&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Рамки для процессоров Sapphire Rapids&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_carriers_asmbly.png&amp;diff=57</id>
		<title>Файл:LGA4677 cpu carriers asmbly.png</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_carriers_asmbly.png&amp;diff=57"/>
		<updated>2023-08-21T08:32:06Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Рамки с установленными процессорами Sapphire Rapids&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Рамки с установленными процессорами Sapphire Rapids&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_carriers.png&amp;diff=56</id>
		<title>Файл:LGA4677 cpu carriers.png</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_carriers.png&amp;diff=56"/>
		<updated>2023-08-21T08:31:37Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Рамки для процессоров Sapphire Rapids&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Рамки для процессоров Sapphire Rapids&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_bottom.png&amp;diff=55</id>
		<title>Файл:LGA4677 cpu bottom.png</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:LGA4677_cpu_bottom.png&amp;diff=55"/>
		<updated>2023-08-21T08:31:23Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Типы процессоров Sapphire Rapids, вид снизу&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Типы процессоров Sapphire Rapids, вид снизу&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:Intel-Vision-2022-Sapphire-Rapids-HBM-Top-2.jpg&amp;diff=54</id>
		<title>Файл:Intel-Vision-2022-Sapphire-Rapids-HBM-Top-2.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:Intel-Vision-2022-Sapphire-Rapids-HBM-Top-2.jpg&amp;diff=54"/>
		<updated>2023-08-21T08:31:00Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Процессор Sapphire Rapids Xeon Max со снятой крышкой теплораспределителя&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Процессор Sapphire Rapids Xeon Max со снятой крышкой теплораспределителя&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Die-Packages.jpg&amp;diff=53</id>
		<title>Файл:4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Die-Packages.jpg</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%A4%D0%B0%D0%B9%D0%BB:4th-Gen-Intel-Xeon-Scalable-Sapphire-Rapids-Die-Packages.jpg&amp;diff=53"/>
		<updated>2023-08-21T08:30:25Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: Типы кристаллов Sapphire Rapids&lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== Краткое описание ==&lt;br /&gt;
Типы кристаллов Sapphire Rapids&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=52</id>
		<title>Заглавная страница</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%97%D0%B0%D0%B3%D0%BB%D0%B0%D0%B2%D0%BD%D0%B0%D1%8F_%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0&amp;diff=52"/>
		<updated>2023-08-21T08:29:15Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;* [[Контроллеры SAS]]&lt;br /&gt;
* [[Кабели SFF-8643 - 4x SATA + SGPIO]]&lt;br /&gt;
* [[IPMI]]&lt;br /&gt;
* [[NVMe]]&lt;br /&gt;
* [[815TQ-563CB]]&lt;br /&gt;
* [[Infortrend ES DS]]&lt;br /&gt;
* [[Нагрузочное тестирование]]&lt;br /&gt;
* [[LGA4677]]&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9D%D0%B0%D0%B3%D1%80%D1%83%D0%B7%D0%BE%D1%87%D0%BD%D0%BE%D0%B5_%D1%82%D0%B5%D1%81%D1%82%D0%B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5&amp;diff=51</id>
		<title>Нагрузочное тестирование</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9D%D0%B0%D0%B3%D1%80%D1%83%D0%B7%D0%BE%D1%87%D0%BD%D0%BE%D0%B5_%D1%82%D0%B5%D1%81%D1%82%D0%B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5&amp;diff=51"/>
		<updated>2023-08-16T09:15:29Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== CPU ==&lt;br /&gt;
== Память ==&lt;br /&gt;
== Дисковая подсистема ==&lt;br /&gt;
== GPU ==&lt;br /&gt;
gpu-burn под Arch Linux.&lt;br /&gt;
&lt;br /&gt;
Установить пакеты nvidia, opencl-nvidia, cuda:&lt;br /&gt;
&lt;br /&gt;
&amp;lt;code&amp;gt;sudo pacman -S nvidia opencl-nvidia cuda&amp;lt;/code&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Установить [https://aur.archlinux.org/packages/gpu-burn-git gpu-burn-git] из AUR:&lt;br /&gt;
&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
mkdir aur&lt;br /&gt;
cd aur&lt;br /&gt;
git clone https://aur.archlinux.org/gpu-burn-git.git&lt;br /&gt;
cd gpu-burn-git&lt;br /&gt;
makepkg -si&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Используем nvidia-smi для просмотра температур, но сам gpu-burn тоже показывает температуры:&lt;br /&gt;
&lt;br /&gt;
Пример (с использованием tensor ядер, 600 секунд)&lt;br /&gt;
&lt;br /&gt;
&amp;lt;code&amp;gt;gpu_burn -tc 600&amp;lt;/code&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Вывод температур в нижней строчке (8 шт. RTX A6000):&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
errors: 0 - 0 - 0 - 0 - 0 - 0 - 0 - 0   temps: 78 C - 70 C - 76 C - 70 C - 78 C - 70 C - 79 C - 74 C&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Вывод nvidia-smi:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
 nvidia-smi&lt;br /&gt;
Wed Aug 16 09:11:32 2023&lt;br /&gt;
+---------------------------------------------------------------------------------------+&lt;br /&gt;
| NVIDIA-SMI 535.98                 Driver Version: 535.98       CUDA Version: 12.2     |&lt;br /&gt;
|-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
| GPU  Name                 Persistence-M | Bus-Id        Disp.A | Volatile Uncorr. ECC |&lt;br /&gt;
| Fan  Temp   Perf          Pwr:Usage/Cap |         Memory-Usage | GPU-Util  Compute M. |&lt;br /&gt;
|                                         |                      |               MIG M. |&lt;br /&gt;
|=========================================+======================+======================|&lt;br /&gt;
|   0  NVIDIA RTX A6000               Off | 00000000:01:00.0 Off |                  Off |&lt;br /&gt;
| 30%   60C    P2             297W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   1  NVIDIA RTX A6000               Off | 00000000:25:00.0 Off |                  Off |&lt;br /&gt;
| 30%   57C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   2  NVIDIA RTX A6000               Off | 00000000:41:00.0 Off |                  Off |&lt;br /&gt;
| 30%   59C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   3  NVIDIA RTX A6000               Off | 00000000:61:00.0 Off |                  Off |&lt;br /&gt;
| 30%   55C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   4  NVIDIA RTX A6000               Off | 00000000:81:00.0 Off |                  Off |&lt;br /&gt;
| 30%   60C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   5  NVIDIA RTX A6000               Off | 00000000:A1:00.0 Off |                  Off |&lt;br /&gt;
| 30%   56C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   6  NVIDIA RTX A6000               Off | 00000000:C1:00.0 Off |                  Off |&lt;br /&gt;
| 30%   59C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   7  NVIDIA RTX A6000               Off | 00000000:E1:00.0 Off |                  Off |&lt;br /&gt;
| 30%   59C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
&lt;br /&gt;
+---------------------------------------------------------------------------------------+&lt;br /&gt;
| Processes:                                                                            |&lt;br /&gt;
|  GPU   GI   CI        PID   Type   Process name                            GPU Memory |&lt;br /&gt;
|        ID   ID                                                             Usage      |&lt;br /&gt;
|=======================================================================================|&lt;br /&gt;
|    0   N/A  N/A      5172      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    1   N/A  N/A      5226      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    2   N/A  N/A      5227      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    3   N/A  N/A      5228      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    4   N/A  N/A      5229      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    5   N/A  N/A      5230      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    6   N/A  N/A      5231      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    7   N/A  N/A      5232      C   gpu_burn                                  43792MiB |&lt;br /&gt;
+---------------------------------------------------------------------------------------+&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9D%D0%B0%D0%B3%D1%80%D1%83%D0%B7%D0%BE%D1%87%D0%BD%D0%BE%D0%B5_%D1%82%D0%B5%D1%81%D1%82%D0%B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5&amp;diff=50</id>
		<title>Нагрузочное тестирование</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9D%D0%B0%D0%B3%D1%80%D1%83%D0%B7%D0%BE%D1%87%D0%BD%D0%BE%D0%B5_%D1%82%D0%B5%D1%81%D1%82%D0%B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5&amp;diff=50"/>
		<updated>2023-08-16T09:12:27Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== CPU ==&lt;br /&gt;
== Память ==&lt;br /&gt;
== Дисковая подсистема ==&lt;br /&gt;
== GPU ==&lt;br /&gt;
gpu-burn под Arch Linux.&lt;br /&gt;
&lt;br /&gt;
Установить пакеты nvidia, opencl-nvidia, cuda:&lt;br /&gt;
&lt;br /&gt;
&amp;lt;code&amp;gt;sudo pacman -S nvidia opencl-nvidia cuda&amp;lt;/code&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Установить [https://aur.archlinux.org/packages/gpu-burn-git gpu-burn-git] из AUR:&lt;br /&gt;
&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
mkdir aur&lt;br /&gt;
cd aur&lt;br /&gt;
git clone https://aur.archlinux.org/gpu-burn-git.git&lt;br /&gt;
cd gpu-burn-git&lt;br /&gt;
makepkg -si&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Используем nvidia-smi для просмотра температур, но сам gpu-burn тоже показывает температуры:&lt;br /&gt;
&lt;br /&gt;
Пример (с использованием tensor ядер, 600 секунд)&lt;br /&gt;
&lt;br /&gt;
&amp;lt;code&amp;gt;gpu_burn -tc 600&amp;lt;/code&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Вывод nvidia-smi:&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
 nvidia-smi&lt;br /&gt;
Wed Aug 16 09:11:32 2023&lt;br /&gt;
+---------------------------------------------------------------------------------------+&lt;br /&gt;
| NVIDIA-SMI 535.98                 Driver Version: 535.98       CUDA Version: 12.2     |&lt;br /&gt;
|-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
| GPU  Name                 Persistence-M | Bus-Id        Disp.A | Volatile Uncorr. ECC |&lt;br /&gt;
| Fan  Temp   Perf          Pwr:Usage/Cap |         Memory-Usage | GPU-Util  Compute M. |&lt;br /&gt;
|                                         |                      |               MIG M. |&lt;br /&gt;
|=========================================+======================+======================|&lt;br /&gt;
|   0  NVIDIA RTX A6000               Off | 00000000:01:00.0 Off |                  Off |&lt;br /&gt;
| 30%   60C    P2             297W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   1  NVIDIA RTX A6000               Off | 00000000:25:00.0 Off |                  Off |&lt;br /&gt;
| 30%   57C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   2  NVIDIA RTX A6000               Off | 00000000:41:00.0 Off |                  Off |&lt;br /&gt;
| 30%   59C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   3  NVIDIA RTX A6000               Off | 00000000:61:00.0 Off |                  Off |&lt;br /&gt;
| 30%   55C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   4  NVIDIA RTX A6000               Off | 00000000:81:00.0 Off |                  Off |&lt;br /&gt;
| 30%   60C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   5  NVIDIA RTX A6000               Off | 00000000:A1:00.0 Off |                  Off |&lt;br /&gt;
| 30%   56C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   6  NVIDIA RTX A6000               Off | 00000000:C1:00.0 Off |                  Off |&lt;br /&gt;
| 30%   59C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
|   7  NVIDIA RTX A6000               Off | 00000000:E1:00.0 Off |                  Off |&lt;br /&gt;
| 30%   59C    P2             299W / 300W |  43800MiB / 49140MiB |    100%      Default |&lt;br /&gt;
|                                         |                      |                  N/A |&lt;br /&gt;
+-----------------------------------------+----------------------+----------------------+&lt;br /&gt;
&lt;br /&gt;
+---------------------------------------------------------------------------------------+&lt;br /&gt;
| Processes:                                                                            |&lt;br /&gt;
|  GPU   GI   CI        PID   Type   Process name                            GPU Memory |&lt;br /&gt;
|        ID   ID                                                             Usage      |&lt;br /&gt;
|=======================================================================================|&lt;br /&gt;
|    0   N/A  N/A      5172      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    1   N/A  N/A      5226      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    2   N/A  N/A      5227      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    3   N/A  N/A      5228      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    4   N/A  N/A      5229      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    5   N/A  N/A      5230      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    6   N/A  N/A      5231      C   gpu_burn                                  43792MiB |&lt;br /&gt;
|    7   N/A  N/A      5232      C   gpu_burn                                  43792MiB |&lt;br /&gt;
+---------------------------------------------------------------------------------------+&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
	<entry>
		<id>https://kb.truesystem.ru/index.php?title=%D0%9D%D0%B0%D0%B3%D1%80%D1%83%D0%B7%D0%BE%D1%87%D0%BD%D0%BE%D0%B5_%D1%82%D0%B5%D1%81%D1%82%D0%B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5&amp;diff=49</id>
		<title>Нагрузочное тестирование</title>
		<link rel="alternate" type="text/html" href="https://kb.truesystem.ru/index.php?title=%D0%9D%D0%B0%D0%B3%D1%80%D1%83%D0%B7%D0%BE%D1%87%D0%BD%D0%BE%D0%B5_%D1%82%D0%B5%D1%81%D1%82%D0%B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5&amp;diff=49"/>
		<updated>2023-08-15T13:16:35Z</updated>

		<summary type="html">&lt;p&gt;NosachevD: &lt;/p&gt;
&lt;hr /&gt;
&lt;div&gt;== CPU ==&lt;br /&gt;
== Память ==&lt;br /&gt;
== Дисковая подсистема ==&lt;br /&gt;
== GPU ==&lt;br /&gt;
gpu-burn под Arch Linux.&lt;br /&gt;
&lt;br /&gt;
Установить пакеты nvidia, opencl-nvidia, cuda:&lt;br /&gt;
&lt;br /&gt;
&amp;lt;code&amp;gt;sudo pacman -S nvidia opencl-nvidia cuda&amp;lt;/code&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Установить [https://aur.archlinux.org/packages/gpu-burn-git gpu-burn-git] из AUR:&lt;br /&gt;
&lt;br /&gt;
&amp;lt;pre&amp;gt;&lt;br /&gt;
mkdir aur&lt;br /&gt;
cd aur&lt;br /&gt;
git clone https://aur.archlinux.org/gpu-burn-git.git&lt;br /&gt;
cd gpu-burn-git&lt;br /&gt;
makepkg -si&lt;br /&gt;
&amp;lt;/pre&amp;gt;&lt;br /&gt;
&lt;br /&gt;
Используем nvidia-smi для просмотра температур, но сам gpu-burn тоже показывает температуры:&lt;br /&gt;
&lt;br /&gt;
Пример (с использованием tensor ядер, 600 секунд)&lt;br /&gt;
&lt;br /&gt;
&amp;lt;code&amp;gt;gpu-burn -tc 600&amp;lt;/code&amp;gt;&lt;/div&gt;</summary>
		<author><name>NosachevD</name></author>
	</entry>
</feed>