docs/lab/testbeds_sm_icx_hw_bios_cfg.md

   1 # SuperMicro Icelake Servers - HW and BIOS Configuration
   2
   3 1. [Linux lscpu](#linux-lscpu)
   4 1. [Linux dmidecode](#dmidecode)
   5 1. [Linux dmidecode memory](#linux-dmidecode-memory)
   6 1. [Xeon ICX Server BIOS Configuration](#xeon-icx-server-bios-configuration)
   7    1. [Boot Feature](#boot-feature)
   8    1. [CPU Configuration](#cpu-configuration)
   9       1. [Advanced Power Management Configuration](#advanced-power-management-configuration)
  10          1. [CPU P State Control](#cpu-p-state-control)
  11          1. [Hardware PM State Control](#hardware-pm-state-control)
  12          1. [CPU C State Control](#cpu-c-state-control)
  13          1. [Package C State Control](#package-c-state-control)
  14          1. [CPU T State Control](#cpu-t-state-control)
  15       1. [Chipset Configuration](#chipset-configuration)
  16          1. [North Bridge](#north-bridge)
  17          1. [UPI Configuration](#upi-configuration)
  18          1. [Memory Configuration](#memory-configuration)
  19          1. [IIO Configuration](#iio-configuration)
  20          1. [CPU1 Configuration](#cpu1-configuration)
  21          1. [CPU2 Configuration](#cpu2-configuration)
  22       1. [South Bridge](#south-bridge)
  23    1. [PCIe/PCI/PnP Configuration](#pciepcipnp-configuration)
  24    1. [ACPI Settings](#acpi-settings)
  25 1. [Xeon ICX Server Firmware Inventory](#xeon-icx-server-firmware-inventory)
  26
  27 ## Linux lscpu
  28
  29 ```
  30 $ lscpu
  31 Architecture:                    x86_64
  32 CPU op-mode(s):                  32-bit, 64-bit
  33 Byte Order:                      Little Endian
  34 Address sizes:                   46 bits physical, 57 bits virtual
  35 CPU(s):                          128
  36 On-line CPU(s) list:             0-127
  37 Thread(s) per core:              2
  38 Core(s) per socket:              32
  39 Socket(s):                       2
  40 NUMA node(s):                    2
  41 Vendor ID:                       GenuineIntel
  42 CPU family:                      6
  43 Model:                           106
  44 Model name:                      Intel(R) Xeon(R) Platinum 8358 CPU @ 2.60GHz
  45 Stepping:                        6
  46 CPU MHz:                         3283.980
  47 BogoMIPS:                        5200.00
  48 Virtualization:                  VT-x
  49 L1d cache:                       3 MiB
  50 L1i cache:                       2 MiB
  51 L2 cache:                        80 MiB
  52 L3 cache:                        96 MiB
  53 NUMA node0 CPU(s):               0-31,64-95
  54 NUMA node1 CPU(s):               32-63,96-127
  55 Vulnerability Itlb multihit:     Not affected
  56 Vulnerability L1tf:              Not affected
  57 Vulnerability Mds:               Not affected
  58 Vulnerability Meltdown:          Not affected
  59 Vulnerability Spec store bypass: Mitigation; Speculative Store Bypass disabled via prctl and seccomp
  60 Vulnerability Spectre v1:        Mitigation; usercopy/swapgs barriers and __user pointer sanitization
  61 Vulnerability Spectre v2:        Mitigation; Enhanced IBRS, IBPB conditional, RSB filling
  62 Vulnerability Srbds:             Not affected
  63 Vulnerability Tsx async abort:   Not affected
  64 Flags:                           fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe sysca
  65                                  ll nx pdpe1gb rdtscp lm constant_tsc art arch_perfmon pebs bts rep_good nopl xtopology nonstop_tsc cpuid aperfmperf pni pclmu
  66                                  lqdq dtes64 monitor ds_cpl vmx smx est tm2 ssse3 sdbg fma cx16 xtpr pdcm pcid dca sse4_1 sse4_2 x2apic movbe popcnt tsc_deadl
  67                                  ine_timer aes xsave avx f16c rdrand lahf_lm abm 3dnowprefetch cpuid_fault epb cat_l3 invpcid_single ssbd mba ibrs ibpb stibp
  68                                  ibrs_enhanced tpr_shadow vnmi flexpriority ept vpid ept_ad fsgsbase tsc_adjust bmi1 avx2 smep bmi2 erms invpcid cqm rdt_a avx
  69                                  512f avx512dq rdseed adx smap avx512ifma clflushopt clwb intel_pt avx512cd sha_ni avx512bw avx512vl xsaveopt xsavec xgetbv1 x
  70                                  saves cqm_llc cqm_occup_llc cqm_mbm_total cqm_mbm_local wbnoinvd dtherm ida arat pln pts avx512vbmi umip pku ospke avx512_vbm
  71                                  i2 gfni vaes vpclmulqdq avx512_vnni avx512_bitalg tme avx512_vpopcntdq rdpid md_clear pconfig flush_l1d arch_capabilities
  72 ```
  73
  74 ## Linux dmidecode
  75
  76 ```
  77 # dmidecode 3.2
  78 Getting SMBIOS data from sysfs.
  79 SMBIOS 3.3.0 present.
  80 # SMBIOS implementations newer than version 3.2.0 are not
  81 # fully supported by this version of dmidecode.
  82 Table at 0x6BAEE000.
  83
  84 Handle 0x0000, DMI type 0, 26 bytes
  85 BIOS Information
  86         Vendor: American Megatrends International, LLC.
  87         Version: 1.1
  88         Release Date: 04/09/2021
  89         Address: 0xF0000
  90         Runtime Size: 64 kB
  91         ROM Size: 32 MB
  92         Characteristics:
  93                 PCI is supported
  94                 BIOS is upgradeable
  95                 BIOS shadowing is allowed
  96                 Boot from CD is supported
  97                 Selectable boot is supported
  98                 BIOS ROM is socketed
  99                 EDD is supported
 100                 Japanese floppy for NEC 9800 1.2 MB is supported (int 13h)
 101                 Japanese floppy for Toshiba 1.2 MB is supported (int 13h)
 102                 5.25"/360 kB floppy services are supported (int 13h)
 103                 5.25"/1.2 MB floppy services are supported (int 13h)
 104                 3.5"/720 kB floppy services are supported (int 13h)
 105                 3.5"/2.88 MB floppy services are supported (int 13h)
 106                 Print screen service is supported (int 5h)
 107                 Serial services are supported (int 14h)
 108                 Printer services are supported (int 17h)
 109                 CGA/mono video services are supported (int 10h)
 110                 USB legacy is supported
 111                 BIOS boot specification is supported
 112                 Targeted content distribution is supported
 113                 UEFI is supported
 114         BIOS Revision: 5.22
 115
 116 Handle 0x0001, DMI type 1, 27 bytes
 117 System Information
 118         Manufacturer: Supermicro
 119         Product Name: SYS-740GP-TNRT
 120         Version: 0123456789
 121         Serial Number: S424016X1B00510
 122         UUID: 0698ae00-2383-11ec-8000-3cecefb9a6ba
 123         Wake-up Type: Power Switch
 124         SKU Number: To be filled by O.E.M.
 125         Family: Family
 126
 127 Handle 0x0002, DMI type 2, 15 bytes
 128 Base Board Information
 129         Manufacturer: Supermicro
 130         Product Name: X12DPG-QT6
 131         Version: 1.00
 132         Serial Number: UM219S003392
 133         Asset Tag: Base Board Asset Tag
 134         Features:
 135                 Board is a hosting board
 136                 Board is replaceable
 137         Location In Chassis: Part Component
 138         Chassis Handle: 0x0003
 139         Type: Motherboard
 140         Contained Object Handles: 0
 141
 142 Handle 0x0003, DMI type 3, 22 bytes
 143 Chassis Information
 144         Manufacturer: Supermicro
 145         Type: Other
 146         Lock: Not Present
 147         Version: 0123456789
 148         Serial Number: C7470KK25P50098
 149         Asset Tag: Chassis Asset Tag
 150         Boot-up State: Safe
 151         Power Supply State: Safe
 152         Thermal State: Safe
 153         Security Status: None
 154         OEM Information: 0x00000000
 155         Height: Unspecified
 156         Number Of Power Cords: 1
 157         Contained Elements: 0
 158         SKU Number: To be filled by O.E.M.
 159
 160 Handle 0x001B, DMI type 38, 18 bytes
 161 IPMI Device Information
 162         Interface Type: KCS (Keyboard Control Style)
 163         Specification Version: 2.0
 164         I2C Slave Address: 0x10
 165         NV Storage Device: Not Present
 166         Base Address: 0x0000000000000CA2 (I/O)
 167         Register Spacing: Successive Byte Boundaries
 168
 169 Handle 0x002A, DMI type 4, 48 bytes
 170 Processor Information
 171         Socket Designation: CPU1
 172         Type: Central Processor
 173         Family: Xeon
 174         Manufacturer: Intel(R) Corporation
 175         ID: A6 06 06 00 FF FB EB BF
 176         Signature: Type 0, Family 6, Model 106, Stepping 6
 177         Flags:
 178                 FPU (Floating-point unit on-chip)
 179                 VME (Virtual mode extension)
 180                 DE (Debugging extension)
 181                 PSE (Page size extension)
 182                 TSC (Time stamp counter)
 183                 MSR (Model specific registers)
 184                 PAE (Physical address extension)
 185                 MCE (Machine check exception)
 186                 CX8 (CMPXCHG8 instruction supported)
 187                 APIC (On-chip APIC hardware supported)
 188                 SEP (Fast system call)
 189                 MTRR (Memory type range registers)
 190                 PGE (Page global enable)
 191                 MCA (Machine check architecture)
 192                 CMOV (Conditional move instruction supported)
 193                 PAT (Page attribute table)
 194                 PSE-36 (36-bit page size extension)
 195                 CLFSH (CLFLUSH instruction supported)
 196                 DS (Debug store)
 197                 ACPI (ACPI supported)
 198                 MMX (MMX technology supported)
 199                 FXSR (FXSAVE and FXSTOR instructions supported)
 200                 SSE (Streaming SIMD extensions)
 201                 SSE2 (Streaming SIMD extensions 2)
 202                 SS (Self-snoop)
 203                 HTT (Multi-threading)
 204                 TM (Thermal monitor supported)
 205                 PBE (Pending break enabled)
 206         Version: Intel(R) Xeon(R) Platinum 8358 CPU @ 2.60GHz
 207         Voltage: 1.6 V
 208         External Clock: 100 MHz
 209         Max Speed: 4500 MHz
 210         Current Speed: 2600 MHz
 211         Status: Populated, Enabled
 212         Upgrade: <OUT OF SPEC>
 213         L1 Cache Handle: 0x0027
 214         L2 Cache Handle: 0x0028
 215         L3 Cache Handle: 0x0029
 216         Serial Number: Not Specified
 217         Asset Tag: UNKNOWN
 218         Part Number: Not Specified
 219         Core Count: 32
 220         Core Enabled: 32
 221         Thread Count: 64
 222         Characteristics:
 223                 64-bit capable
 224                 Multi-Core
 225                 Hardware Thread
 226                 Execute Protection
 227                 Enhanced Virtualization
 228                 Power/Performance Control
 229
 230 Handle 0x002E, DMI type 4, 48 bytes
 231 Processor Information
 232         Socket Designation: CPU2
 233         Type: Central Processor
 234         Family: Xeon
 235         Manufacturer: Intel(R) Corporation
 236         ID: A6 06 06 00 FF FB EB BF
 237         Signature: Type 0, Family 6, Model 106, Stepping 6
 238         Flags:
 239                 FPU (Floating-point unit on-chip)
 240                 VME (Virtual mode extension)
 241                 DE (Debugging extension)
 242                 PSE (Page size extension)
 243                 TSC (Time stamp counter)
 244                 MSR (Model specific registers)
 245                 PAE (Physical address extension)
 246                 MCE (Machine check exception)
 247                 CX8 (CMPXCHG8 instruction supported)
 248                 APIC (On-chip APIC hardware supported)
 249                 SEP (Fast system call)
 250                 MTRR (Memory type range registers)
 251                 PGE (Page global enable)
 252                 MCA (Machine check architecture)
 253                 CMOV (Conditional move instruction supported)
 254                 PAT (Page attribute table)
 255                 PSE-36 (36-bit page size extension)
 256                 CLFSH (CLFLUSH instruction supported)
 257                 DS (Debug store)
 258                 ACPI (ACPI supported)
 259                 MMX (MMX technology supported)
 260                 FXSR (FXSAVE and FXSTOR instructions supported)
 261                 SSE (Streaming SIMD extensions)
 262                 SSE2 (Streaming SIMD extensions 2)
 263                 SS (Self-snoop)
 264                 HTT (Multi-threading)
 265                 TM (Thermal monitor supported)
 266                 PBE (Pending break enabled)
 267         Version: Intel(R) Xeon(R) Platinum 8358 CPU @ 2.60GHz
 268         Voltage: 1.6 V
 269         External Clock: 100 MHz
 270         Max Speed: 4500 MHz
 271         Current Speed: 2600 MHz
 272         Status: Populated, Enabled
 273         Upgrade: <OUT OF SPEC>
 274         L1 Cache Handle: 0x002B
 275         L2 Cache Handle: 0x002C
 276         L3 Cache Handle: 0x002D
 277         Serial Number: Not Specified
 278         Asset Tag: UNKNOWN
 279         Part Number: Not Specified
 280         Core Count: 32
 281         Core Enabled: 32
 282         Thread Count: 64
 283         Characteristics:
 284                 64-bit capable
 285                 Multi-Core
 286                 Hardware Thread
 287                 Execute Protection
 288                 Enhanced Virtualization
 289                 Power/Performance Control
 290 ```
 291
 292 ## Linux dmidecode memory
 293
 294 ```
 295 Handle 0x0034, DMI type 17, 92 bytes
 296 Memory Device
 297         Array Handle: 0x0033
 298         Error Information Handle: Not Provided
 299         Total Width: 72 bits
 300         Data Width: 64 bits
 301         Size: 16384 MB
 302         Form Factor: DIMM
 303         Set: None
 304         Locator: P1-DIMMA1
 305         Bank Locator: P0_Node0_Channel0_Dimm0
 306         Type: DDR4
 307         Type Detail: Synchronous Registered (Buffered)
 308         Speed: 3200 MT/s
 309         Manufacturer: Samsung
 310         Serial Number: H0MK0001304705C2E3
 311         Asset Tag: P1-DIMMA1_AssetTag (date:21/30)
 312         Part Number: M393A2K43DB3-CWE
 313         Rank: 2
 314         Configured Memory Speed: 3200 MT/s
 315         Minimum Voltage: 1.2 V
 316         Maximum Voltage: 1.2 V
 317         Configured Voltage: 1.2 V
 318         Memory Technology: DRAM
 319         Memory Operating Mode Capability: Volatile memory
 320         Firmware Version: 0000
 321         Module Manufacturer ID: Bank 1, Hex 0xCE
 322         Module Product ID: Unknown
 323         Memory Subsystem Controller Manufacturer ID: Unknown
 324         Memory Subsystem Controller Product ID: Unknown
 325         Non-Volatile Size: None
 326         Volatile Size: 16 GB
 327         Cache Size: None
 328         Logical Size: None
 329
 330 Handle 0x0036, DMI type 17, 92 bytes
 331 Memory Device
 332         Array Handle: 0x0033
 333         Error Information Handle: Not Provided
 334         Total Width: 72 bits
 335         Data Width: 64 bits
 336         Size: 16384 MB
 337         Form Factor: DIMM
 338         Set: None
 339         Locator: P1-DIMMB1
 340         Bank Locator: P0_Node0_Channel1_Dimm0
 341         Type: DDR4
 342         Type Detail: Synchronous Registered (Buffered)
 343         Speed: 3200 MT/s
 344         Manufacturer: Samsung
 345         Serial Number: H0MK0001304705CE60
 346         Asset Tag: P1-DIMMB1_AssetTag (date:21/30)
 347         Part Number: M393A2K43DB3-CWE
 348         Rank: 2
 349         Configured Memory Speed: 3200 MT/s
 350         Minimum Voltage: 1.2 V
 351         Maximum Voltage: 1.2 V
 352         Configured Voltage: 1.2 V
 353         Memory Technology: DRAM
 354         Memory Operating Mode Capability: Volatile memory
 355         Firmware Version: 0000
 356         Module Manufacturer ID: Bank 1, Hex 0xCE
 357         Module Product ID: Unknown
 358         Memory Subsystem Controller Manufacturer ID: Unknown
 359         Memory Subsystem Controller Product ID: Unknown
 360         Non-Volatile Size: None
 361         Volatile Size: 16 GB
 362         Cache Size: None
 363         Logical Size: None
 364
 365 Handle 0x0038, DMI type 17, 92 bytes
 366 Memory Device
 367         Array Handle: 0x0033
 368         Error Information Handle: Not Provided
 369         Total Width: 72 bits
 370         Data Width: 64 bits
 371         Size: 16384 MB
 372         Form Factor: DIMM
 373         Set: None
 374         Locator: P1-DIMMC1
 375         Bank Locator: P0_Node0_Channel2_Dimm0
 376         Type: DDR4
 377         Type Detail: Synchronous Registered (Buffered)
 378         Speed: 3200 MT/s
 379         Manufacturer: Samsung
 380         Serial Number: H0MK0001304705C59E
 381         Asset Tag: P1-DIMMC1_AssetTag (date:21/30)
 382         Part Number: M393A2K43DB3-CWE
 383         Rank: 2
 384         Configured Memory Speed: 3200 MT/s
 385         Minimum Voltage: 1.2 V
 386         Maximum Voltage: 1.2 V
 387         Configured Voltage: 1.2 V
 388         Memory Technology: DRAM
 389         Memory Operating Mode Capability: Volatile memory
 390         Firmware Version: 0000
 391         Module Manufacturer ID: Bank 1, Hex 0xCE
 392         Module Product ID: Unknown
 393         Memory Subsystem Controller Manufacturer ID: Unknown
 394         Memory Subsystem Controller Product ID: Unknown
 395         Non-Volatile Size: None
 396         Volatile Size: 16 GB
 397         Cache Size: None
 398         Logical Size: None
 399
 400 Handle 0x003A, DMI type 17, 92 bytes
 401 Memory Device
 402         Array Handle: 0x0033
 403         Error Information Handle: Not Provided
 404         Total Width: 72 bits
 405         Data Width: 64 bits
 406         Size: 16384 MB
 407         Form Factor: DIMM
 408         Set: None
 409         Locator: P1-DIMMD1
 410         Bank Locator: P0_Node0_Channel3_Dimm0
 411         Type: DDR4
 412         Type Detail: Synchronous Registered (Buffered)
 413         Speed: 3200 MT/s
 414         Manufacturer: Samsung
 415         Serial Number: H0MK0001304705D12D
 416         Asset Tag: P1-DIMMD1_AssetTag (date:21/30)
 417         Part Number: M393A2K43DB3-CWE
 418         Rank: 2
 419         Configured Memory Speed: 3200 MT/s
 420         Minimum Voltage: 1.2 V
 421         Maximum Voltage: 1.2 V
 422         Configured Voltage: 1.2 V
 423         Memory Technology: DRAM
 424         Memory Operating Mode Capability: Volatile memory
 425         Firmware Version: 0000
 426         Module Manufacturer ID: Bank 1, Hex 0xCE
 427         Module Product ID: Unknown
 428         Memory Subsystem Controller Manufacturer ID: Unknown
 429         Memory Subsystem Controller Product ID: Unknown
 430         Non-Volatile Size: None
 431         Volatile Size: 16 GB
 432         Cache Size: None
 433         Logical Size: None
 434
 435 Handle 0x003C, DMI type 17, 92 bytes
 436 Memory Device
 437         Array Handle: 0x0033
 438         Error Information Handle: Not Provided
 439         Total Width: 72 bits
 440         Data Width: 64 bits
 441         Size: 16384 MB
 442         Form Factor: DIMM
 443         Set: None
 444         Locator: P1-DIMME1
 445         Bank Locator: P0_Node1_Channel0_Dimm0
 446         Type: DDR4
 447         Type Detail: Synchronous Registered (Buffered)
 448         Speed: 3200 MT/s
 449         Manufacturer: Samsung
 450         Serial Number: H0MK0001304705C69C
 451         Asset Tag: P1-DIMME1_AssetTag (date:21/30)
 452         Part Number: M393A2K43DB3-CWE
 453         Rank: 2
 454         Configured Memory Speed: 3200 MT/s
 455         Minimum Voltage: 1.2 V
 456         Maximum Voltage: 1.2 V
 457         Configured Voltage: 1.2 V
 458         Memory Technology: DRAM
 459         Memory Operating Mode Capability: Volatile memory
 460         Firmware Version: 0000
 461         Module Manufacturer ID: Bank 1, Hex 0xCE
 462         Module Product ID: Unknown
 463         Memory Subsystem Controller Manufacturer ID: Unknown
 464         Memory Subsystem Controller Product ID: Unknown
 465         Non-Volatile Size: None
 466         Volatile Size: 16 GB
 467         Cache Size: None
 468         Logical Size: None
 469
 470 Handle 0x003E, DMI type 17, 92 bytes
 471 Memory Device
 472         Array Handle: 0x0033
 473         Error Information Handle: Not Provided
 474         Total Width: 72 bits
 475         Data Width: 64 bits
 476         Size: 16384 MB
 477         Form Factor: DIMM
 478         Set: None
 479         Locator: P1-DIMMF1
 480         Bank Locator: P0_Node1_Channel1_Dimm0
 481         Type: DDR4
 482         Type Detail: Synchronous Registered (Buffered)
 483         Speed: 3200 MT/s
 484         Manufacturer: Samsung
 485         Serial Number: H0MK0001304705C33A
 486         Asset Tag: P1-DIMMF1_AssetTag (date:21/30)
 487         Part Number: M393A2K43DB3-CWE
 488         Rank: 2
 489         Configured Memory Speed: 3200 MT/s
 490         Minimum Voltage: 1.2 V
 491         Maximum Voltage: 1.2 V
 492         Configured Voltage: 1.2 V
 493         Memory Technology: DRAM
 494         Memory Operating Mode Capability: Volatile memory
 495         Firmware Version: 0000
 496         Module Manufacturer ID: Bank 1, Hex 0xCE
 497         Module Product ID: Unknown
 498         Memory Subsystem Controller Manufacturer ID: Unknown
 499         Memory Subsystem Controller Product ID: Unknown
 500         Non-Volatile Size: None
 501         Volatile Size: 16 GB
 502         Cache Size: None
 503         Logical Size: None
 504
 505 Handle 0x0040, DMI type 17, 92 bytes
 506 Memory Device
 507         Array Handle: 0x0033
 508         Error Information Handle: Not Provided
 509         Total Width: 72 bits
 510         Data Width: 64 bits
 511         Size: 16384 MB
 512         Form Factor: DIMM
 513         Set: None
 514         Locator: P1-DIMMG1
 515         Bank Locator: P0_Node1_Channel2_Dimm0
 516         Type: DDR4
 517         Type Detail: Synchronous Registered (Buffered)
 518         Speed: 3200 MT/s
 519         Manufacturer: Samsung
 520         Serial Number: H0MK0001304705C59F
 521         Asset Tag: P1-DIMMG1_AssetTag (date:21/30)
 522         Part Number: M393A2K43DB3-CWE
 523         Rank: 2
 524         Configured Memory Speed: 3200 MT/s
 525         Minimum Voltage: 1.2 V
 526         Maximum Voltage: 1.2 V
 527         Configured Voltage: 1.2 V
 528         Memory Technology: DRAM
 529         Memory Operating Mode Capability: Volatile memory
 530         Firmware Version: 0000
 531         Module Manufacturer ID: Bank 1, Hex 0xCE
 532         Module Product ID: Unknown
 533         Memory Subsystem Controller Manufacturer ID: Unknown
 534         Memory Subsystem Controller Product ID: Unknown
 535         Non-Volatile Size: None
 536         Volatile Size: 16 GB
 537         Cache Size: None
 538         Logical Size: None
 539
 540 Handle 0x0042, DMI type 17, 92 bytes
 541 Memory Device
 542         Array Handle: 0x0033
 543         Error Information Handle: Not Provided
 544         Total Width: 72 bits
 545         Data Width: 64 bits
 546         Size: 16384 MB
 547         Form Factor: DIMM
 548         Set: None
 549         Locator: P1-DIMMH1
 550         Bank Locator: P0_Node1_Channel3_Dimm0
 551         Type: DDR4
 552         Type Detail: Synchronous Registered (Buffered)
 553         Speed: 3200 MT/s
 554         Manufacturer: Samsung
 555         Serial Number: H0MK0001304705CA16
 556         Asset Tag: P1-DIMMH1_AssetTag (date:21/30)
 557         Part Number: M393A2K43DB3-CWE
 558         Rank: 2
 559         Configured Memory Speed: 3200 MT/s
 560         Minimum Voltage: 1.2 V
 561         Maximum Voltage: 1.2 V
 562         Configured Voltage: 1.2 V
 563         Memory Technology: DRAM
 564         Memory Operating Mode Capability: Volatile memory
 565         Firmware Version: 0000
 566         Module Manufacturer ID: Bank 1, Hex 0xCE
 567         Module Product ID: Unknown
 568         Memory Subsystem Controller Manufacturer ID: Unknown
 569         Memory Subsystem Controller Product ID: Unknown
 570         Non-Volatile Size: None
 571         Volatile Size: 16 GB
 572         Cache Size: None
 573         Logical Size: None
 574
 575 Handle 0x0044, DMI type 17, 92 bytes
 576 Memory Device
 577         Array Handle: 0x0033
 578         Error Information Handle: Not Provided
 579         Total Width: 72 bits
 580         Data Width: 64 bits
 581         Size: 16384 MB
 582         Form Factor: DIMM
 583         Set: None
 584         Locator: P2-DIMMA1
 585         Bank Locator: P1_Node0_Channel0_Dimm0
 586         Type: DDR4
 587         Type Detail: Synchronous Registered (Buffered)
 588         Speed: 3200 MT/s
 589         Manufacturer: Samsung
 590         Serial Number: H0MK0001304705CBFE
 591         Asset Tag: P2-DIMMA1_AssetTag (date:21/30)
 592         Part Number: M393A2K43DB3-CWE
 593         Rank: 2
 594         Configured Memory Speed: 3200 MT/s
 595         Minimum Voltage: 1.2 V
 596         Maximum Voltage: 1.2 V
 597         Configured Voltage: 1.2 V
 598         Memory Technology: DRAM
 599         Memory Operating Mode Capability: Volatile memory
 600         Firmware Version: 0000
 601         Module Manufacturer ID: Bank 1, Hex 0xCE
 602         Module Product ID: Unknown
 603         Memory Subsystem Controller Manufacturer ID: Unknown
 604         Memory Subsystem Controller Product ID: Unknown
 605         Non-Volatile Size: None
 606         Volatile Size: 16 GB
 607         Cache Size: None
 608         Logical Size: None
 609
 610 Handle 0x0046, DMI type 17, 92 bytes
 611 Memory Device
 612         Array Handle: 0x0033
 613         Error Information Handle: Not Provided
 614         Total Width: 72 bits
 615         Data Width: 64 bits
 616         Size: 16384 MB
 617         Form Factor: DIMM
 618         Set: None
 619         Locator: P2-DIMMB1
 620         Bank Locator: P1_Node0_Channel1_Dimm0
 621         Type: DDR4
 622         Type Detail: Synchronous Registered (Buffered)
 623         Speed: 3200 MT/s
 624         Manufacturer: Samsung
 625         Serial Number: H0MK0001304705CFC8
 626         Asset Tag: P2-DIMMB1_AssetTag (date:21/30)
 627         Part Number: M393A2K43DB3-CWE
 628         Rank: 2
 629         Configured Memory Speed: 3200 MT/s
 630         Minimum Voltage: 1.2 V
 631         Maximum Voltage: 1.2 V
 632         Configured Voltage: 1.2 V
 633         Memory Technology: DRAM
 634         Memory Operating Mode Capability: Volatile memory
 635         Firmware Version: 0000
 636         Module Manufacturer ID: Bank 1, Hex 0xCE
 637         Module Product ID: Unknown
 638         Memory Subsystem Controller Manufacturer ID: Unknown
 639         Memory Subsystem Controller Product ID: Unknown
 640         Non-Volatile Size: None
 641         Volatile Size: 16 GB
 642         Cache Size: None
 643         Logical Size: None
 644
 645 Handle 0x0048, DMI type 17, 92 bytes
 646 Memory Device
 647         Array Handle: 0x0033
 648         Error Information Handle: Not Provided
 649         Total Width: 72 bits
 650         Data Width: 64 bits
 651         Size: 16384 MB
 652         Form Factor: DIMM
 653         Set: None
 654         Locator: P2-DIMMC1
 655         Bank Locator: P1_Node0_Channel2_Dimm0
 656         Type: DDR4
 657         Type Detail: Synchronous Registered (Buffered)
 658         Speed: 3200 MT/s
 659         Manufacturer: Samsung
 660         Serial Number: H0MK0001304705CC02
 661         Asset Tag: P2-DIMMC1_AssetTag (date:21/30)
 662         Part Number: M393A2K43DB3-CWE
 663         Rank: 2
 664         Configured Memory Speed: 3200 MT/s
 665         Minimum Voltage: 1.2 V
 666         Maximum Voltage: 1.2 V
 667         Configured Voltage: 1.2 V
 668         Memory Technology: DRAM
 669         Memory Operating Mode Capability: Volatile memory
 670         Firmware Version: 0000
 671         Module Manufacturer ID: Bank 1, Hex 0xCE
 672         Module Product ID: Unknown
 673         Memory Subsystem Controller Manufacturer ID: Unknown
 674         Memory Subsystem Controller Product ID: Unknown
 675         Non-Volatile Size: None
 676         Volatile Size: 16 GB
 677         Cache Size: None
 678         Logical Size: None
 679
 680 Handle 0x004A, DMI type 17, 92 bytes
 681 Memory Device
 682         Array Handle: 0x0033
 683         Error Information Handle: Not Provided
 684         Total Width: 72 bits
 685         Data Width: 64 bits
 686         Size: 16384 MB
 687         Form Factor: DIMM
 688         Set: None
 689         Locator: P2-DIMMD1
 690         Bank Locator: P1_Node0_Channel3_Dimm0
 691         Type: DDR4
 692         Type Detail: Synchronous Registered (Buffered)
 693         Speed: 3200 MT/s
 694         Manufacturer: Samsung
 695         Serial Number: H0MK0001304705CB5A
 696         Asset Tag: P2-DIMMD1_AssetTag (date:21/30)
 697         Part Number: M393A2K43DB3-CWE
 698         Rank: 2
 699         Configured Memory Speed: 3200 MT/s
 700         Minimum Voltage: 1.2 V
 701         Maximum Voltage: 1.2 V
 702         Configured Voltage: 1.2 V
 703         Memory Technology: DRAM
 704         Memory Operating Mode Capability: Volatile memory
 705         Firmware Version: 0000
 706         Module Manufacturer ID: Bank 1, Hex 0xCE
 707         Module Product ID: Unknown
 708         Memory Subsystem Controller Manufacturer ID: Unknown
 709         Memory Subsystem Controller Product ID: Unknown
 710         Non-Volatile Size: None
 711         Volatile Size: 16 GB
 712         Cache Size: None
 713         Logical Size: None
 714
 715 Handle 0x004C, DMI type 17, 92 bytes
 716 Memory Device
 717         Array Handle: 0x0033
 718         Error Information Handle: Not Provided
 719         Total Width: 72 bits
 720         Data Width: 64 bits
 721         Size: 16384 MB
 722         Form Factor: DIMM
 723         Set: None
 724         Locator: P2-DIMME1
 725         Bank Locator: P1_Node1_Channel0_Dimm0
 726         Type: DDR4
 727         Type Detail: Synchronous Registered (Buffered)
 728         Speed: 3200 MT/s
 729         Manufacturer: Samsung
 730         Serial Number: H0MK0001304705CB30
 731         Asset Tag: P2-DIMME1_AssetTag (date:21/30)
 732         Part Number: M393A2K43DB3-CWE
 733         Rank: 2
 734         Configured Memory Speed: 3200 MT/s
 735         Minimum Voltage: 1.2 V
 736         Maximum Voltage: 1.2 V
 737         Configured Voltage: 1.2 V
 738         Memory Technology: DRAM
 739         Memory Operating Mode Capability: Volatile memory
 740         Firmware Version: 0000
 741         Module Manufacturer ID: Bank 1, Hex 0xCE
 742         Module Product ID: Unknown
 743         Memory Subsystem Controller Manufacturer ID: Unknown
 744         Memory Subsystem Controller Product ID: Unknown
 745         Non-Volatile Size: None
 746         Volatile Size: 16 GB
 747         Cache Size: None
 748         Logical Size: None
 749
 750 Handle 0x004E, DMI type 17, 92 bytes
 751 Memory Device
 752         Array Handle: 0x0033
 753         Error Information Handle: Not Provided
 754         Total Width: 72 bits
 755         Data Width: 64 bits
 756         Size: 16384 MB
 757         Form Factor: DIMM
 758         Set: None
 759         Locator: P2-DIMMF1
 760         Bank Locator: P1_Node1_Channel1_Dimm0
 761         Type: DDR4
 762         Type Detail: Synchronous Registered (Buffered)
 763         Speed: 3200 MT/s
 764         Manufacturer: Samsung
 765         Serial Number: H0MK0001304705CB87
 766         Asset Tag: P2-DIMMF1_AssetTag (date:21/30)
 767         Part Number: M393A2K43DB3-CWE
 768         Rank: 2
 769         Configured Memory Speed: 3200 MT/s
 770         Minimum Voltage: 1.2 V
 771         Maximum Voltage: 1.2 V
 772         Configured Voltage: 1.2 V
 773         Memory Technology: DRAM
 774         Memory Operating Mode Capability: Volatile memory
 775         Firmware Version: 0000
 776         Module Manufacturer ID: Bank 1, Hex 0xCE
 777         Module Product ID: Unknown
 778         Memory Subsystem Controller Manufacturer ID: Unknown
 779         Memory Subsystem Controller Product ID: Unknown
 780         Non-Volatile Size: None
 781         Volatile Size: 16 GB
 782         Cache Size: None
 783         Logical Size: None
 784
 785 Handle 0x0050, DMI type 17, 92 bytes
 786 Memory Device
 787         Array Handle: 0x0033
 788         Error Information Handle: Not Provided
 789         Total Width: 72 bits
 790         Data Width: 64 bits
 791         Size: 16384 MB
 792         Form Factor: DIMM
 793         Set: None
 794         Locator: P2-DIMMG1
 795         Bank Locator: P1_Node1_Channel2_Dimm0
 796         Type: DDR4
 797         Type Detail: Synchronous Registered (Buffered)
 798         Speed: 3200 MT/s
 799         Manufacturer: Samsung
 800         Serial Number: H0MK0001304705CB08
 801         Asset Tag: P2-DIMMG1_AssetTag (date:21/30)
 802         Part Number: M393A2K43DB3-CWE
 803         Rank: 2
 804         Configured Memory Speed: 3200 MT/s
 805         Minimum Voltage: 1.2 V
 806         Maximum Voltage: 1.2 V
 807         Configured Voltage: 1.2 V
 808         Memory Technology: DRAM
 809         Memory Operating Mode Capability: Volatile memory
 810         Firmware Version: 0000
 811         Module Manufacturer ID: Bank 1, Hex 0xCE
 812         Module Product ID: Unknown
 813         Memory Subsystem Controller Manufacturer ID: Unknown
 814         Memory Subsystem Controller Product ID: Unknown
 815         Non-Volatile Size: None
 816         Volatile Size: 16 GB
 817         Cache Size: None
 818         Logical Size: None
 819
 820 Handle 0x0052, DMI type 17, 92 bytes
 821 Memory Device
 822         Array Handle: 0x0033
 823         Error Information Handle: Not Provided
 824         Total Width: 72 bits
 825         Data Width: 64 bits
 826         Size: 16384 MB
 827         Form Factor: DIMM
 828         Set: None
 829         Locator: P2-DIMMH1
 830         Bank Locator: P1_Node1_Channel3_Dimm0
 831         Type: DDR4
 832         Type Detail: Synchronous Registered (Buffered)
 833         Speed: 3200 MT/s
 834         Manufacturer: Samsung
 835         Serial Number: H0MK0001304705CC01
 836         Asset Tag: P2-DIMMH1_AssetTag (date:21/30)
 837         Part Number: M393A2K43DB3-CWE
 838         Rank: 2
 839         Configured Memory Speed: 3200 MT/s
 840         Minimum Voltage: 1.2 V
 841         Maximum Voltage: 1.2 V
 842         Configured Voltage: 1.2 V
 843         Memory Technology: DRAM
 844         Memory Operating Mode Capability: Volatile memory
 845         Firmware Version: 0000
 846         Module Manufacturer ID: Bank 1, Hex 0xCE
 847         Module Product ID: Unknown
 848         Memory Subsystem Controller Manufacturer ID: Unknown
 849         Memory Subsystem Controller Product ID: Unknown
 850         Non-Volatile Size: None
 851         Volatile Size: 16 GB
 852         Cache Size: None
 853         Logical Size: None
 854 ```
 855
 856 ## Xeon ICX Server BIOS Configuration
 857
 858 ### Boot Feature
 859
 860 ```
 861   |                                                                    |Enables or disables Quiet    |
 862   |  Quiet Boot                                [Enabled]               |Boot option                  |
 863   |                                                                    |                             |
 864   |  Option ROM Messages                       [Force BIOS]            |                             |
 865   |  Bootup NumLock State                      [On]                    |                             |
 866   |  Wait For "F1" If Error                    [Disabled]              |                             |
 867   |  INT19 Trap Response                       [Immediate]             |                             |
 868   |  Re-try Boot                               [Disabled]              |                             |
 869   |                                                                    |                             |
 870   |  Power Configuration                                               |                             |
 871   |                                                                    |                             |
 872   |  Watch Dog Function                        [Disabled]              |                             |
 873   |  Restore on AC Power Loss                  [Last State]            |                             |
 874   |  Power Button Function                     [Instant Off]           |                             |
 875   |  Deep Sleep Mode                           [Disabled]              |                             |
 876 ```
 877
 878 ### CPU Configuration
 879
 880 ```
 881   |  Processor Configuration                                          ^|Enables Hyper Threading      |
 882   |  --------------------------------------------------               *|(Software Method to          |
 883   |  Processor BSP Revision                    606A6 - ICX D2         *|Enable/Disable Logical       |
 884   |  Processor Socket                          CPU1         CPU2      *|Processor threads.           |
 885   |  Processor ID                              000606A6* |  000606A6  *|                             |
 886   |  Processor Frequency                       2.600GHz  |  2.600GHz  *|                             |
 887   |  Processor Max Ratio                            1AH  |       1AH  *|                             |
 888   |  Processor Min Ratio                            08H  |       08H  *|                             |
 889   |  Microcode Revision                        0D000280  |  0D000280  *|                             |
 890   |  L1 Cache RAM(Per Core)                        80KB  |      80KB  *|                             |
 891   |  L2 Cache RAM(Per Core)                      1280KB  |    1280KB  *|                             |
 892   |  L3 Cache RAM(Per Package)                  49152KB  |   49152KB  *|                             |
 893   |  Processor 0 Version                       Intel(R) Xeon(R)       *|                             |
 894   |                                            Platinum 8358 CPU @    *|                             |
 895   |                                            2.60GHz                *|                             |
 896   |  Processor 1 Version                       Intel(R) Xeon(R)       *|                             |
 897   |                                            Platinum 8358 CPU @    *|                             |
 898   |                                            2.60GHz                *|                             |
 899   |                                                                   +|                             |
 900   |> CPU1 Core Disable Bitmap                                         +|                             |
 901   |> CPU2 Core Disable Bitmap                                         +|-----------------------------|
 902   |  Hyper-Threading [ALL]                     [Enable]               +|><: Select Screen            |
 903   |  Hardware Prefetcher                       [Enable]               +|^v: Select Item              |
 904   |  Adjacent Cache Prefetch                   [Enable]               +|Enter: Select                |
 905   |  DCU Streamer Prefetcher                   [Enable]               +|+/-: Change Opt.             |
 906   |  DCU IP Prefetcher                         [Enable]               +|F1: General Help             |
 907   |  LLC Prefetch                              [Enable]               +|F2: Previous Values          |
 908   |  Extended APIC                             [Disable]              +|F3: Optimized Defaults       |
 909   |  VMX                                       [Enable]               v|F4: Save & Exit              |
 910   |  Enable SMX                                [Disable]              +|                             |
 911   |  PPIN Control                              [Unlock/Enable]        *|                             |
 912   |  AES-NI                                    [Enable]               *|                             |
 913   |  --------------------------------------------------               *|                             |
 914   |  TME, TME-MT, TDX                                                 *|                             |
 915   |  --------------------------------------------------               *|                             |
 916   |  Total Memory Encryption (TME)             [Disabled]             *|                             |
 917   |  --------------------------------------------------               *|-----------------------------|
 918   |  Software Guard Extension (SGX)                                   *|><: Select Screen            |
 919   |  --------------------------------------------------               *|^v: Select Item              |
 920   |  SGX Factory Reset                         [Disabled]             *|Enter: Select                |
 921   |  SW Guard Extensions (SGX)                 [Disabled]             *|+/-: Change Opt.             |
 922   |  SGX Package Info In-Band Access           [Disabled]             *|F1: General Help             |
 923   |  --------------------------------------------------               *|F2: Previous Values          |
 924   |  Limit CPU PA to 46 Bits                   [Enable]               *|F3: Optimized Defaults       |
 925   |> Advanced Power Management Configuration                          v|F4: Save & Exit              |
 926 ```
 927
 928 #### Advanced Power Management Configuration
 929
 930 ```
 931   |  Advanced Power Management Configuration                           |Enable processor power       |
 932   |  --------------------------------------------------                |management features.         |
 933   |  Power Technology                          [Custom]                |                             |
 934   |  Power Performance Tuning                  [BIOS Controls EPB]     |                             |
 935   |  ENERGY_PERF_BIAS_CFG Mode                 [Maximum Performance]   |                             |
 936 ```
 937
 938 ##### CPU P State Control
 939
 940 ```
 941   |  CPU P State Control                                               |EIST allows the processor    |
 942   |                                                                    |to dynamically adjust        |
 943   |  SpeedStep (P-States)                      [Disable]               |frequency and voltage based  |
 944   |  Activate SST-BF                           [Disable]               |on power versus performance  |
 945   |  Configure SST-BF                          [Enable]                |needs.                       |
 946   |  EIST PSD Function                         [HW_ALL]                |                             |
 947 ```
 948
 949 ##### Hardware PM State Control
 950
 951 ```
 952   |  Hardware PM State Control                                         |If set to Disable, hardware ^|
 953   |                                                                    |will choose a P-state       *|
 954   |  Hardware P-States                         [Disable]               |setting for the system      *|
 955   |                                                                    |based on an OS request.     *|
 956
 957   |  Frequency Prioritization                                          |This knob controls whether   |
 958   |                                                                    |RAPL balancer is enabled.    |
 959   |  RAPL Prioritization                       [Disable]               |When enabled it activates    |
 960 ```
 961
 962 ##### CPU C State Control
 963
 964 ```
 965   |  CPU C State Control                                               |Allows Monitor and MWAIT     |
 966   |                                                                    |instructions.                |
 967   |  Enable Monitor MWAIT                      [Enable]                |                             |
 968   |  CPU C6 Report                             [Disable]               |                             |
 969   |  Enhanced Halt State (C1E)                 [Disable]               |                             |
 970 ```
 971
 972 ##### Package C State Control
 973
 974 ```
 975   |  Package C State Control                                           |Limit the lowest package     |
 976   |                                                                    |level C-State to             |
 977   |  Package C State                           [C0/C1 state]           |processors. Lower package    |
 978 ```
 979
 980 ##### CPU T State Control
 981
 982 ```
 983   |  CPU T State Control                                               |Enable/Disable CPU           |
 984   |                                                                    |throttling by OS.            |
 985   |  Software Controlled T-States              [Disable]               |Throttling reduces power     |
 986 ```
 987
 988 ##### UPI Configuration
 989
 990 ```
 991   |  Uncore Configuration                                              |Choose Topology Precedence   |
 992   |  --------------------------------------------------                |to degrade features if       |
 993   |  Number of CPU                             2                       |system options are in        |
 994   |  Number of IIO                             2                       |conflict or choose Feature   |
 995   |  Current UPI Link Speed                    Fast                    |Precedence to degrade        |
 996   |  Current UPI Link Frequency                11.2 GT/s               |topology if system options   |
 997   |  Global MMIO Low Base / Limit              90000000 / FBFFFFFF     |are in conflict.             |
 998   |  Global MMIO High Base / Limit             0000200000000000 /      |                             |
 999   |                                            0000204FFFFFFFFF        |                             |
1000   |  Pci-e Configuration Base / Size           80000000 / 10000000     |                             |
1001   |  Degrade Precedence                        [Topology Precedence]   |                             |
1002   |  Link L0p Enable                           [Disable]               |                             |
1003   |  Link L1 Enable                            [Disable]               |                             |
1004   |  XPT Remote Prefetch                       [Auto]                  |                             |
1005   |  KTI Prefetch                              [Auto]                  |-----------------------------|
1006   |  Local/Remote Threshold                    [Auto]                  |><: Select Screen            |
1007   |  IO Directory Cache (IODC)                 [Auto]                  |^v: Select Item              |
1008   |  SNC (Sub NUMA)                            [Disable]               |Enter: Select                |
1009   |  XPT Prefetch                              [Auto]                  |+/-: Change Opt.             |
1010   |  Snoop Throttle Configuration              [Auto]                  |F1: General Help             |
1011   |  PCIe Remote P2P Relaxed Ordering          [Disable]               |F2: Previous Values          |
1012   |  Stale AtoS                                [Auto]                  |F3: Optimized Defaults       |
1013   |  LLC Dead Line Alloc                       [Enable]                |F4: Save & Exit              |
1014 ```
1015
1016 ##### Memory Configuration
1017
1018 ```
1019   |                                                                    |Set Enable or Disable        |
1020   |  --------------------------------------------------                |STEP(Samsung TestBIOS &      |
1021   |  Integrated Memory Controller (iMC)                                |Enhanced PPR)function        |
1022   |  --------------------------------------------------                |                             |
1023   |                                                                    |                             |
1024   |  STEP DRAM Test                            [Disable]               |                             |
1025   |   Operation Mode                           [Test and Repair]       |                             |
1026   |  Enforce POR                               [POR]                   |                             |
1027   |  PPR Type                                  [Hard PPR]              |                             |
1028   |  Memory Frequency                          [Auto]                  |                             |
1029   |  Data Scrambling for DDR4                  [Enable]                |                             |
1030   |  2x Refresh Enable                         [Auto]                  |                             |
1031 ```
1032
1033 ##### IIO Configuration
1034
1035 ```
1036   |  IIO Configuration                                                 |Press <Enter> to bring up    |
1037   |  --------------------------------------------------                |the Intel. Virtualization    |
1038   |                                                                    |for Directed I/O (VT-d)      |
1039   |> CPU1 Configuration                                                |Configuration menu.          |
1040   |> CPU2 Configuration                                                |                             |
1041   |> IOAT Configuration                                                |                             |
1042   |> Intel. VT for Directed I/O (VT-d)                                 |                             |
1043   |> Intel. VMD Technology                                             |                             |
1044   |  PCI-E ASPM Support (Global)               [Disable]               |                             |
1045   |  IIO eDPC Support                          [Disable]               |                             |
1046 ```
1047
1048 ##### CPU1 Configuration
1049
1050 ```
1051   |  IOU0 (IIO PCIe Port 1)                    [Auto]                  |Selects PCIe port            |
1052   |  IOU1 (IIO PCIe Port 2)                    [Auto]                  |Bifurcation for selected     |
1053   |  IOU3 (IIO PCIe Port 4)                    [Auto]                  |slot(s)                      |
1054   |  IOU4 (IIO PCIe Port 5)                    [Auto]                  |                             |
1055 ```
1056
1057 ##### CPU2 Configuration
1058
1059 ```
1060   |  IOU0 (IIO PCIe Port 1)                    [Auto]                  |Selects PCIe port            |
1061   |  IOU1 (IIO PCIe Port 2)                    [Auto]                  |Bifurcation for selected     |
1062   |  IOU3 (IIO PCIe Port 4)                    [Auto]                  |slot(s)                      |
1063   |  IOU4 (IIO PCIe Port 5)                    [Auto]                  |                             |
1064 ```
1065
1066 #### South Bridge
1067
1068 ```
1069   |  USB Module Version                        26                      |AUTO option disables legacy  |
1070   |                                                                    |support if no USB devices    |
1071   |  USB Devices:                                                      |are connected. DISABLE       |
1072   |        1 Drive, 2 Keyboards, 2 Mice, 1 Hub                         |option will keep USB         |
1073   |                                                                    |devices available only for   |
1074   |  Legacy USB Support                        [Enabled]               |EFI applications.            |
1075   |  XHCI Hand-off                             [Enabled]               |                             |
1076   |  Port 60/64 Emulation                      [Disabled]              |                             |
1077   |  PCIe PLL SSC                              [Disabled]              |                             |
1078   |  Port 61h Bit-4 Emulation                  [Disabled]              |                             |
1079 ```
1080
1081 ### PCIe/PCI/PnP Configuration
1082
1083 ```
1084   |  PCI Bus Driver Version                    A5.01.24               ^|Enables or Disables 64bit    |
1085   |                                                                   *|capable Devices to be        |
1086   |  PCI Devices Common Settings:                                     *|Decoded in Above 4G Address  |
1087   |  Above 4G Decoding                         [Enabled]              *|Space (Only if System        |
1088   |  SR-IOV Support                            [Enabled]              *|Supports 64 bit PCI          |
1089   |  ARI Support                               [Enabled]              *|Decoding).                   |
1090   |  Bus Master Enable                         [Enabled]              *|                             |
1091   |  Consistent Device Name Support            [Disabled]             *|                             |
1092   |  MMIO High Base                            [32T]                  *|                             |
1093   |  MMIO High Granularity Size                [64G]                  *|                             |
1094   |  Maximum Read Request                      [Auto]                 *|                             |
1095   |  MMCFG Base                                [Auto]                 *|                             |
1096   |  NVMe Firmware Source                      [Vendor Defined        *|                             |
1097   |                                            Firmware]              *|                             |
1098   |  VGA Priority                              [Onboard]              *|                             |
1099   |  CPU1 SLOT2 PCI-E 3.0 X16 OPROM            [EFI]                  *|                             |
1100   |  CPU1 SLOT4 PCI-E 3.0 X16 OPROM            [EFI]                  *|                             |
1101   |  CPU2 SLOT6 PCI-E 3.0 X16 OPROM            [EFI]                  *|                             |
1102   |  CPU2 SLOT8 PCI-E 3.0 X16 OPROM            [EFI]                  *|-----------------------------|
1103   |  CPU1 SLOT9 PCI-E 3.0 X16 OPROM            [EFI]                  *|><: Select Screen            |
1104   |  CPU2 SLOT10 PCI-E 3.0 X16 OPROM           [EFI]                  *|^v: Select Item              |
1105   |  CPU2 SLOT11 PCI-E 3.0 X4(IN X8) OPROM     [EFI]                  *|Enter: Select                |
1106   |  M.2 CONNECTOR OPROM                       [EFI]                  *|+/-: Change Opt.             |
1107   |  Bus Master Enable                         [Enabled]              +|F1: General Help             |
1108   |  Onboard LAN1 Option ROM                   [EFI]                  +|F2: Previous Values          |
1109   |  Onboard LAN2 Option ROM                   [Disabled]             +|F3: Optimized Defaults       |
1110   |  Onboard Video Option ROM                  [EFI]                  v|F4: Save & Exit              |
1111   |> Network Stack Configuration                                       |                             |
1112 ```
1113
1114 ## Xeon ICX Server Firmware Inventory
1115
1116 ```
1117 Host.           IPMI IP.      BMC.      BIOS. CPLD.     CPU Microcode.  PCI Bus.   X710 Firmware.  i40e.    E810 Firmware.  ice.
1118 s65-t37-sut1.   10.30.50.75.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.70.           2.19.3.  4.00.           1.9.7.
1119 s66-t37-sut2.   10.30.50.76.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.70.           2.19.3.  4.00.           1.9.7.
1120 s67-t37-tg1.    10.30.50.77.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30.           2.19.3.  3.20.           1.9.7.
1121 s78-t38-sut1.   10.30.50.78.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.70.           2.19.3.  4.00.           1.9.7.
1122 s79-t38-sut2.   10.30.50.79.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.70.           2.19.3.  4.00.           1.9.7.
1123 s80-t38-tg1.    10.30.50.80.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30.           2.19.3.  3.20.           1.9.7.
1124 s71-t212-sut1.  10.30.50.81.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.70.           2.19.3.  4.00.           1.9.7.
1125 s72-t212-tg1.   10.30.50.82.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30.           2.19.3.  3.20.           1.9.7.
1126 s83-t213-sut1.  10.30.50.83.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.70.           2.19.3.  4.00.           1.9.7.
1127 s84-t213-tg1.   10.30.50.84.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30.           2.19.3.  3.20.           1.9.7.
1128 s85-t214-sut1.  10.30.50.85.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.70.           2.19.3.  4.00.           1.9.7.
1129 s86-t214-tg1.   10.30.50.86.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30.           2.19.3.  3.20.           1.9.7.
1130 s87-t215-sut1.  10.30.50.87.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.70.           2.19.3.  4.00.           1.9.7.
1131 s88-t215-tg1.   10.30.50.88.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30.           2.19.3.  3.20.           1.9.7.
1132 ```