doc(infra): ICX onboarding
[csit.git] / docs / lab / testbeds_sm_icx_hw_bios_cfg.md
1 # SuperMicro Icelake Servers - HW and BIOS Configuration
2
3 1. [Linux lscpu](#linux-lscpu)
4 1. [Linux dmidecode](#dmidecode)
5 1. [Linux dmidecode pci](#linux-dmidecode-pci)
6 1. [Linux dmidecode memory](#linux-dmidecode-memory)
7 1. [Xeon ICX Server BIOS Configuration](#xeon-icx-server-bios-configuration)
8    1. [Boot Feature](#boot-feature)
9    1. [CPU Configuration](#cpu-configuration)
10       1. [Advanced Power Management Configuration](#advanced-power-management-configuration)
11          1. [CPU P State Control](#cpu-p-state-control)
12          1. [Hardware PM State Control](#hardware-pm-state-control)
13          1. [CPU C State Control](#cpu-c-state-control)
14          1. [Package C State Control](#package-c-state-control)
15          1. [CPU T State Control](#cpu-t-state-control)
16       1. [Chipset Configuration](#chipset-configuration)
17          1. [North Bridge](#north-bridge)
18          1. [UPI Configuration](#upi-configuration)
19          1. [Memory Configuration](#memory-configuration)
20          1. [IIO Configuration](#iio-configuration)
21          1. [CPU1 Configuration](#cpu1-configuration)
22          1. [CPU2 Configuration](#cpu2-configuration)
23       1. [South Bridge](#south-bridge)
24    1. [PCIe/PCI/PnP Configuration](#pciepcipnp-configuration)
25    1. [ACPI Settings](#acpi-settings)
26 1. [Xeon ICX Server Firmware Inventory](#xeon-icx-server-firmware-inventory)
27
28 ## Linux lscpu
29
30 ```
31 $ lscpu
32 Architecture:                    x86_64
33 CPU op-mode(s):                  32-bit, 64-bit
34 Byte Order:                      Little Endian
35 Address sizes:                   46 bits physical, 57 bits virtual
36 CPU(s):                          128
37 On-line CPU(s) list:             0-127
38 Thread(s) per core:              2
39 Core(s) per socket:              32
40 Socket(s):                       2
41 NUMA node(s):                    2
42 Vendor ID:                       GenuineIntel
43 CPU family:                      6
44 Model:                           106
45 Model name:                      Intel(R) Xeon(R) Platinum 8358 CPU @ 2.60GHz
46 Stepping:                        6
47 CPU MHz:                         3283.980
48 BogoMIPS:                        5200.00
49 Virtualization:                  VT-x
50 L1d cache:                       3 MiB
51 L1i cache:                       2 MiB
52 L2 cache:                        80 MiB
53 L3 cache:                        96 MiB
54 NUMA node0 CPU(s):               0-31,64-95
55 NUMA node1 CPU(s):               32-63,96-127
56 Vulnerability Itlb multihit:     Not affected
57 Vulnerability L1tf:              Not affected
58 Vulnerability Mds:               Not affected
59 Vulnerability Meltdown:          Not affected
60 Vulnerability Spec store bypass: Mitigation; Speculative Store Bypass disabled via prctl and seccomp
61 Vulnerability Spectre v1:        Mitigation; usercopy/swapgs barriers and __user pointer sanitization
62 Vulnerability Spectre v2:        Mitigation; Enhanced IBRS, IBPB conditional, RSB filling
63 Vulnerability Srbds:             Not affected
64 Vulnerability Tsx async abort:   Not affected
65 Flags:                           fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush dts acpi mmx fxsr sse sse2 ss ht tm pbe sysca
66                                  ll nx pdpe1gb rdtscp lm constant_tsc art arch_perfmon pebs bts rep_good nopl xtopology nonstop_tsc cpuid aperfmperf pni pclmu
67                                  lqdq dtes64 monitor ds_cpl vmx smx est tm2 ssse3 sdbg fma cx16 xtpr pdcm pcid dca sse4_1 sse4_2 x2apic movbe popcnt tsc_deadl
68                                  ine_timer aes xsave avx f16c rdrand lahf_lm abm 3dnowprefetch cpuid_fault epb cat_l3 invpcid_single ssbd mba ibrs ibpb stibp
69                                  ibrs_enhanced tpr_shadow vnmi flexpriority ept vpid ept_ad fsgsbase tsc_adjust bmi1 avx2 smep bmi2 erms invpcid cqm rdt_a avx
70                                  512f avx512dq rdseed adx smap avx512ifma clflushopt clwb intel_pt avx512cd sha_ni avx512bw avx512vl xsaveopt xsavec xgetbv1 x
71                                  saves cqm_llc cqm_occup_llc cqm_mbm_total cqm_mbm_local wbnoinvd dtherm ida arat pln pts avx512vbmi umip pku ospke avx512_vbm
72                                  i2 gfni vaes vpclmulqdq avx512_vnni avx512_bitalg tme avx512_vpopcntdq rdpid md_clear pconfig flush_l1d arch_capabilities
73 ```
74
75 ## Linux dmidecode
76
77 ```
78 # dmidecode 3.2
79 Getting SMBIOS data from sysfs.
80 SMBIOS 3.3.0 present.
81 # SMBIOS implementations newer than version 3.2.0 are not
82 # fully supported by this version of dmidecode.
83 Table at 0x6BAEE000.
84
85 Handle 0x0000, DMI type 0, 26 bytes
86 BIOS Information
87         Vendor: American Megatrends International, LLC.
88         Version: 1.1
89         Release Date: 04/09/2021
90         Address: 0xF0000
91         Runtime Size: 64 kB
92         ROM Size: 32 MB
93         Characteristics:
94                 PCI is supported
95                 BIOS is upgradeable
96                 BIOS shadowing is allowed
97                 Boot from CD is supported
98                 Selectable boot is supported
99                 BIOS ROM is socketed
100                 EDD is supported
101                 Japanese floppy for NEC 9800 1.2 MB is supported (int 13h)
102                 Japanese floppy for Toshiba 1.2 MB is supported (int 13h)
103                 5.25"/360 kB floppy services are supported (int 13h)
104                 5.25"/1.2 MB floppy services are supported (int 13h)
105                 3.5"/720 kB floppy services are supported (int 13h)
106                 3.5"/2.88 MB floppy services are supported (int 13h)
107                 Print screen service is supported (int 5h)
108                 Serial services are supported (int 14h)
109                 Printer services are supported (int 17h)
110                 CGA/mono video services are supported (int 10h)
111                 USB legacy is supported
112                 BIOS boot specification is supported
113                 Targeted content distribution is supported
114                 UEFI is supported
115         BIOS Revision: 5.22
116
117 Handle 0x0001, DMI type 1, 27 bytes
118 System Information
119         Manufacturer: Supermicro
120         Product Name: SYS-740GP-TNRT
121         Version: 0123456789
122         Serial Number: S424016X1B00510
123         UUID: 0698ae00-2383-11ec-8000-3cecefb9a6ba
124         Wake-up Type: Power Switch
125         SKU Number: To be filled by O.E.M.
126         Family: Family
127
128 Handle 0x0002, DMI type 2, 15 bytes
129 Base Board Information
130         Manufacturer: Supermicro
131         Product Name: X12DPG-QT6
132         Version: 1.00
133         Serial Number: UM219S003392
134         Asset Tag: Base Board Asset Tag
135         Features:
136                 Board is a hosting board
137                 Board is replaceable
138         Location In Chassis: Part Component
139         Chassis Handle: 0x0003
140         Type: Motherboard
141         Contained Object Handles: 0
142
143 Handle 0x0003, DMI type 3, 22 bytes
144 Chassis Information
145         Manufacturer: Supermicro
146         Type: Other
147         Lock: Not Present
148         Version: 0123456789
149         Serial Number: C7470KK25P50098
150         Asset Tag: Chassis Asset Tag
151         Boot-up State: Safe
152         Power Supply State: Safe
153         Thermal State: Safe
154         Security Status: None
155         OEM Information: 0x00000000
156         Height: Unspecified
157         Number Of Power Cords: 1
158         Contained Elements: 0
159         SKU Number: To be filled by O.E.M.
160
161 Handle 0x001B, DMI type 38, 18 bytes
162 IPMI Device Information
163         Interface Type: KCS (Keyboard Control Style)
164         Specification Version: 2.0
165         I2C Slave Address: 0x10
166         NV Storage Device: Not Present
167         Base Address: 0x0000000000000CA2 (I/O)
168         Register Spacing: Successive Byte Boundaries
169
170 Handle 0x002A, DMI type 4, 48 bytes
171 Processor Information
172         Socket Designation: CPU1
173         Type: Central Processor
174         Family: Xeon
175         Manufacturer: Intel(R) Corporation
176         ID: A6 06 06 00 FF FB EB BF
177         Signature: Type 0, Family 6, Model 106, Stepping 6
178         Flags:
179                 FPU (Floating-point unit on-chip)
180                 VME (Virtual mode extension)
181                 DE (Debugging extension)
182                 PSE (Page size extension)
183                 TSC (Time stamp counter)
184                 MSR (Model specific registers)
185                 PAE (Physical address extension)
186                 MCE (Machine check exception)
187                 CX8 (CMPXCHG8 instruction supported)
188                 APIC (On-chip APIC hardware supported)
189                 SEP (Fast system call)
190                 MTRR (Memory type range registers)
191                 PGE (Page global enable)
192                 MCA (Machine check architecture)
193                 CMOV (Conditional move instruction supported)
194                 PAT (Page attribute table)
195                 PSE-36 (36-bit page size extension)
196                 CLFSH (CLFLUSH instruction supported)
197                 DS (Debug store)
198                 ACPI (ACPI supported)
199                 MMX (MMX technology supported)
200                 FXSR (FXSAVE and FXSTOR instructions supported)
201                 SSE (Streaming SIMD extensions)
202                 SSE2 (Streaming SIMD extensions 2)
203                 SS (Self-snoop)
204                 HTT (Multi-threading)
205                 TM (Thermal monitor supported)
206                 PBE (Pending break enabled)
207         Version: Intel(R) Xeon(R) Platinum 8358 CPU @ 2.60GHz
208         Voltage: 1.6 V
209         External Clock: 100 MHz
210         Max Speed: 4500 MHz
211         Current Speed: 2600 MHz
212         Status: Populated, Enabled
213         Upgrade: <OUT OF SPEC>
214         L1 Cache Handle: 0x0027
215         L2 Cache Handle: 0x0028
216         L3 Cache Handle: 0x0029
217         Serial Number: Not Specified
218         Asset Tag: UNKNOWN
219         Part Number: Not Specified
220         Core Count: 32
221         Core Enabled: 32
222         Thread Count: 64
223         Characteristics:
224                 64-bit capable
225                 Multi-Core
226                 Hardware Thread
227                 Execute Protection
228                 Enhanced Virtualization
229                 Power/Performance Control
230
231 Handle 0x002E, DMI type 4, 48 bytes
232 Processor Information
233         Socket Designation: CPU2
234         Type: Central Processor
235         Family: Xeon
236         Manufacturer: Intel(R) Corporation
237         ID: A6 06 06 00 FF FB EB BF
238         Signature: Type 0, Family 6, Model 106, Stepping 6
239         Flags:
240                 FPU (Floating-point unit on-chip)
241                 VME (Virtual mode extension)
242                 DE (Debugging extension)
243                 PSE (Page size extension)
244                 TSC (Time stamp counter)
245                 MSR (Model specific registers)
246                 PAE (Physical address extension)
247                 MCE (Machine check exception)
248                 CX8 (CMPXCHG8 instruction supported)
249                 APIC (On-chip APIC hardware supported)
250                 SEP (Fast system call)
251                 MTRR (Memory type range registers)
252                 PGE (Page global enable)
253                 MCA (Machine check architecture)
254                 CMOV (Conditional move instruction supported)
255                 PAT (Page attribute table)
256                 PSE-36 (36-bit page size extension)
257                 CLFSH (CLFLUSH instruction supported)
258                 DS (Debug store)
259                 ACPI (ACPI supported)
260                 MMX (MMX technology supported)
261                 FXSR (FXSAVE and FXSTOR instructions supported)
262                 SSE (Streaming SIMD extensions)
263                 SSE2 (Streaming SIMD extensions 2)
264                 SS (Self-snoop)
265                 HTT (Multi-threading)
266                 TM (Thermal monitor supported)
267                 PBE (Pending break enabled)
268         Version: Intel(R) Xeon(R) Platinum 8358 CPU @ 2.60GHz
269         Voltage: 1.6 V
270         External Clock: 100 MHz
271         Max Speed: 4500 MHz
272         Current Speed: 2600 MHz
273         Status: Populated, Enabled
274         Upgrade: <OUT OF SPEC>
275         L1 Cache Handle: 0x002B
276         L2 Cache Handle: 0x002C
277         L3 Cache Handle: 0x002D
278         Serial Number: Not Specified
279         Asset Tag: UNKNOWN
280         Part Number: Not Specified
281         Core Count: 32
282         Core Enabled: 32
283         Thread Count: 64
284         Characteristics:
285                 64-bit capable
286                 Multi-Core
287                 Hardware Thread
288                 Execute Protection
289                 Enhanced Virtualization
290                 Power/Performance Control
291 ```
292
293 ## Linux dmidecode pci
294
295 ```
296   $ dmidecode -t slot
297 Handle 0x000A, DMI type 9, 17 bytes
298 System Slot Information
299         Designation: CPU1 SLOT2 PCI-E 4.0 X16
300         Type: x16 <OUT OF SPEC>
301         Current Usage: In Use
302         Length: Short
303         Characteristics:
304                 3.3 V is provided
305                 Opening is shared
306                 PME signal is supported
307         Bus Address: 0000:4b:00.0
308
309 Handle 0x000B, DMI type 9, 17 bytes
310 System Slot Information
311         Designation: CPU1 SlOT4 PCI-E 4.0 X16
312         Type: x16 <OUT OF SPEC>
313         Current Usage: In Use
314         Length: Short
315         Characteristics:
316                 3.3 V is provided
317                 Opening is shared
318                 PME signal is supported
319         Bus Address: 0000:31:00.0
320
321 Handle 0x000C, DMI type 9, 17 bytes
322 System Slot Information
323         Designation: CPU2 SLOT6 PCI-E 4.0 X16
324         Type: x16 <OUT OF SPEC>
325         Current Usage: Available
326         Length: Short
327         Characteristics:
328                 3.3 V is provided
329                 Opening is shared
330                 PME signal is supported
331         Bus Address: 0000:ff:00.0
332
333 Handle 0x000D, DMI type 9, 17 bytes
334 System Slot Information
335         Designation: CPU2 SLOT8 PCI-E 4.0 X16
336         Type: x16 <OUT OF SPEC>
337         Current Usage: Available
338         Length: Short
339         Characteristics:
340                 3.3 V is provided
341                 Opening is shared
342                 PME signal is supported
343         Bus Address: 0000:ff:00.0
344
345 Handle 0x000E, DMI type 9, 17 bytes
346 System Slot Information
347         Designation: CPU1 SLOT9 PCI-E 4.0 X16
348         Type: x16 <OUT OF SPEC>
349         Current Usage: In Use
350         Length: Short
351         Characteristics:
352                 3.3 V is provided
353                 Opening is shared
354                 PME signal is supported
355         Bus Address: 0000:17:00.0
356
357 Handle 0x000F, DMI type 9, 17 bytes
358 System Slot Information
359         Designation: CPU2 SLOT10 PCI-E 4.0 X16
360         Type: x16 <OUT OF SPEC>
361         Current Usage: Available
362         Length: Short
363         Characteristics:
364                 3.3 V is provided
365                 Opening is shared
366                 PME signal is supported
367         Bus Address: 0000:ff:00.0
368
369 Handle 0x0010, DMI type 9, 17 bytes
370 System Slot Information
371         Designation: CPU2 SLOT11 PCI-E 4.0 X8
372         Type: x8 <OUT OF SPEC>
373         Current Usage: Available
374         Length: Short
375         Characteristics:
376                 3.3 V is provided
377                 Opening is shared
378                 PME signal is supported
379         Bus Address: 0000:ff:00.0
380
381 Handle 0x0011, DMI type 9, 17 bytes
382 System Slot Information
383         Designation: M.2-HC1
384         Type: x4 M.2 Socket 2
385         Current Usage: Available
386         Length: Short
387         Characteristics:
388                 3.3 V is provided
389                 Opening is shared
390                 PME signal is supported
391         Bus Address: 0000:ff:00.0
392
393 Handle 0x0012, DMI type 9, 17 bytes
394 System Slot Information
395         Designation: M.2-HC2
396         Type: x4 M.2 Socket 2
397         Current Usage: Available
398         Length: Short
399         Characteristics:
400                 3.3 V is provided
401                 Opening is shared
402                 PME signal is supported
403         Bus Address: 0000:ff:00.0
404 ```
405
406 ## Linux dmidecode memory
407
408 ```
409   $ dmidecode -t memory
410 Handle 0x0033, DMI type 16, 23 bytes
411 Physical Memory Array
412         Location: System Board Or Motherboard
413         Use: System Memory
414         Error Correction Type: Single-bit ECC
415         Maximum Capacity: 12 TB
416         Error Information Handle: Not Provided
417         Number Of Devices: 16
418
419 Handle 0x0034, DMI type 17, 92 bytes
420 Memory Device
421         Array Handle: 0x0033
422         Error Information Handle: Not Provided
423         Total Width: 72 bits
424         Data Width: 64 bits
425         Size: 16384 MB
426         Form Factor: DIMM
427         Set: None
428         Locator: P1-DIMMA1
429         Bank Locator: P0_Node0_Channel0_Dimm0
430         Type: DDR4
431         Type Detail: Synchronous Registered (Buffered)
432         Speed: 3200 MT/s
433         Manufacturer: Samsung
434         Serial Number: H0MK0001304705C2E3
435         Asset Tag: P1-DIMMA1_AssetTag (date:21/30)
436         Part Number: M393A2K43DB3-CWE
437         Rank: 2
438         Configured Memory Speed: 3200 MT/s
439         Minimum Voltage: 1.2 V
440         Maximum Voltage: 1.2 V
441         Configured Voltage: 1.2 V
442         Memory Technology: DRAM
443         Memory Operating Mode Capability: Volatile memory
444         Firmware Version: 0000
445         Module Manufacturer ID: Bank 1, Hex 0xCE
446         Module Product ID: Unknown
447         Memory Subsystem Controller Manufacturer ID: Unknown
448         Memory Subsystem Controller Product ID: Unknown
449         Non-Volatile Size: None
450         Volatile Size: 16 GB
451         Cache Size: None
452         Logical Size: None
453
454 Handle 0x0036, DMI type 17, 92 bytes
455 Memory Device
456         Array Handle: 0x0033
457         Error Information Handle: Not Provided
458         Total Width: 72 bits
459         Data Width: 64 bits
460         Size: 16384 MB
461         Form Factor: DIMM
462         Set: None
463         Locator: P1-DIMMB1
464         Bank Locator: P0_Node0_Channel1_Dimm0
465         Type: DDR4
466         Type Detail: Synchronous Registered (Buffered)
467         Speed: 3200 MT/s
468         Manufacturer: Samsung
469         Serial Number: H0MK0001304705CE60
470         Asset Tag: P1-DIMMB1_AssetTag (date:21/30)
471         Part Number: M393A2K43DB3-CWE
472         Rank: 2
473         Configured Memory Speed: 3200 MT/s
474         Minimum Voltage: 1.2 V
475         Maximum Voltage: 1.2 V
476         Configured Voltage: 1.2 V
477         Memory Technology: DRAM
478         Memory Operating Mode Capability: Volatile memory
479         Firmware Version: 0000
480         Module Manufacturer ID: Bank 1, Hex 0xCE
481         Module Product ID: Unknown
482         Memory Subsystem Controller Manufacturer ID: Unknown
483         Memory Subsystem Controller Product ID: Unknown
484         Non-Volatile Size: None
485         Volatile Size: 16 GB
486         Cache Size: None
487         Logical Size: None
488
489 Handle 0x0038, DMI type 17, 92 bytes
490 Memory Device
491         Array Handle: 0x0033
492         Error Information Handle: Not Provided
493         Total Width: 72 bits
494         Data Width: 64 bits
495         Size: 16384 MB
496         Form Factor: DIMM
497         Set: None
498         Locator: P1-DIMMC1
499         Bank Locator: P0_Node0_Channel2_Dimm0
500         Type: DDR4
501         Type Detail: Synchronous Registered (Buffered)
502         Speed: 3200 MT/s
503         Manufacturer: Samsung
504         Serial Number: H0MK0001304705C59E
505         Asset Tag: P1-DIMMC1_AssetTag (date:21/30)
506         Part Number: M393A2K43DB3-CWE
507         Rank: 2
508         Configured Memory Speed: 3200 MT/s
509         Minimum Voltage: 1.2 V
510         Maximum Voltage: 1.2 V
511         Configured Voltage: 1.2 V
512         Memory Technology: DRAM
513         Memory Operating Mode Capability: Volatile memory
514         Firmware Version: 0000
515         Module Manufacturer ID: Bank 1, Hex 0xCE
516         Module Product ID: Unknown
517         Memory Subsystem Controller Manufacturer ID: Unknown
518         Memory Subsystem Controller Product ID: Unknown
519         Non-Volatile Size: None
520         Volatile Size: 16 GB
521         Cache Size: None
522         Logical Size: None
523
524 Handle 0x003A, DMI type 17, 92 bytes
525 Memory Device
526         Array Handle: 0x0033
527         Error Information Handle: Not Provided
528         Total Width: 72 bits
529         Data Width: 64 bits
530         Size: 16384 MB
531         Form Factor: DIMM
532         Set: None
533         Locator: P1-DIMMD1
534         Bank Locator: P0_Node0_Channel3_Dimm0
535         Type: DDR4
536         Type Detail: Synchronous Registered (Buffered)
537         Speed: 3200 MT/s
538         Manufacturer: Samsung
539         Serial Number: H0MK0001304705D12D
540         Asset Tag: P1-DIMMD1_AssetTag (date:21/30)
541         Part Number: M393A2K43DB3-CWE
542         Rank: 2
543         Configured Memory Speed: 3200 MT/s
544         Minimum Voltage: 1.2 V
545         Maximum Voltage: 1.2 V
546         Configured Voltage: 1.2 V
547         Memory Technology: DRAM
548         Memory Operating Mode Capability: Volatile memory
549         Firmware Version: 0000
550         Module Manufacturer ID: Bank 1, Hex 0xCE
551         Module Product ID: Unknown
552         Memory Subsystem Controller Manufacturer ID: Unknown
553         Memory Subsystem Controller Product ID: Unknown
554         Non-Volatile Size: None
555         Volatile Size: 16 GB
556         Cache Size: None
557         Logical Size: None
558
559 Handle 0x003C, DMI type 17, 92 bytes
560 Memory Device
561         Array Handle: 0x0033
562         Error Information Handle: Not Provided
563         Total Width: 72 bits
564         Data Width: 64 bits
565         Size: 16384 MB
566         Form Factor: DIMM
567         Set: None
568         Locator: P1-DIMME1
569         Bank Locator: P0_Node1_Channel0_Dimm0
570         Type: DDR4
571         Type Detail: Synchronous Registered (Buffered)
572         Speed: 3200 MT/s
573         Manufacturer: Samsung
574         Serial Number: H0MK0001304705C69C
575         Asset Tag: P1-DIMME1_AssetTag (date:21/30)
576         Part Number: M393A2K43DB3-CWE
577         Rank: 2
578         Configured Memory Speed: 3200 MT/s
579         Minimum Voltage: 1.2 V
580         Maximum Voltage: 1.2 V
581         Configured Voltage: 1.2 V
582         Memory Technology: DRAM
583         Memory Operating Mode Capability: Volatile memory
584         Firmware Version: 0000
585         Module Manufacturer ID: Bank 1, Hex 0xCE
586         Module Product ID: Unknown
587         Memory Subsystem Controller Manufacturer ID: Unknown
588         Memory Subsystem Controller Product ID: Unknown
589         Non-Volatile Size: None
590         Volatile Size: 16 GB
591         Cache Size: None
592         Logical Size: None
593
594 Handle 0x003E, DMI type 17, 92 bytes
595 Memory Device
596         Array Handle: 0x0033
597         Error Information Handle: Not Provided
598         Total Width: 72 bits
599         Data Width: 64 bits
600         Size: 16384 MB
601         Form Factor: DIMM
602         Set: None
603         Locator: P1-DIMMF1
604         Bank Locator: P0_Node1_Channel1_Dimm0
605         Type: DDR4
606         Type Detail: Synchronous Registered (Buffered)
607         Speed: 3200 MT/s
608         Manufacturer: Samsung
609         Serial Number: H0MK0001304705C33A
610         Asset Tag: P1-DIMMF1_AssetTag (date:21/30)
611         Part Number: M393A2K43DB3-CWE
612         Rank: 2
613         Configured Memory Speed: 3200 MT/s
614         Minimum Voltage: 1.2 V
615         Maximum Voltage: 1.2 V
616         Configured Voltage: 1.2 V
617         Memory Technology: DRAM
618         Memory Operating Mode Capability: Volatile memory
619         Firmware Version: 0000
620         Module Manufacturer ID: Bank 1, Hex 0xCE
621         Module Product ID: Unknown
622         Memory Subsystem Controller Manufacturer ID: Unknown
623         Memory Subsystem Controller Product ID: Unknown
624         Non-Volatile Size: None
625         Volatile Size: 16 GB
626         Cache Size: None
627         Logical Size: None
628
629 Handle 0x0040, DMI type 17, 92 bytes
630 Memory Device
631         Array Handle: 0x0033
632         Error Information Handle: Not Provided
633         Total Width: 72 bits
634         Data Width: 64 bits
635         Size: 16384 MB
636         Form Factor: DIMM
637         Set: None
638         Locator: P1-DIMMG1
639         Bank Locator: P0_Node1_Channel2_Dimm0
640         Type: DDR4
641         Type Detail: Synchronous Registered (Buffered)
642         Speed: 3200 MT/s
643         Manufacturer: Samsung
644         Serial Number: H0MK0001304705C59F
645         Asset Tag: P1-DIMMG1_AssetTag (date:21/30)
646         Part Number: M393A2K43DB3-CWE
647         Rank: 2
648         Configured Memory Speed: 3200 MT/s
649         Minimum Voltage: 1.2 V
650         Maximum Voltage: 1.2 V
651         Configured Voltage: 1.2 V
652         Memory Technology: DRAM
653         Memory Operating Mode Capability: Volatile memory
654         Firmware Version: 0000
655         Module Manufacturer ID: Bank 1, Hex 0xCE
656         Module Product ID: Unknown
657         Memory Subsystem Controller Manufacturer ID: Unknown
658         Memory Subsystem Controller Product ID: Unknown
659         Non-Volatile Size: None
660         Volatile Size: 16 GB
661         Cache Size: None
662         Logical Size: None
663
664 Handle 0x0042, DMI type 17, 92 bytes
665 Memory Device
666         Array Handle: 0x0033
667         Error Information Handle: Not Provided
668         Total Width: 72 bits
669         Data Width: 64 bits
670         Size: 16384 MB
671         Form Factor: DIMM
672         Set: None
673         Locator: P1-DIMMH1
674         Bank Locator: P0_Node1_Channel3_Dimm0
675         Type: DDR4
676         Type Detail: Synchronous Registered (Buffered)
677         Speed: 3200 MT/s
678         Manufacturer: Samsung
679         Serial Number: H0MK0001304705CA16
680         Asset Tag: P1-DIMMH1_AssetTag (date:21/30)
681         Part Number: M393A2K43DB3-CWE
682         Rank: 2
683         Configured Memory Speed: 3200 MT/s
684         Minimum Voltage: 1.2 V
685         Maximum Voltage: 1.2 V
686         Configured Voltage: 1.2 V
687         Memory Technology: DRAM
688         Memory Operating Mode Capability: Volatile memory
689         Firmware Version: 0000
690         Module Manufacturer ID: Bank 1, Hex 0xCE
691         Module Product ID: Unknown
692         Memory Subsystem Controller Manufacturer ID: Unknown
693         Memory Subsystem Controller Product ID: Unknown
694         Non-Volatile Size: None
695         Volatile Size: 16 GB
696         Cache Size: None
697         Logical Size: None
698
699 Handle 0x0044, DMI type 17, 92 bytes
700 Memory Device
701         Array Handle: 0x0033
702         Error Information Handle: Not Provided
703         Total Width: 72 bits
704         Data Width: 64 bits
705         Size: 16384 MB
706         Form Factor: DIMM
707         Set: None
708         Locator: P2-DIMMA1
709         Bank Locator: P1_Node0_Channel0_Dimm0
710         Type: DDR4
711         Type Detail: Synchronous Registered (Buffered)
712         Speed: 3200 MT/s
713         Manufacturer: Samsung
714         Serial Number: H0MK0001304705CBFE
715         Asset Tag: P2-DIMMA1_AssetTag (date:21/30)
716         Part Number: M393A2K43DB3-CWE
717         Rank: 2
718         Configured Memory Speed: 3200 MT/s
719         Minimum Voltage: 1.2 V
720         Maximum Voltage: 1.2 V
721         Configured Voltage: 1.2 V
722         Memory Technology: DRAM
723         Memory Operating Mode Capability: Volatile memory
724         Firmware Version: 0000
725         Module Manufacturer ID: Bank 1, Hex 0xCE
726         Module Product ID: Unknown
727         Memory Subsystem Controller Manufacturer ID: Unknown
728         Memory Subsystem Controller Product ID: Unknown
729         Non-Volatile Size: None
730         Volatile Size: 16 GB
731         Cache Size: None
732         Logical Size: None
733
734 Handle 0x0046, DMI type 17, 92 bytes
735 Memory Device
736         Array Handle: 0x0033
737         Error Information Handle: Not Provided
738         Total Width: 72 bits
739         Data Width: 64 bits
740         Size: 16384 MB
741         Form Factor: DIMM
742         Set: None
743         Locator: P2-DIMMB1
744         Bank Locator: P1_Node0_Channel1_Dimm0
745         Type: DDR4
746         Type Detail: Synchronous Registered (Buffered)
747         Speed: 3200 MT/s
748         Manufacturer: Samsung
749         Serial Number: H0MK0001304705CFC8
750         Asset Tag: P2-DIMMB1_AssetTag (date:21/30)
751         Part Number: M393A2K43DB3-CWE
752         Rank: 2
753         Configured Memory Speed: 3200 MT/s
754         Minimum Voltage: 1.2 V
755         Maximum Voltage: 1.2 V
756         Configured Voltage: 1.2 V
757         Memory Technology: DRAM
758         Memory Operating Mode Capability: Volatile memory
759         Firmware Version: 0000
760         Module Manufacturer ID: Bank 1, Hex 0xCE
761         Module Product ID: Unknown
762         Memory Subsystem Controller Manufacturer ID: Unknown
763         Memory Subsystem Controller Product ID: Unknown
764         Non-Volatile Size: None
765         Volatile Size: 16 GB
766         Cache Size: None
767         Logical Size: None
768
769 Handle 0x0048, DMI type 17, 92 bytes
770 Memory Device
771         Array Handle: 0x0033
772         Error Information Handle: Not Provided
773         Total Width: 72 bits
774         Data Width: 64 bits
775         Size: 16384 MB
776         Form Factor: DIMM
777         Set: None
778         Locator: P2-DIMMC1
779         Bank Locator: P1_Node0_Channel2_Dimm0
780         Type: DDR4
781         Type Detail: Synchronous Registered (Buffered)
782         Speed: 3200 MT/s
783         Manufacturer: Samsung
784         Serial Number: H0MK0001304705CC02
785         Asset Tag: P2-DIMMC1_AssetTag (date:21/30)
786         Part Number: M393A2K43DB3-CWE
787         Rank: 2
788         Configured Memory Speed: 3200 MT/s
789         Minimum Voltage: 1.2 V
790         Maximum Voltage: 1.2 V
791         Configured Voltage: 1.2 V
792         Memory Technology: DRAM
793         Memory Operating Mode Capability: Volatile memory
794         Firmware Version: 0000
795         Module Manufacturer ID: Bank 1, Hex 0xCE
796         Module Product ID: Unknown
797         Memory Subsystem Controller Manufacturer ID: Unknown
798         Memory Subsystem Controller Product ID: Unknown
799         Non-Volatile Size: None
800         Volatile Size: 16 GB
801         Cache Size: None
802         Logical Size: None
803
804 Handle 0x004A, DMI type 17, 92 bytes
805 Memory Device
806         Array Handle: 0x0033
807         Error Information Handle: Not Provided
808         Total Width: 72 bits
809         Data Width: 64 bits
810         Size: 16384 MB
811         Form Factor: DIMM
812         Set: None
813         Locator: P2-DIMMD1
814         Bank Locator: P1_Node0_Channel3_Dimm0
815         Type: DDR4
816         Type Detail: Synchronous Registered (Buffered)
817         Speed: 3200 MT/s
818         Manufacturer: Samsung
819         Serial Number: H0MK0001304705CB5A
820         Asset Tag: P2-DIMMD1_AssetTag (date:21/30)
821         Part Number: M393A2K43DB3-CWE
822         Rank: 2
823         Configured Memory Speed: 3200 MT/s
824         Minimum Voltage: 1.2 V
825         Maximum Voltage: 1.2 V
826         Configured Voltage: 1.2 V
827         Memory Technology: DRAM
828         Memory Operating Mode Capability: Volatile memory
829         Firmware Version: 0000
830         Module Manufacturer ID: Bank 1, Hex 0xCE
831         Module Product ID: Unknown
832         Memory Subsystem Controller Manufacturer ID: Unknown
833         Memory Subsystem Controller Product ID: Unknown
834         Non-Volatile Size: None
835         Volatile Size: 16 GB
836         Cache Size: None
837         Logical Size: None
838
839 Handle 0x004C, DMI type 17, 92 bytes
840 Memory Device
841         Array Handle: 0x0033
842         Error Information Handle: Not Provided
843         Total Width: 72 bits
844         Data Width: 64 bits
845         Size: 16384 MB
846         Form Factor: DIMM
847         Set: None
848         Locator: P2-DIMME1
849         Bank Locator: P1_Node1_Channel0_Dimm0
850         Type: DDR4
851         Type Detail: Synchronous Registered (Buffered)
852         Speed: 3200 MT/s
853         Manufacturer: Samsung
854         Serial Number: H0MK0001304705CB30
855         Asset Tag: P2-DIMME1_AssetTag (date:21/30)
856         Part Number: M393A2K43DB3-CWE
857         Rank: 2
858         Configured Memory Speed: 3200 MT/s
859         Minimum Voltage: 1.2 V
860         Maximum Voltage: 1.2 V
861         Configured Voltage: 1.2 V
862         Memory Technology: DRAM
863         Memory Operating Mode Capability: Volatile memory
864         Firmware Version: 0000
865         Module Manufacturer ID: Bank 1, Hex 0xCE
866         Module Product ID: Unknown
867         Memory Subsystem Controller Manufacturer ID: Unknown
868         Memory Subsystem Controller Product ID: Unknown
869         Non-Volatile Size: None
870         Volatile Size: 16 GB
871         Cache Size: None
872         Logical Size: None
873
874 Handle 0x004E, DMI type 17, 92 bytes
875 Memory Device
876         Array Handle: 0x0033
877         Error Information Handle: Not Provided
878         Total Width: 72 bits
879         Data Width: 64 bits
880         Size: 16384 MB
881         Form Factor: DIMM
882         Set: None
883         Locator: P2-DIMMF1
884         Bank Locator: P1_Node1_Channel1_Dimm0
885         Type: DDR4
886         Type Detail: Synchronous Registered (Buffered)
887         Speed: 3200 MT/s
888         Manufacturer: Samsung
889         Serial Number: H0MK0001304705CB87
890         Asset Tag: P2-DIMMF1_AssetTag (date:21/30)
891         Part Number: M393A2K43DB3-CWE
892         Rank: 2
893         Configured Memory Speed: 3200 MT/s
894         Minimum Voltage: 1.2 V
895         Maximum Voltage: 1.2 V
896         Configured Voltage: 1.2 V
897         Memory Technology: DRAM
898         Memory Operating Mode Capability: Volatile memory
899         Firmware Version: 0000
900         Module Manufacturer ID: Bank 1, Hex 0xCE
901         Module Product ID: Unknown
902         Memory Subsystem Controller Manufacturer ID: Unknown
903         Memory Subsystem Controller Product ID: Unknown
904         Non-Volatile Size: None
905         Volatile Size: 16 GB
906         Cache Size: None
907         Logical Size: None
908
909 Handle 0x0050, DMI type 17, 92 bytes
910 Memory Device
911         Array Handle: 0x0033
912         Error Information Handle: Not Provided
913         Total Width: 72 bits
914         Data Width: 64 bits
915         Size: 16384 MB
916         Form Factor: DIMM
917         Set: None
918         Locator: P2-DIMMG1
919         Bank Locator: P1_Node1_Channel2_Dimm0
920         Type: DDR4
921         Type Detail: Synchronous Registered (Buffered)
922         Speed: 3200 MT/s
923         Manufacturer: Samsung
924         Serial Number: H0MK0001304705CB08
925         Asset Tag: P2-DIMMG1_AssetTag (date:21/30)
926         Part Number: M393A2K43DB3-CWE
927         Rank: 2
928         Configured Memory Speed: 3200 MT/s
929         Minimum Voltage: 1.2 V
930         Maximum Voltage: 1.2 V
931         Configured Voltage: 1.2 V
932         Memory Technology: DRAM
933         Memory Operating Mode Capability: Volatile memory
934         Firmware Version: 0000
935         Module Manufacturer ID: Bank 1, Hex 0xCE
936         Module Product ID: Unknown
937         Memory Subsystem Controller Manufacturer ID: Unknown
938         Memory Subsystem Controller Product ID: Unknown
939         Non-Volatile Size: None
940         Volatile Size: 16 GB
941         Cache Size: None
942         Logical Size: None
943
944 Handle 0x0052, DMI type 17, 92 bytes
945 Memory Device
946         Array Handle: 0x0033
947         Error Information Handle: Not Provided
948         Total Width: 72 bits
949         Data Width: 64 bits
950         Size: 16384 MB
951         Form Factor: DIMM
952         Set: None
953         Locator: P2-DIMMH1
954         Bank Locator: P1_Node1_Channel3_Dimm0
955         Type: DDR4
956         Type Detail: Synchronous Registered (Buffered)
957         Speed: 3200 MT/s
958         Manufacturer: Samsung
959         Serial Number: H0MK0001304705CC01
960         Asset Tag: P2-DIMMH1_AssetTag (date:21/30)
961         Part Number: M393A2K43DB3-CWE
962         Rank: 2
963         Configured Memory Speed: 3200 MT/s
964         Minimum Voltage: 1.2 V
965         Maximum Voltage: 1.2 V
966         Configured Voltage: 1.2 V
967         Memory Technology: DRAM
968         Memory Operating Mode Capability: Volatile memory
969         Firmware Version: 0000
970         Module Manufacturer ID: Bank 1, Hex 0xCE
971         Module Product ID: Unknown
972         Memory Subsystem Controller Manufacturer ID: Unknown
973         Memory Subsystem Controller Product ID: Unknown
974         Non-Volatile Size: None
975         Volatile Size: 16 GB
976         Cache Size: None
977         Logical Size: None
978 ```
979
980 ## Xeon ICX Server BIOS Configuration
981
982 ### Boot Feature
983
984 ```
985   |                                                                    |Enables or disables Quiet    |
986   |  Quiet Boot                                [Enabled]               |Boot option                  |
987   |                                                                    |                             |
988   |  Option ROM Messages                       [Force BIOS]            |                             |
989   |  Bootup NumLock State                      [On]                    |                             |
990   |  Wait For "F1" If Error                    [Disabled]              |                             |
991   |  INT19 Trap Response                       [Immediate]             |                             |
992   |  Re-try Boot                               [Disabled]              |                             |
993   |                                                                    |                             |
994   |  Power Configuration                                               |                             |
995   |                                                                    |                             |
996   |  Watch Dog Function                        [Disabled]              |                             |
997   |  Restore on AC Power Loss                  [Last State]            |                             |
998   |  Power Button Function                     [Instant Off]           |                             |
999   |  Deep Sleep Mode                           [Disabled]              |                             |
1000 ```
1001
1002 ### CPU Configuration
1003
1004 ```
1005   |  Processor Configuration                                          ^|Enables Hyper Threading      |
1006   |  --------------------------------------------------               *|(Software Method to          |
1007   |  Processor BSP Revision                    606A6 - ICX D2         *|Enable/Disable Logical       |
1008   |  Processor Socket                          CPU1         CPU2      *|Processor threads.           |
1009   |  Processor ID                              000606A6* |  000606A6  *|                             |
1010   |  Processor Frequency                       2.600GHz  |  2.600GHz  *|                             |
1011   |  Processor Max Ratio                            1AH  |       1AH  *|                             |
1012   |  Processor Min Ratio                            08H  |       08H  *|                             |
1013   |  Microcode Revision                        0D000280  |  0D000280  *|                             |
1014   |  L1 Cache RAM(Per Core)                        80KB  |      80KB  *|                             |
1015   |  L2 Cache RAM(Per Core)                      1280KB  |    1280KB  *|                             |
1016   |  L3 Cache RAM(Per Package)                  49152KB  |   49152KB  *|                             |
1017   |  Processor 0 Version                       Intel(R) Xeon(R)       *|                             |
1018   |                                            Platinum 8358 CPU @    *|                             |
1019   |                                            2.60GHz                *|                             |
1020   |  Processor 1 Version                       Intel(R) Xeon(R)       *|                             |
1021   |                                            Platinum 8358 CPU @    *|                             |
1022   |                                            2.60GHz                *|                             |
1023   |                                                                   +|                             |
1024   |> CPU1 Core Disable Bitmap                                         +|                             |
1025   |> CPU2 Core Disable Bitmap                                         +|-----------------------------|
1026   |  Hyper-Threading [ALL]                     [Enable]               +|><: Select Screen            |
1027   |  Hardware Prefetcher                       [Enable]               +|^v: Select Item              |
1028   |  Adjacent Cache Prefetch                   [Enable]               +|Enter: Select                |
1029   |  DCU Streamer Prefetcher                   [Enable]               +|+/-: Change Opt.             |
1030   |  DCU IP Prefetcher                         [Enable]               +|F1: General Help             |
1031   |  LLC Prefetch                              [Enable]               +|F2: Previous Values          |
1032   |  Extended APIC                             [Disable]              +|F3: Optimized Defaults       |
1033   |  VMX                                       [Enable]               v|F4: Save & Exit              |
1034   |  Enable SMX                                [Disable]              +|                             |
1035   |  PPIN Control                              [Unlock/Enable]        *|                             |
1036   |  AES-NI                                    [Enable]               *|                             |
1037   |  --------------------------------------------------               *|                             |
1038   |  TME, TME-MT, TDX                                                 *|                             |
1039   |  --------------------------------------------------               *|                             |
1040   |  Total Memory Encryption (TME)             [Disabled]             *|                             |
1041   |  --------------------------------------------------               *|-----------------------------|
1042   |  Software Guard Extension (SGX)                                   *|><: Select Screen            |
1043   |  --------------------------------------------------               *|^v: Select Item              |
1044   |  SGX Factory Reset                         [Disabled]             *|Enter: Select                |
1045   |  SW Guard Extensions (SGX)                 [Disabled]             *|+/-: Change Opt.             |
1046   |  SGX Package Info In-Band Access           [Disabled]             *|F1: General Help             |
1047   |  --------------------------------------------------               *|F2: Previous Values          |
1048   |  Limit CPU PA to 46 Bits                   [Enable]               *|F3: Optimized Defaults       |
1049   |> Advanced Power Management Configuration                          v|F4: Save & Exit              |
1050 ```
1051
1052 #### Advanced Power Management Configuration
1053
1054 ```
1055   |  Advanced Power Management Configuration                           |Enable processor power       |
1056   |  --------------------------------------------------                |management features.         |
1057   |  Power Technology                          [Custom]                |                             |
1058   |  Power Performance Tuning                  [BIOS Controls EPB]     |                             |
1059   |  ENERGY_PERF_BIAS_CFG Mode                 [Maximum Performance]   |                             |
1060 ```
1061
1062 ##### CPU P State Control
1063
1064 ```
1065   |  CPU P State Control                                               |EIST allows the processor    |
1066   |                                                                    |to dynamically adjust        |
1067   |  SpeedStep (P-States)                      [Disable]               |frequency and voltage based  |
1068   |  Activate SST-BF                           [Disable]               |on power versus performance  |
1069   |  Configure SST-BF                          [Enable]                |needs.                       |
1070   |  EIST PSD Function                         [HW_ALL]                |                             |
1071 ```
1072
1073 ##### Hardware PM State Control
1074
1075 ```
1076   |  Hardware PM State Control                                         |If set to Disable, hardware ^|
1077   |                                                                    |will choose a P-state       *|
1078   |  Hardware P-States                         [Disable]               |setting for the system      *|
1079   |                                                                    |based on an OS request.     *|
1080
1081   |  Frequency Prioritization                                          |This knob controls whether   |
1082   |                                                                    |RAPL balancer is enabled.    |
1083   |  RAPL Prioritization                       [Disable]               |When enabled it activates    |
1084 ```
1085
1086 ##### CPU C State Control
1087
1088 ```
1089   |  CPU C State Control                                               |Allows Monitor and MWAIT     |
1090   |                                                                    |instructions.                |
1091   |  Enable Monitor MWAIT                      [Enable]                |                             |
1092   |  CPU C6 Report                             [Disable]               |                             |
1093   |  Enhanced Halt State (C1E)                 [Disable]               |                             |
1094 ```
1095
1096 ##### Package C State Control
1097
1098 ```
1099   |  Package C State Control                                           |Limit the lowest package     |
1100   |                                                                    |level C-State to             |
1101   |  Package C State                           [C0/C1 state]           |processors. Lower package    |
1102 ```
1103
1104 ##### CPU T State Control
1105
1106 ```
1107   |  CPU T State Control                                               |Enable/Disable CPU           |
1108   |                                                                    |throttling by OS.            |
1109   |  Software Controlled T-States              [Disable]               |Throttling reduces power     |
1110 ```
1111
1112 ##### UPI Configuration
1113
1114 ```
1115   |  Uncore Configuration                                              |Choose Topology Precedence   |
1116   |  --------------------------------------------------                |to degrade features if       |
1117   |  Number of CPU                             2                       |system options are in        |
1118   |  Number of IIO                             2                       |conflict or choose Feature   |
1119   |  Current UPI Link Speed                    Fast                    |Precedence to degrade        |
1120   |  Current UPI Link Frequency                11.2 GT/s               |topology if system options   |
1121   |  Global MMIO Low Base / Limit              90000000 / FBFFFFFF     |are in conflict.             |
1122   |  Global MMIO High Base / Limit             0000200000000000 /      |                             |
1123   |                                            0000204FFFFFFFFF        |                             |
1124   |  Pci-e Configuration Base / Size           80000000 / 10000000     |                             |
1125   |  Degrade Precedence                        [Topology Precedence]   |                             |
1126   |  Link L0p Enable                           [Disable]               |                             |
1127   |  Link L1 Enable                            [Disable]               |                             |
1128   |  XPT Remote Prefetch                       [Auto]                  |                             |
1129   |  KTI Prefetch                              [Auto]                  |-----------------------------|
1130   |  Local/Remote Threshold                    [Auto]                  |><: Select Screen            |
1131   |  IO Directory Cache (IODC)                 [Auto]                  |^v: Select Item              |
1132   |  SNC (Sub NUMA)                            [Disable]               |Enter: Select                |
1133   |  XPT Prefetch                              [Auto]                  |+/-: Change Opt.             |
1134   |  Snoop Throttle Configuration              [Auto]                  |F1: General Help             |
1135   |  PCIe Remote P2P Relaxed Ordering          [Disable]               |F2: Previous Values          |
1136   |  Stale AtoS                                [Auto]                  |F3: Optimized Defaults       |
1137   |  LLC Dead Line Alloc                       [Enable]                |F4: Save & Exit              |
1138 ```
1139
1140 ##### Memory Configuration
1141
1142 ```
1143   |                                                                    |Set Enable or Disable        |
1144   |  --------------------------------------------------                |STEP(Samsung TestBIOS &      |
1145   |  Integrated Memory Controller (iMC)                                |Enhanced PPR)function        |
1146   |  --------------------------------------------------                |                             |
1147   |                                                                    |                             |
1148   |  STEP DRAM Test                            [Disable]               |                             |
1149   |   Operation Mode                           [Test and Repair]       |                             |
1150   |  Enforce POR                               [POR]                   |                             |
1151   |  PPR Type                                  [Hard PPR]              |                             |
1152   |  Memory Frequency                          [Auto]                  |                             |
1153   |  Data Scrambling for DDR4                  [Enable]                |                             |
1154   |  2x Refresh Enable                         [Auto]                  |                             |
1155 ```
1156
1157 ##### IIO Configuration
1158
1159 ```
1160   |  IIO Configuration                                                 |Press <Enter> to bring up    |
1161   |  --------------------------------------------------                |the Intel. Virtualization    |
1162   |                                                                    |for Directed I/O (VT-d)      |
1163   |> CPU1 Configuration                                                |Configuration menu.          |
1164   |> CPU2 Configuration                                                |                             |
1165   |> IOAT Configuration                                                |                             |
1166   |> Intel. VT for Directed I/O (VT-d)                                 |                             |
1167   |> Intel. VMD Technology                                             |                             |
1168   |  PCI-E ASPM Support (Global)               [Disable]               |                             |
1169   |  IIO eDPC Support                          [Disable]               |                             |
1170 ```
1171
1172 ##### CPU1 Configuration
1173
1174 ```
1175   |  IOU0 (IIO PCIe Port 1)                    [Auto]                  |Selects PCIe port            |
1176   |  IOU1 (IIO PCIe Port 2)                    [Auto]                  |Bifurcation for selected     |
1177   |  IOU3 (IIO PCIe Port 4)                    [Auto]                  |slot(s)                      |
1178   |  IOU4 (IIO PCIe Port 5)                    [Auto]                  |                             |
1179 ```
1180
1181 ##### CPU2 Configuration
1182
1183 ```
1184   |  IOU0 (IIO PCIe Port 1)                    [Auto]                  |Selects PCIe port            |
1185   |  IOU1 (IIO PCIe Port 2)                    [Auto]                  |Bifurcation for selected     |
1186   |  IOU3 (IIO PCIe Port 4)                    [Auto]                  |slot(s)                      |
1187   |  IOU4 (IIO PCIe Port 5)                    [Auto]                  |                             |
1188 ```
1189
1190 #### South Bridge
1191
1192 ```
1193   |  USB Module Version                        26                      |AUTO option disables legacy  |
1194   |                                                                    |support if no USB devices    |
1195   |  USB Devices:                                                      |are connected. DISABLE       |
1196   |        1 Drive, 2 Keyboards, 2 Mice, 1 Hub                         |option will keep USB         |
1197   |                                                                    |devices available only for   |
1198   |  Legacy USB Support                        [Enabled]               |EFI applications.            |
1199   |  XHCI Hand-off                             [Enabled]               |                             |
1200   |  Port 60/64 Emulation                      [Disabled]              |                             |
1201   |  PCIe PLL SSC                              [Disabled]              |                             |
1202   |  Port 61h Bit-4 Emulation                  [Disabled]              |                             |
1203 ```
1204
1205 ### PCIe/PCI/PnP Configuration
1206
1207 ```
1208   |  PCI Bus Driver Version                    A5.01.24               ^|Enables or Disables 64bit    |
1209   |                                                                   *|capable Devices to be        |
1210   |  PCI Devices Common Settings:                                     *|Decoded in Above 4G Address  |
1211   |  Above 4G Decoding                         [Enabled]              *|Space (Only if System        |
1212   |  SR-IOV Support                            [Enabled]              *|Supports 64 bit PCI          |
1213   |  ARI Support                               [Enabled]              *|Decoding).                   |
1214   |  Bus Master Enable                         [Enabled]              *|                             |
1215   |  Consistent Device Name Support            [Disabled]             *|                             |
1216   |  MMIO High Base                            [32T]                  *|                             |
1217   |  MMIO High Granularity Size                [64G]                  *|                             |
1218   |  Maximum Read Request                      [Auto]                 *|                             |
1219   |  MMCFG Base                                [Auto]                 *|                             |
1220   |  NVMe Firmware Source                      [Vendor Defined        *|                             |
1221   |                                            Firmware]              *|                             |
1222   |  VGA Priority                              [Onboard]              *|                             |
1223   |  CPU1 SLOT2 PCI-E 3.0 X16 OPROM            [EFI]                  *|                             |
1224   |  CPU1 SLOT4 PCI-E 3.0 X16 OPROM            [EFI]                  *|                             |
1225   |  CPU2 SLOT6 PCI-E 3.0 X16 OPROM            [EFI]                  *|                             |
1226   |  CPU2 SLOT8 PCI-E 3.0 X16 OPROM            [EFI]                  *|-----------------------------|
1227   |  CPU1 SLOT9 PCI-E 3.0 X16 OPROM            [EFI]                  *|><: Select Screen            |
1228   |  CPU2 SLOT10 PCI-E 3.0 X16 OPROM           [EFI]                  *|^v: Select Item              |
1229   |  CPU2 SLOT11 PCI-E 3.0 X4(IN X8) OPROM     [EFI]                  *|Enter: Select                |
1230   |  M.2 CONNECTOR OPROM                       [EFI]                  *|+/-: Change Opt.             |
1231   |  Bus Master Enable                         [Enabled]              +|F1: General Help             |
1232   |  Onboard LAN1 Option ROM                   [EFI]                  +|F2: Previous Values          |
1233   |  Onboard LAN2 Option ROM                   [Disabled]             +|F3: Optimized Defaults       |
1234   |  Onboard Video Option ROM                  [EFI]                  v|F4: Save & Exit              |
1235   |> Network Stack Configuration                                       |                             |
1236 ```
1237
1238 ## Xeon ICX Server Firmware Inventory
1239
1240 ```
1241 Host.           IPMI IP.      BMC.      BIOS. CPLD.     CPU Microcode.  PCI Bus.   X710 Firmware.            i40e.    E810 Firmware.            ice.
1242 s65-t37-sut1.   10.30.50.75.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.17.15. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1243 s66-t37-sut2.   10.30.50.76.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.14.15. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1244 s67-t37-tg1.    10.30.50.77.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.14.13. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1245 s71-t212-sut1.  10.30.50.81.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.17.15. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1246 s72-t212-tg1.   10.30.50.82.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.14.13. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1247 s83-t213-sut1.  10.30.50.83.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.17.15. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1248 s84-t213-tg1.   10.30.50.84.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.14.13. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1249 s85-t214-sut1.  10.30.50.85.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.17.15. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1250 s86-t214-tg1.   10.30.50.86.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.14.13. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1251 s87-t215-sut1.  10.30.50.87.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.17.15. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1252 s88-t215-tg1.   10.30.50.88.  1.00.21.  1.1.  F1.00.07. 0D000280.       A5.01.24.  8.30 0x8000a49d 1.2926.0. 2.14.13. 3.20 0x8000d83e 1.3146.0. 1.8.3.
1253 ```