Benutzerhandbuch NetXtreme-E Broadcom® NetXreme-C und NetXtreme-E BENUTZERHANDBUCH Netxtreme-E-UG100 26.
Revisionsverlauf Revision Datum Änderungsbeschreibung NetXtreme-E-UG100 26.02.2018 Erstveröffentlichung: 20.06. © 2018 von Broadcom. Alle Rechte vorbehalten. Broadcom®, das Pulse-Logo, Connecting everything®, Avago Technologies und das A-Logo sind Marken von Broadcom und/oder deren Tochtergesellschaften in den USA und bestimmten anderen Ländern und/oder der EU. Der Begriff "Broadcom" bezieht sich auf Broadcom Limited und/oder deren Tochtergesellschaften. Weitere Informationen finden Sie unter www.
NetXtreme-E Benutzerhandbuch Inhaltsverzeichnis Inhaltsverzeichnis Gesetzliche und Sicherheitszulassungen.................................................................................................. 7 Konformitätserklärung ............................................................................................................................. 7 Sicherheit ...............................................................................................................................................
NetXtreme-E Benutzerhandbuch Inhaltsverzeichnis Installieren der Hardware........................................................................................................................... 26 Sicherheitsvorkehrungen....................................................................................................................... 26 Systemanforderungen ...........................................................................................................................
NetXtreme-E Benutzerhandbuch Inhaltsverzeichnis iSCSI-Konfiguration........................................................................................................................ 39 Comprehensive Configuration Management......................................................................................... 39 Konfiguration der Geräte-Hardware ............................................................................................... 39 MBA-Konfigurationsmenü ................................
NetXtreme-E Benutzerhandbuch Inhaltsverzeichnis NPAR – Beispiele für Konfiguration und Anwendungsfälle................................................................... 63 Funktionen und Anforderungen............................................................................................................. 63 Einschränkungen................................................................................................................................... 63 Konfiguration ................................
NetXtreme-E Benutzerhandbuch Gesetzliche und Sicherheitszulassungen Gesetzliche und Sicherheitszulassungen Die folgenden Abschnitte beschreiben die Standard-Compliance bezüglich der gesetzlichen und Sicherheitsvorschriften sowie der Vorschriften im Rahmen der Elektromagnetischen Verträglichkeit (EMV) und der Elektrostatischen Entladung (ESD) für die NetXtreme-E Netzwerkschnittstellenkarte.
NetXtreme-E Benutzerhandbuch Gesetzliche und Sicherheitszulassungen Elektromagnetische Verträglichkeit (EMC) Tabelle 3: Elektromagnetische Verträglichkeit Standard/Land Zertifizierungstyp Compliance CE/EU EN 55032:2012/AC:2013 Klasse B EN 55024:2010 EN 61000-3-2:2014 EN 61000-3-3:2013 CE-Bericht und CE-DoC FCC/USA CFR47, Teil 15 Klasse B FCC-/IC-DoC- und EMVBerichtsverweise auf FCC- und IC-Standards IC/Kanada ICES-003 Klasse B FCC-/IC-DoC- und Berichtsverweise auf FCC- und IC-Standards ACA/Aus
NetXtreme-E Benutzerhandbuch Funktionsbeschreibung Funktionsbeschreibung Dell unterstützt 10GBase-T-, 10G SFP+- und 25G SFP28-Netzwerkschnittstellenkarten (Network Interface Cards, NICs). Diese NICs sind beschrieben unter Tabelle 5.
NetXtreme-E Benutzerhandbuch Funktionsbeschreibung Abbildung 1: BCM957402A4020DC, BCM957412A4120D-Netzwerkschnittstellenkarte 26.
NetXtreme-E Benutzerhandbuch Funktionsbeschreibung Abbildung 2: BCM957404A4041DLPC, BCM957414A4141D -Netzwerkschnittstellenkarte 26.
NetXtreme-E Benutzerhandbuch Funktionsbeschreibung Abbildung 3: BCM957406A4060DLPC, BCM957416A4160D-Netzwerkschnittstellenkarte Abbildung 4: BCM957414M4140D Network Daughter Card (rNDC) 26.
NetXtreme-E Benutzerhandbuch Funktionsbeschreibung Abbildung 5: BCM957412M4120D Network Daughter Card (rNDC) Abbildung 6: BCM957416M4160 Network Daughter Card (rNDC) 26.
NetXtreme-E Benutzerhandbuch Netzwerkverbindung und Betriebsanzeige Netzwerkverbindung und Betriebsanzeige BCM957402AXXXX/BCM957412AXXXX Der SFP+-Port verfügt über zwei LEDs zur Anzeige der Datenverkehrsaktivitäten und der Verbindungsgeschwindigkeit. Die LEDs sind sichtbar über dem Ausschnitt auf der Halterung, wie zu sehen unter Abbildung 7. Die LED-Funktionalität wird beschrieben unter Tabelle 6.
NetXtreme-E Benutzerhandbuch Netzwerkverbindung und Betriebsanzeige BCM957404AXXXX/BCM957414AXXXX Der SFP28-Port verfügt über zwei LEDs zur Anzeige von Datenverkehrsaktivitäten und Verbindungsgeschwindigkeit. Die LEDs sind sichtbar über dem Ausschnitt auf der Halterung, wie zu sehen unter Abbildung 8. Die LED-Funktionalität wird beschrieben unter Tabelle 7.
NetXtreme-E Benutzerhandbuch Netzwerkverbindung und Betriebsanzeige BCM957406AXXXX/BCM957416AXXXX Der RJ-45-Port verfügt über zwei LEDs zur Anzeige von Datenverkehrsaktivitäten und Verbindungsgeschwindigkeit. Die LEDs sind sichtbar über dem Ausschnitt auf der Halterung, wie zu sehen unter Abbildung 9. Die LED-Funktionalität wird beschrieben unter Tabelle 8.
NetXtreme-E Benutzerhandbuch Netzwerkverbindung und Betriebsanzeige BCM957414M4140D Der SFP28-Port verfügt über zwei LEDs zur Anzeige von Datenverkehrsaktivitäten und Verbindungsgeschwindigkeit. Die LEDs sind sichtbar über den Ausschnitt auf der Halterung, wie zu sehen unter Abbildung 10.
NetXtreme-E Benutzerhandbuch Netzwerkverbindung und Betriebsanzeige BCM957412M4120D Diese rNDC verfügt über SFP+- und RJ-45-Ports, die jeweils mit zwei LEDs zur Anzeige von Datenverkehrsaktivitäten und Verbindungsgeschwindigkeit ausgestattet sind. Die LEDs sind sichtbar wie zu sehen unter Abbildung 11.
NetXtreme-E Benutzerhandbuch Netzwerkverbindung und Betriebsanzeige BCM957416M4160 Diese rNDC verfügt über 10GBaseT- und 1000BaseT RJ-45-Ports, die jeweils mit zwei LEDs zur Anzeige von Datenverkehrsaktivitäten und Verbindungsgeschwindigkeit ausgestattet sind. Die LEDs sind sichtbar wie zu sehen unter Abbildung 12.
NetXtreme-E Benutzerhandbuch Leistungsmerkmale Leistungsmerkmale In den folgenden Abschnitten finden Sie Informationen zu den Gerätemerkmalen. Software- und Hardwarespezifikationen Tabelle 13 enthält eine Liste der Host-Schnittstellenfunktionen. Tabelle 13: Host-Schnittstellenfunktionen Leistungsmerkmal Zugangsinformationen Host-Schnittstelle PCIe v3.0 (Gen. 3: 8 GT/s; Gen. 2: 5 GT/s; Gen. 1: 2.5 GT/s). Anzahl der PCIe-Lanes PCI-E Edge-Stecker: x8. Vital Product Data (VPD) Unterstützt.
NetXtreme-E Benutzerhandbuch Leistungsmerkmale Tabelle 13: Host-Schnittstellenfunktionen (Forts.) Leistungsmerkmal Zugangsinformationen Jumbo-Frames Unterstützt. iSCSI-Boot Unterstützt. NIC-Partitionierung (NPAR) Unterstützt bis zu acht physische Funktionen (PFs) pro Port, oder bis zu 16 PFs pro Silikon. Diese Option ist in NVRAM konfigurierbar. RDMA over Converge Ethernet (RoCE) BCM5741X unterstützt RoCE v1/v2 für Windows, Linux und VMware.
NetXtreme-E Benutzerhandbuch Leistungsmerkmale VXLAN Ein virtuelles eXtensible Local Area Network (VXLAN), definiert in IETF RFC 7348, wird verwendet, um dem Bedarf nach Overlay-Netzwerken in virtualisierten Rechenzentren mit mehreren Mandanten nachzukommen. VXLAN ist ein Layer-2-Overlay oder ein Tunneling-Schema über ein Layer-3-Netzwerk. Nur VMs innerhalb des gleichen VXLAN-Segments können miteinander kommunizieren.
NetXtreme-E Benutzerhandbuch Leistungsmerkmale Stateless Transport Tunnel Offload Stateless Transport Tunnel Offload (STT) ist eine Tunnelverkapselung, die Overlay-Netzwerke in virtualisierten Rechenzentren ermöglicht. STT verwendet die IP-basierte Verkapselung mit einem TCP-ähnlichen Header. Es ist kein TCP-Verbindungsstatus mit dem Tunnel verknüpft, weshalb STT "stateless" (statuslos) ist. Open Virtual Switch (OVS) nutzt STT. Ein STT-Frame enthält den STT-Frame-Header und die -Payload.
NetXtreme-E Benutzerhandbuch Leistungsmerkmale SR-IOV Das PCI-SIG definiert die optionale Unterstützung für die Single-Root IO-Virtualisierung (SR-IOV). SR-IOV ermöglicht dem VM den direkten Zugriff auf das Gerät mithilfe von Virtual Functions (VFs). Die NIC Physical Function (PF) ist in mehrere Virtual Functions unterteilt und jedes VF wird als ein PF für die VMs dargestellt.
NetXtreme-E Benutzerhandbuch Leistungsmerkmale Unterstützte Kombinationen Die folgenden Abschnitte beschreiben die unterstützten Funktionskombinationen für dieses Gerät. NPAR, SR-IOV und RoCE Tabelle 15 enthält die unterstützten Funktionskombinationen von NPAR, SR-IOV, und RoCE.
NetXtreme-E Benutzerhandbuch Installieren der Hardware Installieren der Hardware Sicherheitsvorkehrungen Vorsicht! Der Adapter wird in einem System installiert, dessen Betriebsspannungen tödlich sein können. Vor dem Entfernen der Systemabdeckung müssen Sie folgende Maßnahmen zum persönlichen Schutz und zur Vermeidung von Schäden an Systemkomponenten durchführen: • • • • Entfernen Sie alle Metallobjekte oder Schmuck von Händen und Handgelenken. Stellen Sie sicher, dass Sie ausschließlich isolierte bzw.
NetXtreme-E Benutzerhandbuch Installieren der Hardware Installieren des Adapters Die folgenden Anweisungen gelten für die Installation des Broadcom NetXtreme-E-Ethernet-Adapters (zusätzliche NIC) auf den meisten Servern. Weitere Informationen zur Durchführung dieser Aufgaben auf Ihrem Server, finden Sie in den Handbüchern, die im Lieferumfang Ihres Servers enthalten waren. 1.
NetXtreme-E Benutzerhandbuch Installieren der Hardware Tabelle 17: Unterstützte Kabel und Module (Forts.) Optisches Modul DellTeilenummer FTLX8574D3BCL-FC WTRD1 oder PLRXPLSCS43811 Adapter Beschreibung BCM57402X, BCM57404X, BCM57412X, BCM57414X SR-SFP+-Transceiver mit 10 Gbit/s Hinweis: 1. Direct Attach Cables (DAC), gemäß IEEE-Standards können an den Adapter angeschlossen werden. 2. Die Dell-Teile HHHHC und N8TDR sind für BCM957414M4140D erforderlich.
NetXtreme-E Benutzerhandbuch Softwarepakete und -installation Softwarepakete und -installation In den folgenden Abschnitten finden Sie Informationen zu Softwarepaketen und -installation. Unterstützte Betriebssysteme Tabelle 18 enthält eine Liste der unterstützten Betriebssysteme. Tabelle 18: Liste unterstützter Betriebssysteme Betriebssystem Flavor Verteilung Windows Windows 2012 R2 oder höher Linux RedHat 6.9, RedHat 7.1 oder höher SLES 11 SP 4, SLES 12 SP 2 oder höher VMWare ESXi 6.
NetXtreme-E Benutzerhandbuch Softwarepakete und -installation Sobald die Dateien extrahiert wurden, wird die INF-Installation ausgeführt durch die Funktion "Treiber aktualisieren" im Geräte-Manager (devmgmt.msc). Öffnen Sie den Gerätemanager, wählen Sie die gewünschte NIC, klicken Sie mit der rechten Maustaste, und wählen Sie den zu aktualisierenden Treiber aus. Linux Die Linux-Treiber sind in RPM, KMP und dem Quellcode-Format verfügbar.
NetXtreme-E Benutzerhandbuch Softwarepakete und -installation Linux-Ethtool-Befehle Hinweis: Unter Tabelle 19, sollte ethX durch den tatsächlichen Schnittstellennamen ersetzt werden. Tabelle 19: Linux-Ethtool-Befehle Befehl Beschreibung ethtool -s ethX speed 25000 autoneg off Legt die Geschwindigkeit fest. Wenn die Verbindung an einem Port erfolgt, wird der Treiber nicht zulassen, dass der andere Port mit einer nicht kompatiblen Geschwindigkeit konfiguriert wird.
NetXtreme-E Benutzerhandbuch Softwarepakete und -installation Tabelle 19: Linux-Ethtool-Befehle (Forts.) Befehl Beschreibung echo 4 > /sys/bus/pci/devices/0000:82:00.0/ sriov_numvfs ip link set ethX vf 0 mac 00:12:34:56:78:9a ip link set ethX vf 0 state enable ip link set ethX vf 0 vlan 100 Aktivieren Sie SR-IOV mit vier VFs für Bus 82, Gerät 0 und Funktion 0. Die VF MAC-Adresse festlegen. Legt den VF-Verbindungsstatus für VF auf 0 fest. Setzt VF auf 0 mit VLAN-ID 100.
NetXtreme-E Benutzerhandbuch Softwarepakete und -installation Firmware-Aktualisierung Die NIC-Firmware kann mit einer der folgenden Methoden aktualisiert werden: • Mit dem Dell Update Package (DUP), wenn das System sich im gebooteten Betriebssystem-Zustand befindet. Diese Methode gilt nur für die Betriebssysteme Windows und Linux. • Mit dem Dell iDRAC – Lifecycle Controller. Diese Methode kann unabhängig vom Betriebssystem angewendet werden.
NetXtreme-E Benutzerhandbuch Erweiterte Windows-Treibereigenschaften und Ereignisprotokollmeldungen Erweiterte Windows-Treibereigenschaften und Ereignisprotokollmeldungen Erweiterte Treibereigenschaften Die erweiterten Eigenschaften des Windows-Treibers sind unter Tabelle 21 dargestellt. .
NetXtreme-E Benutzerhandbuch Erweiterte Windows-Treibereigenschaften und Ereignisprotokollmeldungen Tabelle 21: Erweiterte Eigenschaften des Windows-Treibers (Forts.
NetXtreme-E Benutzerhandbuch Erweiterte Windows-Treibereigenschaften und Ereignisprotokollmeldungen Tabelle 23: Ereignisprotokollmeldungen 0x0016 Firmware antwortet nicht innerhalb der zugewiesenen Zeit. 0x0017 Firmware hat einen Fehlerstatus zurückgegeben. 0x0018 Firmware ist in einem unbekannten Zustand. 0x0019 Optics-Modul wird nicht unterstützt. 0x001A Inkompatible Geschwindigkeitsauswahl zwischen Port 1 und Port 2.
NetXtreme-E Benutzerhandbuch Teaming Teaming Windows Die auf Dell Plattformen installierten Broadcom NetXtreme-E-Geräte können mithilfe der Microsoft TeamingLösung an NIC-Teaming-Funktionen teilnehmen. Weitere Informationen hierzu finden Sie in der öffentlichen Dokumentation von Microsoft unter dem folgenden Link: https://www.microsoft.com/en-us/download/details.aspx?id=40319 Microsoft LBFO ist ein nativer Teaming-Treiber, der im Windows-Betriebssystem verwendet werden kann.
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene Konfiguration auf Systemebene In den folgenden Abschnitten finden Sie Informationen zur NIC-Konfiguration auf Systemebene. UEFI-HII-Menü Controller der Broadcom NetXtreme E Series können für Preboot, iSCSI und die erweiterte Konfiguration konfiguriert werden, wie z. B. SR-IOV mit HII- (Human Interface-)Menü. Um während des Systemstarts die Einstellungen zu konfigurieren, wählen Sie F2 -> Systemeinrichtung -> Geräteeinstellungen.
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene iSCSI-Konfiguration Die iSCSI-Boot-Konfiguration kann über die Hauptkonfigurationsseite -> iSCSI-Konfiguration konfiguriert werden. Parameter, wie z. B. IPV4 oder IPV6, iSCSI-Initiator oder iSCSI-Ziel können über diese Seite festgelegt werden. Weitere Informationen zur Konfiguration finden Sie unter “ISCSI-Boot” auf Seite 49.
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene Hinweis: Achten Sie hinsichtlich der AN der Verbindungsgeschwindigkeit bei der Verwendung von SFP+- und SFP28-Anschlüssen darauf, dass Sie DAC- oder optische Multimode-Transceiver einsetzen, die AN unterstützen. Vergewissern Sie sich, dass der Port des Verbindungspartners auf das passende Protokoll für die automatische Aushandlung eingestellt wurde. Wenn z. B. der lokale Broadcom-Port für IIEEE 802.
Konfiguration auf Systemebene NetXtreme-E Benutzerhandbuch Tabelle 24: Unterstützte Kombination an Verbindungsgeschwindigkeitseinstellungen Port 2 Link Setting Port1 Link Speed Setting Forced 1G Forced 10G Forced 25G Forced 1G Forced 10G Forced 25G AN Enabled AN Enabled {1G} {10G} AN Enabled {25G} AN Enabled {1/10G} AN Enabled {1/25G} AN Enabled {10/25G} AN Enabled {1/10/25G} P1: no AN P1: no AN P1: no AN P1: no AN P1: no AN P1: no AN P1: no AN P1: no AN P1: no AN P1: no AN P2: no AN P
Konfiguration auf Systemebene NetXtreme-E Benutzerhandbuch Die erwarteten Verbindungsgeschwindigkeiten basierend auf den Einstellungen des lokalen und Verbindungspartners sind unter Tabelle 25 dargestellt.
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene Betriebsfähige Übertragungsrate Diese Option konfiguriert die Verbindungsgeschwindigkeit, die von Preboot (MBA und UEFI)-Treibern (Linux, ESX), BS-Treibern und Firmware verwendet wird. Diese Einstellung wird von der Treibereinstellung im derzeitigen Status des Betriebssystems überschrieben. Der Windows-Treiber (bnxtnd_.sys) nutzt die Einstellungen der Verbindungsgeschwindigkeiten in der Treiberdatei ".inf".
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene ethtool -s eth0 autoneg on advertise 0x0 Dieser Befehl aktiviert die automatische Aushandlung und kündigt an, dass das Gerät alle Geschwindigkeiten unterstützt: 1G, 10G, 25G.
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene Automatische Aushandlung der Vorwärtsfehlerkorrektur Um die automatische Aushandlung der Vorwärtsfehlerkorrektur zu aktivieren/deaktivieren, können die folgenden Optionen über das System-BIOS HII-Menü oder in CCM aktiviert werden: • System-BIOS -> Geräteeinstellungen -> NetXtreme-E NIC -> Konfiguration auf Geräteebene Die automatische Aushandlung der Vorwärtsfehlerkorrektur nutzt während dem Aushandlungstausch zwei Parameter: FEC-fähig und FEC-A
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene Für den NetXtreme-E Ethernet-Controller unterstützt die Base-R FEC (CL74) und RS-FEC (CL91/CL108). Tabelle 27 zeigt alle unterstützten Konfigurationen mit einem Verbindungspartner.
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene Tabelle 28 zeigt die Beziehung zwischen Medientyp und Geschwindigkeit für den BCM5730X, BCM5740X und BCM5741X-Ethernet-Controller.
NetXtreme-E Benutzerhandbuch Konfiguration auf Systemebene Tabelle 29 und Tabelle 30 zeigen die Verbindungsergebnisse, wenn Automatische Medienerkennung aktiviert ist.
NetXtreme-E Benutzerhandbuch ISCSI-Boot ISCSI-Boot Broadcom NetXtreme-E-Ethernet-Adapter unterstützen iSCSI-Boot, wodurch Systeme ohne Laufwerk über das Netzwerk booten können. Mit iSCSI-Boot kann ein Windows-, Linux- oder VMware-Betriebssystem über ein herkömmliches IP-Netzwerk auf einem Remote-iSCSI-Zielcomputer gestartet werden.
NetXtreme-E Benutzerhandbuch ISCSI-Boot Konfigurieren der iSCSI-Bootparameter Konfigurieren Sie die Broadcom iSCSI-Bootsoftware entweder auf statische oder auf dynamische Konfiguration. Informationen über die im Menü "Allgemeine Parameter" verfügbaren Konfigurationsoptionen finden Sie unter Tabelle 31. Tabelle 31 enthält sowohl Parameter für IPv4 als auch für IPv6. Parameter, die nur für IPv4 bzw. IPv6 gelten, sind entsprechend gekennzeichnet.
NetXtreme-E Benutzerhandbuch ISCSI-Boot Konfigurieren des MBA-Bootprotokolls So konfigurieren Sie das Bootprotokoll: 1. Starten Sie Ihr System erneut. 2. Drücken Sie im PXE-Banner STRG+S. Das MBA-Konfigurationsmenü wird anzeigt. 3. Wechseln Sie im MBA-Konfigurationsmenü mithilfe PFEILTASTE NACH OBEN bzw. PFEILTASTE NACH UNTEN zur Option "Boot-Protokoll". Ändern Sie mit Hilfe von PFEILTASTE NACH LINKS bzw. PFEILTASTE NACH RECHTS die Option "Boot-Protokoll" zu iSCSI. 4.
NetXtreme-E Benutzerhandbuch ISCSI-Boot • Primärer DNS • Sekundärer DNS • iSCSI-Name (entspricht dem vom Client-System zu verwendenden Namen des iSCSI-Initiators) Hinweis: Geben Sie IP-Adresse ein. Die IP-Adresse wird nicht auf Fehler im Hinblick auf Dopplungen oder falsche Zuweisungen zu einem Segment/Netzwerk geprüft. 5. Drücken Sie ESC, um zum Hauptmenü zurückzukehren. 6. Wählen Sie im Hauptmenü die Option Parameter des ersten Ziels aus.
NetXtreme-E Benutzerhandbuch ISCSI-Boot Hinweis: Bei Verwendung eines DHCP-Servers werden die Einträge des DNS-Servers durch die vom DHCP-Server bereitgestellten Werte überschrieben. Dies tritt selbst dann auf, wenn die lokal bereitgestellten Werte gültig sind und der DHCP-Server keine Daten über den DNS-Server zur Verfügung stellt. Wenn der DHCP-Server keine Daten über den DNS-Server zur Verfügung stellt, werden die Werte sowohl für den primären als auch für den sekundären DNS-Server auf 0.0.0.
NetXtreme-E Benutzerhandbuch ISCSI-Boot CHAP-Authentifizierung aktivieren 1. Stellen Sie im Bildschirm Allgemeine Parameter die Option CHAP-Authentifizierung auf Aktiviert ein. 2. Geben Sie im Bildschirm Initiatorparameter die folgenden Parameter ein: • CHAP-ID (bis zu 128 Byte) • CHAP-Kennwort (wenn eine Authentifizierung erforderlich ist, muss aus mindestens 12 Zeichen bestehen) 3. Drücken Sie ESC, um zum Hauptmenü zurückzukehren. 4. Wählen Sie im Hauptmenü die Option Parameter des ersten Ziels aus. 5.
NetXtreme-E Benutzerhandbuch ISCSI-Boot Tabelle 32: Definition der Parameter von DHCP Option 17 (Forts.) Parameter Definition Das IP-Protokoll für den Zugriff auf das iSCSI-Ziel Zurzeit wird ausschließlich TCP unterstützt, das Protokoll lautet daher "6". die dem Protokoll zugeordnete Portnummer Die Standardportnummer für iSCSI lautet "3260". Die für das iSCSI-Ziel zu verwendende Logical Unit Number Der Wert der LUN muss im hexadezimalen Format angegeben sein.
NetXtreme-E Benutzerhandbuch ISCSI-Boot DHCP-Konfiguration für iSCSI-Boot bei IPv6 Der DHCPv6-Server stellt eine Reihe von Optionen zur Verfügung, darunter eine zustandslose oder zustandbehaftete IP-Konfiguration sowie Informationen für den DHCPv6-Client. Die Broadcom-Adapter unterstützen die folgenden DHCP-Konfigurationen für iSCSI-Boot: Hinweis: Die DHCPv6-Standardoption "Root Path" ist noch nicht verfügbar.
NetXtreme-E Benutzerhandbuch VXLAN: Beispiele für Konfiguration und Anwendungsfälle VXLAN: Beispiele für Konfiguration und Anwendungsfälle Die VXLAN-Verkapselung erlaubt vielen Layer-3-Hosts auf einem Server das Senden und Empfangen von Frames durch Verkapselung auf einer einzelnen IP-Adresse, die mit der auf demselben Server installierten NIC verknüpft ist. Dieses Beispiel beschreibt die grundlegende VxLan-Verbindung zwischen zwei RHEL-Servern.
NetXtreme-E Benutzerhandbuch SR-IOV: Beispiele für Konfiguration und Anwendungsfälle SR-IOV: Beispiele für Konfiguration und Anwendungsfälle SR-IOV kann konfiguriert, aktiviert und verwendet werden für Broadcom NetExtreme-E-NICs mit 10 Gb und 25 Gb. Linux-Anwendungsbeispiel 1. Aktivieren Sie SR-IOV auf den NIC-Karten: a. SR-IOV auf der NIC-Karte kann über das HII-Menü aktiviert werden.
NetXtreme-E Benutzerhandbuch SR-IOV: Beispiele für Konfiguration und Anwendungsfälle Ein typisches Beispiel wäre: echo 4 > /sys/bus/pci/devices/0000\:04\:00.0/sriov_numvfs 7. Prüfen Sie die virtuellen Funktionen von PCI-E: a. Durch den lspci-Befehl werden die virtuellen Funktionen mit folgenden Einstellungen angezeigt: DID auf 16D3 für BCM57402/BCM57404/BCM57406, 16DC für nicht-RDMA BCM57412/BCM57414/BCM57416 und 16C1 oder RDMA-fähig BCM57412/BCM57414/BCM57416. 8.
NetXtreme-E Benutzerhandbuch SR-IOV: Beispiele für Konfiguration und Anwendungsfälle 4. Installieren Sie die entsprechenden Virtualisierungsoptionen (Hyper-V). Weitere Informationen zu Anforderungen und Schritten hinsichtlich der Einrichtung von Hyper-V, Virtual Switch und virtueller Maschine finden Sie unter Microsoft.com: https://technet.microsoft.com/de-de/windows-server-docs/compute/hyper-v/system-requirements-forhyper-v-on-windows https://technet.microsoft.
NetXtreme-E Benutzerhandbuch SR-IOV: Beispiele für Konfiguration und Anwendungsfälle 3. Installieren Sie auf ESXi den Bnxtnet-Treiber, indem Sie folgende Schritte ausführen: a. Kopieren Sie die .vib-Datei - in /var/log/vmware. $ cd /var/log/vmware. $ esxcli software vib install --no-sig-check -v -.vib. b. Starten Sie den Computer neu. c. Überprüfen Sie, ob die Treiber korrekt installiert wurden: $ esxcli software vib list | grep bnxtnet 4.
NetXtreme-E Benutzerhandbuch SR-IOV: Beispiele für Konfiguration und Anwendungsfälle 5. Aktivierung von SRIOV-VFs: Nur die PFs werden automatisch aktiviert. Wenn eine PF SR-IOV unterstützt, ist die PF (vmknicX) Teil der Ausgabe des unten angezeigten Befehls. esxcli network sriovnic list Um eine oder mehrere VFs zu aktivieren, verwendet der Treiber das Modulparameter "max_vfs", um die gewünschte Anzahl an VFs für PFs zu aktivieren.
NetXtreme-E Benutzerhandbuch NPAR – Beispiele für Konfiguration und Anwendungsfälle NPAR – Beispiele für Konfiguration und Anwendungsfälle Funktionen und Anforderungen • Unabhängig von Betriebssystem/BIOS – die Partitionen werden dem Betriebssystem als "echte" Netzwerkschnittstellen präsentiert, es ist daher keine spezielle BIOS- oder Betriebssystemunterstützung, wie zum Beispiel SR-IOV, erforderlich. • Zusätzliche NICs ohne zusätzliche Switch-Ports, Verkabelungen und PCIe-Erweiterungssteckplätze.
NetXtreme-E Benutzerhandbuch NPAR – Beispiele für Konfiguration und Anwendungsfälle Konfiguration NPAR kann mithilfe der HII-Menüs zur BIOS-Konfiguration oder über das Broadcom-CCM-Dienstprogramm auf traditionellen Boot-Systemen konfiguriert werden. Einige Anbieter bieten die Konfiguration auch über zusätzliche eigene Schnittstellen an. So aktivieren Sie NPAR: 1.
NetXtreme-E Benutzerhandbuch NPAR – Beispiele für Konfiguration und Anwendungsfälle 3. Das NIC-Partitionskonfigurationsmenü (siehe unten) ermöglicht es dem Benutzer, die Anzahl der Partitionen, die aus dem ausgewählten physischen Port zugewiesen werden sollen, auszuwählen. Jede BCM5741X-NIC kann maximal 16 Partitionen auf einem ARI-fähigen Server unterstützen. Standardmäßig werden Adapter mit zwei Ports für acht Partitionen pro physischem Port konfiguriert.
NetXtreme-E Benutzerhandbuch NPAR – Beispiele für Konfiguration und Anwendungsfälle Tabelle 37: NPAR-Parameter Parameter Beschreibung Gültige Optionen BW-Reservierung Prozentsatz der gesamten verfügbaren Bandbreite, die für diese Partition reserviert werden soll. 0 gibt die gleichmäßige Verteilung der Bandbreite zwischen allen Partitionen an. Wert von 0–100 BW-Grenzwert Maximal zulässiger Prozentsatz der verfügbaren Bandbreite für diese Partition.
NetXtreme-E Benutzerhandbuch • NPAR – Beispiele für Konfiguration und Anwendungsfälle Verringern Sie die Speicherzuweisung, indem Sie die Anzahl der zugewiesenen Empfangspuffer verringern. Der Standardwert 0 bedeutet, dass der Treiber automatisch die Anzahl der Empfangspuffer bestimmt. Bei typischen Konfigurationen, ordnet eine Einstellung von 0 (=Auto) XXXX Empfangspuffer pro Warteschlange zu. Sie können einen kleineren Wert wählen, z. B. 1500, 1000 oder 500.
NetXtreme-E Benutzerhandbuch RoCE – Beispiele für Konfiguration und Anwendungsfälle RoCE – Beispiele für Konfiguration und Anwendungsfälle Dieser Abschnitt enthält Konfigurations- und Anwendungsbeispiele für RoCE. Um RoCE für PFs oder VFs zu aktiveren, muss der Benutzer zunächst die RDMA-Auswahl über das HII-Menü im BIOS aktivieren, bevor die RDMA-Option im Host- oder Gastbetriebssystem wirksam wird.
NetXtreme-E Benutzerhandbuch • RoCE – Beispiele für Konfiguration und Anwendungsfälle Distros, bei denen IB-Stack gemeinsam mit der Betriebssystemverteilung verfügbar ist: RH7.1/7.2/7.3/6.7/6.8, SLES12SP2 und Ubuntu 16.
NetXtreme-E Benutzerhandbuch RoCE – Beispiele für Konfiguration und Anwendungsfälle Einschränkungen Bei NICs mit zwei Ports können rdma-perftest-Befehle möglicherweise fehlschlagen, wenn sich beide Ports auf demselben Subnetz befinden. Die mögliche Ursache ist ein arp-flux-Problem im Linux-Betriebssystem. Um diese Einschränkung zu umgehen, verwenden Sie mehrere Subnetze für Tests oder schließen Sie den zweiten Port/die zweite Schnittstelle.
NetXtreme-E Benutzerhandbuch RoCE – Beispiele für Konfiguration und Anwendungsfälle RDMA-Verifizierung So verifizieren Sie RDMA: 1. Erstellen Sie eine Dateifreigabe auf dem Remote-System, und öffnen Sie die Freigabe über Windows Explorer oder "net use ….". Zur Vermeidung von Engpässen in Bezug auf die Lese-/Schreibgeschwindigkeit auf der Festplatte wird die Verwendung einer RAM-Disk empfohlen, während die Netzwerkfreigabe einem Test unterliegt. 2.
NetXtreme-E Benutzerhandbuch RoCE – Beispiele für Konfiguration und Anwendungsfälle Benutzermodus Bevor Sie eine auf NDSPI geschrieben Benutzermodusanwendung ausführen können, müssen Sie den bxndspi.dll-Benutzermodustreiber kopieren und installieren. So kopieren und installieren Sie den Benutzermodustreiber: 1. Kopieren Sie bxndspi.dll in C:\Windows\System32. 2. Installieren Sie den Treiber, indem Sie den folgenden Befehl ausführen: rundll32.exe .\bxndspi.
NetXtreme-E Benutzerhandbuch RoCE – Beispiele für Konfiguration und Anwendungsfälle Konfiguration von paravirtualisierten RDMA-Netzwerkadaptern Lesen Sie den VMware-Link unten, um weitere Informationen über die Einrichtung und Verwendung paravirtualisierter RDMA-Netzwerkadapter zu erhalten (PVRDMA). https://pubs.vmware.com/vsphere-65/index.jsp#com.vmware.vsphere.networking.doc/GUID-4A5EBD44FB1E-4A83-BB47-BBC65181E1C2.
NetXtreme-E Benutzerhandbuch RoCE – Beispiele für Konfiguration und Anwendungsfälle Konfiguration der VM auf Linux-Gast-Betriebssystem Hinweis: Der Benutzer muss die entsprechenden Entwicklungstools einschließlich git installieren, bevor er mit den nachfolgenden Konfigurationsschritten fortfahren kann. 1. Laden Sie den PVRDMA-Treiber und die Bibliothek mithilfe der folgenden Befehle herunter: git clone git://git.openfabrics.org/~aditr/pvrdma_driver.git git clone git://git.openfabrics.org/~aditr/libpvrdma.
NetXtreme-E Benutzerhandbuch DCBX – Data Center Bridging DCBX – Data Center Bridging Broadcom-NetXtreme-E-Controller unterstützen IEEE802.1Qaz DCBX sowie die ältere CEE-DCBXSpezifikation. Eine DCB-Konfiguration erfolgt durch den Austausch der lokal konfigurierten Einstellungen mit dem Peer der Verbindung.
NetXtreme-E Benutzerhandbuch DCBX – Data Center Bridging DCBX-Modus = aktivieren (nur IEEE) Mit dieser Option kann ein Benutzer DCBX mit der angegebenen Spezifikation aktivieren/deaktivieren. Nur IEEE besagt, dass IEEE802.1Qaz DCBX ausgewählt ist. Windows-Treibereinstellung: Nach Aktivierung der angegebenen Optionen im UEFI-HII-Menü zur Festlegung der Einstellungen für die Firmware-Ebene, führen Sie die Folgeauswahl in den erweiterten Eigenschaften des Windows-Treibers durch.
NetXtreme-E Benutzerhandbuch DCBX – Data Center Bridging Verwenden Sie folgenden Befehl zur Anzeige der erstellten Datenverkehrsklasse: C:\> Get-NetQoSTrafficClass Name Algorithm Bandwidth(%) Priority --------------------------[Default] ETS 70 0-3,5-7 SMB class ETS 30 4 Verwenden Sie folgenden Befehl zur Anpassung der Datenverkehrsklasse: PS C:\> Set-NetQoSTrafficClass -Name "SMB class" -BandwidthPercentage 40 PS C:\> get-NetQosTrafficClass Name Algorithm Bandwidth(%) Priority ---------------------------
NetXtreme-E Benutzerhandbuch DCBX – Data Center Bridging Hinweis: Der obige Befehl erstellt eine neue Richtlinie für SMB. –SMB ist ein Posteingangsfilter, der mit TCP-Port 445 (reserviert für SMB) übereinstimmt. Wenn ein Paket an TCP-Port 445 gesendet wird, wird es vom Betriebssystem mit dem 802.1p-Wert 4 getaggt, bevor das Paket an einen Netzwerk-Miniporttreiber weitergeleitet wird.
NetXtreme-E Benutzerhandbuch Häufig gestellte Fragen Häufig gestellte Fragen • Wird AutoNeg bei einer Geschwindigkeit von 15 G unterstützt? Ja. Unter “Konfiguration automatische Aushandlung” auf Seite 39 finden Sie weitere Informationen. • Wie verbinde ich ein SFP28-Kabel mit QSFP-Ports? Breakout-Kabel sind von QSFP- bis zu 4xSFP28-Ports verfügbar.
