Users Guide

ManualsBrandsDell ManualsConverged InfrastructureQLogic Family of Adapters

BC0154503-03 F

Dell EMC 의 허가로

제공되는 제 3 자 정보

사용 설명서

지능형 이더넷 어댑터

QL45212

Summary of content (193 pages)

PAGE 1
사용 설명서 지능형 이더넷 어댑터 QL45212 BC0154503-03 F Dell EMC 의 허가로 제공되는 제 3 자 정보
PAGE 2
사용 설명서 — 지능형 이더넷 어댑터 QL45212 문서 개정 이력 개정판 A, 2015 년 1 월 11 일 개정판 B, 2016 년 4 월 19 일 개정판 C, 2017 년 1 월 27 일 개정판 D, 2017 년 8 월 24 일 개정판 E, 2018 년 1 월 31 일 개정판 F, 2018 년 4 월 19 일 변경사항 영향받은 섹션 문서 규약 예가 업데이트됨 xiii 페이지의 " 문서 규약 " 더 이상 사용하지 않는 QLogic 라이선스 계약 및 보 증 섹션이 삭제됨 머리말 표 3-5 에 각주로 " 이 사용자 설명서를 게시한 후에 는 ESXi 드라이버를 추가로 사용할 수 있습니다 . 자세한 내용은 릴리스 노트를 참조하십시오 ." 가 추 가됨 28 페이지의 "VMware 드라이버 및 드라이버 패키지 " 표 6-1 에서 : 55 페이지의 " 지원되는 운영 체제 및 OFED"  Windows Server 및 VMware ESXi 의 OED 값이 업데이트됨  VMware ESXi 6.
PAGE 3
사용 설명서 — 지능형 이더넷 어댑터 QL45212 108 페이지의 "VMware 에서 SR-IOV 구성 " VMware 에서 SR-IOV 를 구성하려면 절차에서 다 음과 같이 일부 단계가 재조정됨 .  " 포트에 따라 VF 의 유효성을 검사하려면 esxcli 명령을 실행 ..." 단계가 "Edit Settings ( 설정 편집 ) 대화 상자를 ..." 단계 뒤로 이동하였 습니다 .  "VM 을 활성화 ..." 단계가 "QLogic 드라이버를 탐 지된 어댑터에 설치 ..." 단계 뒤로 이동하였습니 다.
PAGE 4
목차 머리말 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . xii xii xii xiii xv xv xvi xvi xvii xvii xvii 기능 설명 . . . . . . . .
PAGE 5
사용 설명서 — 지능형 이더넷 어댑터 QL45212 RDMA 없이 Linux 드라이버 설치 . . . . . . . . . . . . . . . . . . . Linux 드라이버 제거 . . . . . . . . . . . . . . . . . . . . . . . src RPM 패키지를 사용하여 Linux 드라이버 설치 . . . . . kmp/kmod RPM 패키지를 사용하여 Linux 드라이버 설치 . TAR 파일을 사용하여 Linux 드라이버 설치. . . . . . . . . . RDMA 와 함께 Linux 설치 . . . . . . . . . . . . . . . . . . . . . . . Linux 드라이버 옵션 매개변수 . . . . . . . . . . . . . . . . . . . . . Linux 드라이버 작업 기본값 . . . . . . . . . . . . . . . . . . . . . . Linux 드라이버 메시지 . . . . . . . . . . . . . . . .
PAGE 6
사용 설명서 — 지능형 이더넷 어댑터 QL45212 6 RoCE 구성 지원되는 운영 체제 및 OFED . . . . . . . . . . . . . . . . . . . . . . . . . . . . RoCE 를 위한 계획 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 어댑터 준비. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 이더넷 스위치 준비 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Cisco Nexus 6000 이더넷 스위치 구성. . . . . . . . . . . . . . . . . . . Dell Z9100 이더넷 스위치 구성 . . . . . . . . . . . . . . . . . . . . . . .
PAGE 7
사용 설명서 — 지능형 이더넷 어댑터 QL45212 8 SR-IOV 구성 Windows 에서 SR-IOV 구성. . . . . . . . . . . . . . . . . . . . . . . . . . . . . Linux 에서 SR-IOV 구성 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . VMware 에서 SR-IOV 구성 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9 95 102 108 Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성. . . . . . . . . . . RDMA 가상 NIC 를 사용한 Hyper-V 가상 스위치 생성 호스트 가상 NIC 에 VLAN ID 추가 . . . . . . . . . . . . RoCE 가 활성화되어 있는지 확인 . . . . . . . . . . . . .
PAGE 8
사용 설명서 — 지능형 이더넷 어댑터 QL45212 Hyper-Converged 시스템 배포. . . . . . . . . . . . . . . . . . . . . 운영 체제 배포 . . . . . . . . . . . . . . . . . . . . . . . . . . . 네트워크 구성 . . . . . . . . . . . . . . . . . . . . . . . . . . . Storage Spaces Direct 구성 . . . . . . . . . . . . . . . . . . . Nano 서버 배포 및 관리 . . . . . . . . . . . . . . . . . . . . . . . . . . . . 역할과 기능 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 실제 서버에 Nano 서버 배포 . . . . . . . . . . . . . . . . . . . . . . 가상 머신에 Nano 서버 배포 . . . .
PAGE 9
사용 설명서 — 지능형 이더넷 어댑터 QL45212 그림 목록 그림 3-1 3-2 3-3 3-4 3-5 3-6 3-7 3-8 3-9 3-10 4-1 4-2 4-3 4-4 4-5 4-6 5-1 5-2 5-3 5-4 5-5 5-6 5-7 5-8 5-9 5-10 5-11 5-12 5-13 5-14 6-1 6-2 6-3 6-4 6-5 6-6 6-7 6-8 6-9 6-10 7-1 7-2 7-3 페이지 Dell 업데이트 패키지 창 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . QLogic InstallShield 마법사 : 시작 창 . . . . . . . . . . . . . . . . . . . . . . . . . QLogic InstallShield 마법사 : License Agreement( 사용권 계약 ) 창 . . . . . . InstallShield 마법사 : Setup Type( 설정 유형 ) 창. . . . . . . .
PAGE 10
사용 설명서 — 지능형 이더넷 어댑터 QL45212 7-4 8-1 8-2 8-3 8-4 8-5 8-6 8-7 8-8 8-9 8-10 8-11 8-12 8-13 8-14 8-15 9-1 9-2 9-3 9-4 9-5 9-6 9-7 9-8 9-9 9-10 9-11 9-12 9-13 9-14 9-15 9-16 9-17 9-18 9-19 9-20 9-21 9-22 새 iSCSI 장치가 있는지 확인 . . . . . . . . . . . . . . . . SR-IOV 를 위한 시스템 설정 : 통합 장치 . . . . . . . . . SR-IOV 를 위한 시스템 설정 : 장치 레벨 구성 . . . . . 어댑터 속성 , 고급 : SR-IOV 활성화. . . . . . . . . . . . 가상 스위치 관리자 : SR-IOV 활성화 . . . . . . . . . . . VM 의 설정 : SR-IOV 활성화 . . . . . . . . . . . . . . . .
PAGE 11
사용 설명서 — 지능형 이더넷 어댑터 QL45212 표 목록 표 2-1 2-2 3-1 3-2 3-3 3-4 3-5 3-6 3-7 5-1 6-1 6-2 6-3 9-1 10-1 A-1 B-1 B-2 페이지 호스트 하드웨어 요구 사항 . . . . . . . . . . . . . . . . . . 최소 호스트 운영 체제 요구 사항 . . . . . . . . . . . . . . QLogic QL45212 Adapters Linux 드라이버 . . . . . . . . qede 드라이버 옵션 매개변수 . . . . . . . . . . . . . . . . Linux 드라이버 작업 기본값 . . . . . . . . . . . . . . . . . VMware 드라이버 . . . . . . . . . . . . . . . . . . . . . . . 릴리스별 ESXi 드라이버 패키지 . . . . . . . . . . . . . . . VMware 드라이버 옵션 매개변수 . . . . . . . . . .
PAGE 12
머리말 머리말에서는 지원되는 제품을 나열하고 , 대상 독자를 구체적으로 제시하고 , 이 설명서에 사용되는 인쇄 규칙 그리고 법적 고지를 설명합니다 . 지원되는 제품 본 사용자 설명서는 Cavium™ QL45212 25Gb 지능형 이더넷 어댑터 (QL45212HLCU-DE, 표준 높이 브래킷 ) 의 설치 , 구성 및 관리에 대해서 다루고 있습니다 . 대상 독자 본 설명서는 Windows®, Linux® 또는 VMware® 환경에서 Dell® PowerEdge® 서버 에 설치된 어댑터의 구성과 관리를 담당하는 시스템 관리자 및 기타 기술 직원을 위 해 작성되었습니다 . 설명서 내용 이 머리말에 이어 , 본 설명서의 나머지는 아래 각 장과 부록으로 구성됩니다 .  장 1 제품 개요에서는 제품 기능 설명 , 기능 목록 그리고 어댑터 사양에 대해 설명합니다 .  장 2 하드웨어 설치에서는 시스템 요구 사항 및 설치 전 검사 목록을 포함해 어댑터의 설치 방법에 대해 설명합니다 .
PAGE 13
머리말 문서 규약  장 7 iSER 구성에서는 Linux RHEL 및 SLES 에 대해 iSER(iSCSI Extensions for RDMA) 을 구성하는 방법을 설명합니다 .  장 8 SR-IOV 구성에서는 Windows, Linux 및 VMware 시스템에서 SR-IOV(단 일 루트 입 / 출력 가상화 ) 를 구성하는 절차를 설명합니다 .  장 9 Windows Server 2016에서는 Windows Server 2016 기능에 대해 설명합 니다 .  장 10 문제 해결에서는 다양한 문제 해결 방법과 리소스에 대해 설명합니다 .  부록 A 어댑터 LED에서는 어댑터 LED와 각 LED의 의미에 대해 설명합니다.  부록 B 케이블 및 광학 모듈에는 QL45212 Adapters 가 지원하는 케이블과 광 학 모듈이 나와 있습니다 .  부록 C Dell Z9100 스위치 구성에서는 Dell Z9100 스위치 포트를 25Gbps 로 구성하는 방법에 대해 설명합니다 .
PAGE 14
머리말 문서 규약   굵게 표시된 텍스트는 메뉴 항목 , 단추 , 확인란 또는 열 제목 등 사용자 인터 페이스 요소를 가리킵니다 . 예 :  시작 단추를 클릭하고 프로그램을 가리킨 후 보조 프로그램을 가리킨 다음 명령 프롬프트를 클릭합니다 .  알림 옵션 아래에서 경고 알람 확인란을 선택합니다 . Courier 글꼴로 표시된 텍스트는 파일 이름 , 디렉터리 경로 또는 명령행 텍 스트를 가리킵니다 . 예 :  파일 구조 어디서든지 루트 디렉터리로 돌아오는 방법 : cd /root 를 입력하고 ENTER 키를 누릅니다 .    다음 명령을 실행합니다 . sh ./install.bin. 키 이름과 키 스트로크는 다음과 같이 대문자로 표시됩니다 .  CTRL+P 를 누릅니다 .  위쪽 화살표 키를 누릅니다 . 기울임꼴로 표시된 텍스트는 용어, 강조, 변수 또는 문서 제목을 가리킵니다.
PAGE 15
머리말 법적 고지  |(수직선)은 상호 배타적인 옵션을 의미하는 것으로서 1가지 옵션만 선 택할 수 있습니다 . 예 :   on|off  1|2|3|4 ... ( 말줄임표 ) 는 선행 항목이 반복될 수 있음을 나타냅니다 . 예 :  x... 1 개 이상의 x 인스턴스를 의미합니다 .  [x...] 0 개 이상의 x 인스턴스를 의미합니다 .  명령 예제 출력 내의 수직 줄임표는 반복적인 출력 데이터의 부분이 의 도적으로 생략되었음을 나타냅니다 .  논리적 모호함을 방지하기 위해 ( )( 괄호 ) 및 { }( 중괄호 ) 가 사용됩니 다.예:  a|b c 는 모호합니다 . {(a|b) c} 는 a 또는 b 뒤에 c 를 의미합니다 . {a|(b c)} 는 a 또는 b c 를 의미합니다 . 법적 고지 이 섹션에 나오는 법적 고지에는 레이저 안전 (FDA 공지 사항 ), 기관 인증 및 제품 안전 규정 준수 사항이 포함됩니다 .
PAGE 16
머리말 법적 고지 기관 인증 다음 섹션은 QL45212 Adapters 와 관련하여 배출가스 , 내성 및 제품 안전성 기준 을 준수할 목적으로 실시한 EMC 및 EMI 테스트 규격에 대한 요약입니다 . EMI 및 EMC 요구 사항 FCC 파트 15 준수 : A 급 FCC 규정 준수 정보 진술문 : 이 장치는 FCC 규정의 파트 15 를 준수합니다 . 작동에는 다음 두 가지 조건이 적용됩니다 : (1) 본 장치는 유해 간섭을 일으키지 않 으며 , (2) 본 장치는 원치 않는 작동을 일으킬 수 있는 간섭을 포함하여 수신된 어떠 한 간섭도 수용해야 합니다 . ICES-003 규정 준수 : A 급 본 A 급 디지털 장치는 Canadian ICES-003 을 준수합니다 . Cet appareil numériqué de la classe A est conformé à la norme NMB-003 du Canada.
PAGE 17
머리말 법적 고지 KCC: A 급 한국 RRA A 급 인증 획득 제품 이름 / 모델 : 수렴형 네트워크 어댑터 및 지능형 이더넷 어댑터 인증 소유자 : QLogic Corporation 제조일 : 제품에 표시된 날짜 코드 참조 제조업체 / 제조국 : QLogic Corporation/ 미국 A 등급 장비 본 장치는 기업용 EMC 등록이 되어 있으므로 판매자 및 / 또는 구매자에게 이러한 사실을 인식시켜야 하며 , 부당한 판 ( 사업용 정보 / 통신 장비 ) 매 또는 구매로 확인되면 가정용으로 변경해야 합니다 . 한국어 포맷 - A 급 VCCI: A 급 본 제품은 전자파 장애 자주 규제 협의회 (VCCI) 의 표준을 기본으로 한 A 급 제품 입니다 . 이 장치가 국내 환경에서 사용되는 경우 무선 전자파가 발생할 수 있으며 , 이 경우 사용자는 교정 조치를 시행해야 할 수 있습니다 .
PAGE 18
머리말 법적 고지 2006/95/EC 저전압 지침 : TUV EN60950-1:2006+A11+A1+A12+A2 제 2 판 TUV IEC 60950-1: 2005 제 2 판 Am1: 2009 + Am2: 2013 CB IEC 60950-1 제 2 판에 대한 CB 인증 획득 xviii BC0154503-03 F
PAGE 19
1 제품 개요 이 장에서는 QL45212 Adapters 에 대해 다음 정보를 제공합니다 .  기능 설명  기능  3 페이지의 " 어댑터 사양 " 기능 설명 Cavium QL45212 어댑터는 Dell PowerEdge 시스템에 대해 가속화된 데이터 네트 워킹을 수행하도록 고안된 25Gb 지능형 이더넷 어댑터입니다 . QL45212 어댑터 에는 전이중 기능이 가능한 25Gb 이더넷 MAC 이 포함되어 있습니다 . 기능 QL45212 어댑터는 다음과 같은 기능을 제공합니다 .  NIC 분할 (NPAR)  단일 칩 솔루션 :   25Gb MAC  직접 연결 구리 케이블 (DAC) 방식의 트랜시버 연결을 위한 SerDes 인 터페이스  PCIe® 3.
PAGE 20
1– 제품 개요 기능    1 2  RSC( 수신 세그먼트 통합 )  Microsoft® Dynamic VMQ(Virtual Machine Queue), VMMQ(Virtual Machine Multiqueues) 및 Linux 다중 대기열 적응 인터럽트 :  TSS/RSS( 송신 / 수신 측 배율 조정 )  일반 라우팅 캡슐화(NVGRE) 및 가상 LAN(VXLAN) L2/L3 GRE 터널 트 래픽을 사용하는 네트워크 가상화를 위한 무상태 오프로드1 관리 :  SMB( 시스템 관리 버스 ) 컨트롤러  ACPI(Advanced Configuration and Power Interface) 1.1a 호환 ( 다중 전 력 모드 )  NC-SI(Network controller-sideband interface) 지원 고급 네트워크 기능 :  점보 프레임 ( 최대 9,600 바이트 ).
PAGE 21
1– 제품 개요 어댑터 사양 Dell QL45212 기능 Dell QL45212 지능형 이더넷 어댑터는 적응 인터럽트 주파수를 비롯해 임베디드 RISC 프로세서의 ASIC 기능을 지원합니다 . 적응 인터럽트 주파수 어댑터 드라이버는 트래픽 조건에 따라 지능적으로 호스트 인터럽트 주파수를 조 절하여 전체 응용 프로그램 처리량을 향상합니다 . 트래픽이 낮은 경우 , 어댑터 드 라이버는 수신된 각 패킷에 대하여 호스트를 인터럽트하여 지연 시간을 최대한 줄 여줍니다 . 트래픽이 높은 경우 어댑터는 지속적으로 수신되는 여러 패킷에 대해 한 개의 호스트 인터럽트를 발생시켜 호스트 CPU 주기를 유지합니다 . 임베디드 RISC 프로세서의 ASIC QL45212 Adapter 의 핵심적인 제어 기능은 완전 통합된 고성능 ASIC 에 있습니다 .
PAGE 22
1– 제품 개요 어댑터 사양  802.1ad(QinQ)  802.1p( 우선순위 인코딩 )  1588-2002 PTPv1(Precision Time Protocol)  1588-2008 PTPv2  IEEE 802.
PAGE 23
2 하드웨어 설치 이 장에서는 다음과 같은 하드웨어 설치 정보를 제공합니다 .  시스템 요구 사항  6 페이지의 " 안전 주의사항 "  7 페이지의 " 설치 전 검사 목록 "  7 페이지의 " 어댑터 설치 " 시스템 요구 사항 Cavium QL45212 Adapter 를 설치하기 전에 시스템이 표 2-1 및 표 2-2 에 표시된 하드웨어 및 운영 체제 요구 사항을 만족하는지 확인하십시오 . 지원되는 운영 체 제의 전체 목록은 Cavium 웹사이트에서 확인할 수 있습니다 . 표 2-1.
PAGE 24
2– 하드웨어 설치 안전 주의사항 표 2-2. 최소 호스트 운영 체제 요구 사항 운영 체제 요건 Windows Server 2012, 2012 R2, 2016(Nano 포함 ) Linux RHEL® 6.8, 6.9, 7.2, 7.3, 7.4 SLES® 11 SP4, SLES 12 SP2, SLES 12 SP3 VMware 25G 어댑터용 ESXi 6.0 u3 이상 주 표 2-2 는 최소 호스트 OS 요건을 나타냅니다 . 지원되는 운영 체제의 전체 목 록은 Cavium 웹사이트에서 확인할 수 있습니다 . 안전 주의사항 ! 경고 어댑터가 전압이 흐르는 시스템에 설치되어 있으면 위험할 수 있습니다 . 시 스템의 케이스를 열기 전에 , 사용자를 보호하고 시스템 구성 요소의 손상을 방지하려면 아래의 주의사항을 준수하십시오 .  손과 손목에서 금속 물체나 귀금속을 제거합니다 .  절연 및 비전도성 도구만 사용하십시오 .
PAGE 25
2– 하드웨어 설치 설치 전 검사 목록 설치 전 검사 목록 어댑터를 설치하기 전에 다음 절차를 완료하십시오 . 1. 시스템이 5 페이지의 " 시스템 요구 사항 " 에 나열된 하드웨어 및 소프트웨어 요구사항을 충족하는지 확인하십시오 . 2. 시스템이 최신 BIOS 를 사용하고 있는지 확인합니다 . 주 Cavium 웹사이트에서 어댑터 소프트웨어를 구매한 경우 어댑터 드라 이버 파일의 경로를 확인하십시오 . 3. 시스템이 활성화되었으면 시스템을 종료합니다 . 4. 시스템 종료가 완료되면 전원을 끄고 전원 코드를 뽑습니다 . 5. 어댑터를 포장 상자에서 꺼내 정전기 방지 처리된 곳에 놓습니다 . 6. 특히 어댑터의 가장자리 커넥터에 손상된 흔적이 없는지 검사합니다. 손상된 어댑터를 설치하려고 시도하지 마십시오 . 어댑터 설치 다음은 대부분의 시스템에서 Cavium QL45212 Adapters 를 설치할 때 적용되는 지 침입니다 .
PAGE 26
2– 하드웨어 설치 어댑터 설치 5. 카드의 양 쪽 모퉁이에 힘을 주어 슬롯이 완전히 장착될 때까지 어댑터 카드를 밀어 넣습니다 . 어댑터가 올바르게 위치하면 , 어댑터 포트 커넥터가 슬롯 개 구부와 정렬되고 어댑터 덮개 높이가 시스템 섀시와 동일한 높이가 됩니다 . 주의 시스템이나 어댑터가 손상될 수 있으므로 카드를 장착할 때 너무 힘을 주지 마십시오 . 어댑터가 장착되지 않으면 어댑터를 빼내고 맞춘 후 다 시 해보십시오 . 6. 어댑터를 어댑터 클립이나 나사로 고정합니다 . 7. 시스템 케이스를 완전히 닫고 개인용 정전기 방지 장치를 모두 떼어냅니다 .
PAGE 27
3 드라이버 설치 이 장에서는 드라이버 설치에 대한 다음 정보를 제공합니다 .  Linux 드라이버 소프트웨어 설치  17 페이지의 "Windows 드라이버 소프트웨어 설치 "  27 페이지의 "VMware 드라이버 소프트웨어 설치 " Linux 드라이버 소프트웨어 설치 이 섹션에서는 RDMA(Remote Direct Memory Access) 가 있거나 없는 상태에서 Linux 를 설치하는 방법을 설명합니다 . 또한 Linux 드라이버 옵션 매개변수 , 기본 값 , 메시지 및 통계에 대해서도 설명합니다 .  RDMA 없이 Linux 드라이버 설치  RDMA 와 함께 Linux 설치  Linux 드라이버 옵션 매개변수  Linux 드라이버 작업 기본값  Linux 드라이버 메시지  통계 QL45212 Adapter Linux 드라이버와 지원 문서는 Dell 지원 페이지에서 다운로드할 수 있습니다 . dell.support.
PAGE 28
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 표 3-1. QLogic QL45212 Adapters Linux 드라이버 Linux 드라 이버 설명 qed qed 코어 드라이버 모듈은 펌웨어를 직접 제어하고 , 인터럽트 신호를 처리하고 , 프로토콜 에 따른 드라이버 세트에 저레벨 API 를 제공합니다 . qed 는 qede, qedr, qedi 및 qedf 드라 이버와 인터페이스합니다 . Linux 코어 모듈은 PCI 장치 리소스 ( 레지스터 , 호스트 인터페 이스 대기열 등 ) 를 모두 관리합니다 . 이 모듈을 실행하기 위해서는 Linux 커널 버전 2.6.32 이상이 필요합니다 . 테스트는 x86_64 아키텍처를 중심으로 실행되었습니다 . qede QL45212 Adapter 에 사용하는 Linux 이더넷 드라이버입니다 . 이 드라이버는 하드웨어를 직접 제어하고 , Linux 호스트 네트워킹 호스트를 위해 이더넷 패킷을 보내고 받는 작업을 담당합니다 .
PAGE 29
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 다음 소스 RPM 은 RHEL 및 SLES 호스트에 RDMA 라이브러리 코드를 설치합니다 .  qlgc-libqedr-...src.rpm 다음 소스 코드 TAR BZip2(BZ2) 압축 파일은 RHEL 및 SLES 호스트에 Linux 드라 이버를 설치합니다 .  fastlinq-.tar.bz2 주 NFS, FTP 또는 HTTP( 네트워크 부팅 디스크 ) 를 통해 네트워크를 설치할 때 는 qede 드라이버가 저장된 드라이버 디스크가 필요할 수 있습니다 . Linux 부팅 드라이버는 makefile 및 make 환경을 수정하여 컴파일할 수 있습니다 . RDMA 없이 Linux 드라이버 설치 RDMA 없이 Linux 드라이버를 설치하려면 : 1. 아래 Dell 지원 사이트에서 QL45212 Adapter Linux 드라이버를 다운로드합 니다 . dell.support.com 2.
PAGE 30
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 depmod -a rpm -e qlgc-fastlinq-kmp-default-.  TAR 파일을 사용하여 Linux 드라이버를 설치한 경우 다음 명령을 발급합니 다. rmmod qede rmmod qed depmod -a  RHEL 의 경우 : cd /lib/modules//extra/qlgc-fastlinq rm -rf qed.ko qede.ko qedr.ko  SLES 의 경우 : cd /lib/modules//updates/qlgc-fastlinq rm -rf qed.ko qede.ko qedr.ko RDMA 가 없는 환경에서 Linux 드라이버를 제거하려면 1. 현재 설치되어 있는 드라이버에 대한 경로를 확인하려면 다음 명령을 발급합 니다 . modinfo 2. Linux 드라이버를 언로드하고 제거합니다 .
PAGE 31
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 3. qed.ko, qede.ko 및 qedr.ko 파일이 있는 디렉터리에서 이들 파일을 삭제합 니다 . 예를 들어 , SLES 에서 다음 명령을 발급합니다 . cd /lib/modules//updates/qlgc-fastlinq rm -rf qed.ko rm -rf qede.ko rm -rf qedr.ko depmod -a RDMA 환경에서 Linux 드라이버를 제거하려면 1. 설치되어 있는 드라이버에 대한 경로를 확인하려면 다음 명령을 발급합니다 . modinfo 2. Linux 드라이버를 언로드하고 제거합니다 . modprobe -r qedr modprobe -r qede modprobe -r qed depmod -a 3. 드라이버 모듈 파일을 제거합니다 .  RPM 패키지를 사용하여 드라이버를 설치한 경우 다음 명령을 발급합 니다 .
PAGE 32
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 2. 디렉터리를 RPM 경로로 변경하고 커널용 이진 RPM 을 구축합니다 . RHEL 의 경우 : cd /root/rpmbuild rpmbuild -bb SPECS/fastlinq-.spec SLES 의 경우 : cd /usr/src/packages rpmbuild -bb SPECS/fastlinq-.spec 3. 다음의 새로 컴파일된 RPM 을 설치합니다 . rpm -ivh RPMS//qlgc-fastlinq-..rpm 주 충돌이 보고된 경우 일부 Linux 배포판에 --force 옵션을 설치해야 합 니다 . 드라이버가 다음 경로에 설치됩니다 . SLES 의 경우 : /lib/modules//updates/qlgc-fastlinq RHEL 의 경우 : /lib/modules//extra/qlgc-fastlinq 4.
PAGE 33
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 TAR 파일을 사용하여 Linux 드라이버 설치 TAR 파일을 사용해 Linux 드라이버를 설치하려면 1. 디렉터리를 생성하고 해당 디렉터리에 TAR 파일 압축을 풉니다 . tar xjvf fastlinq-.tar.bz2 2. 최근 만든 디렉터리로 변경한 후 드라이버를 설치합니다 . cd fastlinq- make clean; make install qed 및 qede 드라이버가 다음 경로에 설치됩니다 . SLES 의 경우 : /lib/modules//updates/qlgc-fastlinq RHEL 의 경우 : /lib/modules//extra/qlgc-fastlinq 3. 드라이버를 로드해 테스트합니다 ( 필요한 경우 먼저 기존 드라이버를 언로 드함 ).
PAGE 34
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 5. RDMA 사용자 공간 응용프로그램과 작동하는 libqedr 라이브러리를 설치합 니다 . libqedr RPM 은 인박스 OFED 에서만 사용할 수 있습니다 . 다음 명령 을 실행합니다 . rpm –ivh qlgc-libqedr-..rpm 6. libqedr 사용자 공간 라이브러리를 빌드하여 설치하려면 다음 명령을 실행합 니다 . 'make libqedr_install' 7. 다음과 같이 드라이버를 로드하여 테스트합니다 . modprobe qedr make install_libeqdr Linux 드라이버 옵션 매개변수 표 3-2 에는 qede 드라이버에 대한 옵션 매개변수가 설명되어 있습니다 . 표 3-2. qede 드라이버 옵션 매개변수 매개변수 설명 debug ethtool -s msglvl 과 유사한 드라이버 세부 정보 표시 수준을 제어합니다 .
PAGE 35
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 Linux 드라이버 작업 기본값 표 3-3 에는 qed 및 qede Linux 드라이버 작업 기본값이 나와 있습니다 . 표 3-3. Linux 드라이버 작업 기본값 qed 드라이버 기본값 qede 드라이버 기본값 Speed 보급된 모든 속도 자동 협상 보급된 모든 속도 자동 협상 MSI/MSI-X 활성화됨 활성화됨 작업 Flow Control — 보급된 수신 및 전송 자동 협상 MTU — 1500( 범위 : 46–9600) Rx Ring Size — 1000 Tx Ring Size — 4078( 범위 : 128–8191) Coalesce Rx Microseconds — 24( 범위 : 0–255) Coalesce Tx Microseconds — 48 TSO — 활성화됨 Linux 드라이버 메시지 Linux 드라이버 메시지를 세부 레벨까지 설정하려면 다음 중 한 가지 명령을 실행 하십시오 .
PAGE 36
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치  어댑터 속성 관리  전원 관리 옵션 설정 Windows 드라이버 설치 DUP(Dell 업데이트 패키지 ) 를 사용하여 Windows 드라이버 소프트웨어를 설치합 니다 .  GUI 에서 DUP 실행  DUP 설치 옵션  DUP 설치 예제 GUI 에서 DUP 실행 GUI 에서 DUP 를 실행하려면 1. Dell 업데이트 패키지 파일을 나타내는 아이콘을 두 번 클릭합니다 . 주 Dell 업데이트 패키지의 실제 파일명은 다릅니다 . 2. Dell 업데이트 패키지 창 ( 그림 3-1) 에서 Install( 설치 ) 을 클릭합니다 . 그림 3-1.
PAGE 37
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 3. QLogic Super Installer—InstallShield® 마법사의 Welcome( 시작 ) 창 ( 그림 3-2) 에서 Next( 다음 ) 를 클릭합니다 . 그림 3-2. QLogic InstallShield 마법사 : 시작 창 4. 마법사의 라이선스 계약 창 ( 그림 3-3) 에서 다음을 수행합니다 . a. QLogic 최종 사용자 소프트웨어 라이선스 계약을 읽습니다 . b. 계속하려면 I accept the terms in the license agreement( 동의함 ) 를 선택합니다 .
PAGE 38
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 c. Next( 다음 ) 를 클릭합니다 . 그림 3-3. QLogic InstallShield 마법사 : License Agreement( 사용권 계약 ) 창 5. 다음과 같이 마법사의 설정 유형 창 ( 그림 3-4) 을 완료합니다 . a. b. 다음 설정 유형 중 하나를 선택합니다 .  모든 프로그램 기능을 설치하려면 Complete( 전체 ) 를 클릭합니다 .  설치할 기능을 직접 선택하려면 Custom( 사용자 지정 ) 을 클릭합 니다 . 계속하려면 Next( 다음 ) 를 클릭합니다 .
PAGE 39
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 Complete( 전체 ) 를 클릭한 경우 단계 6b 로 바로 이동하십시오 . 그림 3-4. InstallShield 마법사 : Setup Type( 설정 유형 ) 창 6. 단계 5 에서 Custom( 사용자 지정 ) 을 선택한 경우 다음과 같이 사용자 지정 설정 창 ( 그림 3-5) 을 완료합니다 . a. 설치할 기능을 선택하십시오 . 기본적으로 , 모든 기능이 선택되어 있습 니다. 특정 기능의 설치 설정을 변경하려면 그 옆의 아이콘을 클릭한 후 다음 옵션 중 하나를 선택합니다 .  This feature will be installed on the local hard drive(이 기능은 로컬 하드 드라이브에 설치됩니다 .) — 해당 기능의 하위 기능에 아무런 영향도 미치지 않고 그 기능을 설치하고자 할 때 선택합니 다.
PAGE 40
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 b. 계속하려면 Next( 다음 ) 를 클릭합니다 . 그림 3-5. InstallShield 마법사 : Custom Setup( 사용자 지정 설정 ) 창 7. InstallShield 마법사의 설치 준비 창 ( 그림 3-6) 에서 Install( 설치 ) 을 클릭합 니다 . InstallShield 마법사가 QLogic 어댑터 드라이버 및 관리 소프트웨어 설 치 프로그램을 설치합니다 . 그림 3-6.
PAGE 41
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 8. 설치가 완료되면 InstallShield 마법사 완료 대화 상자가 나타납니다 ( 그림 3-7). Finish( 완료 ) 를 클릭하여 설치 프로그램을 닫습니다 . 그림 3-7. InstallShield 마법사 : Completed( 완료 ) 창 9. Dell Update Package(Dell 업데이트 패키지 ) 창 ( 그림 3-8) 에서 "Update installer operation was successful"( 설치 프로그램 업데이트 작업 성공 ) 은 완료되었음을 표시합니다 .  (선택 사항) 로그 파일을 열려면 View Installation Log(설치 로그 보기) 를 클릭합니다 . 로그 파일에는 DUP 설치의 진행률 , 설치된 이전 버전 , 오류 메시지 및 설치에 대한 기타 정보가 표시됩니다 .
PAGE 42
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치  업데이트 패키지 창을 닫으려면 CLOSE( 닫기 ) 를 클릭합니다 . 그림 3-8. Dell 업데이트 패키지 창 DUP 설치 옵션 DUP 설치 동작을 사용자 지정하려면 다음 명령 행 옵션을 사용하십시오 .  드라이버 구성요소만 디렉터리로 추출하려는 경우 : /drivers= 주 이 명령을 사용하려면 /s 옵션이 필요합니다 .  드라이버 구성요소만 설치 또는 업데이트하려는 경우 : /driveronly 주 이 명령을 사용하려면 /s 옵션이 필요합니다 .  (고급) /passthrough 옵션을 사용해 DUP의 QLogic 설치 소프트웨어에 직접 /passthrough 뒤의 모든 텍스트를 보냅니다 . 이 모드에는 제공된 GUI 가 표 시되지 않지만 QLogic 소프트웨어의 GUI 일 필요는 없습니다 .
PAGE 43
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 주 이 명령을 사용하려면 /s 옵션이 필요합니다 . DUP 설치 예제 다음 예제에서는 설치 옵션 사용 방법을 보여줍니다 . 시스템을 자동으로 업데이트하려는 경우 : .exe /s 업데이트 내용을 C:\mydir\ 디렉터리로 추출하려는 경우 : .exe /s /e=C:\mydir 드라이버 구성요소를 C:\mydir\ 디렉터리로 추출하려는 경우 : .exe /s /drivers=C:\mydir 드라이버 구성요소만 설치하려는 경우 : .exe /s /driveronly 기본 로그 위치에서 C:\my path with spaces\log.txt 로 변경하려는 경우 : .exe /l="C:\my path with spaces\log.txt" Windows 드라이버 제거 Windows 드라이버를 제거하려면 1.
PAGE 44
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 3. Advanced( 고급 ) 페이지 ( 그림 3-9) 에서 Property( 속성 ) 아래의 항목을 선 택한 다음 필요에 따라 그 항목에 대한 Value( 값 ) 를 변경합니다 . 그림 3-9.
PAGE 45
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 전원 관리 옵션 설정 전원 관리 옵션을 설정하여 운영 체제가 컨트롤러를 꺼서 절전하도록 하거나 컨트 롤러가 컴퓨터의 절전 모드를 해제하도록 할 수 있습니다 . 장치가 다른 작업 ( 예 : 호출 서비스 ) 을 수행하고 있다면 운영 체제는 해당 장치를 종료하지 않습니다 . 운 영 체제는 시스템이 최대 절전 모드를 시도할 경우에만 가능한 모든 장치를 종료하 려 합니다 . 어댑터가 항상 전원이 켜져 있게 하려면 Allow the computer to turn off the device to save power( 전원을 절약하기 위해 컴퓨터가 이 장치를 끌 수 있 음 ) 확인란을 선택하지 마십시오 ( 그림 3-10). 그림 3-10. 전원 관리 옵션 주  전원 관리 페이지는 전원 관리를 지원하는 서버에만 사용할 수 있습니다 .
PAGE 46
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치   VMware 드라이버 매개변수 기본값 VMware 드라이버 제거 VMware 드라이버 및 드라이버 패키지 표 3-4 에는 프로토콜에 대한 VMware ESXi 드라이버가 나열되어 있습니다 . 표 3-4. VMware 드라이버 VMware 드라이버 a 설명 qedentv 네이티브 네트워킹 드라이버 qedrntv Native RDMA-Offload(RoCE 및 RoCEv2) 드라이버 a qedf 네이티브 FCoE-Offload 드라이버 qedil 레거시 iSCSI-Offload 드라이버 이번 릴리스에는 인증 RoCE 드라이버가 포함되어 있지 않습니다 . 인증되지 않은 드라이 버를 미리보기로 먼저 사용할 수도 있습니다 . ESXi 드라이버는 별도로 언급된 경우를 제외하고 개별 드라이버 패키지로 포함되 고 함께 번들되지 않습니다 . 표 3-5 에는 ESXi 버전과 해당 드라이버 버전이 나열 되어 있습니다 .
PAGE 47
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 다음 중 하나를 사용하여 개별 드라이버를 설치합니다 .  표준 ESXi 패키지 설치 명령 (VMware 드라이버 설치 참조 )  개별 드라이버 추가 정보 파일에 나와 있는 절차  다음 VMware KB 문서에 나와 있는 절차 : https://kb.vmware.com/selfservice/microsites/search.do?language=en_US& cmd=displayKC&externalId=2137853 NIC 드라이버를 먼저 설치한 후 스토리지 드라이버를 설치해야 합니다 . VMware 드라이버 설치 드라이버 압축 파일을 사용하여 새 드라이버를 설치하거나 기존 드라이버를 업데 이트할 수 있습니다 . 같은 드라이버 압축 파일에서 전체 드라이버 세트를 설치해 야 합니다 . 여러 압축 파일의 드라이버를 혼합하면 문제가 발생합니다 . VMware 드라이버를 설치하려면 1.
PAGE 48
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 6. 다음 설치 옵션 중 하나를 선택합니다 .  옵션 1: CLI 또는 VMware Update Manager(VUM) 를 사용하여 .vib 를 ESX 서버에 직접 설치합니다 .  CLI 를 사용하여 .vib 파일을 설치하려면 다음 명령을 실행합니 다 . 전체 .vib 파일 경로를 지정해야 합니다 . # esxcli software vib install -v /tmp/qedentv-1.0.3.11-1OEM.550.0.0.1331820.x86_64.vib  VUM 을 사용하여 .vib 파일을 설치하려면 다음 기술 자료를 참 조하십시오 . VMware vCenter Update Manager 4.x 및 5.x 를 사용한 ESXi/ESX 호스트 업데이트 (1019545)  옵션 2: 다음 명령을 실행하여 개별 VIB 파일을 모두 한 번에 설치합니 다.
PAGE 49
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 표 3-6. VMware 드라이버 옵션 매개변수 ( 계속 ) 매개변수 num_queues 설명 TX/RX 대기열 페어의 수를 지정합니다 . num_queues 는 1~11 또는 다음 중 하나일 수 있습니다 .  –1 은 드라이버에서 최적의 대기열 페어 수를 결정할 수 있도록 허용합니 다 ( 기본값 ).  0 은 기본 대기열을 사용합니다 . 다중 포트 또는 다중 기능 구성에 대해 콤마로 구분되는 다중 값을 지정할 수 있습니다 . multi_rx_filters 기본 대기열을 제외하고 RX 대기열당 RX 필터의 수를 지정합니다 . multi_rx_filters 는 1~4 또는 다음 값 중 하나일 수 있습니다 .  –1 은 대기열당 기본 개수의 RX 필터를 사용합니다 .  0 은 RX 필터를 비활성화합니다 . disable_tpa TPA(LRO) 기능을 활성화 (0) 하거나 비활성화 (1) 합니다 .
PAGE 50
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 표 3-6. VMware 드라이버 옵션 매개변수 ( 계속 ) 매개변수 설명 vxlan_filter_en 외부 MAC, 내부 MAC 및 VNI(VXLAN 네트워크 ) 를 기반으로 특정 대기열에 대한 트래픽과 직접 일치하도록 VXLAN 필터링을 활성화 (1) 하거나 비활성 화 (0) 합니다 . 기본값은 vxlan_filter_en=1 입니다 . 다중 포트 또는 다 중 기능 구성에 대해 콤마로 구분되는 다중 값을 지정할 수 있습니다 . enable_vxlan_offld VXLAN 터널 트래픽 체크섬 오프로드와 TSO(TCP 세그먼트화 오프로드 ) 기 능을 활성화 (1) 하거나 비활성화 (0) 합니다 . 기본값은 enable_vxlan_offld=1 입니다 . 다중 포트 또는 다중 기능 구성에 대해 콤 마로 구분되는 다중 값을 지정할 수 있습니다 .
PAGE 51
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 VMware 드라이버 제거 .vib 파일 (qedentv) 을 제거하려면 다음 명령을 발급합니다 . # esxcli software vib remove --vibname qedentv 드라이버를 제거하려면 다음 명령을 발급합니다 .
PAGE 52
4 펌웨어 업그레이드 이 장에서는 DUP(Dell 업데이트 패키지 ) 를 사용한 펌웨어 업그레이드에 대한 정 보를 제공합니다 . 펌웨어 DUP 는 플래시 업데이트 유틸리티로만 사용해야 하며 , 어댑터 구성 용도 로 사용해서는 안 됩니다 . 실행 파일을 두 번 클릭하여 펌웨어 DUP 를 실행할 수 있습니다 . 또는 지원되는 여러 가지 명령 행 옵션으로 명령 행에서 펌웨어 DUP 를 실행할 수도 있습니다 .  두 번 클릭으로 DUP 실행  37 페이지의 " 명령 행에서 DUP 실행 "  38 페이지의 ".bin 파일을 사용하여 DUP 실행 " (Linux 만 해당 ) 두 번 클릭으로 DUP 실행 실행 파일을 두 번 클릭하여 펌웨어 DUP 를 실행하려면 1. 펌웨어 Dell 업데이트 패키지 파일을 나타내는 아이콘을 두 번 클릭합니다 . 그림 4-1 에서와 같이 Dell 업데이트 패키지 시작 화면이 나타납니다 . 계속하 려면 Install( 설치 ) 을 클릭합니다 . 그림 4-1.
PAGE 53
4– 펌웨어 업그레이드 두 번 클릭으로 DUP 실행 2. 화면에 나타나는 지시를 따릅니다 . 그림 4-2 와 같이 Warning( 경고 ) 대화 상 자에서 Yes( 예 ) 를 클릭해 설치를 계속합니다 . 그림 4-2.
PAGE 54
4– 펌웨어 업그레이드 두 번 클릭으로 DUP 실행 그림 4-3 에 표시된 대로 설치 프로그램이 새 펌웨어를 로드 중임을 나타냅니 다. 그림 4-3. Dell 업데이트 패키지 : 새 펌웨어 로드 완료되면 그림 4-4 에 표시된 대로 설치 프로그램이 설치 결과를 나타냅니다 . 그림 4-4.
PAGE 55
4– 펌웨어 업그레이드 명령 행에서 DUP 실행 3. Yes( 예 ) 를 클릭하여 시스템을 재부팅합니다 . 4. 그림 4-5 에 표시된 대로 Finish( 완료 ) 를 클릭하여 설치를 완료합니다 . 그림 4-5. Dell 업데이트 패키지 : 설치 완료 명령 행에서 DUP 실행 옵션이 지정되어 있지 않은 상태로 명령 행에서 펌웨어 DUP 를 실행하면 DUP 아 이콘을 두 번 클릭하는 경우와 동일한 동작이 수행됩니다 . DUP 의 실제 파일 이름 은 다릅니다 . 명령 행에서 펌웨어 DUP 를 실행하려면  다음 명령을 실행합니다 . C:\> Network_Firmware_2T12N_WN32__X16.
PAGE 56
4– 펌웨어 업그레이드 .bin 파일을 사용하여 DUP 실행 그림 4-6 에서는 Dell 업데이트 패키지 설치를 사용자 지정하는 데 사용할 수 있는 옵션을 표시합니다 . 그림 4-6. DUP 명령 행 옵션 .bin 파일을 사용하여 DUP 실행 다음 절차는 Linux OS 에서만 수행할 수 있습니다 . .bin 파일을 사용하여 DUP 를 업데이트하려면 1. Network_Firmware_NJCX1_LN_X.Y.Z.BIN 파일을 테스트 중인 시스템 (SUT) 으로 복사합니다 . 2. 다음과 같이 파일 유형을 실행 파일로 변경합니다 . chmod 777 Network_Firmware_NJCX1_LN_X.Y.Z.BIN 3. 업데이트 프로세스를 시작하려면 다음 명령을 실행합니다 . ./Network_Firmware_NJCX1_LN_X.Y.Z.BIN 4. 펌웨어가 업데이트되면 시스템을 재부팅합니다 .
PAGE 57
4– 펌웨어 업그레이드 .bin 파일을 사용하여 DUP 실행 DUP 업데이트 도중 SUT 로부터 출력한 예 : ./Network_Firmware_NJCX1_LN_08.07.26.BIN Collecting inventory... Running validation... BCM57810 10 Gigabit Ethernet rev 10 (p2p1) The version of this Update Package is the same as the currently installed version. Software application name: BCM57810 10 Gigabit Ethernet rev 10 (p2p1) Package version: 08.07.26 Installed version: 08.07.
PAGE 58
5 어댑터 사전 부팅 구성 호스트 부팅 프로세스 중에 HII(Human Infrastructure Interface) 응용프로그램을 사 용해 어댑터 관리 작업을 수행하고 일시 정지할 수 있습니다 . 이러한 작업에는 다 음이 포함됩니다 .  41 페이지의 " 시작하기 "  44 페이지의 " 펌웨어 이미지 속성 표시 "  45 페이지의 " 장치 레벨 매개변수 구성 "  46 페이지의 "NIC 매개변수 구성 "  49 페이지의 "Data Center Bridging 구성 "  51 페이지의 " 파티션 구성 " 주 이 장에 나오는 HII 스크린샷은 대표적인 사례로 , 사용자의 시스템에 나타나 는 화면과 일치하지 않을 수 있습니다 .
PAGE 59
5– 어댑터 사전 부팅 구성 시작하기 시작하기 HII 응용프로그램을 시작하려면 1. 플랫폼의 System Setup( 시스템 설정 ) 창을 엽니다 . 시스템 설정을 시작하 는 방법에 대한 자세한 내용은 시스템 사용 설명서를 참조하십시오 . 2. System Setup( 시스템 설정 ) 창 ( 그림 5-1) 에서 Device Settings( 장치 설정 ) 를 선택한 후 ENTER 키를 누릅니다 . 그림 5-1. 시스템 설정 3. Device Settings( 장치 설정 ) 창 ( 그림 5-2) 에서 구성하려는 QL45212 Adapter 포트를 선택한 후 ENTER 키를 누릅니다 . 그림 5-2.
PAGE 60
5– 어댑터 사전 부팅 구성 시작하기 기본 구성 페이지 ( 그림 5-3) 에는 분할 모드를 설정할 수 있는 어댑터 관리 옵션이 있습니다 . 그림 5-3. 기본 구성 페이지 4. Device Level Configuration( 장치 레벨 구성 ) 에서 그림 5-4 와 같이 Partitioning Mode( 분할 모드 ) 를 NPAR 로 설정하여 NIC Partitioning Configuration(NIC 분할 구성 ) 옵션을 기본 구성 페이지 (Main Configuration Page) 에 추가합니다 .
PAGE 61
5– 어댑터 사전 부팅 구성 시작하기 주 NPAR 은 최대 속도가 1G 인 포트에서 이용할 수 없습니다 . 그림 5-4. 기본 구성 페이지에서 Partitioning Mode 를 NPAR 로 설정 그림 5-5. 기본 구성 페이지에서 NPAR Partitioning Mode 설정 그림 5-3 및 그림 5-4 에서 Main Configuration Page( 기본 구성 페이지 ) 의 각 옵션 은 다음과 같이 표시됩니다 .
PAGE 62
5– 어댑터 사전 부팅 구성 펌웨어 이미지 속성 표시  Data Center Bridging (DCB) Settings(DCB 설정 )(49 페이지의 "Data Center Bridging 구성 " 참조 )  NIC Partitioning Configuration(NIC 분할 구성 )(Device Level Configuration( 장치 레벨 구성 ) 페이지에서 NPAR 이 선택되어 있는 경우 ) (51 페이지의 " 파티션 구성 " 참조 ) 그 밖에도 Main Configuration Page( 기본 구성 페이지 ) 에는 표 5-1 에 나열된 어 댑터 속성이 표시됩니다 . 표 5-1.
PAGE 63
5– 어댑터 사전 부팅 구성 장치 레벨 매개변수 구성  L2B Firmware Version(L2B 펌웨어 버전) 은 부팅을 위한 NIC 오프로드 펌웨 어 버전입니다 . 그림 5-6. 펌웨어 이미지 속성 장치 레벨 매개변수 구성 장치 레벨 구성은 단일 루트 -I/O 가상화 (SR-IOV) 및 NIC 분할 활성화와 NPAReP 활성화 또는 비활성화로 구성됩니다 . 장치 레벨 구성을 수행하려면 Main Configuration Page( 기본 구성 페이지 ) 에서 Device Level Configuration( 장치 레벨 구성 ) 을 선택한 후 Finish( 완료 ) 를 클릭하십시오 . 그림 5-7 은 Device Level Configuration( 장치 레벨 구성 ) 페이지를 표시한 것입니다 . 그림 5-7.
PAGE 64
5– 어댑터 사전 부팅 구성 NIC 매개변수 구성 NIC 분할 (NPAR), 단일 루트 입 / 출력 가상화 (SR-IOV) 또는 둘 다 활성화하려면 1. Main Configuration Page( 기본 구성 페이지 , 42 페이지의 그림 5-3) 에서 Device Level Configuration( 장치 레벨 구성 ) 을 선택한 다음 Finish( 완료 ) 를 클릭합니다 . 2. Device Level Configuration( 장치 레벨 구성 ) 페이지 ( 그림 5-7) 에서 Virtualization Mode( 가상화 모드 ) 를 클릭한 후 다음 옵션 중 하나를 선택합 니다 . 3.  NPAR 은 NPAR 을 활성화합니다 .  SRIOV 는 SR-IOV( 비분할 가상화 ) 를 활성화합니다 .  NPAR+SRIOV 는 SR-IOV 와 함께 NPAR 을 활성화합니다 .  None( 없음 ) 은 모든 가상화를 비활성화합니다 .
PAGE 65
5– 어댑터 사전 부팅 구성 NIC 매개변수 구성   PXE Virtual LAN Mode(PXE 가상 LAN 모드 ) Virtual LAN ID( 가상 LAN ID) NIC 매개변수를 구성하려면 1. Main Configuration Page( 기본 구성 페이지 ) 에서 NIC Configuration(NIC 구성 , 42 페이지의 그림 5-3) 을 선택한 다음 Finish( 완료 ) 를 클릭합니다 . 그림 5-8 은 NIC Configuration(NIC 구성 ) 페이지를 표시한 것입니다 . 그림 5-8. NIC 구성 2. 다음 Link Speed( 링크 속도 ) 옵션 중 하나를 선택합니다 . 선택하는 링크 속 도 옵션이 두 개의 어댑터 포트 모두에 적용됩니다 . 연결 속도와 FEC(Forward Error Correction) 가 연결된 스위치 또는 장치 포트와 일치해야 합니다 .
PAGE 66
5– 어댑터 사전 부팅 구성 NIC 매개변수 구성  5. 6. Fire Code는 링크가 Fire Code FEC를 사용하도록 구성되어 있다는 것을 의미합니다 . FEC 부계층은 Clause 74 FEC 와 유사하게 작동합니다 . Boot Mode( 부팅 모드 ) 일 때는 다음 값 중 하나를 선택합니다 .  PXE 는 PXE 부팅을 활성화합니다 .  Disabled(비활성화)는 현재 포트가 원격 부팅 소스로 사용되는 것을 방 지합니다 . Virtual LAN Mode( 가상 LAN 모드 ) 매개변수는 PXE 원격 설치 모드일 때 전체 포트에 적용됩니다 . PXE 원격 설치 모드가 끝난 후에는 더 이상 적용되 지 않습니다 . 다음 VLAN 옵션에서 한 가지를 선택합니다 .  Enabled( 활성화 ) 는 PXE 원격 설치 모드일 때 현재 포트에서 VLAN 모 드를 활성화합니다 .  Disabled( 비활성화 ) 는 현재 포트에서 VLAN 모드를 비활성화합니다 . 7.
PAGE 67
5– 어댑터 사전 부팅 구성 Data Center Bridging 구성 VLAN 을 사용하도록 포트의 PXE 원격 설치를 구성하려면 주 PXE 원격 설치가 끝난 후에는 VLAN 을 더 이상 사용하지 않습니다 . 1. Virtual LAN Mode( 가상 LAN 모드 ) 를 Enabled( 활성화 ) 로 설정합니다 . 2. Virtual LAN ID( 가상 LAN ID) 상자에 사용할 숫자를 입력합니다 . 3. Back( 뒤로 ) 을 클릭합니다 . 4. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 . Data Center Bridging 구성 DCB(Data Center Bridging) 설정은 DCBX 프로토콜 및 RoCE 우선 순위로 구성됩 니다 . DCB 설정을 구성하려면 1.
PAGE 68
5– 어댑터 사전 부팅 구성 Data Center Bridging 구성  3 은 무손실 FCoE 트래픽에서 사용하는 우선순위 번호를 나타냅니다 .  4 는 무손실 iSCSI-TLV over DCB 트래픽에서 사용하는 우선순위 번호 를 나타냅니다 .  1, 2, 5, 6 및 7 은 RoCE 용도로 사용되는 DCB 트래픽 클래스의 우선순 위 번호를 나타냅니다 이 RoCE 제어 방법을 사용하려면 각 OS RoCE 설정 지침을 따르십시오 . 그림 5-9. 시스템 설정 : Data Center Bridging(DCB) 설정 4. Back( 뒤로 ) 을 클릭합니다 . 5. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 . 주 DCBX 가 활성화될 때 어댑터는 소스 MAC 어드레스 역할을 하는 전용 유니 캐스트 주소를 포함한 LLDP(Link Layer Discovery Protocol) 패킷을 주기적으 로 전송합니다 .
PAGE 69
5– 어댑터 사전 부팅 구성 파티션 구성 파티션 구성 어댑터에서 각 파티션에 대한 대역폭 범위를 구성할 수 있습니다 . 최대 및 최소 대역폭 할당을 구성하려면 1. Main Configuration Page( 기본 구성 페이지 ) 에서 NIC Partitioning Configuration(NIC 분할 구성 ) 을 선택한 다음 ENTER 키를 누릅니다 . 2. Partitions Configuration( 파티션 구성 ) 페이지 ( 그림 5-10) 에서 Global Bandwidth Allocation( 전역 대역폭 할당 ) 을 선택합니다 . 그림 5-10.
PAGE 70
5– 어댑터 사전 부팅 구성 파티션 구성 그림 5-11 은 파티션 1 의 전역 대역폭 할당을 나타냅니다 . 그림 5-11. 전역 대역폭 할당 , 파티션 1 구성 3. Global Bandwidth Allocation( 전역 대역폭 할당 ) 페이지 ( 그림 5-12) 에서 대 역폭을 할당할 각 파티션 최소 및 최대 TX 대역폭 필드를 클릭합니다 . NPAReP 모드를 비활성화할 경우 포트당 4 개의 파티션이 있고 , NPAReP 모 드를 활성화할 경우 포트당 8 개의 파티션이 있습니다 . NPAReP 모드의 경우 BIOS 에서 어댑터 PCI 슬롯에 대해 ARI 가 활성화되어 있어야 합니다 . 그림 5-12.
PAGE 71
5– 어댑터 사전 부팅 구성 파티션 구성  Partition n Minimum TX Bandwidth( 파티션 n 최소 TX 대역폭 ) 는 최 대 실제 포트 연결 속도의 백분율로 표시한, 선택한 파티션의 최소 전송 대역폭입니다 . 값은 0-100 으로 입력할 수 있습니다 . DCBX ETS 모드 가 활성화되어 있는 경우 트래픽당 클래스 DCBX ETS 최소 대역폭 값 이 파티션당 최소 TX 대역폭 값과 동시에 사용됩니다 . 단일 포트에 있 는 모든 파티션의 최소 TX 대역폭 값의 합은 100 과 같거나 모두 0 이어 야 합니다 .  TX 대역폭을 모두 0 으로 설정하면 전체 활성 파티션을 통해 사용할 수 있는 대역폭을 동일하게 나누는 것과 비슷하지만 전체 활성 파티션을 통해서는 대역폭이 동적으로 할당됩니다 .
PAGE 72
5– 어댑터 사전 부팅 구성 파티션 구성 그림 5-13. 파티션 1 구성 3. 두 번째 파티션을 구성하려면 Partition 2 Configuration( 파티션 2 구성 ) 을 선택하여 Partition 2 Configuration( 파티션 2 구성 ) 페이지를 엽니다 . FCoE Offload 가 있는 경우 Partition 2 Configuration( 파티션 2 구성 , 그림 5-14) 페 이지에 다음 매개변수가 표시됩니다 .  NIC Mode(NIC 모드 ) 파티션 2 이상에서 L2 이더넷 NIC 프로필을 활성 화하거나 비활성화합니다 . 나머지 파티션을 모두 비활성화하려면 NIC Mode(NIC 모드 ) 를 Disabled( 비활성화 ) 로 설정하십시오 . 오프로드 가 가능한 파티션을 비활성화하려면 NIC Mode(NIC 모드 ) 와 각 오프 로드 모드를 모두 비활성화하십시오 .
PAGE 73
6 RoCE 구성 이 장에서는 QL45212 Adapter, 이더넷 스위치 및 Windows 또는 Linux 호스트에서 RoCE v1 및 v2(RDMA over converged Ethernet) 구성에 대해 설명하며 , 다음을 포함합니다 .  지원되는 운영 체제 및 OFED  56 페이지의 "RoCE 를 위한 계획 "  57 페이지의 " 어댑터 준비 "  57 페이지의 " 이더넷 스위치 준비 "  59 페이지의 "Windows Server 용 어댑터에서 RoCE 구성 "  68 페이지의 "Linux 용 어댑터에서 RoCE 구성 "  78 페이지의 "VMware ESX 용 어댑터에서 RoCE 구성 " 주 현재 릴리스에서 일부 RoCE 기능은 완전히 사용하지 못할 수도 있습니다 . 지원되는 운영 체제 및 OFED 표 6-1 은 RoCE v1, RoCE v2 및 OFED 에 대한 운영 체제 지원을 보여줍니다 . 표 6-1.
PAGE 74
6–RoCE 구성 RoCE 를 위한 계획 표 6-1. RoCE v1, RoCE v2, iWARP 및 OFED 에 대한 OS 지원 ( 계속 ) 인박스 OFED 3.18-3 GA OFED-4.8-1 GA RHEL 7.4 RoCE v1, RoCE v2, iSER 아니오 아니오 SLES 12 SP3 RoCE v1, RoCE v2, iSER 아니오 아니오 CentOS 7.3 RoCE v1, RoCE v2, iSER 아니오 RoCE v1, RoCE v2 CentOS 7.4 RoCE v1, RoCE v2, iSER 아니오 아니오 아니오 N/A N/A VMware ESXi 6.5, 6.5U1 RoCE v1, RoCE v2 N/A N/A VMware ESXi 6.7 RoCE v1, RoCE v2 N/A N/A 운영 체제 VMware ESXi 6.0 u3 RoCE 를 위한 계획 RoCE 구현을 준비할 때 다음 사항을 고려하십시오 .
PAGE 75
6–RoCE 구성 어댑터 준비 어댑터 준비 다음 단계를 따라 DCBX 를 활성화하고 , HII 관리 응용프로그램을 사용해 RoCE 우 선 순위를 지정합니다 . HII 응용프로그램에 대한 자세한 내용은 장 5 어댑터 사전 부팅 구성을 참조하십시오 . 어댑터를 준비하려면 1. Main Configuration( 기본 구성 ) 페이지에서 Data Center Bridging (DCB) Settings(DCB(Data Center Bridging) 설정 ) 를 선택한 후 Finish( 마침 ) 를 클릭합니다 . 2. DCB(Data Center Bridging) 설정 창에서 DCBX Protocol(DCBX 프로토콜 ) 옵션을 클릭합니다 . QL45212 Adapter 는 CEE 및 IEEE 프로토콜을 모두 지 원합니다 . 이 값은 DCB 스위치의 해당 값과 일치해야 합니다 . 이 예제에서 는 CEE 또는 Dynamic( 동적 ) 을 선택합니다 . 3.
PAGE 76
6–RoCE 구성 이더넷 스위치 준비 Cisco 스위치를 구성하려면 1. config 터미널 세션을 다음과 같이 엽니다 . Switch# config terminal switch(config)# 2. 다음과 같이 QoS(Quality of Service) 클래스 맵을 구성하고 어댑터 (5) 와 일 치하도록 RoCE 우선 순위를 설정합니다 . switch(config)# class-map type qos class-roce switch(config)# match cos 5 3. 다음과 같이 대기열 지정 클래스 맵을 구성합니다 . switch(config)# class-map type queuing class-roce switch(config)# match qos-group 3 4. 다음과 같이 네트워크 QoS 클래스 맵을 구성합니다 .
PAGE 77
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 9. 어댑터 (5) 에 할당된 VLAN ID 와 일치하도록 스위치 포트에 VLAN ID 를 할 당합니다 . switch(config)# interface ethernet x/x switch(config)# switchport mode trunk switch(config)# switchport trunk allowed vlan 1,5 Dell Z9100 이더넷 스위치 구성 RoCE 용 Dell Z9100 이더넷 스위치를 구성하려면 Appendix C Dell Z9100 스위치 구성의 절차를 참조하십시오 . Windows Server 용 어댑터에서 RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성은 어댑터에서 RoCE 를 활성화하고 Network Direct MTU 크기를 확인하는 과정으로 이루어집니다 . Windows Server 호스트에서 RoCE 를 구성하려면 : 1.
PAGE 78
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 그림 6-1 은 속성 값 구성 예를 보여줍니다 . 그림 6-1. RoCE 속성 구성 2. Windows PowerShell 을 사용하여 어댑터에서 RDMA 가 활성화되어 있는지 확인합니다 . Get-NetAdapterRdma 명령은 RDMA 를 지원하는 어댑터를 나 열합니다 . 두 포트 모드 활성화되어 있습니다 . 주 RoCE over Hyper-V 를 구성하는 경우 VLAN ID 를 실제 인터페이스에 할당하지 마십시오 . PS C:\Users\Administrator> Get-NetAdapterRdma Name InterfaceDescription Enabled ----- -------------------- ------- SLOT 4 3 Port 1 QLogic FastLinQ QL45212... True SLOT 4 3 Port 2 QLogic FastLinQ QL45212...
PAGE 79
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 3. Windows PowerShell 을 사용하여 호스트 운영 체제에서 NetworkDirect 가 활성화되어 있는지 확인합니다 . Get-NetOffloadGlobalSetting 명령은 NetworkDirect 가 활성화되어 있음을 보여 줍니다 . PS C:\Users\Administrators> Get-NetOffloadGlobalSetting 4.
PAGE 80
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 RDMA 카운터 보기 RoCE 용 RDMA 카운터를 보려면 1. 성능 모니터링을 실행합니다 . 2. Add Counters( 카운터 추가 ) 대화 상자를 엽니다 . 그림 6-2 은 이러한 예를 나타냅니다 . 그림 6-2.
PAGE 81
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 3. 다음 카운터 유형 중 하나를 선택합니다 .    4. Cavium FastLinQ Congestion Control(Cavium FastLinQ 혼잡 제어):  스위치에 ECN 이 활성화되어 있을 경우 네트워크 혼잡이 발생하 면 높입니다 .  성공적으로 전송되거나 수신된 RoCE v2 ECN Marked Packet 및 Congestion Notification Packet(CNP) 을 설명합니다 .  RoCE v2 에만 적용됩니다 . Cavium FastLinQ Port Counters(Cavium FastLinQ 포트 카운터 ):  네트워크 혼잡이 발생할 때 높입니다 .  흐름 제어 또는 전역 일시 정지가 구성되어 있을 경우에는 네트워 크 혼잡이 발생해도 카운터를 높이지 마십시오 .
PAGE 82
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 그림 6-3 은 카운터 모니터링 출력의 예를 나타냅니다 . 그림 6-3. 성능 모니터 : Cavium FastLinQ 카운터 표 6-3 은 오류 카운터에 세부 정보를 나타냅니다 . 표 6-3. Cavium FastLinQ RDMA 오류 카운터 RDMA 오류 카운터 RoCE 에 대한 적용 여부 설명 문제 해결 CQ overflow (CQ 오버플로 우) CQ 는 RDMA 작업 요청이 게시되는 완료 대기열입니다 . 이 카운터는 인 스턴스 수를 지정합니다 . 전송 또는 수신 대기열에 완료된 작업 요청이 있 지만 연결된 완료 대기열에 공간이 없 습니다 . 예 완료 대기열의 크기가 부족한 원인은 소프트 웨어 설계 문제에 있습 니다 . Requestor Bad response ( 요청자의 잘 못된 응답 ) 응답자에서 잘못된 응답이 반환되었 습니다 .
PAGE 83
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 표 6-3. Cavium FastLinQ RDMA 오류 카운터 ( 계속 ) RDMA 오류 카운터 RoCE 에 대한 적용 여부 설명 문제 해결 Requestor CQEs flushed with error ( 오류로 인해 Requestor CQE 삭제됨 ) 어떠한 이유로 QP 가 오류 상태로 전 환되어 대기 중인 작업 요청이 있을 경우에는 flush status 를 실행하여 완 료된 작업 ( 실제로는 작업 요청 실행 이 완료되지 않음 ) 을 CQ 로 전송하 면서 게시된 작업 요청이 삭제될 수 있습니다 . 오류 상태에서 완료된 작 업 요청이 있을 경우에는 해당 QP 에 서 대기 중인 다른 모든 작업 요청까 지 삭제됩니다 . 예 RDMA 연결이 끊길 때 발생합니다 . Requestor Local length ( 요청자 로컬 길이 ) RDMA READ 응답 메시지에 포함된 페이로드 데이터가 너무 많거나 적습 니다 .
PAGE 84
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 표 6-3. Cavium FastLinQ RDMA 오류 카운터 ( 계속 ) RDMA 오류 카운터 RoCE 에 대한 적용 여부 설명 문제 해결 Requestor Remote Invalid request( 요청 자의 잘못된 원격 요청 ) 원격 측에서 채널을 통해 잘못된 메시 지를 수신하였습니다. 잘못된 요청은 전송 메시지 또는 RDMA 요청이 될 수 있습니다 . 예 가능한 원인으로는 이 수신 대기열에서 작업 을 지원하지 않거나 , 새로운 RDMA 또는 원 자 연산 요청을 수신할 수 있는 버퍼링이 충분 하지 않거나 , 혹은 RDMA 요청에서 지정 된 길이가 231 바이트 보다 큰 경우 등이 있습 니다 . Requestor remote operation ( 요청자 원격 작업 ) 원격 측에서 로컬 문제로 인해 요청된 작업을 완료할 수 없습니다 .
PAGE 85
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 표 6-3. Cavium FastLinQ RDMA 오류 카운터 ( 계속 ) RDMA 오류 카운터 RoCE 에 대한 적용 여부 설명 문제 해결 Responder local length ( 응답자 로컬 길이 ) 인바운드 메시지의 길이가 잘못되었 습니다 . 예 원격 피어의 동작 오류 입니다 . 예를 들어 인 바운드 전송 메시지의 길이가 수신 버퍼의 크기보다 크기 때문입 니다 . Responder local protection ( 응답자 로컬 보호 ) 로컬에 게시된 작업 요청의 데이터 세 그먼트가 요청된 작업에 유효한 메모 리 영역을 참조하지 않습니다 . 예 소프트웨어의 메모리 관리에 문제가 있습니 다. Responder Local QP Operation error( 응답자 로컬 QP 작업 오류 ) 이 작업 요청을 처리하는 도중 내부 QP 일관성 오류가 탐지되었습니다 . 예 소프트웨어에 문제가 있습니다 .
PAGE 86
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 Linux 용 어댑터에서 RoCE 구성 이 섹션은 RHEL 및 SLES 의 RoCE 구성 절차를 설명합니다 . 또한 , RoCE 구성을 확인하는 방법을 설명하고 VLAN 인터페이스와 함께 그룹 ID(GID) 를 사용하는 방 법에 대한 지침을 제공합니다 .  RHEL 의 RoCE 구성  SLES 의 RoCE 구성  Linux 에서 RoCE 구성 확인  VLAN 인터페이스 및 GID 인덱스 값  Linux 의 RoCE v2 구성 RHEL 의 RoCE 구성 어댑터에서 RoCE 를 구성하려면 RHEL 호스트에 OFED(Open Fabrics Enterprise Distribution) 가 설치되고 구성되어 있어야 합니다 . RHEL 의 인박스 OFED 를 준비하려면 1. 시스템을 설치하거나 업그레이드하는 중에 InfiniBand® 및 OFED 지원 패키 지를 선택합니다 . 2.
PAGE 87
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 SLES 의 RoCE 구성 SLES 호스트용 어댑터에서 RoCE 를 구성하려면 SLES 호스트에 OFED 가 설치 되고 구성되어 있어야 합니다 . SLES 의 인박스 OFED 를 설치하려면 1. 시스템을 설치하거나 업그레이드하는 중에 InfiniBand 지원 패키지를 선택합 니다 . 2. 해당 SLES SDK 키트 이미지에서 다음 RPM 을 설치합니다 . libibverbs-devel-x.x.x.x86_64.rpm (libqedr 설치에 필요함 ) perftest-x.x.x.x86_64.rpm ( 대역폭 및 지연 시간 응용프로그램에 필요함 ) 3. 15 페이지의 "RDMA 와 함께 Linux 설치 " 에 설명된 대로 Linux 드라이버를 설치합니다 .
PAGE 88
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 또는 # systemctl start rdma.service 3. dmesg 로그를 검토해 RoCE 장치가 발견되었는지 확인합니다 . # dmesg|grep qedr [87910.988411] qedr: discovered and registered 2 RoCE funcs 4. 모든 모듈이 로드되었는지 확인합니다 . 예 : # lsmod|grep qedr 5. qedr 89871 0 qede 96670 1 qedr qed 2075255 ib_core 88311 16 qedr, rdma_cm, ib_cm, ib_sa,iw_cm,xprtrdma,ib_mad,ib_srp, ib_ucm,ib_iser,ib_srpt,ib_umad, ib_uverbs,rdma_ucm,ib_ipoib,ib_isert 2 qede,qedr IP 주소를 구성하고 ifconfig 같은 구성 방법을 사용하여 포트를 활성화합니다 .
PAGE 89
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 7. 모든 서버 사이의 L2 및 RoCE 연결을 확인합니다 . 한 서버는 서버 역할을 하 고 다른 서버는 클라이언트 역할을 합니다 .  단순 ping 명령을 사용해 L2 연결을 확인합니다 .  서버 또는 클라이언트에서 RDMA ping 을 실행하여 RoCE 연결 여부를 확인합니다 . 서버에서 다음 명령을 발급합니다 . ibv_rc_pingpong -d -g 0 클라이언트에서 다음 명령을 발급합니다 . ibv_rc_pingpong -d -g 0 다음은 서버 및 클라이언트에서 성공적인 ping pong 테스트의 예제입니다 .
PAGE 90
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 VLAN 인터페이스 및 GID 인덱스 값 서버와 클라이언트에서 VLAN 인터페이스를 사용 중인 경우 스위치에서도 같은 VLAN ID 를 구성해야 합니다 . 스위치를 통해 트래픽을 실행 중이라면 InfiniBand 응용프로그램에서 VLAN ID 및 VLAN IP 주소를 기준으로 올바른 GID 값을 사용해 야 합니다 . 다음 결과를 기준으로 GID 값 (-x 4 / -x 5) 은 모든 perftest 응용프로그램에서 사용 해야 합니다 .
PAGE 91
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 주 RoCE v2 지원 커널을 사용하여 RoCE v1 및 RoCE v2 를 구성할 수 있 습니다 . 이러한 커널을 사용하면 동일한 서브넷뿐 아니라 RoCE v2 와 다른 라우팅 환경과 같이 서로 다른 서브넷을 통해서도 RoCE 트래픽을 전송할 수 있습니다 . 다른 모든 스위치 및 어댑터 설정은 RoCE v1 및 RoCE v2 에서 공통되며 , 몇 가지 설정만 RoCE v2 에 더 필요합니다 . RoCE v2 GID 인덱스 또는 주소 식별 RoCE v1 및 RoCE v2 GID 를 찾으려면 sys 또는 class 매개변수를 사용하거나 , QL45212 FastLinQ 소스 패키지에서 RoCE 스크립트를 실행합니다 . 기본값 RoCE GID Index(RoCE GID 인덱스 ) 및 주소를 확인하려면 ibv_devinfo 명령 을 발급하고 이를 sys 또는 class 매개변수와 비교합니다 .
PAGE 92
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성  옵션 2 FastLinQ 소스 패키지에서 스크립트를 사용합니다 . #/../fastlinq-8.x.x.x/add-ons/roce/show_gids.sh DEV PORT INDEX GID IPv4 VER DEV --- ---- ----- --- ------------ --- --- v1 p4p1 qedr0 1 0 fe80:0000:0000:0000:020e:1eff:fec4:1b20 qedr0 1 1 fe80:0000:0000:0000:020e:1eff:fec4:1b20 v2 p4p1 qedr0 1 2 0000:0000:0000:0000:0000:ffff:1e01:010a 30.1.1.10 v1 p4p1 qedr0 1 3 0000:0000:0000:0000:0000:ffff:1e01:010a 30.1.1.
PAGE 93
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 RoCE v2 확인 동일한 서브넷에서 실행하는 경우 , RoCE v2 GID 인덱스를 사용합니다 . Server# ib_send_bw -d qedr0 -F -x 1 Client# ib_send_bw -d qedr0 -F -x 1 192.168.100.3 주 스위치 PFC 구성을 통해 실행되는 경우 동일한 서브넷을 통해 RoCE v1 또는 v2 에 VLAN GID 를 사용합니다 . 서로 다른 서브넷을 통해 RoCE v2 확인 주 먼저 스위치 및 서버에 대해 라우팅 설정을 구성해야 합니다 . 어댑터에서 , HII 또는 UEFI 사용자 인터페이스를 사용하여 RoCE 우선 순위 및 DCBX 모 드를 설정합니다 . 서로 다른 서브넷을 통해 RoCE v2 를 확인하려면 1. DCBX-PFC 구성을 사용하여 서버 및 클라이언트에 대한 라우팅 구성을 설정 합니다 .  시스템 설정 : 서버 VLAN IP : 192.168.100.
PAGE 94
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성  PFC 구성 및 L3 라우팅을 사용하는 경우 서로 다른 서브넷을 사용하여 VLAN 을 통해 RoCE v2 트래픽을 실행하고 RoCE v2 VLAN GID 인덱 스를 사용합니다 . Server# ib_send_bw -d qedr0 -F -x 5 Client# ib_send_bw -d qedr0 -F -x 5 192.168.100.3 서버 스위치 설정 : 그림 6-4.
PAGE 95
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 클라이언트 스위치 설정 : 그림 6-5. 스위치 설정 , 클라이언트 RDMA_CM 응용프로그램에 대한 RoCE v1 또는 RoCE v2 설정 구성 RoCE 를 구성하려면 FastLinQ 소스 패키지에서 다음 스크립트를 사용합니다 . # ./show_rdma_cm_roce_ver.sh qedr0 is configured to IB/RoCE v1 qedr1 is configured to IB/RoCE v1 # ./config_rdma_cm_roce_ver.sh v2 configured rdma_cm for qedr0 to RoCE v2 configured rdma_cm for qedr1 to RoCE v2 서버 설정 : 그림 6-6.
PAGE 96
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 클라이언트 설정 : 그림 6-7. RDMA_CM 응용프로그램 구성 : 클라이언트 VMware ESX 용 어댑터에서 RoCE 구성 이번 섹션에서는 아래와 같이 RoCE 구성을 위한 절차 및 정보에 대해서 설명합 니다 .  RDMA 인터페이스 구성  MTU 구성  RoCE 모드 및 통계  PVRDMA(Paravirtual RDMA Device) 구성 RDMA 인터페이스 구성 RDMA 인터페이스를 구성하려면 1. QLogic NIC 드라이버와 RoCE 드라이버를 모두 설치합니다 . 2. 모듈 매개변수에서 다음과 같이 명령을 실행하여 NIC 드라이버의 RoCE 기 능을 활성화합니다 . esxcfg-module -s 'enable_roce=1' qedentv 변경 내용을 적용하려면 NIC 드라이버를 다시 로드하거나 시스템을 재부팅 해야 합니다 . 3.
PAGE 97
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 4. RDMA 장치 목록을 보려면 esxcli rdma device list 명령을 실행합니다. 예: esxcli rdma device list Name Driver State Speed Paired Uplink Description ------- ------- ------ ---- ------- ------------- ------------------------------- vmrdma0 qedrntv Active 1024 25 Gbps vmnic0 QLogic FastLinQ QL45xxx RDMA Interface vmrdma1 qedrntv Active 1024 25 Gbps vmnic1 QLogic FastLinQ QL45xxx RDMA Interface 5. MTU 새로운 가상 스위치를 생성하려면 다음 명령을 실행합니다 .
PAGE 98
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 VLAN ID 로 RoCE 트래픽을 실행하려면 해당 VMkernel 포트 그룹에서 VLAN ID 를 구성합니다 . MTU 구성 RoCE 인터페이스의 MTU 를 수정하려면 해당하는 vSwitch 의 MTU 를 변경합니다 . vSwitch 의 MTU 에 따라 다음과 같이 명령을 실행하여 RDMA 인터페이스의 MTU 크 기를 설정합니다 .
PAGE 99
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 Queue pairs in INIT state: 0 Queue pairs in RTR state: 0 Queue pairs in RTS state: 0 Queue pairs in SQD state: 0 Queue pairs in SQE state: 0 Queue pairs in ERR state: 0 Queue pair events: 0 Completion queues allocated: 1 Completion queue events: 0 Shared receive queues allocated: 0 Shared receive queue events: 0 Protection domains allocated: 1 Memory regions allocated: 3 Address handles allocated: 0 Memory windows allocated: 0 PVRDMA(Paravirtual RDMA Device) 구성 vCenter
PAGE 100
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 그림 6-8 은 이러한 예를 나타냅니다 . 그림 6-8. 새 분산 스위치 구성 2. 3. 다음과 같이 분산 가상 스위치를 구성합니다 . a. VMware vSphere 웹 클라이언트에서 탐색기 왼쪽 창에 있는 RoCE 노 드를 확장합니다 . b. RoCE-VDS 를 마우스 오른쪽 버튼으로 클릭한 후 Add and Manage Hosts( 호스트 추가 및 관리 ) 를 클릭합니다 . c. Add and Manage Hosts( 호스트 추가 및 관리 ) 에서 다음 옵션을 구성 합니다 .  Assign uplinks( 업링크 할당 ). 사용 가능한 업링크 목록 중에서 선택합니다 .  Manage VMkernel network adapters(VMkernel 네트워크 어댑 터 관리 ). 기본값을 그대로 유지한 채 Next( 다음 ) 를 클릭합니다 .
PAGE 101
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 그림 6-9 은 이러한 예를 나타냅니다 . 그림 6-9. PVRDMA 에 vmknic 할당 4. 다음과 같이 PVRDMA 의 방화벽 규칙을 설정합니다 . a. 호스트를 마우스 오른쪽 버튼으로 클릭한 후 Settings( 설정 ) 를 클릭 합니다 . b. Settings( 설정 ) 페이지에서 System( 시스템 ) 노드를 확장한 후 Security Profile( 보안 프로파일 ) 을 클릭합니다 . c. Firewall Summary( 방화벽 요약 ) 페이지에서 Edit( 편집 ) 를 클릭합니 다. d. Edit Security Profile( 보안 프로파일 편집 ) 대화 상자의 Name( 이름 ) 에서 스크롤을 아래로 내려 pvrdma 확인란과 Set Firewall( 방화벽 설 정 ) 확인란을 차례대로 선택합니다 .
PAGE 102
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 그림 6-10 은 이러한 예를 나타냅니다 . 그림 6-10. 방화벽 규칙 설정 5. 다음과 같이 PVRDMA 의 VM 을 설정합니다 . a. 아래에서 지원되는 게스트 OS 중 하나를 설치합니다 .   RHEL 7.2 Ubuntu 14.04( 커널 버전 4.0) b. OFED-3.18 을 설치합니다 . c. PVRDMA 게스트 드라이버와 라이브러리를 컴파일하여 설치합니다 . d. 다음과 같이 새로운 PVRDMA 네트워크 어댑터를 VM 에 추가합니다 .     e. VM 설정을 편집합니다 . 새로운 네트워크 어댑터를 추가합니다 . 새롭게 추가된 DVS 포트 그룹을 Network( 네트워크 ) 로 선택합니 다. PVRDMA 를 어댑터 유형으로 선택합니다 . VM 부팅 후 PVRDMA 게스트 드라이버가 로드되는지 확인합니다 .
PAGE 103
7 iSER 구성 이 장에서는 Linux(RHEL 및 SLES) ESXi 6.7 에 대해 iSER(iSCSI Extensions for RDMA) 을 구성하는 절차를 제시하며 , 다음 섹션으로 구성됩니다 .  시작하기 전에  RHEL 용 iSER 구성  89 페이지의 "SLES 12 용 iSER 구성 "  90 페이지의 "Linux 성능 최적화 "  91 페이지의 "ESXi 6.7 에서 iSER 구성 " 시작하기 전에 iSER 구성 준비를 할 때 다음 사항을 고려하십시오 .  iSER 은 다음 운영 체제의 경우 인박스 OFED 에서만 지원됩니다 .    RHEL 7.1 및 7.2 SLES 12 및 12 SP1 CentOS 7.2  아웃오브박스(Out-of-box) OFED는 iSER 대상 구성을 지원하지 않으며, 최신 아웃오브박스 OFED 버전에 대해 ib_isert 모듈을 사용할 수 없습니다 .
PAGE 104
7–iSER 구성 RHEL 용 iSER 구성 RHEL 용 iSER 구성 RHEL 용 iSER 을 구성하려면 : 1. 68 페이지의 "RHEL 의 RoCE 구성 " 에 설명된 대로 인박스 OFED 를 설치합 니다 . 아웃오브박스 (Out-of-box) OFED 3.18-2 GA/3.18-3 GA 버전에서 ib_isert 모듈을 사용할 수 없기 때문에 iSER 에서는 아웃오브박스 OFED 가 지원되지 않습니다 . 인박스 ib_isert 모듈은 아웃오브박스 OFED 버전과 작동 하지 않습니다 . 2. 11 페이지의 "Linux 드라이버 제거 " 에 설명된 대로 기존 FastLinQ 드라이버 를 업로드합니다 . 3. 15 페이지의 "RDMA 와 함께 Linux 설치 " 에 설명된 대로 최신 FastLinQ 드라 이버와 libqedr 패키지를 설치합니다 . 4. 다음과 같이 RDMA 서비스를 로드합니다 .
PAGE 105
7–iSER 구성 RHEL 용 iSER 구성 그림 7-1 은 성공적인 RDMA Ping 의 예를 보여 줍니다 . 그림 7-1. RDMA Ping 성공 8. Linux TCM-LIO 대상을 사용하여 iSER 을 테스트할 수 있습니다 . 해당 포털 에서 enable_iser Boolean=true 명령을 발급할 때를 제외하면 모든 iSCSI 대상에 대한 설정이 동일합니다 . 그림 7-2 에서 포털 인스턴스는 iser 로 식 별됩니다 . 그림 7-2. iSER 포털 인스턴스 9. yum install iscsi-initiator-utils 명령을 사용하 여 Linux iSCSI 초기자 유틸리티를 설치합니다 . a. iSER 대상을 검색하려면 iscsiadm 명령을 발급합니다 . 예 : iscsiadm -m discovery -t st -p 192.168.100.
PAGE 106
7–iSER 구성 RHEL 용 iSER 구성 b. 전송 모드를 iSER 로 변경하려면 iscsiadm 명령을 발급합니다 . 예 : iscsiadm -m node -T iqn.2015-06.test.target1 -o update -n iface.transport_name -v iser c. iSER 대상에 연결하거나 로그인하려면 iscsiadm 명령을 발급합니다 . 예: iscsiadm -m node -l -p 192.168.100.99:3260 -T iqn.2015-06.test.target1 d. 그림 7-3 에서와 같이 Iface Transport 가 대상 연결에서 iser 인지 확인합니다 . iscsiadm 명령을 실행합니다 . 예 : iscsiadm -m session -P2 그림 7-3.
PAGE 107
7–iSER 구성 SLES 12 용 iSER 구성 e. 그림 7-4 에서와 같이 새 iSCSI 장치가 있는지 확인하려면 lsscsi 명 령을 발급하십시오 . 그림 7-4. 새 iSCSI 장치가 있는지 확인 SLES 12 용 iSER 구성 targetcli 가 SLES 12.x 에서 인박스가 아니므로 다음 절차를 완료해야 합니다 . SLES 12 용 iSER 을 구성하려면 1. targetcli 를 설치하려면 ISO 이미지에서 다음 RPM 을 복사해 설치하십시오 (x86_64 및 noarch 위치 ). lio-utils-4.1-14.6.x86_64.rpm python-configobj-4.7.2-18.10.noarch.rpm python-PrettyTable-0.7.2-8.5.noarch.rpm python-configshell-1.5-1.44.noarch.rpm python-pyparsing-2.0.1-4.10.noarch.rpm python-netifaces-0.8-6.55.x86_64.
PAGE 108
7–iSER 구성 Linux 성능 최적화 주 targetcli 버전은 RHEL 과 SLES 에서 다릅니다 . 올바른 백스토어를 사 용해 대상을 구성해야 합니다 .  RHEL 은 ramdisk 를 사용함  SLES 는 rd_mcp 를 사용함 Linux 성능 최적화 이 섹션에서 설명하는 다음 Linux 성능 구성 개선 사항을 고려하시기 바랍니다 .  최대 성능 모드로 CPU 구성  커널 sysctl 설정 구성  IRQ Affinity 설정 구성  블록 장치 스테이징 구성 최대 성능 모드로 CPU 구성 모든 CPU 를 최대 성능 모드로 설정하려면 다음 스크립트를 사용해 CPU 배율 조 정 관리자를 구성하십시오 .
PAGE 109
7–iSER 구성 ESXi 6.7 에서 iSER 구성 sysctl -w net.ipv4.tcp_sack=1 sysctl -w net.ipv4.tcp_low_latency=1 sysctl -w net.ipv4.tcp_adv_win_scale=1 echo 0 > /proc/sys/vm/nr_hugepages IRQ Affinity 설정 구성 다음 예제는 CPU 코어 0, 1, 2 및 3 을 각각 인터럽트 요청 (IRQ) XX, YY, ZZ 및 XYZ 로 설정합니다 . 포트에 할당된 각 IRQ 에 대해 이런 절차를 수행합니다 ( 기본값은 포트당 대기열 8 개 ).
PAGE 110
7–iSER 구성 ESXi 6.7 에서 iSER 구성 vmrdma0 qedrntv Active 1024 40 Gbps vmnic4 QLogic FastLinQ QL45xxx RDMA Interface vmrdma1 qedrntv Active 1024 40 Gbps vmnic5 QLogic FastLinQ QL45xxx RDMA Interface [root@localhost:~] esxcfg-vmknic -l Interface Port Group/DVPort/Opaque Network Netmask Broadcast IP Family IP Address MAC Address MTU TSO MSS Enabled Type NetStack vmk0 Management Network 255.255.240.0 172.28.15.255 IPv4 e0:db:55:0c:5f:94 1500 172.28.12.
PAGE 111
7–iSER 구성 ESXi 6.7 에서 iSER 구성 vmnic4 0000:42:00.0 qedentv Up 40000Mbps Full 00:0e:1e:d5:f6:a2 1500 QLogic Corp. QLogic FastLinQ QL45xxx 10/25/40/50/100 GbE Ethernet Adapter vmnic5 0000:42:00.1 qedentv Up 40000Mbps Full 00:0e:1e:d5:f6:a3 1500 QLogic Corp.
PAGE 112
7–iSER 구성 ESXi 6.7 에서 iSER 구성 ------- ------------------------ vmhba65 iqn.2015-06.test.target1 ----- ---------------- ---------- SENDTARGETS No Error esxcli storage core adapter rescan --adapter vmhba65 5. 연결된 대상을 다음과 같이 나열합니다 . esxcfg-scsidevs -l mpx.vmhba0:C0:T4:L0 Device Type: CD-ROM Size: 0 MB Display Name: Local TSSTcorp CD-ROM (mpx.vmhba0:C0:T4:L0) Multipath Plugin: NMP Console Device: /vmfs/devices/cdrom/mpx.vmhba0:C0:T4:L0 Devfs Path: /vmfs/devices/cdrom/mpx.
PAGE 113
8 SR-IOV 구성 SR-IOV( 단일 루트 입 / 출력 가상화 ) 는 단일 PCIe(PCI Express) 장치가 여러 개 의 구분된 실제 PCIe 장치로 나타나도록 해주는 PCI SIG 의 사양입니다 . SR-IOV 는 성능 , 상호 운용성 및 관리성을 위해 PCIe 리소스의 격리를 허용합니다 . 주 현재 릴리스에서 일부 SR-IOV 기능은 완전히 사용하지 못할 수도 있습니다 . 이 장에서는 다음 작업의 지침을 제시합니다 .  Windows 에서 SR-IOV 구성  102 페이지의 "Linux 에서 SR-IOV 구성 "  108 페이지의 "VMware 에서 SR-IOV 구성 " Windows 에서 SR-IOV 구성 Windows 에서 SR-IOV 를 구성하려면 1. 서버 BIOS System Setup(BIOS 시스템 설정 ) 으로 이동하여 System BIOS Settings( 시스템 BIOS 설정 ) 를 클릭합니다 . 2.
PAGE 114
8–SR-IOV 구성 Windows 에서 SR-IOV 구성 그림 8-1. SR-IOV 를 위한 시스템 설정 : 통합 장치 4. 선택한 어댑터에 대한 Main Configuration( 기본 구성 ) 페이지에서 Device Level Configuration( 장치 레벨 구성 ) 을 클릭합니다 . 5. Main Configuration( 기본 구성 ) 페이지의 Device Level Configuration( 장치 레벨 구성 )( 그림 8-2) 에서 다음을 수행하십시오 . a. Virtualization Mode( 가상화 모드 ) 를 SR-IOV 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 . 그림 8-2. SR-IOV 를 위한 시스템 설정 : 장치 레벨 구성 6. Main Configuration( 기본 구성 ) 페이지에서 Finish( 마침 ) 를 클릭합니다 . 7.
PAGE 115
8–SR-IOV 구성 Windows 에서 SR-IOV 구성 9. 미니포트 어댑터에서 SR-IOV 를 활성화하려면 a. 장치 관리자에 액세스합니다 . b. 미니포트 어댑터 속성을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . c. Advanced properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 8-3) SR-IOV 를 선택한 후 값을 Enabled( 사용 가능 ) 로 설정합 니다 . d. OK( 확인 ) 를 클릭합니다 . 그림 8-3. 어댑터 속성 , 고급 : SR-IOV 활성화 10. SR-IOV 로 가상 머신 스위치를 생성하려면 (98 페이지의 그림 8-4) a. 하이퍼바이저 관리자를 시작합니다 . b. Virtual Switch Manager( 가상 스위치 관리자 ) 를 선택합니다 . c. Name( 이름 ) 입력란에 가상 스위치의 이름을 입력합니다 . d.
PAGE 116
8–SR-IOV 구성 Windows 에서 SR-IOV 구성 주 vSwitch 를 생성할 때 SR-IOV 를 반드시 활성화해야 합니다 . vSwitch 를 생성한 후에는 이 옵션을 사용할 수 없습니다 . 그림 8-4. 가상 스위치 관리자 : SR-IOV 활성화 f. Apply Networking Changes( 네트워킹 변경 사항 적용 ) 메시지 상자에 Pending changes may disrupt network connectivity( 보류 중인 변 경 사항으로 인해 네트워크 연결이 끊어질 수 있음 ) 라는 내용이 표시됩 니다 . 변경 내용을 저장하고 계속하려면 Yes( 예 ) 를 클릭합니다 .
PAGE 117
8–SR-IOV 구성 Windows 에서 SR-IOV 구성 11. 가상 머신 스위치 기능을 사용하려면 다음 Windows PowerShell 명령을 실행 합니다 . PS C:\Users\Administrator> Get-VMSwitch -Name SR-IOV_vSwitch | fl Get-VMSwitch 명령 출력에 다음과 같은 SR-IOV 기능이 포함됩니다 . 12. IovVirtualFunctionCount : 96 IovVirtualFunctionsInUse : 1 다음과 같이 가상 머신 (VM) 을 생성하고 VM 에서 가상 기능 (VF) 을 내보냅 니다 . a. 가상 머신을 생성합니다 . b. VMNetworkadapter 를 가상 머신에 추가합니다 . c. 가상 스위치를 VMNetworkadapter 에 할당합니다 . d.
PAGE 118
8–SR-IOV 구성 Windows 에서 SR-IOV 구성 그림 8-5. VM 의 설정 : SR-IOV 활성화 13. VM 에서 감지된 어댑터에 QLogic 드라이버를 설치합니다 . 공급업체에서 호 스트 OS 의 최신 드라이버를 얻어 사용합니다 ( 기본 드라이버를 사용하지 마 십시오 ). 주 VM 과 호스트 시스템에서 동일한 드라이버 패키지를 사용해야 합니다 . 예를 들어 Windows VM 과 Windows Hyper-V 호스트에서 동일한 버전 의 qeVBD 및 qeND 드라이버를 사용하십시오 .
PAGE 119
8–SR-IOV 구성 Windows 에서 SR-IOV 구성 드라이버 설치 후 , VM 에 QLogic 어댑터가 표시됩니다 . 그림 8-6 은 이러한 예를 나타냅니다 . 그림 8-6. 장치 관리자 : QLogic 어댑터가 포함된 VM 14. SR-IOV VF 세부 정보를 확인하려면 다음 Windows PowerShell 명령을 실행 합니다 . PS C:\Users\Administrator> Get-NetadapterSriovVf 그림 8-7 은 출력 예입니다 . 그림 8-7.
PAGE 120
8–SR-IOV 구성 Linux 에서 SR-IOV 구성 Linux 에서 SR-IOV 구성 Linux 에서 SR-IOV 를 구성하려면 1. 서버 BIOS System Setup(BIOS 시스템 설정 ) 으로 이동하여 System BIOS Settings( 시스템 BIOS 설정 ) 를 클릭합니다 . 2. System BIOS Settings( 시스템 BIOS 설정 ) 페이지에서 Integrated Devices ( 통합 장치 ) 를 클릭합니다 . 3. System Integrated Devices( 시스템 통합 장치 ) 페이지 (96 페이지의 그 림 8-1 참조 ) 에서 다음 작업을 수행합니다 . 4. a. SR-IOV Global Enable(SR-IOV 전역 활성화 ) 옵션을 Enabled( 사용 가능 ) 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 .
PAGE 121
8–SR-IOV 구성 Linux 에서 SR-IOV 구성 5. Processor Settings( 프로세서 설정 ) 페이지 ( 그림 8-8) 에서 다음 작업을 수 행합니다 . a. Virtualization Technology( 가상화 기술 ) 옵션을 Enabled ( 사용 가능 ) 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 . 그림 8-8. 시스템 설정 : SR-IOV 를 위한 프로세서 설정 6. System Setup( 시스템 설정 ) 페이지에서 Device Settings( 장치 설정 ) 를 선 택합니다 . 7. Device Settings( 장치 설정 ) 페이지에서 QLogic 어댑터용 Port 1( 포트 1) 을 선택합니다 .
PAGE 122
8–SR-IOV 구성 Linux 에서 SR-IOV 구성 8. Device Level Configuration( 장치 레벨 구성 ) 페이지 ( 그림 8-9) 에서 다음 작 업을 수행합니다 . a. Virtualization Mode( 가상화 모드 ) 를 SR-IOV 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 . 그림 8-9. SR-IOV 를 위한 시스템 설정 : 통합 장치 9. Main Configuration( 기본 구성 ) 페이지에서 Finish( 마침 ) 를 클릭하고 설정 을 저장한 후 시스템을 재부팅합니다 . 10. 다음과 같이 가상화를 활성화하고 확인합니다 . a. 그림 8-10 과 같이 grub.conf 파일을 열고 iommu 매개변수를 구성합 니다 .   Intel 기반 시스템일 경우에는 intel_iommu=on 을 추가합니다 . AMD 기반 시스템일 경우에는 amd_iommu=on 을 추가합니다 .
PAGE 123
8–SR-IOV 구성 Linux 에서 SR-IOV 구성 그림 8-10. SR-IOV 용 grub.conf 파일 편집 b. grub.conf 파일을 저장하고 시스템을 재부팅합니다 . c. 변경 내용이 적용되는지 확인하려면 다음 명령을 발급합니다 . dmesg | grep -I iommu 예를 들어 다음과 같이 성공적인 IOMMU(input–output memory management unit) 명령 출력이 표시되어야 합니다 . Intel-IOMMU: enabled d. VF 세부 정보 (VF 수와 총 VF 수 ) 를 보려면 다음 명령을 실행합니다 . find /sys/|grep -I sriov 11. 특정 포트에 대해 VF 의 수량을 활성화합니다 . a. 예를 들어 다음과 같이 명령을 실행하여 PCI 인스턴스 04:00.0( 버스 4, 장치 0, 기능 0) 에서 VF 8 개를 활성화합니다 .
PAGE 124
8–SR-IOV 구성 Linux 에서 SR-IOV 구성 b. 명령 출력 ( 그림 8-11) 을 살펴보면서 실제로 VF 가 버스 4, 장치 2(0000:00:02.0 매개변수 ), 기능 0~7 에 생성되었는지 확인합니다 . 단 , PF( 이 예에서 8070) 와 VF( 이 예에서 9090) 를 비교했을 때 실제 장치 ID 는 서로 다릅니다 . 그림 8-11. sriov_numvfs 에 대한 명령 출력 12. 모든 PF 및 VF 인터페이스의 목록을 보려면 다음 명령을 발급합니다 . # ip link show | grep -i vf -b2 그림 8-12 은 출력 예입니다 . 그림 8-12.
PAGE 125
8–SR-IOV 구성 Linux 에서 SR-IOV 구성 13. MAC 주소를 할당하고 확인합니다 . a. MAC 주소를 VF 에 할당하려면 다음 명령을 발급합니다 . ip link set vf mac b. 14. VF 인터페이스가 할당된 MAC 주소로 작동되어 실행 중인지 확인합니 다. VM 을 끄고 VF 를 연결합니다 . ( 일부 OS 에서는 VF 를 VM 에 핫플러그 연 결할 수 있도록 지원합니다 .) a. Virtual Machine( 가상 머신 ) 대화 상자 ( 그림 8-13) 에서 Add Hardware( 하드웨어 추가 ) 를 클릭합니다 . 그림 8-13. RHEL68 가상 머신 b. Add New Virtual Hardware( 새 가상 하드웨어 추가 ) 대화 상자의 왼쪽 창 에서 ( 그림 8-14) PCI Host Device(PCI 호스트 장치 ) 를 클릭합니다 . c.
PAGE 126
8–SR-IOV 구성 VMware 에서 SR-IOV 구성 d. Finish( 마침 ) 를 클릭합니다 . 그림 8-14. 새 가상 하드웨어 추가 15. VM 을 켠 후 다음 명령을 발급합니다 . check lspci -vv|grep -I ether 16. VM 에서 감지된 어댑터에 드라이버를 설치합니다 . 공급업체에서 호스트 OS 의 최신 드라이버를 얻어 사용합니다 ( 기본 드라이버를 사용하지 마십시오 ). 호스트 및 VM 에 동일한 드라이버 버전을 설치해야 합니다 . 17. 필요한 경우 VM 에 VF 를 더 추가합니다 . VMware 에서 SR-IOV 구성 VMware 에서 SR-IOV 를 구성하려면 1. 서버 BIOS System Setup(BIOS 시스템 설정 ) 으로 이동하여 System BIOS Settings( 시스템 BIOS 설정 ) 를 클릭합니다 . 2.
PAGE 127
8–SR-IOV 구성 VMware 에서 SR-IOV 구성 5. Device Settings( 장치 설정 ) 페이지에서 25G QL45212 Adapter 용 포트를 선택합니다 . 6. Device Level Configuration( 장치 레벨 구성 ) 페이지 (96 페이지의 그림 8-2 참조 ) 에서 다음 작업을 수행합니다 . a. Virtualization Mode( 가상화 모드 ) 를 SR-IOV 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 . 7. Main Configuration( 기본 구성 ) 페이지에서 Finish( 마침 ) 를 클릭합니다 . 8. 구성 설정을 저장하고 시스템을 다시 부팅합니다 . 9. 포트 1 개당 필요한 VF 수량 ( 이 예에서는 듀얼 포트 어댑터의 각 포트당 16 개 ) 을 활성화하려면 다음 명령을 실행합니다 .
PAGE 128
8–SR-IOV 구성 VMware 에서 SR-IOV 구성 . . 0000:05:03.7 Network controller: QLogic Corp. QLogic FastLinQ QL45xxx Series 10/25 GbE Controller (SR-IOV VF) [PF_0.5.0_VF_15] 0000:05:0e.0 Network controller: QLogic Corp. QLogic FastLinQ QL45xxx Series 10/25 GbE Controller (SR-IOV VF) [PF_0.5.1_VF_0] 0000:05:0e.1 Network controller: QLogic Corp. QLogic FastLinQ QL45xxx Series 10/25 GbE Controller (SR-IOV VF) [PF_0.5.1_VF_1] 0000:05:0e.2 Network controller: QLogic Corp.
PAGE 129
8–SR-IOV 구성 VMware 에서 SR-IOV 구성 d. 구성 변경 사항을 저장하고 이 대화 상자를 닫으려면 OK( 확인 ) 를 클 릭합니다 . 그림 8-15.
PAGE 130
8–SR-IOV 구성 VMware 에서 SR-IOV 구성 15. 포트당 VF 수의 유효성을 검사하려면 다음과 같이 esxcli 명령을 발급합니 다. [root@localhost:~] esxcli network sriovnic vf list -n vmnic6 VF ID Active PCI Address Owner World ID ----- ------ ----------- -------------- 0 true 005:02.0 60591 1 true 005:02.1 60591 2 false 005:02.2 - 3 false 005:02.3 - 4 false 005:02.4 - 5 false 005:02.5 - 6 false 005:02.6 - 7 false 005:02.7 - 8 false 005:03.0 - 9 false 005:03.1 - 10 false 005:03.2 - 11 false 005:03.
PAGE 131
9 Windows Server 2016 이 장에서는 Windows Server 2016 에 대해 다음 정보를 제공합니다 .  Hyper-V 를 이용한 RoCE 인터페이스 구성  119 페이지의 "RoCE over Switch Embedded Teaming"  121 페이지의 "RoCE 에 대한 QoS 구성 "  129 페이지의 "VMMQ 구성 "  136 페이지의 "VXLAN 구성 "  137 페이지의 "Storage Spaces Direct 구성 "  144 페이지의 "Nano 서버 배포 및 관리 " Hyper-V 를 이용한 RoCE 인터페이스 구성 Windows Server 2016 에서는 Hyper-V 에 Network Direct Kernel Provider Interface(NDKPI) Mode-2 가 구현되면서 호스트 가상 네트워크 어댑터 ( 호스트 가 상 NIC) 가 RDMA 를 지원합니다 .
PAGE 132
9–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 RDMA 가상 NIC 를 사용한 Hyper-V 가상 스위치 생성 이 섹션의 절차에 따라 Hyper-V 가상 스위치를 생성한 후 호스트 VNIC 에서 RDMA 를 활성화합니다 . RDMA 가상 NIC 로 Hyper-V 가상 스위치를 생성하려면 1. 하이퍼바이저 관리자를 시작합니다 . 2. Virtual Switch Manager( 가상 스위치 관리자 ) 를 클릭합니다 ( 그림 9-1 참조 ). 그림 9-1. 호스트 가상 NIC 에서 RDMA 활성화 3. 가상 스위치를 생성합니다 . 4. Allow management operating system to share this network adapter( 관 리 운영 체제가 이 네트워크 어댑터를 공유하도록 허용 ) 확인란을 선택합니 다.
PAGE 133
9–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 호스트 가상 NIC 에서 RDMA 를 활성화하려면 1. Hyper-V Virtual Ethernet Adapter Properties( 하이퍼바이저 가상 이더넷 어 댑터 속성 ) 창을 엽니다 . 2. Advanced( 고급 ) 탭을 클릭합니다 . 3. Advanced( 고급 ) 페이지 ( 그림 9-2) 에서 다음 작업을 수행합니다 . a. Property( 속성 ) 에서 Network Direct(RDMA) 를 선택합니다 . b. Value( 값 ) 에서 Enabled( 사용 가능 ) 를 선택합니다 . c. OK( 확인 ) 를 클릭합니다 . 그림 9-2. 하이퍼바이저 가상 이더넷 어댑터 속성 4. RDMA 를 활성화하려면 다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrator> Enable-NetAdapterRdma "vEthernet (Ne
PAGE 134
9–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 호스트 가상 NIC 에 VLAN ID 추가 호스트 가상 NIC 에 VLAN ID 를 추가하려면 1. 호스트 가상 NIC 이름을 찾으려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrator> Get-VMNetworkAdapter -ManagementOS 그림 9-3 은 명령 출력을 나타낸 것입니다 . 그림 9-3. Windows PowerShell 명령 : Get-VMNetworkAdapter 2. VLAN ID 를 호스트 가상 NIC 로 설정하려면 다음 Windows PowerShell 명령 을 실행합니다 . PS C:\Users\Administrator> Set-VMNetworkAdaptervlan -VMNetworkAdapterName "New Virtual Switch" -VlanId 5 -Access -Management05 주 호스트 가상
PAGE 135
9–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 그림 9-4 에 표시된 것처럼 명령 출력에 RDMA 지원 어댑터가 나열됩니다 . 그림 9-4. Windows PowerShell 명령 : Get-NetAdapterRdma 호스트 가상 NIC( 가상 포트 ) 추가 호스트 가상 NIC 를 추가하려면 1. 호스트 가상 NIC 를 추가하려면 다음 명령을 발급합니다 . Add-VMNetworkAdapter -SwitchName "New Virtual Switch" -Name SMB - ManagementOS 2. 115 페이지의 " 호스트 가상 NIC 에서 RDMA 를 활성화하려면 " 에 표시된 것 처럼 호스트 가상 NIC 에서 RDMA 를 활성화합니다 . 3. 가상 포트에 VLAN ID 를 할당하려면 다음 명령을 발급합니다 .
PAGE 136
9–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 c. 추가를 클릭합니다 . 그림 9-5.
PAGE 137
9–Windows Server 2016 RoCE over Switch Embedded Teaming RoCE 트래픽이 실행 중인 경우 계수기가 그림 9-6 에 표시된 것처럼 나타납 니다 . 그림 9-6. RoCE 트래픽을 표시하고 있는 성능 모니터 RoCE over Switch Embedded Teaming SET(Switch Embedded Teaming) 는 Windows Server 2016 Technical Preview 에 Hyper-V 및 SDN(Software Defined Networking) 스택을 포함하는 환경에서 사용하 기 위해 제공되는 Microsoft 의 대체 NIC 티밍 솔루션입니다 . SET 는 제한된 NIC 티밍 기능을 하이퍼바이저 가상 스위치로 통합합니다 . 하나의 실제 이더넷 네트워크 어댑터와 8 개의 실제 이더넷 네트워크 어댑터 사이 에서 SET 를 사용하여 하나 이상의 소프트웨어 기반 가상 네트워크 어댑터로 그룹 화합니다 .
PAGE 138
9–Windows Server 2016 RoCE over Switch Embedded Teaming SET 및 RDMA 가상 NIC 를 포함한 하이퍼바이저 가상 스위치 생성 SET 및 RDMA 가상 NIC 를 포함한 하이퍼바이저 가상 스위치를 생성하려면  SET 를 생성하려면 다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrator> New-VMSwitch -Name SET -NetAdapterName "Ethernet 2","Ethernet 3" -EnableEmbeddedTeaming $true 그림 9-7 은 명령 출력을 나타낸 것입니다 . 그림 9-7. Windows PowerShell 명령 : New-VMSwitch SET 에서 RDMA 활성화 SET 에서 RDMA 를 활성화하려면 1. 어댑터에서 SET 를 보려면 다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrator> Get-Ne
PAGE 139
9–Windows Server 2016 RoCE 에 대한 QoS 구성 주 호스트 가상 NIC 에 VLAN ID 를 추가할 때 다음 사항을 참고하십시오 .  RoCE 용 호스트 가상 NIC 를 사용할 때 실제 인터페이스에 VLAN ID 가 할 당되어 있지 않은지 확인하십시오 .  호스트 가상 NIC 를 두 개 이상 생성할 경우 호스트 가상 NIC 마다 다른 VLAN 을 할당할 수 있습니다 . SET 에서 RDMA 트래픽 실행 SET 에서의 RDMA 트래픽 실행에 대한 정보는 다음 링크를 참조하십시오 . https://technet.microsoft.com/en-us/library/mt403349.aspx RoCE 에 대한 QoS 구성 QoS( 서비스 품질 ) 를 구성하는 두 가지 방법은 다음과 같습니다 .
PAGE 140
9–Windows Server 2016 RoCE 에 대한 QoS 구성 5. 다음과 같이 미니포트에서 QoS 를 활성화합니다 . a. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . b. 어댑터의 Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 9-9) Quality of Service( 서비스 품질 ) 를 선택한 후 값 을 Enabled( 사용 가능 ) 로 설정합니다 . c. OK( 확인 ) 를 클릭합니다 . 그림 9-9. 고급 속성 : QoS 활성화 6. 다음과 같이 VLAN ID 를 인터페이스에 할당합니다 . a. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . b. 어댑터의 Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 9-10) VLAN ID 를 선택한 후 값을 설정합니다 .
PAGE 141
9–Windows Server 2016 RoCE 에 대한 QoS 구성 c. OK( 확인 ) 를 클릭합니다 . 주 앞의 단계는 PFC( 우선순위 흐름 제어 ) 에 필수적입니다 . 그림 9-10. 고급 속성 : VLAN ID 설정 7. 특정 우선순위에 대해 RoCE 의 우선순위 흐름 제어를 활성화하려면 다음 명 령을 발급합니다 . PS C:\Users\Administrators> Enable-NetQoSFlowControl -Priority 4 주 RoCE over Hyper-V 를 구성하는 경우 VLAN ID 를 실제 인터페이스에 할당하지 마십시오 .
PAGE 142
9–Windows Server 2016 RoCE 에 대한 QoS 구성 8. 다른 우선순위에 대해 우선순위 흐름 제어를 비활성화하려면 다음 명령을 발 급합니다 . PS C:\Users\Administrator> Disable-NetQosFlowControl 0,1,2,3,5,6,7 PS C:\Users\Administrator> Get-NetQosFlowControl Priority Enabled PolicySet IfIndex IfAlias -------- ------- --------- ------- ------- 0 False Global 1 False Global 2 False Global 3 False Global 4 True Global 5 False Global 6 False Global 7 False Global 9.
PAGE 143
9–Windows Server 2016 RoCE 에 대한 QoS 구성 NetDirectPort : 445 PriorityValue : 4 10. 이전 단계에서 정의된 모든 트래픽 클래스에 대한 ETS 를 구성하려면 다음 명령을 발급합니다 . PS C:\Users\Administrators> New-NetQosTrafficClass -name "RDMA class" -priority 4 -bandwidthPercentage 50 -Algorithm ETS PS C:\Users\Administrators> New-NetQosTrafficClass -name "TCP class" -priority 0 -bandwidthPercentage 30 -Algorithm ETS PS C:\Users\Administrator> Get-NetQosTrafficClass Name Algorithm Bandwidth(%) Priority ---- --------- ------------ -------- P
PAGE 144
9–Windows Server 2016 RoCE 에 대한 QoS 구성 12. 시스템 재부팅 과정에서 설정을 계속 유지시켜 주는 시작 스크립트를 만듭니 다. 13. 55 페이지의 "RoCE 구성 " 의 설명에 따라 RDMA 트래픽을 실행하고 확인합 니다 . 어댑터에서 DCBX 를 활성화하여 QoS 구성 사용 중인 모든 시스템에서 모든 구성을 완료해야 합니다 . 스위치와 서버에서 PFC, ETS 및 트래픽 클래스 구성이 동일해야 합니다 . DCBX 를 활성화하여 QoS 를 구성하려면 1. DCBX(IEEE, CEE 또는 Dynamic) 를 활성화합니다 . 2. HII 를 사용하여 RoCE Priority(RoCE 우선순위 ) 를 0 으로 설정합니다 . 3. 호스트에 DCB 역할을 설치하려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrators> Install-WindowsFeature Data-Center-Bridging 주 이 구
PAGE 145
9–Windows Server 2016 RoCE 에 대한 QoS 구성 5. 다음과 같이 미니포트에서 QoS 를 활성화합니다 . a. 어댑터의 Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 9-11) Quality of Service( 서비스 품질 ) 를 선택한 후 값을 Enabled( 사용 가능 ) 로 설정합니다 . b. OK( 확인 ) 를 클릭합니다 . 그림 9-11. 고급 속성 : QoS 활성화 6. 다음과 같이 VLAN ID 를 인터페이스 (PFC 의 경우 필수 ) 에 할당합니다 . a. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . b. 어댑터의 Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 9-12) VLAN ID 를 선택한 후 값을 설정합니다 . c. OK( 확인 ) 를 클릭합니다 .
PAGE 146
9–Windows Server 2016 RoCE 에 대한 QoS 구성 그림 9-12. 고급 속성 : VLAN ID 설정 7. 스위치를 구성하려면 다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrators> Get-NetAdapterQoS Name : Ethernet 5 Enabled : True Capabilities : Hardware Current -------- ------- MacSecBypass : NotSupported NotSupported DcbxSupport : CEE NumTCs(Max/ETS/PFC) : 4/4/4 OperationalTrafficClasses OperationalFlowControl : TC TSA Bandwidth Priorities -- --- --------- ---------- 0 ETS 5% 0-3,5-7 1 ETS 95% 4 CEE 4/4/4 : Prio
PAGE 147
9–Windows Server 2016 VMMQ 구성 RemoteTrafficClasses : TC TSA Bandwidth Priorities -- --- --------- ---------- 0 ETS 5% 0-3,5-7 1 ETS 95% 4 RemoteFlowControl : Priority 4 Enabled RemoteClassifications : Protocol Port/Type Priority -------- --------- -------- NetDirect 445 4 주 앞서 나온 예는 어댑터 포트가 Arista® 7060X 스위치에 연결되어 있을 때의 예입니다 . 이 예에서는 스위치 PFC 가 Priority 4 에서 활성화됩니다 . RoCE App TLV 가 정의됩니다 . 이 두 트래픽 클래스는 TC0 및 TC1 로 정의되며 , 여기서 TC1 은 RoCE 용으로 정의됩니다 .
PAGE 148
9–Windows Server 2016 VMMQ 구성 어댑터에서 VMMQ 활성화 어댑터에서 VMMQ 를 활성화하려면 1. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . 2. Advanced Properties( 고급 속성 ) 페이지 ( 그림 9-13) 의 Property( 속성 ) 아 래에서 Virtual Switch RSS( 가상 스위치 RSS) 를 선택한 후 값을 Enabled ( 활성화 ) 로 설정합니다 . 3. OK( 확인 ) 를 클릭합니다 . 그림 9-13. 고급 속성 : 가상 스위치 RSS 활성화 VMMQ 최대 QP 기본값 및 비기본 VPort 설정 VMMQ 최대 QP 기본값 및 비기본 VPort 를 설정하려면 1. 미니포트 창을 열고 Advanced( 고급 ) 탭을 클릭합니다 . 2. Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 다음 중 하나를 선택합니다 .
PAGE 149
9–Windows Server 2016 VMMQ 구성  VMMQ Max QPs - Non-Default VPort(VMMQ 최대 QP - 비기본 VPort) 3. 적절한 경우 선택한 속성에 대한 Value( 값 ) 를 조정합니다 . 4. OK( 확인 ) 를 클릭합니다 . SR-IOV 가 있거나 없는 가상 머신 스위치 생성 SR-IOV 가 있거나 없는 가상 머신 스위치를 생성하려면 1. 하이퍼바이저 관리자를 시작합니다 . 2. Virtual Switch Manager( 가상 스위치 관리자 ) 를 선택합니다 ( 그림 9-14 참 조 ). 3. Name( 이름 ) 입력란에 가상 스위치의 이름을 입력합니다 .
PAGE 150
9–Windows Server 2016 VMMQ 구성 4. Connection type( 연결 유형 ) 에서 다음 작업을 수행합니다 . a. External network( 외부 네트워크 ) 를 클릭합니다 . b. Allow management operating system to share this network adapter( 관리 운영 체제가 이 네트워크 어댑터를 공유하도록 허용 ) 확 인란을 선택합니다 . 그림 9-14. 가상 스위치 관리자 5. OK( 확인 ) 를 클릭합니다 .
PAGE 151
9–Windows Server 2016 VMMQ 구성 가상 머신 스위치에서 VMMQ 활성화 가상 머신 스위치에서 VMMQ 를 활성화하려면  다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrators> Set-VMSwitch -name q1 -defaultqueuevmmqenabled $true -defaultqueuevmmqqueuepairs 4 가상 머신 스위치 기능 가져오기 가상 머신 스위치 기능을 가져오려면  다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrator> Get-VMSwitch -Name ql | fl 그림 9-15 에 출력 예가 나와 있습니다 . 그림 9-15.
PAGE 152
9–Windows Server 2016 VMMQ 구성 VM 생성 후 VM 의 VMNetworkadapter 에서 VMMQ 활성화 가상 머신 (VM) 을 생성하고 VM 의 VMNetworksadapter 에서 VMMQ 를 활성화 하려면 1. VM 을 생성합니다 . 2. VMNetworkadapter 를 VM 에 추가합니다 . 3. 가상 스위치를 VMNetworkadapter 에 할당합니다 . 4. VM 에서 VMMQ 를 활성화하려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrators> set-vmnetworkadapter -vmname vm1 -VMNetworkAdapterName "network adapter" -vmmqenabled $true -vmmqqueuepairs 4 주 SR-IOV 지원 가상 스위치 : VM 스위치 및 하드웨어 가속이 SR-IOV 를 지원하는 경우 VMMQ 를 활용하려면 각각 8 개의 가상 NIC 가 있
PAGE 153
9–Windows Server 2016 VMMQ 구성 Ethernet Ethernet Ethernet Name ---Ethernet Ethernet Ethernet Ethernet Ethernet Ethernet Ethernet Ethernet Ethernet Ethernet Ethernet Ethernet 3 3 3 3 3 3 3 3 3 3 3 3 3 3 3 66 67 68 ID -69 70 71 72 73 74 75 76 77 78 79 80 00-15-5D-36-0A-04 00-15-5D-36-0A-05 00-15-5D-36-0A-06 MacAddress ---------00-15-5D-36-0A-07 00-15-5D-36-0A-08 00-15-5D-36-0A-09 00-15-5D-36-0A-0A 00-15-5D-36-0A-0B 00-15-5D-36-0A-F4 00-15-5D-36-0A-F5 00-15-5D-36-0A-F6 00-15-5D-36-0A-F7 00-15-5D-36-0A-F8 0
PAGE 154
9–Windows Server 2016 VXLAN 구성 트래픽 통계 모니터링 가상 머신에서 가상 기능 트래픽을 모니터링하려면 다음 Windows PowerShell 명 령을 실행합니다 . PS C:\Users\Administrator> Use get-netadapterstatistics | fl VXLAN 구성 VXLAN 구성 정보는 다음을 포함합니다 .  어댑터에서 VXLAN 오프로드 활성화  소프트웨어 정의 네트워크 배포 어댑터에서 VXLAN 오프로드 활성화 어댑터에서 VXLAN 오프로드를 활성화하려면 1. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . 2. Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 9-16) VXLAN Encapsulated Task Offload(VXLAN 캡슐화 작업 오프 로드 ) 를 선택합니다 . 그림 9-16. 고급 속성 : VXLAN 활성화 3.
PAGE 155
9–Windows Server 2016 Storage Spaces Direct 구성 4. OK( 확인 ) 를 클릭합니다 . 소프트웨어 정의 네트워크 배포 가상 머신에서 VXLAN 캡슐화 작업 오프로드를 이용하려면 Microsoft 네트워크 컨 트롤러를 활용하는 SDN( 소프트웨어 정의 네트워크 ) 스택을 배포해야 합니다 . 자세한 내용은 소프트웨어 정의 네트워크에 대한 다음 Microsoft TechNet 링크를 참조하십시오 . https://technet.microsoft.com/en-us/windows-server-docs/networking/sdn/ software-defined-networking--sdn- Storage Spaces Direct 구성 Windows Server 2016 에는 Storage Spaces Direct 가 도입되었는데 , 이를 이용해 로컬 스토리지로 고도의 가용성과 확장성을 지닌 스토리지 시스템을 만들 수 있습 니다 .
PAGE 156
9–Windows Server 2016 Storage Spaces Direct 구성 하드웨어 구성 그림 9-17 은 하드웨어 구성의 예를 나타낸 것입니다 . 그림 9-17. 하드웨어 구성 예 주 이 예에서 사용되는 디스크는 4 × 400G NVMe™ 및 12 × 200G SSD 디스크 입니다 . Hyper-Converged 시스템 배포 이 섹션에서는 Windows Server 2016 을 사용하여 Hyper-Converged 시스템의 구 성요소를 설치 및 구성하기 위한 지침을 소개합니다 . Hyper-Converged 시스템을 배포하는 작업은 다음 세 가지 큰 단계로 나눌 수 있습니다 .
PAGE 157
9–Windows Server 2016 Storage Spaces Direct 구성 운영 체제 배포 운영 체제를 배포하려면 1. 운영 체제를 설치합니다 . 2. Windows 서버 역할 ( 하이퍼바이저 ) 을 설치합니다 . 3. 다음 기능을 설치합니다 .    4. 장애 조치 클러스터 DCB(Data Center Bridging) 노드를 도메인에 연결하고 도메인 계정을 추가합니다 . 네트워크 구성 Storage Spaces Direct 를 배포하려면 RDMA 사용 호스트 가상 NIC 와 함께 하이퍼 바이저 스위치를 배포해야 합니다 . 주 다음 절차에서는 RDMA NIC 포트가 4 개 있는 것으로 가정합니다 . 각 서버에서 네트워크를 구성하려면 1. 다음과 같이 실제 네트워크 스위치를 구성합니다 . a. 모든 어댑터 NIC 를 스위치 포트에 연결합니다 . 주 테스트 어댑터에 NIC 포트가 두 개 이상 있는 경우 두 포트 모두 같은 스위치에 연결해야 합니다 . b.
PAGE 158
9–Windows Server 2016 Storage Spaces Direct 구성 2. Network Quality of Service( 네트워크 서비스 품질 ) 를 활성화합니다 . 주 네트워크 서비스 품질은 소프트웨어 정의 스토리지 시스템이 복원력과 성능을 보장하기 위해 노드 간의 통신을 위한 대역폭이 충분한지 확인 하는 데 사용됩니다 . 어댑터에서 QoS 를 구성하려면 121 페이지의 "RoCE 에 대한 QoS 구성 " 을 참조하십시오 . 3. 다음과 같이 SET 및 RDMA 가상 NIC 를 포함한 하이퍼바이저 가상 스위치를 생성합니다 . a. 네트워크 어댑터를 식별하려면 다음 명령을 발급합니다 . Get-NetAdapter | FT Name,InterfaceDescription,Status,LinkSpeed b. 모든 실제 네트워크 어댑터에 연결된 가상 스위치를 생성한 다음 스위 치 임베디드 티밍을 활성화하려면 다음 명령을 발급합니다 .
PAGE 159
9–Windows Server 2016 Storage Spaces Direct 구성 주 이런 명령은 같은 VLAN 이나 서로 다른 VLAN 에서 실행할 수 있 습니다 . e. VLAN ID 가 설정되어 있는지 확인하려면 다음 명령을 발급합니다 . Get-VMNetworkAdapterVlan -ManagementOS f. VLAN 을 작동되도록 각 호스트 가상 NIC 어댑터를 비활성화한 후에 활 성화하려면 다음 명령을 발급합니다 . Disable-NetAdapter "vEthernet (SMB_1)" Enable-NetAdapter "vEthernet (SMB_1)" Disable-NetAdapter "vEthernet (SMB_2)" Enable-NetAdapter "vEthernet (SMB_2)" g. 호스트 가상 NIC 어댑터에서 RDMA 를 활성화하려면 다음 명령을 발급 합니다 . Enable-NetAdapterRdma "SMB1","SMB2" h.
PAGE 160
9–Windows Server 2016 Storage Spaces Direct 구성 다음 Windows PowerShell 명령을 실행하여 Storage Spaces Direct 클러스터로 사 용하기 위해 서버 집합의 유효성을 검사합니다 . Test-Cluster -Node -Include "Storage Spaces Direct", Inventory, Network, "System Configuration" 2 단계 . 클러스터 생성 1 단계 . 클러스터 유효성 검사 도구 실행에 있는 4 개의 노드 ( 클러스터 생성에 대 한 유효성 검사를 실시한 노드 ) 를 포함한 클러스터를 생성합니다 . 클러스터를 생성하려면 다음 Windows PowerShell 명령을 실행합니다 .
PAGE 161
9–Windows Server 2016 Storage Spaces Direct 구성 icm (Get-Cluster -Name HCNanoUSClu3 | Get-ClusterNode) { Update-StorageProviderCache Get-StoragePool |? IsPrimordial -eq $false | Set-StoragePool -IsReadOnly:$false -ErrorAction SilentlyContinue Get-StoragePool |? IsPrimordial -eq $false | Get-VirtualDisk | Remove-VirtualDisk -Confirm:$false -ErrorAction SilentlyContinue Get-StoragePool |? IsPrimordial -eq $false | Remove-StoragePool -Confirm:$false -ErrorAction SilentlyContinue Get-PhysicalDisk | Reset-Physic
PAGE 162
9–Windows Server 2016 Nano 서버 배포 및 관리 6 단계 . 가상 디스크 생성 Storage Spaces Direct 는 활성화된 경우에 모든 디스크를 사용하여 단일 풀을 생 성합니다 . 또한 , 이름에 지정된 클러스터의 이름으로 풀의 이름을 지정합니다 ( 예 : S2D on Cluster1). 다음 Windows PowerShell 명령을 실행하면 스토리지 풀에서 미러 및 패리티 복원 력을 모두 가진 가상 디스크가 생성됩니다 .
PAGE 163
9–Windows Server 2016 Nano 서버 배포 및 관리 표 9-1. Nano 서버의 역할과 기능 ( 계속 ) 역할 또는 기능 옵션 Nano 서버를 가상 머신으로 호스트하기 위한 하이 퍼바이저 게스트 드라이버 -GuestDrivers 다양한 네트워크 어댑터 및 스토리지 컨트롤러용 기본 드라이버 . 이는 Windows Server 2016 Technical Preview 의 Server Core 설치에 포함된 드라이버 집합과 동일합니다 . -OEMDrivers 파일 서버 역할 및 기타 스토리지 구성요소 -Storage 기본 서명 파일을 포함한 Windows Defender Antimalware -Defender 응용 프로그램 호환성을 위한 역방향 전달자 , 예를 들어 , Ruby, Node.
PAGE 164
9–Windows Server 2016 Nano 서버 배포 및 관리 다음 섹션에서는 필수 패키지로 Nano 서버 이미지를 구성하는 방법과 QLogic 장 치에 특정한 장치 드라이버를 추가하는 방법을 차례로 설명합니다 . 또한 , Nano 서 버 복구 콘솔 사용 방법 , Nano 서버 원격 관리 방법 , Nano 서버에서 Ntttcp 트래픽 실행 방법도 설명합니다 . 실제 서버에 Nano 서버 배포 다음 절차에 따라 미리 설치되어 있는 장치 드라이버를 사용하여 실제 서버에서 실 행할 Nano 서버 VHD( 가상 하드 디스크 ) 를 생성합니다 . Nano 서버를 배포하려면 1. Windows Server 2016 OS 이미지를 다운로드합니다 . 2. ISO 를 탑재합니다 . 3. NanoServer 폴더에서 하드 드라이브에 있는 폴더로 다음 파일을 복사합니 다.   NanoServerImageGenerator.psm1 Convert-WindowsImage.ps1 4.
PAGE 165
9–Windows Server 2016 Nano 서버 배포 및 관리 예: New-NanoServerImage –DeploymentType Host –Edition Datacenter -MediaPath C:\tmp\TP4_iso\Bld_10586_iso -BasePath ".\Base" -TargetPath "C:\Nano\PhysicalSystem\Nano_phy_vhd.vhd" -ComputerName "Nano-server1" –Compute -Storage -Cluster -OEMDrivers -DriversPath "C:\Nano\Drivers" 앞의 예에서 C:\Nano\Drivers 는 QLogic 드라이버 경로입니다 . 이 명령으 로 VHD 파일을 생성하는 데 약 10~15 분 정도 걸립니다 . 이 명령을 실행했을 때의 출력 샘플이 아래에 나와 있습니다 .
PAGE 166
9–Windows Server 2016 Nano 서버 배포 및 관리 9. VHD 를 실제 서버로 복사하고 새 VHD 에서 부팅하도록 구성하려면 a. Computer Management > Storage > Disk Management( 컴퓨터 관 리 > 스토리지 > 디스크 관리 ) 로 이동합니다 . b. Disk Management( 디스크 관리 ) 를 마우스 오른쪽 단추로 클릭하고 Attach VHD(VHD 연결 ) 를 선택합니다 . c. VHD 파일 경로를 입력합니다 . d. OK( 확인 ) 를 클릭합니다 . e. bcdboot d:\windows 를 실행합니다 . 주 이 예에서는 VHD 가 D:\ 아래에 연결됩니다 . f. Disk Management( 디스크 관리 ) 를 마우스 오른쪽 단추로 클릭하고 Detach VHD(VHD 분리 ) 를 선택합니다 . 10. 실제 서버를 Nano 서버 VHD 로 재부팅합니다 . 11.
PAGE 167
9–Windows Server 2016 Nano 서버 배포 및 관리 7. 다음 Windows PowerShell 명령을 실행하여 컴퓨터 이름을 설정하고 하이퍼 바이저 게스트 드라이버를 포함하는 VHD 를 생성합니다 . 주 다음 명령을 발급하면 새 VHD 에 대한 관리자 암호를 입력하라는 메시 지가 표시됩니다 . New-NanoServerImage –DeploymentType Guest –Edition -MediaPath -BasePath .\Base -TargetPath .\NanoServerPhysical\NanoServer.vhd -ComputerName –GuestDrivers 예: New-NanoServerImage –DeploymentType Guest –Edition Datacenter -MediaPath C:\tmp\TP4_iso\Bld_10586_iso -BasePath .
PAGE 168
9–Windows Server 2016 Nano 서버 배포 및 관리 INFO : Applying image to VHD. This could take a while... INFO : Image was applied successfully. INFO : Making image bootable... INFO : Fixing the Device ID in the BCD store on VHD... INFO : Drive is bootable. INFO : Closing VHD... INFO : Deleting pre-existing VHD : Base.vhd... INFO : Closing Windows image... INFO : Done. Cleaning up... Done. The log is at: C:\Users\ADMINI~1\AppData\Local\Temp\2\NanoServerImageGenerator.log 8.
PAGE 169
9–Windows Server 2016 Nano 서버 배포 및 관리 2. Nano 서버의 관리자에 자신이 사용 중인 계정을 추가합니다 . 3. ( 선택 사항 ) 해당되는 경우 CredSSP 를 활성화합니다 . 신뢰할 수 있는 호스트 목록에 Nano 서버 추가 관리자 권한으로 실행하는 Windows PowerShell 프롬프트에서 다음 명령을 실행 하여 신뢰할 수 있는 호스트 목록에 Nano 서버를 추가합니다 . Set-Item WSMan:\localhost\Client\TrustedHosts "" 예: Set-Item WSMan:\localhost\Client\TrustedHosts "172.28.41.152" Set-Item WSMan:\localhost\Client\TrustedHosts "*" 주 앞서 나온 명령을 실행하면 모든 호스트 서버가 신뢰할 수 있는 호스트로 설 정됩니다 .
PAGE 170
9–Windows Server 2016 Nano 서버 배포 및 관리 Windows Nano 서버에서 QLogic 어댑터 관리 Nano 서버 환경에서 QLogic 어댑터를 관리하려면 Cavium 웹사이트에서 구할 수 있는 Windows QConvergeConsole GUI 및 Windows QLogic Control Suite CLI 관 리 도구와 관련 설명서를 참조하십시오 . RoCE 구성 Windows PowerShell 원격으로 Nano 서버를 관리하려면 1. 다른 머신에서 Windows PowerShell 원격을 통해 Nano 서버에 연결합니다 . 예: PS C:\Windows\system32> $1p="172.28.41.152" PS C:\Windows\system32> $user="172.28.41.152\Administrator" PS C:\Windows\system32> Enter-PSSession -ComputerName $ip -Credential $user 주 앞의 예에서 Nan
PAGE 171
9–Windows Server 2016 Nano 서버 배포 및 관리 그림 9-19 에 출력 예가 나와 있습니다 . 그림 9-19. Windows PowerShell 명령 : Get-NetAdapterRdma 4. 어댑터의 모든 인터페이스에 IP 주소와 VLAN ID 를 할당하려면 다음 Windows PowerShell 명령을 실행합니다 . [172.28.41.152]: PS C:\> Set-NetAdapterAdvancedProperty -InterfaceAlias "slot 1 port 1" -RegistryKeyword vlanid -RegistryValue 5 [172.28.41.152]: PS C:\> netsh interface ip set address name="SLOT 1 Port 1" static 192.168.10.10 255.255.255.0 5. Nano 서버에 SMBShare 를 생성하려면 다음 Windows PowerShell 명령을 실행합니다 . [172.28.41.
PAGE 172
9–Windows Server 2016 Nano 서버 배포 및 관리 6. 클라이언트 컴퓨터에서 SMBShare 를 네트워크 드라이브로 매핑하려면 다 음 Windows PowerShell 명령을 실행합니다 . 주 Nano 서버에서 인터페이스의 IP 주소는 192.168.10.10 입니다 . PS C:\Windows\system32> net use z: \\192.168.10.10\smbshare This command completed successfully. 7. SMBShare 에서 읽기 / 쓰기를 수행하고 Nano 서버에서 RDMA 통계정보를 확인하려면 다음 Windows PowerShell 명령을 실행합니다 . [172.28.41.152]: PS C:\> (Get-NetAdapterStatistics).RdmaStatistics 그림 9-22 은 명령 출력을 나타낸 것입니다 . 그림 9-22.
PAGE 173
10 문제 해결 이 장에서는 다음 문제 해결 정보를 제공합니다 .  문제 해결 검사 목록  156 페이지의 " 현재 드라이버의 로드 여부 확인 "  157 페이지의 " 네트워크 연결 테스트 "  158 페이지의 "Hyper-V 를 이용한 Microsoft 가상화 "  158 페이지의 "Linux 관련 문제 "  158 페이지의 " 기타 문제 "  159 페이지의 " 디버그 데이터 수집 " 문제 해결 검사 목록 주의 어댑터를 추가하거나 제거하기 위해 서버 캐비닛을 열기 전에 6 페이지의 " 안전 주의사항 " 을 검토하십시오 . 다음 검사 목록은 시스템에서 QL45212 Adapter 를 설치하거나 실행하는 중에 발 생할 수 있는 문제를 해결하기 위해 권장되는 조치를 제공합니다 .  케이블과 연결 부분을 모두 검사합니다 . 네트워크 어댑터의 케이블과 스위치 가 올바로 연결되었는지 확인합니다 .
PAGE 174
10– 문제 해결 현재 드라이버의 로드 여부 확인  결함이 있는 어댑터를 올바르게 작동하는 어댑터로 교체합니다. 첫 번째 어댑 터가 작동하지 않는 슬롯에 두 번째 어댑터가 작동하는 경우 원래 어댑터에 결함이 있을 수 있습니다 .  제대로 작동이 되는 다른 시스템에 어댑터를 설치한 후 테스트를 다시 실행합 니다 . 어댑터가 새 시스템에서 테스트를 통과한 경우 원래 시스템에 결함이 있을 수 있습니다 .  시스템에서 다른 어댑터를 모두 제거한 후 테스트를 다시 실행합니다. 어댑터 가 테스트를 통과한 경우 다른 어댑터에 충돌이 발생했을 수 있습니다 . 현재 드라이버의 로드 여부 확인 현재 드라이버가 Windows, Linux 또는 VMware 시스템용으로 로드되는지 확인합 니다 . Windows 드라이버 확인 어댑터 , 링크 상태 및 네트워크 연결에 대한 중요 정보는 장치 관리자에서 확인합 니다 . Linux 드라이버 확인 qed.
PAGE 175
10– 문제 해결 네트워크 연결 테스트 새로운 드라이버를 로드하여도 아직 재부팅 전인 경우에는 modinfo 명령을 실행 해도 업데이트된 드라이버 정보가 표시되지 않습니다. 이런 경우에는 다음과 같이 dmesg 명령을 발급하여 로그 정보를 확인할 수 있습니다. 아래 예에서 마지막 항목 이 재부팅 시 활성화되는 드라이버를 나타냅니다 . # dmesg | grep -i "Cavium" | grep -i "qede" [ 10.097526] QLogic FastLinQ 4xxxx Ethernet Driver qede x.x.x.x [ 23.093526] QLogic FastLinQ 4xxxx Ethernet Driver qede x.x.x.x [ 34.975396] QLogic FastLinQ 4xxxx Ethernet Driver qede x.x.x.x [ 34.975896] QLogic FastLinQ 4xxxx Ethernet Driver qede x.x.x.x [ 3334.
PAGE 176
10– 문제 해결 Hyper-V 를 이용한 Microsoft 가상화 Linux 용 네트워크 연결 테스트 이더넷 인터페이스가 작동되어 실행 중인지 확인하려면 1. 이더넷 인터페이스의 상태를 확인하려면 ifconfig 명령을 발급합니다 . 2. 이더넷 인터페이스에 대한 통계를 확인하려면 netstat -i 명령을 발급합 니다 . 연결이 설정되었는지 확인하려면 1. 네트워크에서 IP 호스트를 Ping 합니다 . 명령 행에서 다음 명령을 발급합니 다. ping 2. ENTER 키를 누릅니다 . 표시되는 ping 통계는 네트워크 연결이 작동하는지 여부를 나타냅니다 . 운영 체제 GUI 도구나 ethtool 명령 , ethtool –s ethX speed SSSS 를 사용하여 어댑터 연결 속도를 10Gbps 또는 25Gbps 로 강제 설정할 수 있습니다 . QL45212 Adapter 에서 두 포트를 모두 동일한 속도인 10Gbps 또는 25Gbps 로 설정합니다 .
PAGE 177
10– 문제 해결 디버그 데이터 수집 디버그 데이터 수집 표 10-1 의 명령을 사용하여 디버그 데이터를 수집합니다 . 표 10-1. 디버그 데이터 수집 명령 디버그 데이터 설명 demesg-T 커널 로그 ethtool-d 레지스터 덤프 sys_info.
PAGE 178
A 어댑터 LED 표 A-1 에는 어댑터 포트 링크 및 작동 상태를 나타내는 LED 표시등이 나와 있습니다 . 표 A-1.
PAGE 179
B 케이블 및 광학 모듈 이 부록에서는 지원되는 케이블 및 광학 모듈에 대해 다음 정보를 제공합니다 .  지원되는 사양  테스트를 거친 케이블 및 광학 모듈  테스트를 거친 스위치 지원되는 사양 QL45212 Adapters 는 SFF8024 를 준수하는 다양한 케이블 및 광학 모듈을 지원합 니다 . 특정 폼팩터 규정 준수는 다음과 같습니다 .    SFP:  SFF8472( 메모리 맵용 )  SFF8419 또는 SFF8431( 저속 신호와 전력 ) QSFP(Quad small form factor pluggable):  SFF8636( 메모리 맵용 )  SFF8679 또는 SFF8436( 저속 신호와 전력 ) 광학 모듈 전기 입력/출력, ACC(Active Copper 케이블), AOC(능동형 광학 케 이블 ):  10G—SFF8431 제한 인터페이스  25G—IEEE802.
PAGE 180
B– 케이블 및 광학 모듈 테스트를 거친 케이블 및 광학 모듈 테스트를 거친 케이블 및 광학 모듈 Cavium 은 규정 준수 요건을 충족하는 모든 케이블 또는 광학 모듈이 QL45212 Adapters 와 함께 작동할 것이라 보장하지 않습니다 . QL45212 Adapter 는 3m DAC 및 30m AOC 를 지원하지만 25G SR 광학 모듈은 지원하지 않습니다 . Cavium 은 표 B-1 에 나열된 케이블을 사용하여 QL45212 어댑터의 상호 운용성 테스트를 마쳤습니다 . 표 B-1.
PAGE 181
B– 케이블 및 광학 모듈 테스트를 거친 스위치 표 B-1. 테스트를 거친 케이블 및 광학 모듈 ( 계속 ) 속도 / 폼팩터 25G AOC 제조 업체 InnoLight 부품 번호 유형 케이블 길이 a 게이지 TF-PY003-N00 SFP28 AOC 3 N/A TF-PY020-N00 SFP28 AOC 20 N/A a 케이블 길이의 단위는 미터 (m) 로 표시됩니다 . b DAC 는 직접 연결 케이블 (Direct Attach Cable) 의 약어입니다 . c AOC 는 액티브 광학 케이블 (Active Optical Cable) 의 약어입니다 . 테스트를 거친 스위치 표 B-2 는 QL45212 Adapters 와 상호 운용성 테스트를 거친 스위치를 나열한 것입 니다 . 이 목록은 제품 출시 시점에 사용 가능한 스위치를 기준으로 한 것이며 , 시 간의 경과에 따라 새로운 스위치가 출시되거나 단종되는 스위치가 있을 때 변경될 수 있습니다 . 표 B-2.
PAGE 182
B– 케이블 및 광학 모듈 테스트를 거친 스위치 164 BC0154503-03 F
PAGE 183
C Dell Z9100 스위치 구성 QL45212 Adapters 는 Dell Z9100 이더넷 스위치와 연결할 수 있도록 지원합니다 . 단 , 자동 협상 프로세스가 표준화될 때까지는 25Gbps 의 속도로 어댑터에 연결할 수 있도록 수동으로 스위치를 구성해야 합니다 . QL45212 Adapter 를 25Gbps 의 속도로 연결하도록 Dell Z9100 스위치 포트를 구 성하는 방법은 다음과 같습니다 . 1. 관리 워크스테이션과 스위치 사이에 시리얼 포트 연결을 구성합니다 . 2. 다음과 같이 명령 행 세션을 연 다음 스위치에 로그인합니다 . Login: admin Password: admin 3. 스위치 포트 구성을 활성화합니다 . Dell> enable Password: xxxxxx Dell# config 4. 구성할 모듈과 포트를 지정합니다 . 다음 예에서는 모듈 1, 포트 5 를 사용합 니다 .
PAGE 184
C–Dell Z9100 스위치 구성 어댑터 링크 속도를 변경하는 방법에 대한 자세한 내용은 157 페이지의 " 네 트워크 연결 테스트 " 를 참조하십시오 . 5. 포트가 25Gbps 의 속도로 동작하는지 확인합니다 . Dell# Dell#show running-config | grep "port 5" stack-unit 1 port 5 portmode quad speed 25G 6. 스위치 포트 5 에서 자동 협상을 비활성화하려면 a. 스위치 포트 인터페이스 ( 모듈 1, 포트 5, 인터페이스 1) 를 지정한 후 자동 협상 상태를 확인합니다 . Dell(conf)#interface tw 1/5/1 Dell(conf-if-tf-1/5/1)#intf-type cr4 ? autoneg b. Enable autoneg 자동 협상을 비활성화합니다 . Dell(conf-if-tf-1/5/1)#no intf-type cr4 autoneg c. 자동 협상이 비활성화되었는지 확인합니다 .
PAGE 185
용어 어댑터 호스트 시스템과 대상 장치를 서로 연결해 주는 보드 . 어댑터는 호스트 버스 어댑터 , 호스트 어댑터 및 보드와 동일한 의미로 사 용됩니다 . 고급 구성 및 전원 인터페이스 ACPI 섹션을 참조하십시오 . 대상 SCSI 세션의 스토리지 장치 엔드포인트 . 개시 장치는 대상으로부터 데이터를 요청 합니다 . 대상은 일반적으로 디스크 드라이 브 , 테이프 드라이브 또는 기타 미디어 장 치입니다 . 일반적으로 SCSI 주변 장치는 대상이지만 , 어댑터는 경우에 따라 대상일 수 있습니다 . 한 대상이 다수의 LUN 을 포 함할 수 있습니다 . 어댑터 포트 어댑터 보드의 포트 이더넷 컴퓨터끼리 정보를 전송하는 데 가장 널리 사용되는 LAN 기술로서 일반적으로 전송 속도가 10~100Mbps 에 이릅니다 . 대상은 개시 장치 ( 호스트 시스템 ) 의 요청 에 응답하는 장치입니다 .
PAGE 186
사용 설명서 — 지능형 이더넷 어댑터 QL45212 Basic Input Output System ACPI BIOS 섹션을 참조하십시오 . ACPI(Advanced Configuration and Power Interface) 사양은 통합 운영 체제 중심의 장 치 구성 및 전원 관리를 위한 개방형 표준을 제공합니다 . ACPI 는 하드웨어 검색 , 구성 , 전원 관리 및 모니터링을 위한 플랫폼에 독 립적인 인터페이스를 정의합니다 . 이 사양 은 ACPI 를 구현하는 시스템을 설명하는 데 사용되는 용어인 OSPM(Operating System-directed configuration and Power Management) 의 중심이 되는 사양으로 , 레 거시 펌웨어 인터페이스에서 장치 관리 책 임을 없애줍니다 . BIOS Basic Input Output System.
PAGE 187
사용 설명서 — 지능형 이더넷 어댑터 QL45212 Dynamic Host Configuration Protocol ETS DHCP 섹션을 참조하십시오 . Enhanced Transmission Selection. 트래픽 클래스 사이에서 대역폭 할당을 지원하도 록 전송 선택 향상을 규정하는 표준 . 트래 픽 클래스에 제공된 로드가 할당된 대역폭 을 사용하지 않으면 향상된 전송 선택에서 다른 클래스가 사용 가능한 대역폭을 사용 할 수 있도록 허용합니다 . 대역폭 - 할당 우 선 순위는 엄격한 우선 순위와 함께 공존합 니다 . ETS 에는 대역폭 할당을 지원하기 위해 관리되는 개체를 포함합니다. 자세한 내용은 http://ieee802.org/1/pages/802.1az.html eCore OS 와 하드웨어 및 펌웨어 사이의 계층 . 장치별로 다르며 OS 와는 무관합니다 .
PAGE 188
사용 설명서 — 지능형 이더넷 어댑터 QL45212 Layer 2 Human Interface Infrastructure 다중 계층 통신 모델인 OSI(Open Systems Interconnection) 의 데이터 링크 계층을 지 칭합니다 . 데이터 링크 계층의 기능은 네트 워크에서 실제 링크를 통해 데이터를 이동 하는 것이며 , 이 경우 스위치는 메시지 대 상을 확인하기 위해 대상 MAC 주소를 사용 하여 Layer 2 레벨에서 데이터 메시지를 리 디렉트합니다 . HII 섹션을 참조하십시오 . HII Human Interface Infrastructure. 사용자 입 력 , 현지화된 문자열 , 글꼴 및 양식을 관리 하기 위한 사양 (UEFI 2.1 의 일부 ) 으로 , OEM 이 사전 부팅 구성을 위한 그래픽 인 터페이스를 개발할 수 있게 해 줍니다 . IEEE Institute of Electrical and Electronics Engineers.
PAGE 189
사용 설명서 — 지능형 이더넷 어댑터 QL45212 NPAR Maximum Transmission Unit NIC Partitioning. 단일 NIC 포트를 여러 개 의 실제 기능 또는 파티션으로 나누는 것으 로 , 분할된 부분은 각각 사용자가 구성할 수 있는 대역폭과 개인 설정 ( 인터페이스 유형 ) 이 있습니다 . 개인 설정에는 NIC, FCoE 및 iSCSI 가 포함됩니다 . MTU 섹션을 참조하십시오 . Message Signaled Interrupts MSI, MSI-X 섹션을 참조하십시오 . MSI, MSI-X Message Signaled Interrupts. PCI 2.2 이상 버전과 PCI Express 에서 메시지 신호 인터 럽트 (MSI) 를 지원하기 위한 PCI 확장 슬 롯 2 개 중 1 개 . MSI 는 핀 어설션 또는 디 어설션을 에뮬레이션할 수 있는 특별한 메 시지를 통해 인터럽트 신호를 생성하는 대 체 방법입니다 .
PAGE 190
사용 설명서 — 지능형 이더넷 어댑터 QL45212 SerDes Quality of Service Serializer/Deserializer. 고속 통신에서 제한 된 입 / 출력을 보상할 목적으로 널리 사용 되는 한 쌍의 기능 블록 . 이 블록은 직렬 데 이터와 병렬 인터페이스 사이에서 각 방향 으로 전송되는 데이터를 변환합니다 . QoS 섹션을 참조하십시오 . RDMA Remote Direct Memory Access. 네트워크 를 통해 하나의 노드를 직접 다른 노드의 메 모리에 쓸 수 있는 기능 ( 주소 및 크기 의미 체계 포함 ). 이 기능은 VI 네트워크에서 매 우 중요합니다 . Serializer/Deserializer SerDes 섹션을 참조하십시오 . Single Root Input/Output Virtualization Reduced Instruction Set Computer SR-IOV 섹션을 참조하십시오 . RISC 섹션을 참조하십시오 .
PAGE 191
사용 설명서 — 지능형 이더넷 어댑터 QL45212 Unified Extensible Firmware Interface TLV UEFI 섹션을 참조하십시오 . Type-Length-Value. 프로토콜 내부에서 요 소로 인코딩될 수 있는 선택적 정보 . 유형 및 길이 필드는 크기가 고정되어 있고 ( 일 반적으로 1~4 바이트 ), 값 필드는 크기가 가변적입니다 . 이런 필드는 다음과 같이 사용됩니다 . User Datagram Protocol UDP 섹션을 참조하십시오 . VF Virtual Function.  Type(유형)—메시지의 이 부분이 나타내 는 필드의 종류를 표시하는 숫자 코드 . VI Virtual Interface. 파이버 채널과 기타 통신 프로토콜에서 원격 직접 메모리 액세스를 위한 이니셔티브 . 클러스터링과 메시징에 사용됩니다 .  Length( 길이 )— 값 필드의 크기 ( 일반적 으로 바이트 단위 ).
PAGE 192
사용 설명서 — 지능형 이더넷 어댑터 QL45212 Wake on LAN WoL 섹션을 참조하십시오 . WoL Wake on LAN. 대개 네트워크상의 다른 컴 퓨터에서 실행되는 간단한 프로그램을 통 해 전송되는 네트워크 메시지에 의해 어떤 컴퓨터를 원격으로 켜거나 절전 모드를 해 제할 수 있도록 지원하는 이더넷 컴퓨터 네 트워킹 표준 .
PAGE 193
본사 Cavium, Inc. 2315 N. First Street San Jose, CA 95131 408-943-7100 인터내셔널 오피스 영국 | 아일랜드 | 독일 | 프랑스 | 인도 | 일본 | 중국 | 홍콩 | 싱가포르 | 대만 | 이스라엘 Copyright © 2015–2018 Cavium, Inc. 전세계 판권 본사 소유 . QLogic 코퍼레이션은 전적으로 Cavium, Inc. 의 자회사입니다 . Cavium, FastLinQ, QConvergeConsole, QLogic 및 SmartAN 은 Cavium, Inc. 의 등록상표입니다 . 기타 모든 브랜드명 및 제품명은 해당 명칭을 소유한 회사의 상표 또는 등록상표입니다 . 본 문서는 참고용으로만 제공되며 오류가 있을 수 있습니다 . Cavium 은 본 문서 , 제품 설계 또는 사양을 사전 고지 없이 변경할 수 있는 권리가 있습니다 .