Users Guide

ManualsBrandsDell ManualsConverged InfrastructureQLogic Family of Adapters

AH0054602-03 F

타사 정보는 Dell EMC 의 고객 지원

차원에서 제공되는 것입니다 .

사용 설명서

수렴형 네트워크 어댑터

41xxx 시리즈

Summary of content (299 pages)

PAGE 1
사용 설명서 수렴형 네트워크 어댑터 41xxx 시리즈 AH0054602-03 F 타사 정보는 Dell EMC 의 고객 지원 차원에서 제공되는 것입니다 .
PAGE 2
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 문서 개정 이력 개정판 A, 2017 년 4 월 28 일 개정판 B, 2017 년 8 월 24 일 개정판 C, 2017 년 10 월 1 일 개정판 D, 2018 년 1 월 24 일 개정판 E, 2018 년 3 월 15 일 개정판 F, 2018 년 4 월 19 일 영향받은 섹션 영향받은 섹션 문서 규약 예가 업데이트됨 xix 페이지의 " 문서 규약 " 더 이상 사용하지 않는 QLogic 라이선스 계약 및 보증 섹션이 삭제됨 머리말 표 3-5 에 각주로 " 이 사용자 설명서를 게시한 후에 는 ESXi 드라이버를 추가로 사용할 수 있습니다 . 자세한 내용은 릴리스 노트를 참조하십시오 .
PAGE 3
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 다음 주요 섹션이 Linux 환경의 iSCSI Offload 아래 하위 섹션으로 변경됨  149 페이지의 "bnx2i 와의 차이점 " 148 페이지의 "Linux 환경의 iSCSI Offload"  149 페이지의 "qedi.ko 구성 "  149 페이지의 "Linux 에서 iSCSI 인터페이스 확 인"  152 페이지의 "Open-iSCSI 및 SAN 에서 부팅에 대해 고려할 점 " 158 페이지의 "SAN 마이그레이션에서 SLES 11 SP4 iSCSI L4 부팅 " 비오프로드 인터페이스에서 오프로드 인터페이스 로 마이그레이션하려면 절차에서  1 단계가 "Open-iscsi 도구 및 iscsiuio 를 최신 버 전으로 업데이트 ..." 로 변경됨  2 단계가 첫 번째 글머리 기호에 "(있는 경우)"를 추가하여 편집되고 , 마지막 글머리 기호 ("rd.driver.pre=qed rd.driver.
PAGE 4
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 VMware 에서 SR-IOV 를 구성하려면 절차에서 다 음과 같이 일부 단계가 재조정됨 .  " 포트에 따라 VF 의 유효성을 검사하려면 esxcli 명령을 실행 ..." 단계가 "Edit Settings ( 설정 편집 ) 대화 상자를 ..." 단계 뒤로 이동하 였습니다 . 195 페이지의 "VMware 에서 SR-IOV 구성 "  "VM 을 활성화 ..." 단계가 "QLogic 드라이버를 탐 지된 어댑터에 설치 ..." 단계 뒤로 이동하였습니 다.
PAGE 5
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 표 B-1 에 테스트를 거친 케이블 및 광학 솔루션이 추가됨 260 페이지의 " 테스트를 거친 케이블 및 광학 모듈 " 표 B-2 에 테스트를 거친 스위치가 추가됨 264 페이지의 " 테스트를 거친 스위치 " 더 이상 사용되지 않는 다음 섹션이 삭제됨  SR-IOV 를 이미 구성한 경우 NPAR 구성이 지원 안됨 Appendix D 기능 제약 조건  NPAR 을 이미 구성한 경우 RoCE 및 iWARP 구성이 지원 안 됨 v AH0054602-03 F
PAGE 6
목차 머리말 지원되는 제품 . . . . . . . . . . . . . 대상 독자 . . . . . . . . . . . . . . . . 설명서 내용. . . . . . . . . . . . . . . 문서 규약 . . . . . . . . . . . . . . . . 법적 고지 . . . . . . . . . . . . . . . . 레이저 안전 —FDA 공지 사항 기관 인증 . . . . . . . . . . . . EMI 및 EMC 요구 사항 . KCC: A 급. . . . . . . . . VCCI: A 급 . . . . . . . . 제품 안전 준수 . . . . . . . . . 1 3 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
PAGE 7
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 RDMA 와 함께 Linux 설치 . . . . . . . . Linux 드라이버 옵션 매개변수 . . . . . . Linux 드라이버 작업 기본값 . . . . . . . Linux 드라이버 메시지 . . . . . . . . . . 통계 . . . . . . . . . . . . . . . . . . . . . . Windows 드라이버 소프트웨어 설치. . . . . . Windows 드라이버 설치. . . . . . . . . . GUI 에서 DUP 실행 . . . . . . . . . DUP 설치 옵션. . . . . . . . . . . . DUP 설치 예제. . . . . . . . . . . . Windows 드라이버 제거. . . . . . . . . . 어댑터 속성 관리 . . . . . . . . . . . . . . 전원 관리 옵션 설정 . . . . . . . . . . . . VMware 드라이버 소프트웨어 설치 . .
PAGE 8
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 6 RoCE 구성 지원되는 운영 체제 및 OFED . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . RoCE 를 위한 계획 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 어댑터 준비. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 이더넷 스위치 준비 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Cisco Nexus 6000 이더넷 스위치 구성. . . . . . . . . . . . . . . . . . . Dell Z9100 이더넷 스위치 구성 . . . . . . . . . . . . . . . . . . . . . . .
PAGE 9
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 8 iSER 구성 시작하기 전에 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . RHEL 용 iSER 구성. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . SLES 12 용 iSER 구성 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . RHEL 및 SLES 에서 iWARP 와 함께 iSER 사용 . . . . . . . . . . . . . . . . . . . . . Linux 성능 최적화 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 최대 성능 모드로 CPU 구성 . . . . . . . . . . . . . . . . . . . . . . .
PAGE 10
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 iSCSI Offload FAQ. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Windows Server 2012 R2 및 2016 iSCSI 부팅 설치 . . . . . . . . . . . iSCSI Crash Dump . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Linux 환경의 iSCSI Offload . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . bnx2i 와의 차이점 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . qedi.ko 구성 . . . . . . . . . . . . . . . . . . . .
PAGE 11
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 대상 서버의 전처리 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . NVMe-oF 장치 테스트 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 성능 최적화. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .IRQ 선호도 (multi_rss-affin.sh) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . CPU 주파수 (cpufreq.sh) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
PAGE 12
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 Hyper-Converged 시스템 배포. . . . . . . . . . . . . . . . . . . . . 운영 체제 배포 . . . . . . . . . . . . . . . . . . . . . . . . . . . 네트워크 구성 . . . . . . . . . . . . . . . . . . . . . . . . . . . Storage Spaces Direct 구성 . . . . . . . . . . . . . . . . . . . Nano 서버 배포 및 관리 . . . . . . . . . . . . . . . . . . . . . . . . . . . . 역할과 기능 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 실제 서버에 Nano 서버 배포 . . . . . . . . . . . . . . . . . . . . . . 가상 머신에 Nano 서버 배포 . .
PAGE 13
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 그림 목록 그림 3-1 3-2 3-3 3-4 3-5 3-6 3-7 3-8 3-9 3-10 4-1 4-2 4-3 4-4 4-5 5-1 5-2 5-3 5-4 5-5 5-6 5-7 5-8 5-9 5-10 5-11 5-12 5-13 5-14 5-15 5-16 5-17 5-18 5-19 5-20 6-1 6-2 6-3 6-4 6-5 6-6 6-7 6-8 페이지 Dell 업데이트 패키지 창 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . QLogic InstallShield 마법사 : 시작 창 . . . . . . . . . . . . . . . . . . . . . . . . . . . . QLogic InstallShield 마법사 : License Agreement( 사용권 계약 ) 창 . . . . . . . . .
PAGE 14
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 6-9 6-10 7-1 7-2 7-3 7-4 8-1 8-2 8-3 8-4 8-5 9-1 9-2 9-3 9-4 9-5 9-6 9-7 9-8 9-9 9-10 9-11 9-12 9-13 9-14 9-15 9-16 9-17 9-18 9-19 9-20 9-21 9-22 9-23 9-24 9-25 10-1 10-2 10-3 10-4 10-5 10-6 10-7 10-8 11-1 PVRDMA 에 vmknic 할당 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 방화벽 규칙 설정 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Windows PowerShell 명령 : Get-NetAdapterRdma . . . . . . . . . . . . . . . . . . . . . . . . .
PAGE 15
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 11-2 11-3 11-4 11-5 11-6 11-7 11-8 11-9 11-10 11-11 11-12 11-13 11-14 11-15 12-1 12-2 12-3 12-4 13-1 13-2 13-3 13-4 13-5 13-6 13-7 13-8 13-9 13-10 13-11 13-12 13-13 13-14 13-15 13-16 13-17 13-18 13-19 13-20 13-21 13-22 13-23 SR-IOV 를 위한 시스템 설정 : 장치 레벨 구성 . . . . . . . . . . . . . . . . . . . . . . 어댑터 속성 , 고급 : SR-IOV 활성화. . . . . . . . . . . . . . . . . . . . . . . . . . . . . 가상 스위치 관리자 : SR-IOV 활성화 . . . . . . . . . . . . . . . . . . . . . . . . . . . .
PAGE 16
사용 설명서 — 수렴형 네트워크 어댑터 41xxx 시리즈 표 목록 표 2-1 2-2 3-1 3-2 3-3 3-4 3-5 3-6 3-7 3-8 3-9 5-1 6-1 6-2 6-3 9-1 9-2 9-3 9-4 12-1 13-1 14-1 A-1 B-1 B-2 페이지 호스트 하드웨어 요구 사항 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 최소 호스트 운영 체제 요구 사항 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . QLogic 41xxx 시리즈 어댑터 Linux 드라이버 . . . . . . . . . . . . . . . . . . . . . . . qede 드라이버 옵션 매개변수 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . Linux 드라이버 작업 기본값 . . . . . . . . . . . .
PAGE 17
머리말 머리말에서는 지원되는 제품을 나열하고 , 대상 독자를 구체적으로 제시하고 , 이 설명서에 사용되는 인쇄 규칙 그리고 법적 고지를 설명합니다 . 지원되는 제품 본 사용 설명서에서는 다음 Cavium™ 제품을 설명합니다 .
PAGE 18
머리말 설명서 내용  장 2 하드웨어 설치에서는 시스템 요구 사항 및 설치 전 검사 목록을 포함해 어댑터의 설치 방법에 대해 설명합니다 .  장 3 드라이버 설치에서는 Windows, Linux 및 VMware에서 어댑터 드라이버 설치에 대해 설명합니다 .  장 4 펌웨어 업그레이드에서는 DUP(Dell 업데이트 패키지)를 사용한 어댑터 펌웨어 업그레이드 방법을 설명합니다 .  장 5 어댑터 사전 부팅 구성에서는 HII(Human Infrastructure Interface) 응용 프로그램을 사용하는 사전 부팅 구성 작업에 대해 설명합니다 .  장 6 RoCE 구성에서는 RoCE(RDMA over converged Ethernet) 를 사용하도 록 어댑터 , 이더넷 스위치 및 호스트를 구성하는 방법을 설명합니다 .  장 7 iWARP 구성에서는 Windows, Linux 및 VMware ESXi 6.
PAGE 19
머리말 문서 규약 문서 규약 이 설명서는 다음 문서 규약을 사용합니다 .  주  주의  기호가 있을 경우 추가 정보를 제공합니다 . 기호 ( 경고 기호 없음 ) 는 장비 손상 또는 데이터 손실을 초래 할 수 있는 위험이 존재함을 가리킵니다 . ! 주의 ! 경고 기호 ( 경고 기호 있음 ) 는 경미하거나 완화된 부상을 초래할 수 있는 위험이 존재함을 가리킵니다 .  기호는 심각한 부상이나 사망을 초래할 수 있는 위험이 존재 함을 가리킵니다 .  파란색 글꼴로 표시된 텍스트는 이 설명서의 그림 , 표 또는 섹션으로 이동하 는 하이퍼링크 ( 점프 ) 를 가리키며 웹 사이트로 연결되는 링크는 밑줄 표시 가 된 파란색으로 표시됩니다 . 예 :    표 9-2 는 사용자 인터페이스 및 원격 에이전트에 관련된 문제를 나열합 니다 .  6 페이지의 " 설치 검사 목록 " 을 참조하십시오 .  더 자세한 정보는 www.cavium.com 을 방문하십시오 .
PAGE 20
머리말 문서 규약  기울임꼴로 표시된 텍스트는 용어, 강조, 변수 또는 문서 제목을 가리킵니다. 예:  바로 가기 키는 무엇입니까 ?  날짜 유형을 입력하려면 mm/dd/yyyy(mm은 월, dd는 날짜, yyyy는 연도 를 가리킴 ) 로 입력하십시오 .  따옴표로 묶여 있는 주제 제목은 이 설명서나 온라인 도움말에 포함된 관련 주제를 가리키며 또한 이 문서에서 Help System 을 나타냅니다 .  CLI( 명령 행 인터페이스 ) 명령 구문 규약에는 다음 사항이 포함됩니다 .  일반 텍스트는 표시된 대로 입력해야 하는 항목을 나타냅니다 . 예 :   qaucli -pr nic -ei < > ( 꺾쇠 괄호 ) 는 값을 지정해야만 하는 변수를 나타냅니다 . 예 :  주 CLI 명령의 경우에만 변수 이름이 항상 기울임꼴이 아닌 꺾쇠 괄 호를 사용해 표시됩니다 .  [ ] ( 대괄호 ) 는 선택적 매개변수를 나타냅니다 .
PAGE 21
머리말 법적 고지  논리적 모호함을 방지하기 위해 ( ) (괄호) 및 { } (중괄호)가 사용됩니 다.예:  a|b c 는 모호합니다 . {(a|b) c} 는 a 또는 b 뒤에 c 를 의미합니다 . {a|(b c)} 는 a 또는 b c 를 의미합니다 . 법적 고지 이 섹션에 나오는 법적 고지에는 레이저 안전 (FDA 공지 사항 ), 기관 인증 및 제품 안전 규정 준수 사항이 포함됩니다 . 레이저 안전 —FDA 공지 사항 이 제품은 DHHS Rules 21CFR Chapter I, Subchapter J 에 부합합니다 . 이 제품은 레이저 제품의 안전 레이블에 대한 IEC60825-1 에 따라 설계되고 제조되었습니다 . 1 급 레이저 제품 1 등급 레이저 제품 주의 - 덮개를 개봉할 경우 1 등급 레이저 광에 노출될 수 있습니다 . 광학 장치를 사용하여 직접 보지 마십시오 .
PAGE 22
머리말 법적 고지 ICES-003 규정 준수 : A 급 본 A 급 디지털 장치는 Canadian ICES-003 을 준수합니다 . Cet appareil numériqué de la classe A est conformé à la norme NMB-003 du Canada.
PAGE 23
머리말 법적 고지 한국어 포맷 - A 급 VCCI: A 급 본 제품은 전자파 장애 자주 규제 협의회 (VCCI) 의 표준을 기본으로 한 A 급 제품 입니다 . 이 장치가 국내 환경에서 사용되는 경우 무선 전자파가 발생할 수 있으며 , 이 경우 사용자는 교정 조치를 시행해야 할 수 있습니다 . 제품 안전 준수 UL, cUL 제품 안전성 : UL 60950-1 ( 제 2 판 ) A1 + A2 2014-10-14 CSA C22.2 No.60950-1-07 ( 제 2 판 ) A1 +A2 2014-10 반드시 열거된 ITE 또는 동등한 장치와 함께 사용하십시오 . 21 CFR 1040.10 및 1040.11, 2014/30/EU, 2014/35/EU 준수 .
PAGE 24
1 제품 개요 이 장에서는 41xxx 시리즈 어댑터에 대해 다음 정보를 제공합니다 .  기능 설명  기능  3 페이지의 " 어댑터 사양 " 기능 설명 Cavium FastLinQ® 41000 시리즈 어댑터는 서버 시스템을 위한 가속 데이터 네트 워킹을 수행하도록 설계된 10Gb 및 25Gb 컨버지드 네트워크 어댑터와 지능형 이 더넷 어댑터를 포함합니다 . 41000 시리즈 어댑터에는 전이중 기능이 가능한 10/25Gb 이더넷 MAC 이 지정되어 있습니다 . 운영 체제의 티밍 기능을 사용하면 네트워크를 가상 LAN(VLAN) 으로 분할하고 여 러 네트워크 어댑터를 팀으로 그룹화하여 네트워크 로드 밸런싱 및 결함 허용 기능 을 제공할 수 있습니다 . 티밍에 대한 자세한 내용은 운영 체제 설명서를 참조하십 시오 . 기능 41xxx 시리즈 어댑터는 다음의 특징을 제공합니다 . 어댑터의 종류에 따라 일부 기 능을 사용할 수 없을 수도 있습니다 .
PAGE 25
1– 제품 개요 기능     1 성능 관련 기능 :  TCP, IP, UDP 체크섬 오프로드  TCP TSO( 세그먼트화 오프로드 )  대용량 세그먼트 오프로드 (LSO)  GSO( 일반 세그먼트 오프로드 )  대형 수신 오프로드 (LRO)  RSC( 수신 세그먼트 통합 )  Microsoft® Dynamic VMQ(Virtual Machine Queue) 및 Linux 다중 대기열 적응 인터럽트 :  TSS/RSS( 송신 / 수신 측 배율 조정 )  일반 라우팅 캡슐화(NVGRE) 및 가상 LAN(VXLAN) L2/L3 GRE 터널 트 래픽을 사용하는 네트워크 가상화를 위한 무상태 오프로드1 관리 :  SMB( 시스템 관리 버스 ) 컨트롤러  ACPI(Advanced Configuration and Power Interface) 1.
PAGE 26
1– 제품 개요 어댑터 사양  PCI 전원 관리 인터페이스 (v1.1)  64 비트 기준 주소 레지스터 (BAR) 지원  EM64T 프로세서 지원  iSCSI 및 FCoE 부팅 지원2 어댑터 사양 41xxx 시리즈 어댑터 사양에는 어댑터의 물리적 특성 및 표준 ( 규정 준수 참조 ) 이 포함되어 있습니다 . 실제 특성 41xxx 시리즈 어댑터 어댑터는 표준 PCIe 카드로서 표준 PCIe 슬롯에서 사용할 수 있도록 전체 높이 또는 로우 프로파일 브래킷이 함께 제공됩니다 . 표준 사양 지원되는 표준 사양에는 다음 사양이 포함됩니다 . 2  PCI Express 기본 사양 , rev. 3.1  PCI Express 카드 전자 기계 사양 , rev. 3.0  PCI 버스 전원 관리 인터페이스 사양 , rev. 1.2  IEEE 사양 :  이더넷용 802.3-2015 IEEE 표준 ( 흐름 제어 )  802.1q(VLAN)  802.
PAGE 27
2 하드웨어 설치 이 장에서는 다음과 같은 하드웨어 설치 정보를 제공합니다 .  시스템 요구 사항  5 페이지의 " 안전 주의사항 "  6 페이지의 " 설치 전 검사 목록 "  6 페이지의 " 어댑터 설치 " 시스템 요구 사항 Cavium 41xxx 시리즈 어댑터를 설치하기 전에 시스템이 표 2-1 및 표 2-2 에 표시 된 하드웨어 및 운영 체제 요구 사항을 만족하는지 확인하십시오 . 지원되는 운영 체제의 전체 목록은 Cavium 웹사이트에서 확인할 수 있습니다 . 표 2-1. 호스트 하드웨어 요구 사항 하드웨어 요건 아키텍처 운영 체제 요건을 충족하는 IA-32 또는 EMT64 PCIe PCIe Gen2 x8(2x10G NIC) PCIe Gen3 x8(2x25G NIC) 전체 듀얼 포트 25Gb 대역폭은 PCIe Gen3 x8 또는 속도가 더 빠 른 슬롯에서 지원 가능합니다 .
PAGE 28
2– 하드웨어 설치 안전 주의사항 표 2-2. 최소 호스트 운영 체제 요구 사항 운영 체제 요건 Windows Server 2012, 2012 R2, 2016(Nano 포함 ) Linux RHEL® 6.8, 6.9, 7.2, 7.3, 7.4 SLES® 11 SP4, SLES 12 SP2, SLES 12 SP3 VMware 25G 어댑터용 ESXi 6.0 u3 이상 주 표 2-2 는 최소 호스트 OS 요건을 나타냅니다 . 지원되는 운영 체제의 전체 목 록 Cavium 웹사이트에서 확인할 수 있습니다 . 안전 주의사항 ! 경고 어댑터가 전압이 흐르는 시스템에 설치되어 있으면 위험할 수 있습니다 . 시 스템의 케이스를 열기 전에 , 사용자를 보호하고 시스템 구성 요소의 손상을 방지하려면 아래의 주의사항을 준수하십시오 .  손과 손목에서 금속 물체나 귀금속을 제거합니다 .  절연 및 비전도성 도구만 사용하십시오 .
PAGE 29
2– 하드웨어 설치 설치 전 검사 목록 설치 전 검사 목록 어댑터를 설치하기 전에 다음 절차를 완료하십시오 . 1. 시스템이 4 페이지의 " 시스템 요구 사항 " 에 나열된 하드웨어 및 소프트웨어 요구사항을 충족하는지 확인하십시오 . 2. 시스템이 최신 BIOS 를 사용하고 있는지 확인합니다 . 주 Cavium 웹사이트에서 어댑터 소프트웨어를 구매한 경우 어댑터 드라 이버 파일의 경로를 확인하십시오 . 3. 시스템이 활성화되었으면 시스템을 종료합니다 . 4. 시스템 종료가 완료되면 전원을 끄고 전원 코드를 뽑습니다 . 5. 어댑터를 포장 상자에서 꺼내 정전기 방지 처리된 곳에 놓습니다 . 6. 특히 어댑터의 가장자리 커넥터에 손상된 흔적이 없는지 검사합니다. 손상된 어댑터를 설치하려고 시도하지 마십시오 . 어댑터 설치 다음은 대부분의 시스템에서 Cavium 41xxx 시리즈 어댑터를 설치할 때 적용되는 지침입니다 .
PAGE 30
2– 하드웨어 설치 어댑터 설치 5. 카드의 양 쪽 모퉁이에 힘을 주어 슬롯이 완전히 장착될 때까지 어댑터 카드를 밀어 넣습니다 . 어댑터가 올바르게 위치하면 , 어댑터 포트 커넥터가 슬롯 개 구부와 정렬되고 어댑터 덮개 높이가 시스템 섀시와 동일한 높이가 됩니다 . 주의 시스템이나 어댑터가 손상될 수 있으므로 카드를 장착할 때 너무 힘을 주지 마십시오 . 어댑터가 장착되지 않으면 어댑터를 빼내고 맞춘 후 다 시 해보십시오 . 6. 어댑터를 어댑터 클립이나 나사로 고정합니다 . 7. 시스템 케이스를 완전히 닫고 개인용 정전기 방지 장치를 모두 떼어냅니다 .
PAGE 31
3 드라이버 설치 이 장에서는 드라이버 설치에 대한 다음 정보를 제공합니다 .  Linux 드라이버 소프트웨어 설치  17 페이지의 "Windows 드라이버 소프트웨어 설치 "  26 페이지의 "VMware 드라이버 소프트웨어 설치 " Linux 드라이버 소프트웨어 설치 이 섹션에서는 RDMA(Remote Direct Memory Access) 가 있거나 없는 상태에서 Linux 를 설치하는 방법을 설명합니다 . 또한 Linux 드라이버 옵션 매개변수 , 기본 값 , 메시지 및 통계에 대해서도 설명합니다 .  RDMA 없이 Linux 드라이버 설치  RDMA 와 함께 Linux 설치  Linux 드라이버 옵션 매개변수  Linux 드라이버 작업 기본값  Linux 드라이버 메시지  통계 41xxx 시리즈 어댑터 Linux 드라이버와 지원 문서는 Dell 지원 페이지에서 구할 수 있습니다 . dell.support.
PAGE 32
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 표 3-1. QLogic 41xxx 시리즈 어댑터 Linux 드라이버 Linux 드라이버 설명 qed qed 코어 드라이버 모듈은 펌웨어를 직접 제어하고 , 인터럽트 신호를 처리하고 , 프로토콜 에 따른 드라이버 세트에 저레벨 API 를 제공합니다 . qed 는 qede, qedr, qedi 및 qedf 드라 이버와 인터페이스합니다 . Linux 코어 모듈은 PCI 장치 리소스 ( 레지스터 , 호스트 인터페 이스 대기열 등 ) 를 모두 관리합니다 . 이 모듈을 실행하기 위해서는 Linux 커널 버전 2.6.32 이상이 필요합니다 . 테스트는 x86_64 아키텍처를 중심으로 실행되었습니다 . qede 41xxx 시리즈 어댑터용 Linux 이더넷 드라이버 . 이 드라이버는 하드웨어를 직접 제어하고 , Linux 호스트 네트워킹 호스트를 위해 이더넷 패킷을 보내고 받는 작업을 담당합니다 .
PAGE 33
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 다음 소스 RPM 은 RHEL 및 SLES 호스트에 RDMA 라이브러리 코드를 설치합 니다 .  qlgc-libqedr-...src.rpm 다음 소스 코드 TAR BZip2(BZ2) 압축 파일은 RHEL 및 SLES 호스트에 Linux 드라 이버를 설치합니다 .  fastlinq-.tar.bz2 주 NFS, FTP 또는 HTTP( 네트워크 부팅 디스크 ) 를 통해 네트워크를 설치할 때 는 qede 드라이버가 저장된 드라이버 디스크가 필요할 수 있습니다 . Linux 부팅 드라이버는 makefile 및 make 환경을 수정하여 컴파일할 수 있습니다 . RDMA 없이 Linux 드라이버 설치 RDMA 없이 Linux 드라이버를 설치하려면 : 1. 아래 Dell 지원 사이트에서 41xxx 시리즈 어댑터 Linux 드라이버를 다운로드 합니다 . dell.support.com 2.
PAGE 34
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 rmmod qed depmod -a rpm -e qlgc-fastlinq-kmp-default-.  TAR 파일을 사용하여 Linux 드라이버를 설치한 경우 다음 명령을 발급합 니다 . rmmod qede rmmod qed depmod -a  RHEL 의 경우 : cd /lib/modules//extra/qlgc-fastlinq rm -rf qed.ko qede.ko qedr.ko  SLES 의 경우 : cd /lib/modules//updates/qlgc-fastlinq rm -rf qed.ko qede.ko qedr.ko RDMA 가 없는 환경에서 Linux 드라이버를 제거하려면 1. 현재 설치되어 있는 드라이버에 대한 경로를 확인하려면 다음 명령을 발급합 니다 . modinfo 2. Linux 드라이버를 언로드하고 제거합니다 .
PAGE 35
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 3. qed.ko, qede.ko 및 qedr.ko 파일이 있는 디렉터리에서 이들 파일을 삭제합 니다 . 예를 들어 , SLES 에서 다음 명령을 발급합니다 . cd /lib/modules//updates/qlgc-fastlinq rm -rf qed.ko rm -rf qede.ko rm -rf qedr.ko depmod -a RDMA 환경에서 Linux 드라이버를 제거하려면 1. 설치되어 있는 드라이버에 대한 경로를 확인하려면 다음 명령을 발급합니다 . modinfo 2. Linux 드라이버를 언로드하고 제거합니다 . modprobe -r qedr modprobe -r qede modprobe -r qed depmod -a 3. 드라이버 모듈 파일을 제거합니다 .  RPM 패키지를 사용하여 드라이버를 설치한 경우 다음 명령을 발급합 니다 .
PAGE 36
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 2. 디렉터리를 RPM 경로로 변경하고 커널용 이진 RPM 을 구축합니다 . RHEL 의 경우 : cd /root/rpmbuild rpmbuild -bb SPECS/fastlinq-.spec SLES 의 경우 : cd /usr/src/packages rpmbuild -bb SPECS/fastlinq-.spec 3. 다음의 새로 컴파일된 RPM 을 설치합니다 . rpm -ivh RPMS//qlgc-fastlinq-..rpm 주 충돌이 보고된 경우 일부 Linux 배포판에 --force 옵션을 설치해야 합 니다 . 드라이버가 다음 경로에 설치됩니다 . SLES 의 경우 : /lib/modules//updates/qlgc-fastlinq RHEL 의 경우 : /lib/modules//extra/qlgc-fastlinq 4.
PAGE 37
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 TAR 파일을 사용하여 Linux 드라이버 설치 TAR 파일을 사용해 Linux 드라이버를 설치하려면 1. 디렉터리를 생성하고 해당 디렉터리에 TAR 파일 압축을 풉니다 . tar xjvf fastlinq-.tar.bz2 2. 최근 만든 디렉터리로 변경한 후 드라이버를 설치합니다 . cd fastlinq- make clean; make install qed 및 qede 드라이버가 다음 경로에 설치됩니다 . SLES 의 경우 : /lib/modules//updates/qlgc-fastlinq RHEL 의 경우 : /lib/modules//extra/qlgc-fastlinq 3. 드라이버를 로드해 테스트합니다 ( 필요한 경우 먼저 기존 드라이버를 언로 드함 ).
PAGE 38
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 4. 5. 다음 방법 중 하나를 사용하여 새 Linux 드라이버를 설치합니다 .  kmp/kmod RPM 패키지를 사용하여 Linux 드라이버 설치  TAR 파일을 사용하여 Linux 드라이버 설치 RDMA 사용자 공간 응용프로그램과 작동하는 libqedr 라이브러리를 설치합 니다 . libqedr RPM 은 인박스 OFED 에서만 사용할 수 있습니다 . 펌웨어에서 RoCE+iWARP 기능을 동시에 지원할 때까지 UEFI 에 사용할 RDMA(RoCE, RoCEv2 또는 iWARP) 를 선택해야 합니다 . 세 가지 중 기본적으로 활성화되 는 RDMA 는 없습니다 . 다음 명령을 실행합니다 . rpm –ivh qlgc-libqedr-..rpm 6. libqedr 사용자 공간 라이브러리를 빌드하여 설치하려면 다음 명령을 실행합 니다 . 'make libqedr_install' 7.
PAGE 39
3– 드라이버 설치 Linux 드라이버 소프트웨어 설치 표 3-2. qede 드라이버 옵션 매개변수 ( 계속 ) 매개변수 err_flags_override 설명 하드웨어 오류 시 수행할 작업을 비활성화하거나 강제 적용하는 비트맵입 니다 .  비트 #31 - 이 비트마스크를 활성화하는 비트입니다 .  비트 #0 - 하드웨어로 다시 돌아가지 않도록 방지합니다 .  비트 #1 - 디버그 데이터를 수집합니다 .  비트 #2 - 복구 프로세스를 트리거합니다 .  비트 #3 - 오류를 야기하는 흐름에 대한 호출 추적을 얻기 위해 WARN을 호출합니다 . Linux 드라이버 작업 기본값 표 3-3 에는 qed 및 qede Linux 드라이버 작업 기본값이 나와 있습니다 . 표 3-3.
PAGE 40
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 Linux 드라이버 메시지 Linux 드라이버 메시지를 세부 레벨까지 설정하려면 다음 중 한 가지 명령을 실행 하십시오 .  ethtool -s msglvl  modprobe qede debug= 여기에서 , 는 비트 0–15( 표준 Linux 네트워킹 값 ) 를 의미하며 , 비 트 16 이상은 드라이버에 따라 다릅니다 . 통계 자세한 통계 및 구성 정보를 보려면 ethtool 유틸리티를 사용하십시오 . 자세한 내 용은 ethtool man 페이지를 참조하십시오 . Windows 드라이버 소프트웨어 설치 iWARP 에 대한 자세한 내용은 장 7 iWARP 구성을 참조하십시오 .
PAGE 41
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 2. Dell 업데이트 패키지 창 ( 그림 3-1) 에서 Install( 설치 ) 을 클릭합니다 . 그림 3-1. Dell 업데이트 패키지 창 3. QLogic Super Installer—InstallShield® 마법사의 Welcome( 시작 ) 창 ( 그림 3-2) 에서 Next( 다음 ) 를 클릭합니다 . 그림 3-2.
PAGE 42
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 4. 마법사의 라이선스 계약 창 ( 그림 3-3) 에서 다음을 수행합니다 . a. QLogic 최종 사용자 소프트웨어 라이선스 계약을 읽습니다 . b. 계속하려면 I accept the terms in the license agreement( 동의함 ) 를 선택합니다 . c. Next( 다음 ) 를 클릭합니다 . 그림 3-3. QLogic InstallShield 마법사 : License Agreement( 사용권 계약 ) 창 5. 다음과 같이 마법사의 설정 유형 창 ( 그림 3-4) 을 완료합니다 . a. b. 다음 설정 유형 중 하나를 선택합니다 .  모든 프로그램 기능을 설치하려면 Complete( 전체 ) 를 클릭합 니다 .  설치할 기능을 직접 선택하려면 Custom( 사용자 지정 ) 을 클릭합 니다 . 계속하려면 Next( 다음 ) 를 클릭합니다 .
PAGE 43
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 그림 3-4. InstallShield 마법사 : Setup Type( 설정 유형 ) 창 6. 단계 5 에서 Custom( 사용자 지정 ) 을 선택한 경우 다음과 같이 사용자 지정 설정 창 ( 그림 3-5) 을 완료합니다 . a. b. 설치할 기능을 선택하십시오 . 기본적으로 , 모든 기능이 선택되어 있습 니다. 특정 기능의 설치 설정을 변경하려면 그 옆의 아이콘을 클릭한 후 다음 옵션 중 하나를 선택합니다 .  This feature will be installed on the local hard drive(이 기능은 로컬 하드 드라이브에 설치됩니다 .) — 해당 기능의 하위 기능에 아무런 영향도 미치지 않고 그 기능을 설치하고자 할 때 선택합 니다 .
PAGE 44
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 그림 3-5. InstallShield 마법사 : Custom Setup( 사용자 지정 설정 ) 창 7. InstallShield 마법사의 설치 준비 창 ( 그림 3-6) 에서 Install( 설치 ) 을 클릭합 니다 . InstallShield 마법사가 QLogic 어댑터 드라이버 및 관리 소프트웨어 설 치 프로그램을 설치합니다 . 그림 3-6.
PAGE 45
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 8. 설치가 완료되면 InstallShield 마법사 완료 대화 상자가 나타납니다 ( 그림 3-7). Finish( 완료 ) 를 클릭하여 설치 프로그램을 닫습니다 . 그림 3-7. InstallShield 마법사 : Completed( 완료 ) 창 9. Dell Update Package(Dell 업데이트 패키지 ) 창 ( 그림 3-8) 에서 "Update installer operation was successful"( 설치 프로그램 업데이트 작업 성공 ) 은 완료되었음을 표시합니다 .  ( 선택 사항 ) 로그 파일을 열려면 View Installation Log( 설치 로그 보기 ) 를 클릭합니다 . 로그 파일에는 DUP 설치의 진행률 , 설치된 이전 버전 , 오류 메시지 및 설치에 대한 기타 정보가 표시됩니다 .  업데이트 패키지 창을 닫으려면 CLOSE( 닫기 ) 를 클릭합니다 .
PAGE 46
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 그림 3-8. Dell 업데이트 패키지 창 DUP 설치 옵션 DUP 설치 동작을 사용자 지정하려면 다음 명령 행 옵션을 사용하십시오 .  드라이버 구성요소만 디렉터리로 추출하려는 경우 : /drivers= 주 이 명령을 사용하려면 /s 옵션이 필요합니다 .  드라이버 구성요소만 설치 또는 업데이트하려는 경우 : /driveronly 주 이 명령을 사용하려면 /s 옵션이 필요합니다 .  (고급) /passthrough 옵션을 사용해 DUP의 QLogic 설치 소프트웨어에 직접 /passthrough 뒤의 모든 텍스트를 보냅니다 . 이 모드에는 제공된 GUI 가 표 시되지 않지만 QLogic 소프트웨어의 GUI 일 필요는 없습니다 .
PAGE 47
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 주 이 명령을 사용하려면 /s 옵션이 필요합니다 . DUP 설치 예제 다음 예제에서는 설치 옵션 사용 방법을 보여줍니다 . 시스템을 자동으로 업데이트하려는 경우 : .exe /s 업데이트 내용을 C:\mydir\ 디렉터리로 추출하려는 경우 : .exe /s /e=C:\mydir 드라이버 구성요소를 C:\mydir\ 디렉터리로 추출하려는 경우 : .exe /s /drivers=C:\mydir 드라이버 구성요소만 설치하려는 경우 : .exe /s /driveronly 기본 로그 위치에서 C:\my path with spaces\log.txt 로 변경하려는 경우 : .exe /l="C:\my path with spaces\log.txt" Windows 드라이버 제거 Windows 드라이버를 제거하려면 1.
PAGE 48
3– 드라이버 설치 Windows 드라이버 소프트웨어 설치 그림 3-9.
PAGE 49
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 전원 관리 옵션 설정 전원 관리 옵션을 설정하여 운영 체제가 컨트롤러를 꺼서 절전하도록 하거나 컨트 롤러가 컴퓨터의 절전 모드를 해제하도록 할 수 있습니다 . 장치가 다른 작업 ( 예 : 호출 서비스 ) 을 수행하고 있다면 운영 체제는 해당 장치를 종료하지 않습니다 . 운 영 체제는 시스템이 최대 절전 모드를 시도할 경우에만 가능한 모든 장치를 종료하 려 합니다 . 어댑터가 항상 전원이 켜져 있게 하려면 Allow the computer to turn off the device to save power( 전원을 절약하기 위해 컴퓨터가 이 장치를 끌 수 있 음 ) 확인란을 선택하지 마십시오 ( 그림 3-10). 그림 3-10. 전원 관리 옵션 주  전원 관리 페이지는 전원 관리를 지원하는 서버에만 사용할 수 있습니다 .
PAGE 50
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치   FCoE 지원 iSCSI 지원 VMware 드라이버 및 드라이버 패키지 표 3-4 에는 프로토콜에 대한 VMware ESXi 드라이버가 나열되어 있습니다 . 표 3-4. VMware 드라이버 VMware 드라이버 a 설명 qedentv 네이티브 네트워킹 드라이버 qedrntv Native RDMA-Offload(RoCE 및 RoCEv2) 드라이버 a qedf 네이티브 FCoE-Offload 드라이버 qedil 레거시 iSCSI-Offload 드라이버 이번 릴리스에는 인증 RoCE 드라이버가 포함되어 있지 않습니다 . 인증되지 않은 드라이 버를 미리보기로 먼저 사용할 수도 있습니다 . ESXi 드라이버는 별도로 언급된 경우를 제외하고 개별 드라이버 패키지로 포함되 고 함께 번들되지 않습니다 . 표 3-5 에는 ESXi 버전과 해당 드라이버 버전이 나열 되어 있습니다 . 표 3-5.
PAGE 51
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 다음 중 하나를 사용하여 개별 드라이버를 설치합니다 .  표준 ESXi 패키지 설치 명령 (VMware 드라이버 설치 참조 )  개별 드라이버 추가 정보 파일에 나와 있는 절차  다음 VMware KB 문서에 나와 있는 절차 : https://kb.vmware.com/selfservice/microsites/search.do?language=en_US& cmd=displayKC&externalId=2137853 NIC 드라이버를 먼저 설치한 후 스토리지 드라이버를 설치해야 합니다 . VMware 드라이버 설치 드라이버 압축 파일을 사용하여 새 드라이버를 설치하거나 기존 드라이버를 업데 이트할 수 있습니다 . 같은 드라이버 압축 파일에서 전체 드라이버 세트를 설치해 야 합니다 . 여러 압축 파일의 드라이버를 혼합하면 문제가 발생합니다 . VMware 드라이버를 설치하려면 1.
PAGE 52
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 6. 다음 설치 옵션 중 하나를 선택합니다 .  옵션 1: CLI 또는 VMware Update Manager(VUM) 를 사용하여 .vib 를 ESX 서버에 직접 설치합니다 .  CLI 를 사용하여 .vib 파일을 설치하려면 다음 명령을 실행합니 다 . 전체 .vib 파일 경로를 지정해야 합니다 . # esxcli software vib install -v /tmp/qedentv-1.0.3.11-1OEM.550.0.0.1331820.x86_64.vib  VUM 을 사용하여 .vib 파일을 설치하려면 다음 기술 자료를 참 조하십시오 . VMware vCenter Update Manager 4.x 및 5.x 를 사용한 ESXi/ESX 호스트 업데이트 (1019545)  옵션 2: 다음 명령을 실행하여 개별 .vib 파일을 모두 한 번에 설치합 니다 .
PAGE 53
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 표 3-6. VMware 드라이버 옵션 매개변수 ( 계속 ) 매개변수 num_queues 설명 TX/RX 대기열 페어의 수를 지정합니다 . num_queues 는 1~11 또는 다음 중 하나일 수 있습니다 .  –1 은 드라이버에서 최적의 대기열 페어 수를 결정할 수 있도록 허용합니 다 ( 기본값 ).  0 은 기본 대기열을 사용합니다 . 다중 포트 또는 다중 기능 구성에 대해 콤마로 구분되는 다중 값을 지정할 수 있습니다 . multi_rx_filters 기본 대기열을 제외하고 RX 대기열당 RX 필터의 수를 지정합니다 . multi_rx_filters 는 1~4 또는 다음 값 중 하나일 수 있습니다 .  –1 은 대기열당 기본 개수의 RX 필터를 사용합니다 .  0 은 RX 필터를 비활성화합니다 . disable_tpa TPA(LRO) 기능을 활성화 (0) 하거나 비활성화 (1) 합니다 .
PAGE 54
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 표 3-6. VMware 드라이버 옵션 매개변수 ( 계속 ) 매개변수 설명 vxlan_filter_en 외부 MAC, 내부 MAC 및 VNI(VXLAN 네트워크 ) 를 기반으로 특정 대기열에 대한 트래픽과 직접 일치하도록 VXLAN 필터링을 활성화 (1) 하거나 비활성 화 (0) 합니다 . 기본값은 vxlan_filter_en=1 입니다 . 다중 포트 또는 다 중 기능 구성에 대해 콤마로 구분되는 다중 값을 지정할 수 있습니다 . enable_vxlan_offld VXLAN 터널 트래픽 체크섬 오프로드와 TSO(TCP 세그먼트화 오프로드 ) 기 능을 활성화 (1) 하거나 비활성화 (0) 합니다 . 기본값은 enable_vxlan_offld=1 입니다 . 다중 포트 또는 다중 기능 구성에 대해 콤 마로 구분되는 다중 값을 지정할 수 있습니다 .
PAGE 55
3– 드라이버 설치 VMware 드라이버 소프트웨어 설치 VMware 드라이버 제거 .vib 파일 (qedentv) 을 제거하려면 다음 명령을 발급합니다 . # esxcli software vib remove --vibname qedentv 드라이버를 제거하려면 다음 명령을 발급합니다 . # vmkload_mod -u qedentv FCoE 지원 표 3-8 에는 QLogic FCoE C-NIC(converged network interface controller) 를 지원 하기 위해 VMware 소프트웨어 패키지에 포함되어 있는 드라이버가 설명되어 있습 니다 . FCoE 및 DCB 기능 세트는 VMware ESXi 5.0 이상에서 지원됩니다 . 표 3-8.
PAGE 56
4 펌웨어 업그레이드 이 장에서는 DUP(Dell 업데이트 패키지 ) 를 사용한 펌웨어 업그레이드에 대한 정 보를 제공합니다 . 펌웨어 DUP 는 플래시 업데이트 유틸리티일 뿐 어댑터 구성 용도로는 사용할 수 없습니다 . 실행 파일을 두 번 클릭하여 펌웨어 DUP 를 실행할 수 있습니다 . 또는 지원되는 여러 가지 명령 행 옵션으로 명령 행에서 펌웨어 DUP 를 실행할 수도 있 습니다 .  두 번 클릭으로 DUP 실행  35 페이지의 " 명령 행에서 DUP 실행 "  36 페이지의 ".bin 파일을 사용하여 DUP 실행 "(Linux 만 해당 ) 두 번 클릭으로 DUP 실행 실행 파일을 두 번 클릭하여 펌웨어 DUP 를 실행하려면 1. 펌웨어 Dell 업데이트 패키지 파일을 나타내는 아이콘을 두 번 클릭합니다 . 그림 4-1 에서와 같이 Dell 업데이트 패키지 시작 화면이 나타납니다 . 계속하 려면 Install( 설치 ) 을 클릭합니다 . 그림 4-1.
PAGE 57
4– 펌웨어 업그레이드 두 번 클릭으로 DUP 실행 2. 화면에 나타나는 지시를 따릅니다 . Warning( 경고 ) 대화 상자에서 Yes( 예 ) 를 클릭해 설치를 계속합니다 . 그림 4-2 에 표시된 대로 설치 프로그램이 새 펌웨어를 로드 중임을 나타냅 니다 . 그림 4-2. Dell 업데이트 패키지 : 새 펌웨어 로드 완료되면 그림 4-3 에 표시된 대로 설치 프로그램이 설치 결과를 나타냅니다 . 그림 4-3.
PAGE 58
4– 펌웨어 업그레이드 명령 행에서 DUP 실행 3. Yes( 예 ) 를 클릭하여 시스템을 재부팅합니다 . 4. 그림 4-4 에 표시된 대로 Finish( 완료 ) 를 클릭하여 설치를 완료합니다 . 그림 4-4. Dell 업데이트 패키지 : 설치 완료 명령 행에서 DUP 실행 옵션이 지정되어 있지 않은 상태로 명령 행에서 펌웨어 DUP 를 실행하면 DUP 아 이콘을 두 번 클릭하는 경우와 동일한 동작이 수행됩니다 . DUP 의 실제 파일 이름 은 다릅니다 . 명령 행에서 펌웨어 DUP 를 실행하려면  다음 명령을 실행합니다 . C:\> Network_Firmware_2T12N_WN32__X16.
PAGE 59
4– 펌웨어 업그레이드 .bin 파일을 사용하여 DUP 실행 그림 4-5 에서는 Dell 업데이트 패키지 설치를 사용자 지정하는 데 사용할 수 있는 옵션을 표시합니다 . 그림 4-5. DUP 명령 행 옵션 .bin 파일을 사용하여 DUP 실행 다음 절차는 Linux OS 에서만 수행할 수 있습니다 . .bin 파일을 사용하여 DUP 를 업데이트하려면 1. Network_Firmware_NJCX1_LN_X.Y.Z.BIN 파일을 테스트 중인 시스템 (SUT) 으로 복사합니다 . 2. 다음과 같이 파일 유형을 실행 파일로 변경합니다 . chmod 777 Network_Firmware_NJCX1_LN_X.Y.Z.BIN 3. 업데이트 프로세스를 시작하려면 다음 명령을 실행합니다 . ./Network_Firmware_NJCX1_LN_X.Y.Z.BIN 4. 펌웨어가 업데이트되면 시스템을 재부팅합니다 .
PAGE 60
4– 펌웨어 업그레이드 .bin 파일을 사용하여 DUP 실행 DUP 업데이트 도중 SUT 로부터 출력한 예 : ./Network_Firmware_NJCX1_LN_08.07.26.BIN Collecting inventory... Running validation... BCM57810 10 Gigabit Ethernet rev 10 (p2p1) The version of this Update Package is the same as the currently installed version. Software application name: BCM57810 10 Gigabit Ethernet rev 10 (p2p1) Package version: 08.07.26 Installed version: 08.07.
PAGE 61
5 어댑터 사전 부팅 구성 호스트 부팅 프로세스 중에 HII(Human Infrastructure Interface) 응용프로그램을 사 용해 어댑터 관리 작업을 수행하고 일시 정지할 수 있습니다 . 이러한 작업에는 다 음이 포함됩니다 .  39 페이지의 " 시작하기 "  42 페이지의 " 펌웨어 이미지 속성 표시 "  43 페이지의 " 장치 레벨 매개변수 구성 "  45 페이지의 "NIC 매개변수 구성 "  49 페이지의 "Data Center Bridging 구성 "  50 페이지의 "FCoE 부팅 구성 "  52 페이지의 "iSCSI 부팅 구성 "  56 페이지의 " 파티션 구성 " 주 이 장에 나오는 HII 스크린샷은 대표적인 사례로 , 사용자의 시스템에 나타나 는 화면과 일치하지 않을 수 있습니다 .
PAGE 62
5– 어댑터 사전 부팅 구성 시작하기 시작하기 HII 응용프로그램을 시작하려면 1. 플랫폼의 System Setup( 시스템 설정 ) 창을 엽니다 . 시스템 설정을 시작하 는 방법에 대한 자세한 내용은 시스템 사용 설명서를 참조하십시오 . 2. System Setup( 시스템 설정 ) 창 ( 그림 5-1) 에서 Device Settings( 장치 설정 ) 를 선택한 후 ENTER 키를 누릅니다 . 그림 5-1. 시스템 설정 3. Device Settings( 장치 설정 ) 창 ( 그림 5-2) 에서 구성하려는 41xxx 시리즈 어 댑터 포트를 선택한 후 ENTER 키를 누릅니다 . 그림 5-2.
PAGE 63
5– 어댑터 사전 부팅 구성 시작하기 기본 구성 페이지 ( 그림 5-3) 에는 분할 모드를 설정할 수 있는 어댑터 관리 옵션이 있습니다 . 그림 5-3. 기본 구성 페이지 4. Device Level Configuration( 장치 레벨 구성 ) 에서 그림 5-4 와 같이 Partitioning Mode( 분할 모드 ) 를 NPAR 로 설정하여 NIC Partitioning Configuration(NIC 분할 구성 ) 옵션을 기본 구성 페이지 (Main Configuration Page) 에 추가합니다 . 주 NPAR 은 최대 속도가 1G 인 포트에서 이용할 수 없습니다 . 그림 5-4.
PAGE 64
5– 어댑터 사전 부팅 구성 시작하기 그림 5-3 및 그림 5-4 에서 Main Configuration Page( 기본 구성 페이지 ) 의 각 옵션 은 다음과 같이 표시됩니다 .
PAGE 65
5– 어댑터 사전 부팅 구성 펌웨어 이미지 속성 표시 표 5-1.
PAGE 66
5– 어댑터 사전 부팅 구성 장치 레벨 매개변수 구성  Controller BIOS Version( 컨트롤러 BIOS 버전 ) 은 관리 펌웨어 버전입니다 .  EFI Driver Version(EFI 드라이버 버전)은 확장 펌웨어 인터페이스(EFI) 드라 이버 버전입니다 .  L2B Firmware Version(L2B 펌웨어 버전 ) 은 부팅을 위한 NIC Offload 펌웨 어 버전입니다 . 그림 5-5. 펌웨어 이미지 속성 장치 레벨 매개변수 구성 주 iSCSI 물리 기능 (PF) 은 iSCSI Offload 기능이 NPAR 모드에서만 활성화되어 있을 때 나열됩니다 . FCoE PF 는 FCoE Offload 기능이 NPAR 모드에서만 활성화되어 있을 때 나열됩니다 . 일부 어댑터 모델에서는 iSCSI Offload 와 FCoE Offload 가 지원되지 않습니다 . NPAR 모드에 한해 포트 1 개당 활성화 할 수 있는 Offload 는 1 개로 제한됩니다 .
PAGE 67
5– 어댑터 사전 부팅 구성 장치 레벨 매개변수 구성 장치 레벨 매개변수를 구성하려면 1. Main Configuration Page( 기본 구성 페이지 ) 에서 Device Level Configuration( 장치 레벨 구성 )(40 페이지의 그림 5-3 참조 ) 을 선택한 다음 ENTER 키를 누릅니다 . 2. Device Level Configuration( 장치 레벨 구성 ) 페이지에서 그림 5-6 와 같이 장치 레벨 매개변수의 값을 선택합니다 . 그림 5-6. 장치 레벨 구성 주 이 기능이 1Gbps 포트 3 및 4 에서 지원되지는 않지만 QL41264HMCU-DE( 부품 번호 5V6Y4) 및 QL41264HMRJ-DE( 부품 번호 0D1WT) 어댑터의 경우에는 Device Level Configuration( 장치 레 벨 구성 ) 에 NPAR, SR-IOV 및 NPAR-EP 에 대한 지원이 표시됩니다 . 3. 4. 5.
PAGE 68
5– 어댑터 사전 부팅 구성 NIC 매개변수 구성 6. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 . NIC 매개변수 구성 NIC 구성에는 다음과 같은 매개변수 설정이 포함됩니다 .         Link Speed( 링크 속도 ) NIC + RDMA Mode(NIC + RDMA 모드 ) RDMA Protocol Support(RDMA 프로토콜 지원 ) Boot Mode( 부팅 모드 ) FEC Mode(FEC 모드 ) Energy Efficient Ethernet( 에너지 효율 이더넷 ) Virtual LAN Mode( 가상 LAN 모드 ) Virtual LAN ID( 가상 LAN ID) NIC 매개변수를 구성하려면 1.
PAGE 69
5– 어댑터 사전 부팅 구성 NIC 매개변수 구성  10 Gbps 포트에서 10GbE 고정 속도 모드를 활성화합니다 . 이 모드는 모든 어댑터에서 사용할 수 없습니다 .  25 Gbps 포트에서 25GbE 고정 속도 모드를 활성화합니다 . 이 모드는 모든 어댑터에서 사용할 수 없습니다 .  SmartAN( 기본값 ) 포트에서 FastLinQ SmartAN™ 링크 속도 모드를 활 성화합니다 . 이 속도 모드에서는 FEC 모드를 선택할 수 없습니다 . SmartAN 설정은 링크가 구성될 때까지 가능한 모든 링크 속도와 FEC 모드를 순환합니다 . 이 모드는 25G 인터페이스 전용입니다 . 10Gb 인 터페이스에 SmartAN 을 구성하면 시스템이 10G 인터페이스에 대한 설 정을 적용합니다 . 이 모드는 일부 어댑터에서 사용할 수 없습니다 . 3.
PAGE 70
5– 어댑터 사전 부팅 구성 NIC 매개변수 구성 6. 7. 8. Boot Mode( 부팅 모드 ) 일 때는 다음 값 중 하나를 선택합니다 .  PXE 는 PXE 부팅을 활성화합니다 .  FCoE 는 하드웨어 오프로드 경로를 통해 SAN 에서 FCoE 부팅을 활성 화합니다 . FCoE 모드는 NPAR 모드일 때 두 번째 파티션에서 FCoE Offload 가 활성화되어 있는 경우에만 선택할 수 있습니다 (56 페이지 의 " 파티션 구성 " 참조 ).  iSCSI 는 하드웨어 오프로드 경로를 통해 iSCSI 원격 부팅을 활성화합 니다 . iSCSI 모드는 NPAR 모드일 때 세 번째 파티션에서 iSCSI Offload 가 활성화되어 있는 경우에만 선택할 수 있습니다 (56 페이지 의 " 파티션 구성 " 참조 ).  Disabled(비활성화) 는 현재 포트가 원격 부팅 소스로 사용되는 것을 방 지합니다 .
PAGE 71
5– 어댑터 사전 부팅 구성 NIC 매개변수 구성 RDMA 를 사용하도록 포트를 구성하려면 주 RDMA 는 다음 단계에 따라 NPAR 모드 포트의 모든 파티션에서 활성화할 수 있습니다 . 1. NIC + RDMA Mode(NIC + RDMA 모드 ) 를 Enabled( 활성화 ) 로 설정합 니다 . 2. Back( 뒤로 ) 을 클릭합니다 . 3. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 . 포트의 부팅 모드를 구성하려면 1. UEFI PXE 원격 설치 시 PXE 를 Boot Mode( 부팅 모드 ) 로 선택합니다 . 2. Back( 뒤로 ) 을 클릭합니다 . 3. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 .
PAGE 72
5– 어댑터 사전 부팅 구성 Data Center Bridging 구성 Data Center Bridging 구성 DCB(Data Center Bridging) 설정은 DCBX 프로토콜 및 RoCE 우선 순위로 구성됩 니다 . DCB 설정을 구성하려면 1. Main Configuration Page( 기본 구성 페이지 , 40 페이지의 그림 5-3) 에서 Data Center Bridging(DCB) Settings(DCB(Data Center Bridging) 설정 ) 를 선택한 후 Finish( 완료 ) 를 클릭합니다 . 2. Data Center Bridging(DCB) Settings(DCB 설정 ) 페이지 ( 그림 5-8) 에서 다 음 중 적합한 DCBX Protocol(DCBX 프로토콜 ) 옵션을 선택합니다 . 3.  Disabled( 비활성화 ) 는 현재 포트에서 DCBX 를 비활성화합니다 .
PAGE 73
5– 어댑터 사전 부팅 구성 FCoE 부팅 구성 그림 5-8. 시스템 설정 : Data Center Bridging(DCB) 설정 4. Back( 뒤로 ) 을 클릭합니다 . 5. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 . 주 DCBX 가 활성화될 때 어댑터는 소스 MAC 어드레스 역할을 하는 전용 유니 캐스트 주소를 포함한 LLDP(Link Layer Discovery Protocol) 패킷을 주기적으 로 전송합니다 . LLDP MAC 어드레스는 공장 할당 어댑터 이더넷 MAC 어드 레스와는 다릅니다 . 어댑터에 연결된 스위치 포트에 대한 MAC 어드레스를 검사하는 경우 2 개의 MAC 어드레스가 표시됩니다 . 하나는 LLDP 패킷에 대 한 것이고 , 다른 하나는 어댑터 이더넷 인터페이스에 대한 것입니다 .
PAGE 74
5– 어댑터 사전 부팅 구성 FCoE 부팅 구성 3. FCoE General(FCoE 일반 ) 또는 FCoE Target Configuration(FCoE 대상 구성 ) 매개변수의 값을 선택합니다 . 그림 5-9. FCoE 일반 매개변수 그림 5-10. FCoE 대상 구성 4. Back( 뒤로 ) 을 클릭합니다 . 5. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 .
PAGE 75
5– 어댑터 사전 부팅 구성 iSCSI 부팅 구성 iSCSI 부팅 구성 주 iSCSI Boot Configuration Menu(iSCSI 부팅 구성 메뉴 ) 는 NPAR 모드일 때 세 번째 파티션에서 iSCSI Offload Mode(iSCSI Offload 모드 ) 가 활성화되 어 있는 경우에만 표시됩니다 (60 페이지의 그림 5-19 참조 ). NPAR 을 제외 한 모드에서는 표시되지 않습니다 . iSCSI 부팅 구성 매개변수를 구성하려면 1. Main Configuration( 기본 구성 ) 페이지에서 iSCSI Boot Configuration Menu (iSCSI 부팅 구성 메뉴 ) 를 선택한 후 다음 옵션 중 하나를 선택합니다 .
PAGE 76
5– 어댑터 사전 부팅 구성 iSCSI 부팅 구성  iSCSI 일차 대상 매개변수 (54 페이지의 그림 5-13)         Connect( 연결 ) IPv4 Address(IPv4 주소 ) TCP Port(TCP 포트 ) Boot LUN( 부팅 LUN) iSCSI Name(iSCSI 이름 ) CHAP ID CHAP Secret(CHAP 암호 ) iSCSI 이차 대상 매개변수 (55 페이지의 그림 5-14)        Connect( 연결 ) IPv4 Address(IPv4 주소 ) TCP Port(TCP 포트 ) Boot LUN( 부팅 LUN) iSCSI Name(iSCSI 이름 ) CHAP ID CHAP Secret(CHAP 암호 ) 4. Back( 뒤로 ) 을 클릭합니다 . 5. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 . 그림 5-11.
PAGE 77
5– 어댑터 사전 부팅 구성 iSCSI 부팅 구성 그림 5-12. iSCSI 초기자 구성 매개변수 그림 5-13.
PAGE 78
5– 어댑터 사전 부팅 구성 iSCSI 부팅 구성 그림 5-14.
PAGE 79
5– 어댑터 사전 부팅 구성 파티션 구성 파티션 구성 어댑터에서 각 파티션에 대한 대역폭 범위를 구성할 수 있습니다 . VMware ESXi 6.0/6.5 의 파티션 구성에 대한 자세한 내용은 VMware ESXi 6.0 및 ESXi 6.5 의 파 티션 분할을 참조하십시오 . 최대 및 최소 대역폭 할당을 구성하려면 1. Main Configuration Page( 기본 구성 페이지 ) 에서 NIC Partitioning Configuration(NIC 분할 구성 ) 을 선택한 다음 ENTER 키를 누릅니다 . 2. Partitions Configuration( 파티션 구성 ) 페이지 ( 그림 5-15) 에서 Global Bandwidth Allocation( 전역 대역폭 할당 ) 을 선택합니다 . 그림 5-15.
PAGE 80
5– 어댑터 사전 부팅 구성 파티션 구성 3. Global Bandwidth Allocation( 전역 대역폭 할당 ) 페이지 ( 그림 5-16) 에서 대 역폭을 할당할 각 파티션 최소 및 최대 TX 대역폭 필드를 클릭합니다 . 듀얼 포트 모드에서는 포트 1 개당 파티션이 8 개입니다 . 그림 5-16. 전역 대역폭 할당 페이지  Partition n Minimum TX Bandwidth( 파티션 n 최소 TX 대역폭 ) 는 최 대 실제 포트 링크 속도의 백분율로 표시한, 선택한 파티션의 최소 전송 대역폭입니다 . 값은 0~100 사이로 입력할 수 있습니다 . DCBX ETS 모 드가 활성화되어 있는 경우 트래픽당 클래스 DCBX ETS 최소 대역폭 값이 파티션당 최소 TX 대역폭 값과 동시에 사용됩니다 . 단일 포트에 있는 모든 파티션의 최소 TX 대역폭 값의 합은 100 과 같거나 모두 0 이 어야 합니다 .
PAGE 81
5– 어댑터 사전 부팅 구성 파티션 구성 4. 메시지가 나타나면 Yes( 예 ) 를 클릭해 변경 내용을 저장합니다 . 시스템 재 설정 이후에 변경 내용이 적용됩니다 . 파티션을 구성하려면 1. 특정 파티션 구성을 검사하려면 NIC Partitioning Configuration(NIC 분할 구 성 ) 페이지 (56 페이지의 그림 5-15) 에서 Partition n Configuration( 파티션 n 구성 ) 을 선택합니다 . NParEP 가 활성화되어 있지 않으면 포트 1 개마다 파티션 4 개만 존재합니다 . 2. 첫 번째 파티션을 구성하려면 Partition 1 Configuration( 파티션 1 구성 ) 을 선택하여 Partition 1 Configuration( 파티션 1 구성 ) 페이지 ( 그림 5-17) 를 엽 니다 . 그러면 다음과 같은 매개변수가 표시됩니다 .
PAGE 82
5– 어댑터 사전 부팅 구성 파티션 구성  NIC Mode(NIC 모드 ) 파티션 2 이상에서 L2 이더넷 NIC 개인 설정을 활 성화하거나 비활성화합니다 . 나머지 파티션을 모두 비활성화하려면 NIC Mode(NIC 모드 ) 를 Disabled( 비활성화 ) 로 설정하십시오 . 오프 로드가 가능한 파티션을 비활성화하려면 NIC Mode(NIC 모드 ) 와 각 오프로드 모드를 모두 비활성화하십시오 .  FCoE Mode(FCoE 모드 ) 는 두 번째 파티션에서 FCoE-Offload 개인 설 정을 활성화 또는 비활성화합니다 . 두 번째 파티션에서 이 모드를 활성 화하려면 NIC Mode(NIC 모드 ) 를 비활성화해야 합니다 . 포트 1 개당 오프로드 1 개만 사용할 수 있기 때문에 FCoE-Offload 가 포트의 두 번 째 파티션에서 활성화되는 경우에는 동일한 NPAR 모드 포트의 세 번째 파티션에서 iSCSI-Offload 를 활성화할 수 없습니다 .
PAGE 83
5– 어댑터 사전 부팅 구성 파티션 구성 그림 5-18. 파티션 2 구성 : FCoE Offload 4. 세 번째 파티션을 구성하려면 Partition 3 Configuration( 파티션 3 구성 ) 을 선택하여 Partition 3 Configuration( 파티션 3 구성 ) 페이지 ( 그림 5-17) 를 엽 니다 . iSCSI Offload 가 활성화되어 있는 경우 Partition 3 Configuration( 파티 션 3 구성 ) 에 다음 매개변수가 표시됩니다 .
PAGE 84
5– 어댑터 사전 부팅 구성 파티션 구성 5. 이전 파티션 ( 오프로드가 지원되지 않는 경우 ) 을 포함하여 나머지 이더넷 파티션을 구성하려면 파티션 2 이상의 파티션 페이지를 엽니다 ( 그림 5-20 참조 ).  NIC Mode(NIC 모드 )(Enabled( 활성화 ) 또는 Disabled( 비활성화 )). 비 활성화하면 파티션이 보이지 않아서 파티션 ( 또는 PCI PF) 의 최대 수 량보다 적게 감지되는 경우에는 OS 에 표시되지 않습니다 .  PCI 장치 ID  PCI Address(PCI 주소 )  MAC 주소  가상 MAC 주소 그림 5-20. 파티션 4 구성 : 이더넷 VMware ESXi 6.0 및 ESXi 6.5 의 파티션 분할 VMware ESXi 6.0 또는 ESXi 6.5 기반 시스템에서 다음 조건이 존재하는 경우에는 드라이버를 제거한 후 다시 설치해야 합니다 .
PAGE 85
5– 어댑터 사전 부팅 구성 파티션 구성 # esxcfg-scsidevs -a vmnic4 qedf link-up fc.2000000e1ed6fa2a:2001000e1ed6fa2a (0000:19:00.2) QLogic Corp. QLogic FastLinQ QL41xxx Series 10/25 GbE Controller (FCoE) vmhba0 lsi_mr3 link-n/a sas.51866da071fa9100 (0000:18:00.0) Avago (LSI) PERC H330 Mini vmnic10 qedf link-up fc.2000000e1ef249f8:2001000e1ef249f8 (0000:d8:00.2) QLogic Corp. QLogic FastLinQ QL41xxx Series 10/25 GbE Controller (FCoE) vmhba1 vmw_ahci link-n/a sata.vmhba1 (0000:00:11.
PAGE 86
6 RoCE 구성 이 장에서는 41xxx 시리즈 어댑터 , 이더넷 스위치 및 Windows 또는 Linux 호스트 에서 RoCE v1 및 v2(RDMA over converged Ethernet) 구성에 대해 설명하며 , 다 음을 포함합니다 .  지원되는 운영 체제 및 OFED  64 페이지의 "RoCE 를 위한 계획 "  65 페이지의 " 어댑터 준비 "  65 페이지의 " 이더넷 스위치 준비 "  67 페이지의 "Windows Server 용 어댑터에서 RoCE 구성 "  76 페이지의 "Linux 용 어댑터에서 RoCE 구성 "  86 페이지의 "VMware ESX 용 어댑터에서 RoCE 구성 " 주 현재 릴리스에서 일부 RoCE 기능은 완전히 사용하지 못할 수도 있습니다 . 지원되는 운영 체제 및 OFED 표 6-1 은 RoCE v1, RoCE v2, iWARP 및 OFED 에 대한 운영 체제 지원을 보여줍 니다 . 표 6-1.
PAGE 87
6–RoCE 구성 RoCE 를 위한 계획 표 6-1. RoCE v1, RoCE v2, iWARP 및 OFED 에 대한 OS 지원 ( 계속 ) 인박스 OFED 3.18-3 GA OFED-4.8-1 GA RHEL 7.3 RoCE v1, RoCE v2, iWARP, iSER 아니오 RoCE v1, RoCE v2, iWARP RHEL 7.4 RoCE v1, RoCE v2, iWARP, iSER 아니오 아니오 SLES 12 SP3 RoCE v1, RoCE v2, iWARP, iSER 아니오 아니오 CentOS 7.3 RoCE v1, RoCE v2, iWARP, iSER 아니오 RoCE v1, RoCE v2, iWARP CentOS 7.4 RoCE v1, RoCE v2, iWARP, iSER 아니오 아니오 아니오 N/A N/A VMware ESXi 6.5, 6.5U1 RoCE v1, RoCE v2 N/A N/A VMware ESXi 6.
PAGE 88
6–RoCE 구성 어댑터 준비  RoCE 는 리틀 엔디안만 지원합니다 .  RoCE 는 SR-IOV 환경에서 VF 를 통해 작동하지 않습니다 . 어댑터 준비 다음 단계를 따라 DCBX 를 활성화하고 , HII 관리 응용프로그램을 사용해 RoCE 우 선 순위를 지정합니다 . HII 응용프로그램에 대한 자세한 내용은 장 5 어댑터 사전 부팅 구성을 참조하십시오 . 어댑터를 준비하려면 1. Main Configuration( 기본 구성 ) 페이지에서 Data Center Bridging(DCB) Settings(DCB(Data Center Bridging) 설정 ) 를 선택한 후 Finish( 마침 ) 를 클릭합니다 . 2. DCB(Data Center Bridging) 설정 창에서 DCBX Protocol(DCBX 프로토콜 ) 옵션을 클릭합니다 . 41xxx 시리즈 어댑터는 CEE 및 IEEE 프로토콜을 모두 지원합니다 . 이 값은 DCB 스위치의 해당 값과 일치해야 합니다 .
PAGE 89
6–RoCE 구성 이더넷 스위치 준비 Cisco Nexus 6000 이더넷 스위치 구성 RoCE 용 Cisco Nexus 6000 이더넷 스위치 구성 단계는 클래스 맵 구성 , 정책 맵 구성 , 정책 적용 및 스위치 포트에 VLAN ID 할당으로 이루어집니다 . Cisco 스위치를 구성하려면 1. config 터미널 세션을 다음과 같이 엽니다 . Switch# config terminal switch(config)# 2. 다음과 같이 QoS(Quality of Service) 클래스 맵을 구성하고 어댑터 (5) 와 일 치하도록 RoCE 우선 순위를 설정합니다 . switch(config)# class-map type qos class-roce switch(config)# match cos 5 3. 다음과 같이 대기열 지정 클래스 맵을 구성합니다 .
PAGE 90
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 switch(config)# service-policy type queuing output roce switch(config)# service-policy type queuing input roce switch(config)# service-policy type network-qos roce 9. 어댑터 (5) 에 할당된 VLAN ID 와 일치하도록 스위치 포트에 VLAN ID 를 할 당합니다 . switch(config)# interface ethernet x/x switch(config)# switchport mode trunk switch(config)# switchport trunk allowed vlan 1,5 Dell Z9100 이더넷 스위치 구성 RoCE 용 Dell Z9100 이더넷 스위치를 구성하려면 부록 C Dell Z9100 스위치 구성 의 절차를 참조하십시오 .
PAGE 91
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 표 6-2. RoCE 를 위한 고급 속성 ( 계속 ) 속성 값 또는 설명 VLAN ID VLAN ID 를 인터페이스에 할당합니다 . 그 값은 스위치 에 할당된 값과 같아야 합니다 . Quality of Service QoS 를 활성화하거나 비활성화합니다 .  Windows DCB-QoS 서비스를 통해 DCB 를 제어하 는 경우 Enabled( 활성화 ) 를 선택합니다 . 자세한 내용은 220 페이지의 " 어댑터에서 DCBX 를 비 활성화하여 QoS 구성 " 를 참조하십시오 .  연결된 DCB 구성 스위치를 통해 DCB 를 제어하는 경우 Disabled( 비활성화 ) 를 선택합니다 . 자세한 내용은 224 페이지의 " 어댑터에서 DCBX 를 활 성화하여 QoS 구성 " 를 참조하십시오 . 그림 6-1 은 속성 값 구성 예를 보여줍니다 . 그림 6-1.
PAGE 92
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 2. Windows PowerShell 을 사용하여 어댑터에서 RDMA 가 활성화되어 있는지 확인하니다 . Get-NetAdapterRdma 명령은 RDMA 를 지원하는 어댑터를 나 열합니다 . 두 포트 모드 활성화되어 있습니다 . 주 RoCE over Hyper-V 를 구성하는 경우 VLAN ID 를 실제 인터페이스에 할당하지 마십시오 . PS C:\Users\Administrator> Get-NetAdapterRdma Name InterfaceDescription -----------------------SLOT 4 3 Port 1 QLogic FastLinQ QL41262... SLOT 4 3 Port 2 QLogic FastLinQ QL41262... 3.
PAGE 93
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 RDMA 카운터 보기 다음 절차는 iWARP 에도 적용됩니다 . RoCE 용 RDMA 카운터 보기 : 1. 성능 모니터링을 실행합니다 . 2. Add Counters( 카운터 추가 ) 대화 상자를 엽니다 . 그림 6-2 은 이러한 예를 나타냅니다 . 그림 6-2.
PAGE 94
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 주 Cavium RDMA 카운터가 성능 모니터의 Add Counters( 카운터 추가 ) 대화 상자에 표시되지 않으면 드라이버 위치에서 다음 명령을 실행하여 수동으로 추가하십시오 . Lodctr /M:qend.man 3. 다음 카운터 유형 중 하나를 선택합니다 .    4. Cavium FastLinQ Congestion Control(Cavium FastLinQ 혼잡 제어 ):  스위치에 ECN 이 활성화되어 있을 경우 네트워크 혼잡이 발생하 면 높입니다 .  성공적으로 전송되거나 수신된 RoCE v2 ECN Marked Packet 및 Congestion Notification Packet(CNP) 을 설명합니다 .  RoCE v2 에만 적용됩니다 . Cavium FastLinQ Port Counters(Cavium FastLinQ 포트 카운터 ):  네트워크 혼잡이 발생할 때 높입니다 .
PAGE 95
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 그림 6-3 은 카운터 모니터링 출력의 예를 나타냅니다 . 그림 6-3. 성능 모니터 : Cavium FastLinQ 카운터 표 6-3 은 오류 카운터에 세부 정보를 나타냅니다 . 표 6-3. Cavium FastLinQ RDMA 오류 카운터 RDMA 오류 카운터 설명 RoCE 에 대한 적용 여부 iWARP 에 대한 적용 여부 문제 해결 CQ overflow (CQ 오버플로 우) CQ 는 RDMA 작업 요청이 게시되는 완료 대기열입니다 . 이 카운터는 인 스턴스 수를 지정합니다 . 전송 또는 수신 대기열에 완료된 작업 요청이 있 지만 연결된 완료 대기열에 공간이 없 습니다 . 예 예 완료 대기열의 크기가 부족한 원인은 소프트웨 어 설계 문제에 있습니 다. Requestor Bad response ( 요청자의 잘 못된 응답 ) 응답자에서 잘못된 응답이 반환되었 습니다 .
PAGE 96
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 표 6-3. Cavium FastLinQ RDMA 오류 카운터 ( 계속 ) RDMA 오류 카운터 설명 RoCE 에 대한 적용 여부 iWARP 에 대한 적용 여부 문제 해결 Requestor CQEs flushed with error ( 오류로 인해 Requestor CQE 삭제됨 ) 어떠한 이유로 QP 가 오류 상태로 전 환되어 대기 중인 작업 요청이 있을 경우에는 flush status 를 실행하여 완 료된 작업 ( 실제로는 작업 요청 실행 이 완료되지 않음 ) 을 CQ 로 전송하 면서 게시된 작업 요청이 삭제될 수 있습니다 . 오류 상태에서 완료된 작 업 요청이 있을 경우에는 해당 QP 에 서 대기 중인 다른 모든 작업 요청까 지 삭제됩니다 . 예 예 RDMA 연결이 끊길 때 발생합니다 .
PAGE 97
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 표 6-3. Cavium FastLinQ RDMA 오류 카운터 ( 계속 ) RDMA 오류 카운터 설명 RoCE 에 대한 적용 여부 iWARP 에 대한 적용 여부 문제 해결 Requestor Remote Invalid request ( 요청자의 잘 못된 원격 요 청) 원격 측에서 채널을 통해 잘못된 메시 지를 수신하였습니다. 잘못된 요청은 전송 메시지 또는 RDMA 요청이 될 수 있습니다 . 예 예 가능한 원인으로는 수신 대기열에서 작업을 지원 하지 않거나 , 새로운 RDMA 또는 원자 연산 요청을 수신할 수 있는 버퍼링이 충분하지 않거 나 , 혹은 RDMA 요청에 서 지정된 길이가 231 바이트보다 큰 경우 등 이 있습니다 . Requestor remote operation ( 요청자 원격 작업 ) 원격 측에서 로컬 문제로 인해 요청된 작업을 완료할 수 없습니다 .
PAGE 98
6–RoCE 구성 Windows Server 용 어댑터에서 RoCE 구성 표 6-3. Cavium FastLinQ RDMA 오류 카운터 ( 계속 ) RDMA 오류 카운터 설명 RoCE 에 대한 적용 여부 iWARP 에 대한 적용 여부 문제 해결 Responder local length ( 응답자 로컬 길이 ) 인바운드 메시지의 길이가 잘못되었 습니다 . 예 예 원격 피어의 동작 오류 입니다 . 예를 들어 인바 운드 전송 메시지의 길 이가 수신 버퍼의 크기 보다 크기 때문입니다 . Responder local protection ( 응답자 로컬 보호 ) 로컬에 게시된 작업 요청의 데이터 세 그먼트가 요청된 작업에 유효한 메모 리 영역을 참조하지 않습니다 . 예 예 소프트웨어의 메모리 관 리에 문제가 있습니다 . Responder Local QP Operation error ( 응답자 로컬 QP 작업 오류 ) 작업 요청을 처리하는 도중 내부 QP 일관성 오류가 탐지되었습니다 .
PAGE 99
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 Linux 용 어댑터에서 RoCE 구성 이 섹션은 RHEL 및 SLES 의 RoCE 구성 절차를 설명합니다 . 또한 , RoCE 구성을 확인하는 방법을 설명하고 VLAN 인터페이스와 함께 그룹 ID(GID) 를 사용하는 방 법에 대한 지침을 제공합니다 .  RHEL 의 RoCE 구성  SLES 의 RoCE 구성  Linux 에서 RoCE 구성 확인  VLAN 인터페이스 및 GID 인덱스 값  Linux 의 RoCE v2 구성 RHEL 의 RoCE 구성 어댑터에서 RoCE 를 구성하려면 RHEL 호스트에 OFED(Open Fabrics Enterprise Distribution) 가 설치되고 구성되어 있어야 합니다 . RHEL 의 인박스 OFED 를 준비하려면 1. 시스템을 설치하거나 업그레이드하는 중에 InfiniBand 및 OFED 지원 패키지 를 선택합니다 . 2.
PAGE 100
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 SLES 의 RoCE 구성 SLES 호스트용 어댑터에서 RoCE 를 구성하려면 SLES 호스트에 OFED 가 설치 되고 구성되어 있어야 합니다 . SLES 의 인박스 OFED 를 설치하려면 1. 시스템을 설치하거나 업그레이드하는 중에 InfiniBand 지원 패키지를 선택합 니다 . 2. 해당 SLES SDK 키트 이미지에서 다음 RPM 을 설치합니다 . libibverbs-devel-x.x.x.x86_64.rpm (libqedr 설치에 필요함 ) perftest-x.x.x.x86_64.rpm ( 대역폭 및 지연 시간 응용프로그램에 필요함 ) 3. 14 페이지의 "RDMA 와 함께 Linux 설치 " 에 설명된 대로 Linux 드라이버를 설치합니다 .
PAGE 101
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 또는 # systemctl start rdma.service 3. dmesg 로그를 검토해 RoCE 장치가 발견되었는지 확인합니다 . # dmesg|grep qedr [87910.988411] qedr: discovered and registered 2 RoCE funcs 4. 모든 모듈이 로드되었는지 확인합니다 . 예 : # lsmod|grep qedr 5. qedr 89871 0 qede 96670 1 qedr qed 2075255 ib_core 88311 16 qedr, rdma_cm, ib_cm, ib_sa,iw_cm,xprtrdma,ib_mad,ib_srp, ib_ucm,ib_iser,ib_srpt,ib_umad, ib_uverbs,rdma_ucm,ib_ipoib,ib_isert 2 qede,qedr IP 주소를 구성하고 ifconfig 같은 구성 방법을 사용하여 포트를 활성화합니다 .
PAGE 102
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 7. 모든 서버 사이의 L2 및 RoCE 연결을 확인합니다 . 한 서버는 서버 역할을 하 고 다른 서버는 클라이언트 역할을 합니다 .  단순 ping 명령을 사용해 L2 연결을 확인합니다 .  서버 또는 클라이언트에서 RDMA ping 을 실행하여 RoCE 여결 여부를 확인합니다 . 서버에서 다음 명령을 발급합니다 . ibv_rc_pingpong -d -g 0 클라이언트에서 다음 명령을 발급합니다 . ibv_rc_pingpong -d -g 0 다음은 서버 및 클라이언트에서 성공적인 ping pong 테스트의 예제입니다 .
PAGE 103
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 VLAN 인터페이스 및 GID 인덱스 값 서버와 클라이언트에서 VLAN 인터페이스를 사용 중인 경우 스위치에서도 같은 VLAN ID 를 구성해야 합니다 . 스위치를 통해 트래픽을 실행 중이라면 InfiniBand 응용프로그램에서 VLAN ID 및 VLAN IP 주소를 기준으로 올바른 GID 값을 사용해 야 합니다 . 다음 결과를 기준으로 GID 값 (-x 4 / -x 5) 은 모든 perftest 응용프로그램에서 사용 해야 합니다 .
PAGE 104
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 주 RoCE v2 지원 커널을 사용하여 RoCE v1 및 RoCE v2 를 구성할 수 있 습니다 . 이러한 커널을 사용하면 동일한 서브넷뿐 아니라 RoCE v2 와 다른 라우팅 환경과 같이 서로 다른 서브넷을 통해서도 RoCE 트래픽을 전송할 수 있습니다 . 다른 모든 스위치 및 어댑터 설정은 RoCE v1 및 RoCE v2 에서 공통되며 , 몇 가지 설정만 RoCE v2 에 더 필요합니다 . RoCE v2 GID 인덱스 또는 주소 식별 RoCE v1 및 RoCE v2 특정 GID 를 찾으려면 sys 또는 class 매개변수를 사용하거 나 , 41xxx FastLinQ 소스 패키지에서 RoCE 스크립트를 실행합니다 . 기본값 RoCE GID Index(RoCE GID 인덱스 ) 및 주소를 확인하려면 ibv_devinfo 명령 을 발급하고 이를 sys 또는 class 매개변수와 비교합니다 .
PAGE 105
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성  옵션 2: FastLinQ 소스 패키지에서 스크립트를 사용합니다 . #/../fastlinq-8.x.x.x/add-ons/roce/show_gids.sh DEV PORT INDEX GID IPv4 VER DEV --- ---- ----- --- ------------ --- --- qedr0 1 0 fe80:0000:0000:0000:020e:1eff:fec4:1b20 v1 p4p1 qedr0 1 1 fe80:0000:0000:0000:020e:1eff:fec4:1b20 v2 p4p1 qedr0 1 2 0000:0000:0000:0000:0000:ffff:1e01:010a 30.1.1.10 v1 p4p1 qedr0 1 3 0000:0000:0000:0000:0000:ffff:1e01:010a 30.1.1.
PAGE 106
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 RoCE v2 확인 동일한 서브넷에서 실행하는 경우 , RoCE v2 GID 인덱스를 사용합니다 . Server# ib_send_bw -d qedr0 -F -x 1 Client# ib_send_bw -d qedr0 -F -x 1 192.168.100.3 주 스위치 PFC 구성을 통해 실행되는 경우 동일한 서브넷을 통해 RoCE v1 또는 v2 에 VLAN GID 를 사용합니다 . 서로 다른 서브넷을 통해 RoCE v2 확인 주 먼저 스위치 및 서버에 대해 라우팅 설정을 구성해야 합니다 . 어댑터에서 , HII 또는 UEFI 사용자 인터페이스를 사용하여 RoCE 우선 순위 및 DCBX 모 드를 설정합니다 . 서로 다른 서브넷을 통해 RoCE v2 를 확인하려면 1. DCBX-PFC 구성을 사용하여 서버 및 클라이언트에 대한 라우팅 구성을 설정 합니다 .  시스템 설정 : 서버 VLAN IP : 192.168.100.
PAGE 107
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성  PFC 구성 및 L3 라우팅을 사용하는 경우 서로 다른 서브넷을 사용하여 VLAN 을 통해 RoCE v2 트래픽을 실행하고 RoCE v2 VLAN GID 인덱 스를 사용합니다 . Server# ib_send_bw -d qedr0 -F -x 5 Client# ib_send_bw -d qedr0 -F -x 5 192.168.100.3 서버 스위치 설정 : 그림 6-4.
PAGE 108
6–RoCE 구성 Linux 용 어댑터에서 RoCE 구성 클라이언트 스위치 설정 : 그림 6-5. 스위치 설정 , 클라이언트 RDMA_CM 응용프로그램에 대한 RoCE v1 또는 RoCE v2 설정 구성 RoCE 를 구성하려면 FastLinQ 소스 패키지에서 다음 스크립트를 사용합니다 . # ./show_rdma_cm_roce_ver.sh qedr0 is configured to IB/RoCE v1 qedr1 is configured to IB/RoCE v1 # ./config_rdma_cm_roce_ver.sh v2 configured rdma_cm for qedr0 to RoCE v2 configured rdma_cm for qedr1 to RoCE v2 서버 설정 : 그림 6-6.
PAGE 109
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 클라이언트 설정 : 그림 6-7. RDMA_CM 응용프로그램 구성 : 클라이언트 VMware ESX 용 어댑터에서 RoCE 구성 이번 섹션에서는 아래와 같이 RoCE 구성을 위한 절차 및 정보에 대해서 설명합 니다 .  RDMA 인터페이스 구성  MTU 구성  RoCE 모드 및 통계  PVRDMA(Paravirtual RDMA Device) 구성 RDMA 인터페이스 구성 RDMA 인터페이스를 구성하려면 1. QLogic NIC 드라이버와 RoCE 드라이버를 모두 설치합니다 . 2. 모듈 매개변수에서 다음과 같이 명령을 실행하여 NIC 드라이버의 RoCE 기 능을 활성화합니다 . esxcfg-module -s 'enable_roce=1' qedentv 변경 내용을 적용하려면 NIC 드라이버를 다시 로드하거나 시스템을 재부팅 해야 합니다 . 3.
PAGE 110
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 4. RDMA 장치 목록을 보려면 esxcli rdma device list 명령을 실행합니다 . 예: esxcli rdma device list Name Driver State Speed Paired Uplink Description ------- ------- ------ ---- ------- ------------- ------------------------------- vmrdma0 qedrntv Active 1024 25 Gbps vmnic0 QLogic FastLinQ QL45xxx RDMA Interface vmrdma1 qedrntv Active 1024 25 Gbps vmnic1 QLogic FastLinQ QL45xxx RDMA Interface 5. MTU 새로운 가상 스위치를 생성하려면 다음 명령을 실행합니다 .
PAGE 111
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 VLAN ID 로 RoCE 트래픽을 실행하려면 해당 VMkernel 포트 그룹에서 VLAN ID 를 구성합니다 . MTU 구성 RoCE 인터페이스의 MTU 를 수정하려면 해당하는 vSwitch 의 MTU 를 변경합니다 . vSwitch 의 MTU 에 따라 다음과 같이 명령을 실행하여 RDMA 인터페이스의 MTU 크 기를 설정합니다 .
PAGE 112
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 Queue pairs in RESET state: 0 Queue pairs in INIT state: 0 Queue pairs in RTR state: 0 Queue pairs in RTS state: 0 Queue pairs in SQD state: 0 Queue pairs in SQE state: 0 Queue pairs in ERR state: 0 Queue pair events: 0 Completion queues allocated: 1 Completion queue events: 0 Shared receive queues allocated: 0 Shared receive queue events: 0 Protection domains allocated: 1 Memory regions allocated: 3 Address handles allocated: 0 Memory windows allocated: 0 PVRDMA(Parav
PAGE 113
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 그림 6-8. 새 분산 스위치 구성 2. 3. 다음과 같이 분산 가상 스위치를 구성합니다 . a. VMware vSphere 웹 클라이언트에서 탐색기 왼쪽 창에 있는 RoCE 노 드를 확장합니다 . b. RoCE-VDS 를 마우스 오른쪽 버튼으로 클릭한 후 Add and Manage Hosts( 호스트 추가 및 관리 ) 를 클릭합니다 . c. Add and Manage Hosts( 호스트 추가 및 관리 ) 에서 다음 옵션을 구성 합니다 .  Assign uplinks( 업링크 할당 ). 사용 가능한 업링크 목록 중에서 선택합니다 .  Manage VMkernel network adapters(VMkernel 네트워크 어댑터 관리 ). 기본값을 그대로 유지한 채 Next( 다음 ) 를 클릭합니다 .  Migrate VM networking(VM 네트워킹 마이그레이션 ).
PAGE 114
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 e. Net.PVRDMAVmknic 값을 vmknic 로 설정합니다 ( 예 : vmk1). 그림 6-9 은 이러한 예를 나타냅니다 . 그림 6-9. PVRDMA 에 vmknic 할당 4. 다음과 같이 PVRDMA 의 방화벽 규칙을 설정합니다 . a. 호스트를 마우스 오른쪽 버튼으로 클릭한 후 Settings( 설정 ) 를 클릭 합니다 . b. Settings( 설정 ) 페이지에서 System( 시스템 ) 노드를 확장한 후 Security Profile( 보안 프로파일 ) 을 클릭합니다 . c. Firewall Summary( 방화벽 요약 ) 페이지에서 Edit( 편집 ) 를 클릭합니 다. d. Edit Security Profile( 보안 프로파일 편집 ) 대화 상자의 Name( 이름 ) 에서 스크롤을 아래로 내려 pvrdma 확인란과 Set Firewall( 방화벽 설 정 ) 확인란을 차례대로 선택합니다 .
PAGE 115
6–RoCE 구성 VMware ESX 용 어댑터에서 RoCE 구성 그림 6-10. 방화벽 규칙 설정 5. 다음과 같이 PVRDMA 의 VM 을 설정합니다 . a. 아래에서 지원되는 게스트 OS 중 하나를 설치합니다 .   RHEL 7.2 Ubuntu 14.04( 커널 버전 4.0) b. OFED-3.18 을 설치합니다 . c. PVRDMA 게스트 드라이버와 라이브러리를 컴파일하여 설치합니다 . d. 다음과 같이 새로운 PVRDMA 네트워크 어댑터를 VM 에 추가합니다 .     e. VM 설정을 편집합니다 . 새로운 네트워크 어댑터를 추가합니다 . 새롭게 추가된 DVS 포트 그룹을 Network( 네트워크 ) 로 선택합 니다 . PVRDMA 를 어댑터 유형으로 선택합니다 . VM 부팅 후 PVRDMA 게스트 드라이버가 로드되는지 확인합니다 .
PAGE 116
7 iWARP 구성 iWARP(Internet wide area RDMA protocol) 는 IP 네트워크를 통한 효율적 데이터 전송을 위한 RDMA 를 구현하는 네트워킹 프로토콜입니다 . iWARP 는 LAN, 스토 리지 네트워크 , 데이터 센터 네트워크 및 WAN 을 포함한 여러 가지 환경에 맞게 설계된 프로토콜입니다 . 이 장에서는 다음 작업의 지침을 제시합니다 .  iWARP 어댑터 준비  94 페이지의 "Windows 에서 iWARP 구성 "  98 페이지의 "Linux 에서 iWARP 구성 " 주 현재 릴리스에서 일부 iWARP 기능은 완전히 사용하지 못할 수도 있습니다 . 자세한 정보는 부록 D 기능 제약 조건에서 확인할 수 있습니다 . iWARP 어댑터 준비 이번 섹션에서는 HII 을 사용하여 사전 부팅 어댑터 iWARP 를 구성하는 지침에 대 해서 설명합니다 . 사전 부팅 어댑터 구성에 대한 자세한 내용은 장 5 어댑터 사전 부팅 구성을 참조하십시오 .
PAGE 117
7–iWARP 구성 Windows 에서 iWARP 구성 b. RDMA Protocol Support(RDMA 프로토콜 지원 ) 를 iWARP 로 설정합 니다 . c. Back( 뒤로 ) 을 클릭합니다 . 5. Main Configuration( 기본 구성 ) 페이지에서 Finish( 마침 ) 를 클릭합니다 . 6. Warning - Saving Changes( 경고 - 변경 내용 저장 ) 메시지 상자에서 Yes ( 예 ) 를 클릭하여 구성을 저장합니다 . 7. Success - Saving Changes( 성공 - 변경 내용 저장 ) 메시지 상자에서 OK ( 확인 ) 를 클릭합니다 . 8. 단계 2 에서 단계 7 까지 반복하여 다른 포트에 대한 NIC 와 iWARP 를 구성 합니다 . 9. 두 포트 모두의 어댑터 준비를 완료하려면 a. Device Settings( 장치 설정 ) 페이지에서 Finish( 마침 ) 를 클릭합니다 . b.
PAGE 118
7–iWARP 구성 Windows 에서 iWARP 구성 d. 2. OK( 확인 ) 를 클릭하여 변경 내용을 저장하고 어댑터 속성을 닫습니다 . Windows PowerShell 을 사용하여 RDMA 가 활성화되어 있는지 확인합니다 . Get-NetAdapterRdma 명령 출력(그림 7-1)에 RDMA를 지원하는 어댑터가 표 시됩니다 . 그림 7-1. Windows PowerShell 명령 : Get-NetAdapterRdma 3. Windows PowerShell 을 사용하여 NetworkDirect 가 활성화되어 있는지 확 인합니다 . Get-NetOffloadGlobalSetting 명령 출력 ( 그림 7-2) 에서 NetworkDirect 가 Enabled ( 활성화 ) 로 표시됩니다 . 그림 7-2. Windows PowerShell 명령 : Get-NetOffloadGlobalSetting iWARP 트래픽을 확인하려면 1.
PAGE 119
7–iWARP 구성 Windows 에서 iWARP 구성 그림 7-3 은 이러한 예를 나타냅니다 . 그림 7-3.
PAGE 120
7–iWARP 구성 Windows 에서 iWARP 구성 iWARP 트래픽이 실행 중인 경우 계수기가 그림 7-4 예제에 표시된 것처럼 나 타납니다 . 그림 7-4. Perfmon: iWARP 트래픽 확인 주 Windows 에서 Cavium RDMA 카운터를 보는 방법에 대한 자세한 내용 은 70 페이지의 "RDMA 카운터 보기 " 를 참조하십시오 . 4. SMB 연결을 확인하려면 명령 프롬프트에서 다음과 같이 net use 명령을 발급합니다 . a. C:\Users\Administrator> net use New connections will be remembered. Status Local Remote Network --------------------------------------------------------OK F: \\192.168.10.10\Share1 Microsoft Windows Network The command completed successfully.
PAGE 121
7–iWARP 구성 Linux 에서 iWARP 구성 Kernel 56 Connection 192.168.11.20:16159 192.168.11.10:445 0 Kernel 56 Connection 192.168.11.20:15903 192.168.11.10:445 0 Kernel 60 Listener [fe80::e11d:9ab5:a47d:4f0a%56]:445 NA 0 Kernel 60 Listener 192.168.11.20:445 0 Kernel 60 Listener [fe80::71ea:bdd2:ae41:b95f%60]:445 NA 0 Kernel 60 Listener 192.168.11.20:16159 192.168.11.
PAGE 122
7–iWARP 구성 Linux 에서 iWARP 구성 2. 다음 명령 구문으로 qed 드라이버를 로드하여 RDMA 프로토콜을 변경합니 다 . 드라이버를 로드할 때는 포트 인터페이스 PCI ID(xx:xx.x) 와 RDMA 프 로토콜 값 (p) 을 입력해야 합니다 . #modprobe -v qed rdma_protocol_map= RDMA 프로토콜 (p) 값은 다음과 같습니다 .     0— 기본값 허용 (RoCE) 1—RDMA 없음 2—RoCE 3—iWARP 예를 들어 04:00.0 으로 지정된 포트의 인터페이스를 RoCE 에서 iWARP 로 변경하려면 다음과 같이 명령을 실행합니다 . #modprobe -v qed rdma_protocol_map=04:00.0-3 3. 다음 명령을 실행하여 RDMA 드라이버를 로드합니다 . #modprobe -v qedr 다음 예는 다수의 NPAR 인터페이스에서 RDMA 프로토콜을 iWARP 로 바꾸는 명 령 항목입니다 .
PAGE 123
7–iWARP 구성 Linux 에서 iWARP 구성 2. ibv_devinfo 명령을 발급한 후 전송 유형을 확인합니다 . 명령 실행에 성공할 경우 각 PCI 기능은 별개의 hca_id 를 표시합니다 . 예 ( 위 듀얼 포트 어댑터에서 두 번째 포트를 확인하는 경우 ): [root@localhost ~]# ibv_devinfo -d qedr1 hca_id: qedr1 transport: iWARP (1) fw_ver: 8.14.7.
PAGE 124
7–iWARP 구성 Linux 에서 iWARP 구성 iWARP 용 Perftest 실행 모든 perftest 도구는 iWARP 전송 유형을 바탕으로 지원됩니다 . RDMA 연결 관리 자 (-R 옵션 사용 ) 를 사용하여 도구를 실행해야 합니다 . 예: 1. 서버에서 다음 명령을 실행합니다 ( 이번 예의 두 번째 포트 사용 ). # ib_send_bw -d qedr1 -F -R 2. 클라이언트에서 다음 명령을 실행합니다 ( 이번 예의 두 번째 포트 사용 ). [root@localhost ~]# ib_send_bw -d qedr1 -F -R 192.168.11.
PAGE 125
7–iWARP 구성 Linux 에서 iWARP 구성 NFS-RDMA 구성 iWARP 용 NFS-RDMA 는 서버 및 클라이언트 구성 단계를 모두 포함합니다 . NFS 서버를 구성하려면 1. 서버에서 NFS-RDMA 를 사용하여 내보내야 하는 디렉터리에 대한 /etc/exports 파일에서 다음을 입력합니다 . /tmp/nfs-server *(fsid=0,async,insecure,no_root_squash) 내보내는 각 디렉터리에 대해 다른 FSID ( 파일 시스템 식별자 ) 를 사용해야 합니다 . 2. 다음과 같이 svcrdma 모듈을 로드합니다 . # modprobe svcrdma 3. 어떤 오류도 없이 NFS 서비스를 시작합니다 . # service nfs start 4. 다음과 같이 기본 RDMA 포트 20049 를 이 파일에 포함시킵니다 . # echo rdma 20049 > /proc/fs/nfsd/portlist 5.
PAGE 126
7–iWARP 구성 Linux 에서 iWARP 구성 주 NFSoRDMA 의 기본 포트는 20049 입니다 . 하지만 NFS 클라이언트로 정렬되어 있는 다른 포트 역시 모두 사용 가능합니다 . 3. mount 명령을 발급하여 파일 시스템이 탑재되었는지 확인합니다 . RDMA 포 트와 파일 시스템 버전이 올바른지 확인합니다 . #mount |grep rdma SLES 12 SP3, RHEL 7.4 및 OFED 4.8x 의 iWARP RDMA-Core 지원 사용자 공간 라이브러리인 libqedr 은 rdma-core 에 포함됩니다 . 하지만 아웃오브 박스 libqedr 은 SLES 12 SP3, RHEL 7.4, OFED 4.8x 를 지원하지 않습니다 . 따라 서 이러한 OS 버전들이 iWARP RDMA-Core 를 지원하려면 패치가 필요합니다 . iWARP RDMA-Core 패치를 적용하려면 1. 다음 명령을 실행하여 최신 RDMA-core 소스를 다운로드합니다 .
PAGE 127
7–iWARP 구성 Linux 에서 iWARP 구성 ibv_ud_pingpong mckey rdma-ndd rdma_xserver rstream udaddy umad_reg2 ibacm ibv_devices ibv_srq_pingpong ibv_xsrq_pingpong rcopy rdma_server riostream srp_daemon udpong umad_register2 현재 RDMA-core-master 위치에서 애플리케이션을 실행합니다 . 예 : # ./rping -c -v -C 5 -a 192.168.21.3 ping data: rdma-ping-0: ABCDEFGHIJKLMNOPQRSTUVWXYZ[\]^_`abcdefghijklmnopqr ping data: rdma-ping-1: BCDEFGHIJKLMNOPQRSTUVWXYZ[\]^_`abcdefghijklmnopqrs ping data: rdma-ping-2: CDEFGHIJKLMNOPQRSTUVWXYZ[\]^_`abcdefghijkl
PAGE 128
8 iSER 구성 이 장에서는 Linux(RHEL 및 SLES) 및 ESXi 6.7 에 iSER(iSCSI Extensions for RDMA) 을 구성하는 절차를 제시하며 , 다음 섹션으로 구성됩니다 .  시작하기 전에  RHEL 용 iSER 구성  109 페이지의 "SLES 12 용 iSER 구성 "  110 페이지의 "RHEL 및 SLES 에서 iWARP 와 함께 iSER 사용 "  112 페이지의 "Linux 성능 최적화 "  113 페이지의 "ESXi 6.7 에서 iSER 구성 " 시작하기 전에 iSER 구성 준비를 할 때 다음 사항을 고려하십시오 .  iSER 은 다음 운영 체제의 경우 인박스 OFED 에서만 지원됩니다 .   RHEL 7.1 및 7.2 SLES 12 및 12 SP1  I/O 트래픽을 실행하는 중에 대상에 로그인한 후에 Linux RoCE qedr 드라이 버를 언로드하면 시스템과 충돌할 수 있습니다 .
PAGE 129
8–iSER 구성 RHEL 용 iSER 구성 RHEL 용 iSER 구성 RHEL 용 iSER 을 구성하려면 : 1. 76 페이지의 "RHEL 의 RoCE 구성 " 에 설명된 대로 인박스 OFED 를 설치합 니다 . 아웃오브박스 (Out-of-box) OFED 3.18-2 GA/3.18-3 GA 버전에서 ib_isert 모듈을 사용할 수 없기 때문에 iSER 에서는 아웃오브박스 OFED 가 지원되지 않습니다 . 인박스 ib_isert 모듈은 아웃오브박스 OFED 버전과 작동 하지 않습니다 . 2. 10 페이지의 "Linux 드라이버 제거 " 에 설명된 대로 기존 FastLinQ 드라이버 를 업로드합니다 . 3. 14 페이지의 "RDMA 와 함께 Linux 설치 " 에 설명된 대로 최신 FastLinQ 드라 이버와 libqedr 패키지를 설치합니다 . 4. 다음과 같이 RDMA 서비스를 로드합니다 .
PAGE 130
8–iSER 구성 RHEL 용 iSER 구성 그림 8-1. RDMA Ping 성공 8. Linux TCM-LIO 대상을 사용하여 iSER 을 테스트할 수 있습니다 . 해당 포털 에서 enable_iser Boolean=true 명령을 발급할 때를 제외하면 모든 iSCSI 대상에 대한 설정이 동일합니다 . 그림 8-2 에서 포털 인스턴스는 iser 로 식 별됩니다 . 그림 8-2.
PAGE 131
8–iSER 구성 RHEL 용 iSER 구성 9. yum install iscsi-initiator-utils 명령을 사용하여 Linux iSCSI 초기 자 유틸리티를 설치합니다 . a. iSER 대상을 검색하려면 iscsiadm 명령을 발급합니다 . 예 : iscsiadm -m discovery -t st -p 192.168.100.99:3260 b. 전송 모드를 iSER 로 변경하려면 iscsiadm 명령을 발급합니다 . 예 : iscsiadm -m node -T iqn.2015-06.test.target1 -o update -n iface.transport_name -v iser c. iSER 대상에 연결하거나 로그인하려면 iscsiadm 명령을 발급합니다 . 예: iscsiadm -m node -l -p 192.168.100.99:3260 -T iqn.2015-06.test.target1 d.
PAGE 132
8–iSER 구성 SLES 12 용 iSER 구성 e. 그림 8-4 에서와 같이 새 iSCSI 장치가 있는지 확인하려면 lsscsi 명 령을 발급하십시오 . 그림 8-4. 새 iSCSI 장치가 있는지 확인 SLES 12 용 iSER 구성 targetcli 가 SLES 12.x 에서 인박스가 아니므로 다음 절차를 완료해야 합니다 . SLES 12 용 iSER 을 구성하려면 1. targetcli 를 설치하려면 ISO 이미지에서 다음 RPM 을 복사해 설치하십시오 (x86_64 및 noarch 위치 ). lio-utils-4.1-14.6.x86_64.rpm python-configobj-4.7.2-18.10.noarch.rpm python-PrettyTable-0.7.2-8.5.noarch.rpm python-configshell-1.5-1.44.noarch.rpm python-pyparsing-2.0.1-4.10.noarch.rpm python-netifaces-0.8-6.55.x86_64.
PAGE 133
8–iSER 구성 RHEL 및 SLES 에서 iWARP 와 함께 iSER 사용 4. targetcli 유틸리티를 시작하고 iSER 대상 시스템에서 대상을 구성합니다 . 주 targetcli 버전은 RHEL 과 SLES 에서 다릅니다 . 올바른 백스토어를 사 용해 대상을 구성해야 합니다 .  RHEL 은 ramdisk 를 사용함  SLES 는 rd_mcp 를 사용함 RHEL 및 SLES 에서 iWARP 와 함께 iSER 사용 iWARP 와 함께 작동하도록 RoCE 와 유사한 iSER 초기자 및 대상을 구성합니다 . 다양한 방법을 사용하여 Linux-IO Target(LIO™) 을 생성할 수 있는데 , 이 섹션에서 한 가지 방법을 설명합니다 . SLES 12 및 RHEL 7.x 에서는 버전 때문에 targetcli 구 성에 차이가 발생할 수 있습니다 . LIO 대상을 구성하려면 1. targetcli 유틸리티를 사용하여 LIO 대상을 생성합니다 . 다음 명령을 실행합 니다 .
PAGE 134
8–iSER 구성 RHEL 및 SLES 에서 iWARP 와 함께 iSER 사용 그림 8-5 은 LIO 용 대상 구성을 보여줍니다 . 그림 8-5. LIO 대상 구성 iWARP 초기자를 구성하려면 1. 포트 3261 을 사용하여 iSER LIO 대상을 검색하려면 다음과 같이 iscsiadm 명령을 발급합니다 . # iscsiadm -m discovery -t st -p 192.168.21.4:3261 -I iser 192.168.21.4:3261,1 iqn.2017-04.com.org.iserport1.target1 2. 다음과 같이 전송 모드를 iser 로 변경합니다 . # iscsiadm -m node -o update -T iqn.2017-04.com.org.iserport1.target1 -n iface.transport_name -v iser 3. 포트 3261 을 사용하여 대상에 로그인합니다 . # iscsiadm -m node -l -p 192.168.21.
PAGE 135
8–iSER 구성 Linux 성능 최적화 Linux 성능 최적화 이 섹션에서 설명하는 다음 Linux 성능 구성 개선 사항을 고려하시기 바랍니다 .  최대 성능 모드로 CPU 구성  커널 sysctl 설정 구성  IRQ Affinity 설정 구성  블록 장치 스테이징 구성 최대 성능 모드로 CPU 구성 모든 CPU 를 최대 성능 모드로 설정하려면 다음 스크립트를 사용해 CPU 배율 조 정 관리자를 구성하십시오 . for CPUFREQ in /sys/devices/system/cpu/cpu*/cpufreq/scaling_governor; do [ -f $CPUFREQ ] || continue; echo -n performance > $CPUFREQ; done 다음 명령을 발급해 모든 CPU 코어가 최대 성능 모드로 설정되어 있는지 확인하십 시오 .
PAGE 136
8–iSER 구성 ESXi 6.7 에서 iSER 구성 IRQ Affinity 설정 구성 다음 예제는 CPU 코어 0, 1, 2 및 3 을 각각 인터럽트 요청 (IRQ) XX, YY, ZZ 및 XYZ 로 설정합니다 . 포트에 할당된 각 IRQ 에 대해 이런 절차를 수행합니다 ( 기본값은 포트당 대기열 8 개 ).
PAGE 137
8–iSER 구성 ESXi 6.7 에서 iSER 구성 Interface Port Group/DVPort/Opaque Network Netmask Broadcast MAC Address IP Family IP Address MTU TSO MSS Enabled Type NetStack vmk0 Management Network 255.255.240.0 172.28.15.255 IPv4 e0:db:55:0c:5f:94 1500 172.28.12.94 65535 true DHCP defaultTcpipStack vmk0 Management Network 64 IPv6 e0:db:55:0c:5f:94 1500 fe80::e2db:55ff:fe0c:5f94 65535 true STATIC, PREFERRED defaultTcpipStack  iSER 대상은 iSER 초기자와 통신하도록 구성됩니다 . ESXi 6.7 에서 iSER 구성 ESXi 6.
PAGE 138
8–iSER 구성 ESXi 6.7 에서 iSER 구성 esxcli network vswitch standard uplink add -u vmnic5 -v vSwitch_iser1 esxcli network vswitch standard portgroup add -p "rdma_group1" -v vSwitch_iser1 esxcli network ip interface add -i vmk1 -p "rdma_group1" esxcli network ip interface ipv4 set -i vmk1 -I 192.168.10.100 -N 255.255.255.
PAGE 139
8–iSER 구성 ESXi 6.7 에서 iSER 구성 5. 연결된 대상을 다음과 같이 나열합니다 . esxcfg-scsidevs -l mpx.vmhba0:C0:T4:L0 Device Type: CD-ROM Size: 0 MB Display Name: Local TSSTcorp CD-ROM (mpx.vmhba0:C0:T4:L0) Multipath Plugin: NMP Console Device: /vmfs/devices/cdrom/mpx.vmhba0:C0:T4:L0 Devfs Path: /vmfs/devices/cdrom/mpx.vmhba0:C0:T4:L0 Vendor: TSSTcorp SCSI Level: 5 Model: DVD-ROM SN-108BB Revis: D150 Is Pseudo: false Status: on Is RDM Capable: false Is Removable: true Is Local: true Is SSD: false Other Names: vml.
PAGE 140
9 iSCSI 구성 이 장에서는 다음과 같은 iSCSI 구성 정보를 제공합니다 .  iSCSI 부트  124 페이지의 "iSCSI 부팅 구성 "  135 페이지의 "DHCP 서버가 iSCSI 부트를 지원하도록 구성 "  139 페이지의 "Windows Server 의 iSCSI Offload"  148 페이지의 "Linux 환경의 iSCSI Offload"  163 페이지의 "RHEL 7.4 이상일 때 SAN 에서 iSCSI 부팅 구성 " 주 현재 릴리스에서 일부 iSCSI 기능은 완전히 사용하지 못할 수도 있습니다 . 자세한 정보는 부록 D 기능 제약 조건에서 확인할 수 있습니다 . iSCSI 부트 Cavium 4xxxx 시리즈 GbE(Gigabit Ethernet) 어댑터는 디스크 없는 시스템에 대한 운영 체제의 네트워크 부트를 위해 iSCSI 부트를 지원합니다 .
PAGE 141
9–iSCSI 구성 iSCSI 부트 iSCSI 부트 설정 iSCSI 부트 설정은 다음을 포함합니다 .  기본 설정된 iSCSI 부팅 모드 선택  iSCSI 대상 구성  iSCSI 부팅 매개변수 구성 기본 설정된 iSCSI 부팅 모드 선택 부팅 모드 옵션은 어댑터의 iSCSI Configuration(iSCSI 구성 )( 그림 9-1) 아래에 표시되어 있고 , 설정은 포트별로 구성됩니다 . UEFI HII 아래의 장치 레벨 구성 메 뉴에 액세스하는 방법은 OEM 사용 설명서를 참조하십시오 . 그림 9-1. 시스템 설정 : NIC 구성 주 SAN 부트에서 부팅 기능은 NPAR 모드에서만 지원되며 레거시 BIOS 가 아 니라 UEFI 로 구성됩니다 .
PAGE 142
9–iSCSI 구성 iSCSI 부트 iSCSI 대상 구성 iSCSI 대상 구성은 대상 공급업체에 따라 다릅니다 . iSCSI 대상 구성에 대한 자세 한 내용은 공급업체가 제공한 설명서를 참조하십시오 . iSCSI 대상을 구성하려면 1. 다음 중에서 iSCSI 대상을 기준으로 알맞은 절차를 선택합니다 .  SANBlaze® 또는 IET® 같은 대상을 위한 iSCSI 대상을 생성합니다 .  EqualLogic® 또는 EMC® 같은 대상을 위한 vdisk 또는 볼륨을 생성합니다. 2. 가상 디스크를 생성합니다 . 3. 단계 1 에서 생성한 iSCSI 대상에 가상 디스크를 매핑합니다 . 4. iSCSI 대상에 iSCSI 초기자를 연결합니다 . 다음의 정보를 기록합니다 .      5.
PAGE 143
9–iSCSI 구성 iSCSI 부트 iSCSI 부팅 매개변수 구성 QLogic iSCSI 부트 소프트웨어를 정적 또는 동적 구성으로 구성합니다 . General Parameters( 일반 매개변수 ) 창에서 사용 가능한 구성 옵션은 IPv4 및 IPv6 모두의 매개변수가 나열되어 있는 표 9-1 을 참조하십시오 . IPv4 또는 IPv6 전용 매개변수 는 따로 표시되어 있습니다 . 주 IPv6 iSCSI 부팅의 가용성은 플랫폼 및 장치에 따라 다릅니다 . 표 9-1. 구성 옵션 옵션 설명 TCP/IP parameters via DHCP (DHCP 를 통한 TCP/IP 매개변수 ) 이 옵션은 IPv4 에 한정됩니다 . iSCSI 부트 호스트 소프트웨어가 DHCP(Enabled 사용 ) 를 통해 IP 주소 정보를 획득할지 또는 정적 IP 구성 (Disabled 사용 안 함 ) 을 사용할지 여부를 제어합니다 .
PAGE 144
9–iSCSI 구성 iSCSI 부트 어댑터 UEFI 부팅 모드 구성 부팅 모드를 구성하려면 1. 시스템을 다시 시작합니다 . 2. System Utilities( 시스템 유틸리티 ) 메뉴 ( 그림 9-2) 에 액세스합니다 . 주 SAN 부팅은 UEFI 환경에서만 지원됩니다 . 시스템 부팅 옵션이 레거시 가 아니라 UEFI 인지 확인합니다 . 그림 9-2.
PAGE 145
9–iSCSI 구성 iSCSI 부트 3. System Setup( 시스템 설정 ) 에서 Device Settings( 장치 설정 ) 를 선택한 후 QLogic 장치를 선택합니다 ( 그림 9-3). PCI 장치 구성 메뉴에 액세스하는 방 법은 OEM 사용 설명서를 참조하십시오 . 그림 9-3.
PAGE 146
9–iSCSI 구성 iSCSI 부트 4. Main Configuration Page( 기본 구성 페이지 ) 에서 NIC Configuration(NIC 구성 )( 그림 9-4) 을 선택한 다음 ENTER 키를 누릅니다 . 그림 9-4.
PAGE 147
9–iSCSI 구성 iSCSI 부팅 구성 5. NIC Configuration(NIC 구성 ) 페이지에서 ( 그림 9-5) Boot Protocol( 부팅 프 로토콜 ) 을 선택한 다음 ENTER 키를 눌러 UEFI iSCSI HBA 를 선택합니다 (NPAR 모드 필수 ). 그림 9-5. 시스템 설정 : NIC 구성 , 부팅 프로토콜 6. 다음 구성 옵션 중 하나를 진행합니다 .  124 페이지의 " 정적 iSCSI 부트 구성 "  132 페이지의 " 동적 iSCSI 부팅 구성 " iSCSI 부팅 구성 iSCSI 부팅 구성 옵션은 다음을 포함합니다 .  정적 iSCSI 부트 구성  동적 iSCSI 부팅 구성  CHAP 인증 활성화 정적 iSCSI 부트 구성 정적 구성에서는 다음에 대한 데이터를 입력해야 합니다 .
PAGE 148
9–iSCSI 구성 iSCSI 부팅 구성 정적 구성을 사용하여 iSCSI 부트 매개변수를 구성하는 방법 : 1. Device HII Main Configuration Page( 장치 HII 기본 구성 페이지 ) 에서 iSCSI Configuration (iSCSI 구성 )( 그림 9-6) 을 선택한 후 ENTER 키를 누 릅니다 . 그림 9-6. 시스템 설정 : iSCSI 구성 2. iSCSI Configuration(iSCSI 구성 ) 페이지에서 iSCSI General Parameters (iSCSI 일반 매개변수 )( 그림 9-7) 를 선택한 후 ENTER 키를 누릅니다 . 그림 9-7.
PAGE 149
9–iSCSI 구성 iSCSI 부팅 구성 3. iSCSI General Parameters(iSCSI 일반 매개변수 ) 페이지 ( 그림 9-8) 에서 위 쪽 화살표 및 아래쪽 화살표 키를 눌러 매개변수를 선택한 후 ENTER 키를 눌 러 다음 값을 선택하거나 입력합니다 .
PAGE 150
9–iSCSI 구성 iSCSI 부팅 구성 5. iSCSI Initiator Parameters(iSCSI 초기자 매개변수 )( 그림 9-9) 를 선택한 다음 ENTER 키를 누릅니다 . 그림 9-9. 시스템 설정 : iSCSI 초기자 매개변수 선택 6. iSCSI Initiator Parameters(iSCSI 초기자 매개변수 ) 페이지 ( 그림 9-10) 에서 다음 매개변수를 선택한 후 각 매개변수의 값을 입력합니다 .  IPv4* Address(IPv4* 주소 )  Subnet Mask( 서브넷 마스크 )  IPv4* Default Gateway(IPv4* 기본 게이트웨이 )  IPv4* Primary DNS(IPv4* 기본 DNS)  IPv4* Secondary DNS(IPv4* 보조 DNS)  iSCSI Name(iSCSI 이름 ). 클라이언트 시스템이 사용할 iSCSI 초기자 이름에 해당합니다 .
PAGE 151
9–iSCSI 구성 iSCSI 부팅 구성 주 앞에서 별표 (*) 가 있는 항목에 대해서는 다음 사항을 참고하십시오 .  레이블은 iSCSI General Parameters(iSCSI 일반 매개변수 ) 페이지 (126 페이지의 그림 9-8)에서 설정된 IP 버전을 기준으로 IPv6 또는 IPv4( 기본값 ) 로 변경됩니다 .  IP 주소를 정확하게 입력합니다 . 중복되거나 잘못된 세그먼트 또는 네트워크 할당을 찾아내기 위해 IP 주소에서 오류를 확인하는 과정 이 없습니다 . 그림 9-10. 시스템 설정 : iSCSI 초기자 매개변수 7. iSCSI Configuration(iSCSI 구성 ) 페이지로 돌아간 다음 ESC 키를 누릅니다 .
PAGE 152
9–iSCSI 구성 iSCSI 부팅 구성 8. iSCSI First Target Parameters(iSCSI 일차 대상 매개변수 )( 그림 9-11) 를 선택한 다음 ENTER 키를 누릅니다 . 그림 9-11. 시스템 설정 : iSCSI 일차 대상 매개변수 선택 9. iSCSI First Target Parameters(iSCSI 일차 대상 매개변수) 페이지에서 iSCSI 대상에 대한 Connect( 연결 ) 옵션을 Enabled( 사용 가능 ) 로 설정합니다 . 10. iSCSI 대상에 대해 다음 매개변수의 값을 입력한 후 ENTER 키를 누릅니다 .
PAGE 153
9–iSCSI 구성 iSCSI 부팅 구성 그림 9-12. 시스템 설정 : iSCSI 일차 대상 매개변수 11. iSCSI Boot Configuration(iSCSI 부팅 구성 ) 페이지로 돌아간 다음 ESC 키를 누릅니다 .
PAGE 154
9–iSCSI 구성 iSCSI 부팅 구성 12. iSCSI 이차 대상 장치를 구성하려면 iSCSI Second Target Parameters (iSCSI 이차 대상 매개변수 )( 그림 9-13) 를 선택하고 단계 10 에서처럼 매개 변수 값을 입력합니다 . 그렇지 않으면 단계 13 로 진행합니다 . 그림 9-13. 시스템 설정 : iSCSI 이차 대상 매개변수 13. ESC 키를 한 번 누르고 종료하려면 한 번 더 누릅니다 .
PAGE 155
9–iSCSI 구성 iSCSI 부팅 구성 14. 변경 내용을 저장하려면 Yes( 예 ) 를 클릭하고 , 장치 레벨 구성을 저장하려 면 OEM 지침을 따르십시오 . 예를 들어 설정 변경 내용을 확인하려면 Yes ( 예 ) 를 클릭하십시오 ( 그림 9-14). 그림 9-14. 시스템 설정 : iSCSI 변경 내용 저장 15. 모든 변경 작업을 수행한 후 시스템을 다시 부팅하여 변경 내용을 어댑터의 실행 중인 구성에 적용합니다 . 동적 iSCSI 부팅 구성 동적 구성에서는 DHCP 서버에서 시스템 IP 주소와 대상 ( 또는 초기자 ) 정보가 제 공되는지 확인하십시오 (135 페이지의 "DHCP 서버가 iSCSI 부트를 지원하도록 구 성 " 에서 IPv4 및 IPv6 구성 참조 ). 다음 매개변수에 대한 설정은 모두 무시되고 지울 필요가 없습니다 ( 단 , IPv4 를 위한 초기자 iSCSI 이름 , CHAP ID 및 IPv6 를 위한 CHAP 암호는 예외 ).
PAGE 156
9–iSCSI 구성 iSCSI 부팅 구성 구성 옵션에 대한 자세한 내용은 120 페이지의 표 9-1 을 참조하십시오 . 주 DHCP 서버를 사용할 때 DNS 서버 항목을 DHCP 서버에서 제공한 값으로 덮 어씁니다 . 이 재정의 문제는 로컬로 제공된 값이 유효하고 DHCP 서버가 DNS 서버 정보를 제공하지 않는 경우에도 발생합니다 . DHCP 서버가 DNS 서버 정보를 제공하지 않으면 주 및 보조 DNS 서버 값이 0.0.0.0 으로 설정 됩니다 . Windows OS 가 사용되면 , Microsoft iSCSI 초기자는 iSCSI 초기자 매개변수를 검색하고 적절한 레지스트리를 정적으로 구성합니다 . 이때 이전 에 구성된 내용은 모두 덮어씁니다 . DHCP 데몬은 Windows 환경에서 사용 자 프로세스로 실행되므로 iSCSI 부트 환경에서 스택이 시작되기 전에 모든 TCP/IP 매개변수를 정적으로 구성해야 합니다 .
PAGE 157
9–iSCSI 구성 iSCSI 부팅 구성 그림 9-15. 시스템 설정 : iSCSI 일반 매개변수 CHAP 인증 활성화 CHAP 인증이 대상에 활성화되어 있는지 확인합니다 . CHAP 인증 사용 : 1. iSCSI General Parameters(iSCSI 일반 매개변수 ) 페이지로 이동합니다 . 2. CHAP Authentication(CHAP 인증 ) 을 Enabled( 사용 가능 ) 로 설정합니다 . 3. Initiator Parameters( 초기자 매개변수 ) 화면에서 다음 값을 입력합니다 .  CHAP ID( 최대 255 자 )  CHAP Secret(CHAP 암호 ) ( 인증이 필요한 경우 문자 수는 12~16 자가 되어야 합니다 ) 4. ESC 키를 눌러 iSCSI Boot configuration(iSCSI 부팅 구성 ) 페이지로 돌아갑 니다 . 5.
PAGE 158
9–iSCSI 구성 DHCP 서버가 iSCSI 부트를 지원하도록 구성 6. iSCSI First Target Parameters(iSCSI 일차 대상 매개변수 ) 창에서 iSCSI 대 상을 구성할 때 사용되는 값을 입력합니다 .  CHAP ID( 양방향 CHAP 인 경우 옵션 )  CHAP Secret(CHAP 암호 ) ( 옵션이지만 양방향 CHAP 인 경우 문자 수 는 12~16 자가 되거나 , 혹은 더 길어야 합니다 ) 7. ESC 키를 눌러 iSCSI Boot configuration(iSCSI 부팅 구성 ) 페이지로 돌아갑 니다 . 8. ESC 키를 누른 다음 Save Configuration( 구성 저장 ) 을 선택하여 확인합니다 . DHCP 서버가 iSCSI 부트를 지원하도록 구성 DHCP 서버는 옵션 구성 요소이며 동적 iSCSI 부팅 구성 설정을 수행할 경우에만 필요합니다 (132 페이지의 " 동적 iSCSI 부팅 구성 " 참조 ).
PAGE 159
9–iSCSI 구성 DHCP 서버가 iSCSI 부트를 지원하도록 구성 표 9-2 에는 DHCP Option 17 매개변수가 표시되어 있습니다 . 표 9-2. DHCP Option 17 매개변수 정의 매개변수 정의 "iscsi:" 리터럴 문자열 iSCSI 대상의 IP 주소 또는 FQDN( 정규화된 도메인 이름 ) ":" 구분 기호 iSCSI 대상에 액세스하는 데 사용되는 IP 프로토콜입니다 . 현재는 TCP 만 지원되므로 프로토콜은 6 입니다 . 프로토콜과 관련된 포트 번호입니다 . iSCSI 의 표준 포트 번호는 3260 입니다 . iSCSI 대상에서 사용하기 위한 논리 단위 번호입니다 . LUN 값은 16 진법으로 표시되어야 합니다 . ID 가 64 인 LUN 은 DHCP 서버 의 Option 17 매개변수 내에서 40 으로 구성되어야 합니다 .
PAGE 160
9–iSCSI 구성 DHCP 서버가 iSCSI 부트를 지원하도록 구성 표 9-3 에는 DHCP Option 43 하위 옵션이 표시되어 있습니다 . 표 9-3. DHCP Option 43 하위 옵션 정의 하위 옵션 201 정의 표준 루트 경로 형식의 첫 번째 iSCSI 대상 정보 "iscsi:"":"":"":"": "" 202 표준 루트 경로 형식의 두 번째 iSCSI 대상 정보 "iscsi:"":"":"":"": "" 203 iSCSI 초기자 IQN DHCP Option 43 을 사용하려면 DHCP Option 17 보다 많은 구성이 필요하지만 , 이 옵션은 풍부한 환경과 여러 구성 옵션을 제공합니다 . QLogic 은 동적 iSCSI 부 팅 구성을 수행할 때는 DHCP Option 43 을 사용해야 합니다 .
PAGE 161
9–iSCSI 구성 DHCP 서버가 iSCSI 부트를 지원하도록 구성 IPv6 를 위한 DHCP iSCSI 부팅 구성 DHCPv6 서버는 무상태 또는 상태 저장 IP 구성을 비롯한 여러 옵션과 정보를 DHCPv6 클라이언트에 제공할 수 있습니다 . iSCSI 부트의 경우 , QLogic 어댑터는 다음과 같은 DHCP 구성을 지원합니다 .  DHCPv6 Option 16(DHCPv6 옵션 16), 공급업체 클래스 옵션  DHCPv6 Option 17(DHCPv6 옵션 17), 공급업체 정보 주 DHCPv6 표준 루트 경로 옵션은 아직 사용할 수 없습니다 . QLogic 은 동적 iSCSI 부트 IPv6 지원에 대해 Option 16 또는 Option 17 을 사용할 것을 권장 합니다 .
PAGE 162
9–iSCSI 구성 Windows Server 의 iSCSI Offload Option 17 의 내용은 다음과 같아야 합니다 . <2-byte Option Number 201|202|203> <2-byte length> iSCSI 부팅용 VLAN 구성 네트워크의 iSCSI 트래픽을 일반 트래픽과 분리하기 위해 Layer 2 VLAN 에서 격리 할 수 있습니다 . 이 경우 어댑터에서 iSCSI 인터페이스를 해당 VLAN 의 멤버로 만 드십시오 . iSCSI 부팅용 VLAN 을 구성하려면 1. 포트에 대한 iSCSI Configuration Page(iSCSI 구성 페이지 ) 로 이동합니다 . 2. iSCSI General Parameters(iSCSI 일반 매개변수 ) 를 선택합니다 . 3. 그림 9-16 에 표시된 것처럼 , VLAN ID 를 선택하여 VLAN 값을 입력하고 설 정합니다 . 그림 9-16.
PAGE 163
9–iSCSI 구성 Windows Server 의 iSCSI Offload 올바른 iSCSI Offload 라이선스가 있으면 호스트 프로세서에서 iSCSI 처리를 오프 로드하도록 iSCSI 지원 41xxx 시리즈 어댑터를 구성할 수 있습니다 . 다음 섹션에 서는 시스템이 QLogic 의 iSCSI Offload 기능을 활용할 수 있도록 하는 방법을 설명 합니다 .  QLogic 드라이버 설치  Microsoft iSCSI 초기자 설치  QLogic 의 iSCSI Offload 를 사용하도록 Microsoft 초기자 구성  iSCSI Offload FAQ  Windows Server 2012 R2 및 2016 iSCSI 부팅 설치  iSCSI Crash Dump QLogic 드라이버 설치 17 페이지의 "Windows 드라이버 소프트웨어 설치 " 에 설명된 대로 Windows 드라 이버를 설치합니다 .
PAGE 164
9–iSCSI 구성 Windows Server 의 iSCSI Offload 그림 9-17. iSCSI 초기자 속성 , 구성 페이지 c. iSCSI Initiator Name(iSCSI 초기자 이름 ) 대화 상자에서 새 초기자 IQN 이름을 입력하고 OK( 확인 ) 를 클릭합니다 . ( 그림 9-18) 그림 9-18. iSCSI 초기자 노드 이름 변경 3. iSCSI 초기자 속성에서 Discovery( 검색 ) 탭을 클릭합니다 .
PAGE 165
9–iSCSI 구성 Windows Server 의 iSCSI Offload 4. Target portal( 대상 포털 ) 의 Discovery( 검색 ) 페이지 ( 그림 9-19) 에서 Discover Portal( 포털 검색 ) 을 클릭합니다 . 그림 9-19.
PAGE 166
9–iSCSI 구성 Windows Server 의 iSCSI Offload 5. Discover Target Portal( 대상 포털 검색 ) 대화 상자 ( 그림 9-20) 에서 다음 작 업을 수행합니다 . a. IP address or DNS name(IP 주소 또는 DNS 이름 ) 입력란에 대상의 IP 주소를 입력합니다 . b. Advanced( 고급 ) 를 클릭합니다 . 그림 9-20. 대상 포털 IP 주소 6. Advanced Settings( 고급 설정 ) 대화 상자 ( 그림 9-21) 에서 Connect using ( 다음을 사용하여 연결 ) 아래에서 다음을 완료합니다 . a. Local adapter( 로컬 어댑터 ) 에서 QLogic Adapter (QLogic < 이름 또는 모델 > 어댑터 ) 를 선택합니다 . b. Initiator IP( 초기자 IP) 에는 어댑터 IP 주소를 선택합니다 . c. OK( 확인 ) 를 클릭합니다 .
PAGE 167
9–iSCSI 구성 Windows Server 의 iSCSI Offload 그림 9-21. 초기자 IP 주소 선택 7. iSCSI Initiator Properties(iSCSI 초기자 속성 ) 의 Discovery( 검색 ) 페이지에 서 OK( 확인 ) 를 클릭합니다 .
PAGE 168
9–iSCSI 구성 Windows Server 의 iSCSI Offload 8. Targets( 대상 ) 탭을 클릭한 다음 Targets( 대상 ) 페이지 ( 그림 9-22) 에서 Connect( 연결 ) 를 클릭합니다 . 그림 9-22.
PAGE 169
9–iSCSI 구성 Windows Server 의 iSCSI Offload 9. Connect To Target( 대상에 연결 ) 대화 상자 ( 그림 9-23) 에서 Advanced ( 고급 ) 를 클릭합니다 . 그림 9-23. Connect To Target( 대상에 연결 ) 대화 상자 10. Local Adapter( 로컬 어댑터 ) 대화 상자에서 QLogic Adapter(QLogic < 이름 또는 모델 > 어댑터 ) 를 선택하고 OK( 확인 ) 를 클릭 합니다 . 11. OK( 확인 ) 를 다시 클릭하여 Microsoft 초기자를 닫습니다 . 12. iSCSI 파티션을 포맷하려면 디스크 관리자를 사용하십시오 . 주 티밍 기능의 제한 사항은 다음과 같습니다 .  팀 구성은 iSCSI 어댑터를 지원하지 않습니다 .  팀 구성은 부트 경로에 포함된 NDIS 어댑터를 지원하지 않습니다 .
PAGE 170
9–iSCSI 구성 Windows Server 의 iSCSI Offload 질문 : 답변 : 연결의 Offload 여부는 어떻게 확인합니까 ? Microsoft iSCSI 소프트웨어 초기자를 사용합니다 . 명령줄에서 oiscsicli sessionlist 를 입력합니다 . Initiator Name( 초기자 이 름 ) 에서 iSCSI Offload 연결이 B06BDRV 로 시작하는 항목을 표시합 니다 . 비 Offload 연결은 Root 로 시작하는 항목을 표시합니다 . 질문 : 무슨 구성을 피해야 합니까 ? 답변 : IP 주소가 LAN 과 동일하면 안 됩니다 . Windows Server 2012 R2 및 2016 iSCSI 부팅 설치 Windows Server 2012 R2 및 2016 은 Offload 또는 비 Offload 경로를 통한 부팅 및 설치를 지원합니다 . 최신 QLogic 드라이버가 삽입된 통합 설치 DVD 를 사용해야 합니다 .
PAGE 171
9–iSCSI 구성 Linux 환경의 iSCSI Offload 10. 서버가 OS 로 부팅하면 , 드라이버 설치 프로그램을 실행하여 드라이버 및 응 용프로그램 설치를 완료하는 것이 좋습니다 . iSCSI Crash Dump 크래시 덤프 기능은 41xxx 시리즈 어댑터에서 비 Offload 와 Offload iSCSI 부팅에 모 두 지원됩니다 . iSCSI 크래시 덤프를 생성하는 데 추가 구성은 필요하지 않습니다 . Linux 환경의 iSCSI Offload QLogic FastLinQ 41xxx iSCSI 소프트웨어는 qedi.ko(qedi) 라는 단일 커널 모듈로 구성됩니다 . qedi 모듈은 다음과 같이 특정 기능을 위한 Linux 커널의 추가 부분에 종속됩니다 .  qed.ko 는 공통 QLogic FastLinQ 41xxx 하드웨어 초기화 루틴에 사용되는 Linux eCore 커널 모듈입니다 .  scsi_transport_iscsi.
PAGE 172
9–iSCSI 구성 Linux 환경의 iSCSI Offload bnx2i 와의 차이점 qedi(QLogic FastLinQ 41xxx 시리즈 어댑터용 드라이버 (iSCSI)) 와 이전의 QLogic iSCSI Offload 드라이버 (QLogic 8400 시리즈 어댑터용 bnx2i) 사이에는 몇 가지 주요 차이점이 있습니다 . 그중 몇 가지는 다음과 같습니다 .  qedi 는 CNA 에 의해 노출되는 PCI 기능에 직접 바인드합니다 .  qedi 는 net_device 상에 위치하지 않습니다 .  qedi 는 네트워크 드라이버 ( 예 : bnx2x 와 cnic) 에 종속되지 않습니다 .  qedi 는 cnic 에 종속되지 않지만 qed 에는 종속됩니다 .  qedi는 iscsi_boot_sysfs.ko 를 사용하여 sysfs에서 부팅 정보를 내보내는 역할을 맡는 반면 , bnx2i 의 SAN 에서 부팅 기능은 iscsi_ibft.ko 모듈을 사용하여 부팅 정보를 내보냅니다 .
PAGE 173
9–iSCSI 구성 Linux 환경의 iSCSI Offload # lsmod | grep qedi 2. qedi 114578 2 qed 697989 1 qedi uio 19259 4 cnic,qedi libiscsi 57233 2 qedi,bnx2i scsi_transport_iscsi 99909 5 qedi,bnx2i,libiscsi iscsi_boot_sysfs 16000 1 qedi iSCSI 인터페이스가 올바르게 감지되었는지 확인하려면 다음 명령을 실행합 니다 . 이 예에서는 두 개의 iSCSI CNA 장치가 SCSI 호스트 번호 4 와 5 로 감 지됩니다 . # dmesg | grep qedi [0000:00:00.0]:[qedi_init:3696]: QLogic iSCSI Offload Driver v8.15.6.0. .... [0000:42:00.
PAGE 174
9–iSCSI 구성 Linux 환경의 iSCSI Offload CGroup: /system.slice/iscsiuio.service !--3747 /usr/sbin/iscsiuio Jan 27 16:33:58 localhost.localdomain systemd[1]: Starting iSCSI UserSpace I/O driver... Jan 27 16:33:58 localhost.localdomain systemd[1]: Started iSCSI UserSpace I/O driver. 5. iSCSI 대상을 검색하려면 iscsiadm 명령을 실행합니다 . #iscsiadm -m discovery -t st -p 192.168.25.100 -I qedi.00:0e:1e:c4:e1:6c 192.168.25.100:3260,1 iqn.200304.com.sanblaze:virtualun.virtualun.target-05000007 192.168.25.100:3260,1 iqn.2003-04.
PAGE 175
9–iSCSI 구성 Linux 환경의 iSCSI Offload scsi59 Channel 00 Id 0 Lun: 0 Attached scsi disk sdb State: running scsi59 Channel 00 Id 0 Lun: 1 Attached scsi disk sdc State: running scsi59 Channel 00 Id 0 Lun: 2 Attached scsi disk sdd State: running scsi59 Channel 00 Id 0 Lun: 3 Attached scsi disk sde State: running scsi59 Channel 00 Id 0 Lun: 4 Attached scsi disk sdf State: running 고급 대상 구성에 대해서는 다음 URL 에서 Open-iSCSI README 를 참조하십시오 . https://github.
PAGE 176
9–iSCSI 구성 Linux 환경의 iSCSI Offload 4. 대상 LUN 에 OS 를 설치합니다 . 5. 해당 운영 체제 지침에 따라 비 오프로드 인터페이스에서 오프로드 인터페이 스로 마이그레이션합니다 .  SAN 마이그레이션에서 RHEL 6.9 iSCSI L4 부팅  SAN 마이그레이션에서 RHEL 7.2/7.3 iSCSI L4 부팅  SAN 마이그레이션에서 SLES 11 SP4 iSCSI L4 부팅  SAN 마이그레이션에서 SLES 12 SP1/SP2 iSCSI L4 부팅  MPIO 를 이용해 SAN 마이그레이션에서 SLES 12 SP1/SP2 iSCSI L4 부팅 SAN 마이그레이션에서 RHEL 6.9 iSCSI L4 부팅 비 오프로드 인터페이스에서 오프로드 인터페이스로 마이그레이션하려면 1. iSCSI 비 오프로드 / L2 SAN 에서 부팅 운영 체제로 부팅합니다 . 다음 명령을 실행하여 open-iscsi 및 iscsiuio RPM 을 설치합니다 .
PAGE 177
9–iSCSI 구성 Linux 환경의 iSCSI Offload 예: ###################### # iscsid daemon config ###################### # If you want iscsid to start the first time a iscsi tool # needs to access it, instead of starting it when the init # scripts run, set the iscsid startup command here. This # should normally only need to be done by distro package # maintainers. # # Default for Fedora and RHEL. (uncomment to activate). #iscsid.startup = /etc/rc.d/init.
PAGE 178
9–iSCSI 구성 Linux 환경의 iSCSI Offload 6. /boot/efi/EFI/redhat/grub.conf 파일을 편집해 다음과 같이 변경한 후 파일을 저장합니다 .    ifname=eth5:14:02: 을 제거합니다 .ec:ce:dc:6d ip=ibft 를 제거합니다 . selinux=0 을 추가합니다 . 예: kernel /vmlinuz-2.6.32-696.el6.x86_64 ro root=/dev/mapper/vg_prebooteit-lv_root rd_NO_LUKS iscsi_firmware LANG=en_US.
PAGE 179
9–iSCSI 구성 Linux 환경의 iSCSI Offload 11. Main Configuration( 기본 구성 ) 페이지에서 Boot Protocol( 부팅 프로토콜 ) 을 UEFI iSCSI HBA 로 설정합니다 . 12. 구성을 저장하고 서버를 다시 부팅합니다 . 주 이제는 OS 가 오프로드 인터페이스를 통해 부팅할 수 있습니다 . SAN 마이그레이션에서 RHEL 7.2/7.3 iSCSI L4 부팅 비 오프로드 인터페이스에서 오프로드 인터페이스로 마이그레이션하려면 1. 다음 명령을 실행하여 open-iscsi 도구와 iscsiuio 를 업데이트합니다 . #rpm -ivh qlgc-open-iscsi-2.0_873.111.rhel7u3-3.x86_64.rpm --force #rpm -ivh iscsiuio-2.11.5.3-2.rhel7u3.x86_64.rpm --force 2. 다음 명령을 실행하여 모든 데몬 서비스를 다시 로드합니다 .
PAGE 180
9–iSCSI 구성 Linux 환경의 iSCSI Offload 7. /usr/libexec/iscsi-mark-root-node 파일을 편집하고 다음 문을 찾습니 다. if [ "$transport" = bnx2i ]; then start_iscsiuio=1 다음과 같이 IF 식에 || [ "$transport" = qedi ] 를 추가합니다 . if [ "$transport" = bnx2i ] || [ "$transport" = qedi ]; then start_iscsiuio=1 8. /etc/default/grub 파일을 편집하고 다음 문을 찾습니다 . GRUB_CMDLINE_LINUX="iscsi_firmware ip=ibft" 이 문을 다음 문으로 변경합니다 . GRUB_CMDLINE_LINUX="rd.iscsi.firmware" 9. 다음 명령을 실행하여 새 grub.cfg 파일을 생성합니다 . # grub2-mkconfig -o /boot/efi/EFI/redhat/grub.
PAGE 181
9–iSCSI 구성 Linux 환경의 iSCSI Offload 15. 구성을 저장하고 서버를 다시 부팅합니다 . 주 이제는 OS 가 오프로드 인터페이스를 통해 부팅할 수 있습니다 . SAN 마이그레이션에서 SLES 11 SP4 iSCSI L4 부팅 비 오프로드 인터페이스에서 오프로드 인터페이스로 마이그레이션하려면 1. 다음 명령을 실행하여 open-iscsi 도구와 iscsiuio 를 최신 버전으로 업데이트 합니다 . # rpm -ivh qlgc-open-iscsi-2.0_873.111.sles11sp4-3.x86_64.rpm --force # rpm -ivh iscsiuio-2.11.5.3-2.sles11sp4.x86_64.rpm --force 2. /etc/elilo.conf 파일을 편집하고 다음과 같이 변경한 후 파일을 저장합 니다 . 3.  ip=ibft 매개변수 ( 있는 경우 ) 를 삭제합니다 .  iscsi_firmware 를 추가합니다 .
PAGE 182
9–iSCSI 구성 Linux 환경의 iSCSI Offload 8. HII 에서 iSCSI 오프로드 모드를 활성화합니다 . a. Main Configuration( 기본 구성 ) 페이지에서 System Setup( 시스템 설 정 ), Device Settings( 장치 설정 ) 를 선택합니다 . b. Device Settings( 장치 설정 ) 페이지에서 iSCSI 부팅 펌웨어 테이블 (iBFT) 이 구성된 포트를 선택합니다 . c. System Setup( 시스템 설정 ) 페이지에서 NIC Partitioning Configuration(NIC 분할 구성 ), Partition 3 Configuration( 파티션 3 구성 ) 을 선택합니다 . d. Partition 3 Configuration( 파티션 3 구성 ) 페이지에서 iSCSI Offload Mode(iSCSI Offload 모드 ) 를 Eabled( 활성화 ) 로 설정합니다 . 9.
PAGE 183
9–iSCSI 구성 Linux 환경의 iSCSI Offload 4. 다음 명령을 실행합니다 . cat /proc/cmdline 5. OS 가 ip=ibft 또는 rd.iscsi.ibft 같은 부팅 옵션을 보존해왔는지 확인 합니다 .   6. 보존된 부팅 옵션이 있으면 단계 6 로 계속 진행합니다 . 보존된 부팅 옵션이 없으면 단계 6 c 로 건너뜁니다 . /etc/default/grub 파일을 편집하고 GRUB_CMDLINE_LINUX 값을 수정합 니다 . a. rd.iscsi.ibft( 있는 경우 ) 를 제거합니다 . b. 모든 ip= 부팅 옵션을 제거합니다 . ( 있는 경우 ) c. rd.iscsi.firmware 를 추가합니다 . 이전 distros 에 iscsi_firmware 를 추가합니다 . 7. 8. 원본 grub.cfg 파일의 백업을 생성합니다 . 파일은 아래의 위치에 있습니다 .  레거시 부팅 : /boot/grub2/grub.
PAGE 184
9–iSCSI 구성 Linux 환경의 iSCSI Offload 14. Main Configuration( 기본 구성 ) 페이지에서 iSCSI General Parameters (iSCSI 일반 매개변수 ) 를 선택한 후 HBA Boot Mode(HBA 부팅 모드 ) 를 Enabled( 활성화 ) 로 설정합니다 . 15. Main Configuration( 기본 구성 ) 페이지에서 Boot Protocol( 부팅 프로토콜 ) 을 UEFI iSCSI HBA 로 설정합니다 . 16. 구성을 저장하고 서버를 다시 부팅합니다 . 주 이제는 OS 가 오프로드 인터페이스를 통해 부팅할 수 있습니다 . MPIO 를 이용해 SAN 마이그레이션에서 SLES 12 SP1/SP2 iSCSI L4 부팅 L2 에서 L4 로 마이그레이션하고 MPIO(Microsoft Multipath I/O) 설정을 구성하 여 오프로드된 인터페이스를 통해 OS 를 부팅하려면 1.
PAGE 185
9–iSCSI 구성 Linux 환경의 iSCSI Offload 8. 다음 명령을 실행하여 다중 경로 모듈을 initrd 에 삽입합니다 . dracut --force --add multipath --include /etc/multipath 9. 서버를 재부팅하여 POST 메뉴에서 F9 키를 눌러 시스템 설정으로 전환합 니다 . 10. L4 iSCSI 부팅을 사용하도록 UEFI 구성을 다음과 같이 변경합니다 . 11. a. System Setup( 시스템 설정 ) 창을 열고 Device Settings( 장치 설정 ) 를 선택합니다 . b. Device Settings( 장치 설정 ) 창에서 iSCSI 부팅 펌웨어 테이블 (iBFT) 이 구성된 어댑터 포트를 선택한 후 , ENTER 를 누릅니다 . c. Main Configuration( 기본 구성 ) 페이지에서 NIC Partitioning Configuration(NIC 분할 구성 ) 을 선택한 다음 ENTER 키를 누릅니다 .
PAGE 186
9–iSCSI 구성 RHEL 7.4 이상일 때 SAN 에서 iSCSI 부팅 구성 brokenmodules=-qed,qedi,qedf brokenmodules=dummy_xxx 12. 시스템을 재부팅합니다 . 이번에는 OS 가 오프로드 인터페이스를 통해 부팅 되어야 합니다 . RHEL 7.4 이상일 때 SAN 에서 iSCSI 부팅 구성 RHEL 7.4 이상을 설치하려면 1. UEFI 에서 iSCSI 대상이 연결되어 있을 때 RHEL 7.x 설치 미디어에서 부팅 합니다 . Install Red Hat Enterprise Linux 7.x Test this media & install Red Hat Enterprise 7.x Troubleshooting --> Use the UP and DOWN keys to change the selection Press ‘e’ to edit the selected item or ‘c’ for a command prompt 2.
PAGE 187
9–iSCSI 구성 RHEL 7.4 이상일 때 SAN 에서 iSCSI 부팅 구성 그림 9-24. 아웃오브박스 설치 프롬프트 6. 설정하는 데 필요하여 추가 드라이버 디스크를 묻는 경우에는 FastLinQ 드라 이버 업데이트 디스크를 로드합니다. 그렇지 않고 설치할 드라이버 업데이트 디스크가 없는 경우에는 c 를 입력합니다 . 7. 설치를 계속 합니다 . 미디어 테스트는 건너뛰어도 좋습니다 . Next( 다음 ) 을 클릭하여 설치를 계속 합니다 . 8. Configuration( 구성 ) 창 ( 그림 9-25) 에서 설치 프로세스에 사용할 언어를 선 택한 다음 Continue( 계속 ) 를 클릭합니다 .
PAGE 188
9–iSCSI 구성 RHEL 7.4 이상일 때 SAN 에서 iSCSI 부팅 구성 그림 9-25. Red Hat Enterprise Linux 7.4 구성 9. Installation Summary( 설치 요약 ) 창에서 Installation Destination( 설치 대 상 ) 을 클릭합니다 . 디스크 레이블은 단일 경로 설치를 나타내는 sda 입니다 . 다중 경로를 구성했다면 디스크에 장치 매퍼 레이블이 있습니다 . 10. Specialized & Network Disks( 전용 및 네트워크 디스크 ) 섹션에서 iSCSI LUN 을 선택합니다 . 11. 루트 사용자의 암호를 입력하고 Next( 다음 ) 를 클릭하여 설치를 마칩니다 . 12. 첫 번째 부팅 도중 다음 커널 명령줄을 입력해 셸로 나눕니다 . rd.iscsi.firmware rd.break=pre-pivot rd.driver.pre=qed,qede, qedr,qedf,qedi selinux=0 13.
PAGE 189
9–iSCSI 구성 RHEL 7.4 이상일 때 SAN 에서 iSCSI 부팅 구성 16. 서버를 재부팅한 다음 명령줄에 다음 매개변수를 추가합니다 . rd.iscsi.firmware rd.driver.pre=qed,qedi ( 모든 드라이버를 로드하려면 pre=qed,qedi,qedi,qedf) selinux=0 17. 시스템이 부팅되면 /etc/modprobe.d/anaconda-blacklist.conf 파일을 편집해 선택한 드라이버의 블랙리스트 항목을 삭제합니다 . 18. dracut -f 명령을 실행하여 램디스크를 다시 빌드한 후 재부팅합니다 .
PAGE 190
10 FCoE 구성 이 장에서는 다음과 같은 FCoE(Fibre Channel over Ethernet) 구성 정보를 제공합 니다 .  SAN 에서 FCoE 부팅  175 페이지의 " 어댑터 드라이버를 Windows 이미지 파일로 삽입 ( 통합 설치 )"  176 페이지의 "Linux FCoE Offload 구성 "  176 페이지의 "qedf 와 bnx2fc 의 차이점 "  177 페이지의 "qedf.ko 구성 "  178 페이지의 "Linux 에서 FCoE 장치 확인 "  179 페이지의 "RHEL 7.4 이상일 때 SAN 에서 FCoE 부팅 구성 " 주 FCoE Offload 는 모든 41xxx 시리즈 어댑터에서 지원됩니다 . 현재 릴리스에 서 일부 FCoE 기능은 완전히 사용하지 못할 수도 있습니다 . 자세한 정보는 부록 D 기능 제약 조건에서 확인할 수 있습니다 .
PAGE 191
10–FCoE 구성 SAN 에서 FCoE 부팅 FCoE 구축 및 부트를 위한 시스템 BIOS 준비 시스템 BIOS 를 준비하기 위해 , 시스템 부트 순서를 수정하고 필요할 경우 BIOS 부트 프로토콜을 지정합니다 . BIOS 부트 프로토콜 지정 SAN 에서의 FCoE 부팅은 UEFI 모드에서만 지원됩니다 . 시스템 BIOS 구성을 사 용하여 부팅 모드 ( 프로토콜 ) 에서 플랫폼을 UEFI 로 설정합니다 . 주 FCoE BFS 는 기존 BIOS 모드에서 지원되지 않습니다 . 어댑터 UEFI 부팅 모드 구성 부팅 모드를 FCOE 로 구성하려면 1. 시스템을 다시 시작합니다 . 2. OEM 핫 키를 눌러 System Setup( 시스템 설정 ) 으로 들어갑니다 ( 그림 10-1). 이는 UEFI HII 로도 알려져 있습니다 . 그림 10-1. 시스템 설정 : 장치 설정 선택 주 SAN 부팅은 UEFI 환경에서만 지원됩니다 . 시스템 부팅 옵션이 레거시 가 아니라 UEFI 인지 확인합니다 .
PAGE 192
10–FCoE 구성 SAN 에서 FCoE 부팅 3. Device Settings( 장치 설정 ) 페이지에서 QLogic 장치를 선택합니다 ( 그림 10-2). 그림 10-2.
PAGE 193
10–FCoE 구성 SAN 에서 FCoE 부팅 4. Main Configuration Page( 기본 구성 페이지 ) 에서 NIC Configuration(NIC 구성 )( 그림 10-3) 을 선택한 다음 ENTER 키를 누릅니다 . 그림 10-3.
PAGE 194
10–FCoE 구성 SAN 에서 FCoE 부팅 5. NIC Configuration(NIC 구성 ) 페이지에서 Boot Mode( 부팅 모드 ) 를 선택한 다음 ENTER 키를 눌러 FCoE 를 기본 설정 부팅 모드로 선택합니다 . 주 FCoE Mode(FCoE 모드 ) 기능이 포트 레벨에서 비활성화되어 있는 경우 FCoE 가 부팅 옵션으로 표시되지 않습니다 . 기본 설정된 부팅 모드가 FCoE 인 경우 FCoE Mode(FCoE 모드 ) 기능이 그림 10-4 에 표시된 것처럼 활성화 되어 있는지 확인하십시오 . 일부 어댑터 버전은 FCoE 를 지원하지 않습니다 . 그림 10-4. 시스템 설정 : FCoE 모드 활성화 FCoE 부팅 매개변수를 구성하려면 1. Device HII Main Configuration Page( 장치 HII 기본 구성 페이지 ) 에서 FCoE Configuration(FCoE 구성 ) 을 선택한 후 ENTER 키를 누릅니다 . 2.
PAGE 195
10–FCoE 구성 SAN 에서 FCoE 부팅  LUN Busy Retry Count(LUN 사용 중 재시도 횟수 ): 기본값 또는 필요 에 따라 다름 그림 10-5. 시스템 설정 : FCoE 일반 매개변수 4. FCoE Configuration(FCoE 구성 ) 페이지로 돌아갑니다 . 5. ESC 키를 누른 다음 FCoE Target Parameters(FCoE 대상 매개변수 ) 를 선 택합니다 . 6. ENTER 키를 누릅니다 . 7. FCoE Target Parameters Menu(FCoE 대상 매개변수 메뉴 ) 에서 기본 설정 FCoE 대상에 대한 Connect( 연결 ) 를 활성화합니다 . 8. iSCSI 대상에 대해 다음 매개변수 ( 그림 10-6) 의 값을 입력한 후 ENTER 키 를 누릅니다 .   월드 와이드 포트 이름 대상 n 부팅 LUN n n 의 값이 1 과 8 사이인 경우 8 개의 FCoE 대상을 구성할 수 있습니다 .
PAGE 196
10–FCoE 구성 SAN 에서 FCoE 부팅 그림 10-6. 시스템 설정 : FCoE 일반 매개변수 SAN 에서 Windows FCoE 부팅 Windows 용 SAN 에서 FCoE 부팅 정보에는 다음이 포함됩니다 .  Windows Server 2012 R2 및 2016 FCoE 부트 설치  FCoE 구성  FCoE 크래시 덤프 Windows Server 2012 R2 및 2016 FCoE 부트 설치 SAN 을 통한 Windows Server 2012R2/2016 부트를 설치할 경우 , 최신 QLogic 드 라이버가 삽입된 " 통합 설치 " DVD 또는 ISO 이미지를 사용해야 합니다 . 175 페이 지의 " 어댑터 드라이버를 Windows 이미지 파일로 삽입 ( 통합 설치 )" 섹션을 참조 하십시오 . 다음은 FCoE 모드를 통한 설치 및 부팅용 이미지를 준비하는 절차입니다 . Windows Server 2012R2/2016 FCoE 부팅을 설치하려면 1.
PAGE 197
10–FCoE 구성 SAN 에서 FCoE 부팅 4. 원격 장치로부터 연결을 허용하도록 FCoE 대상을 구성합니다 . 대상에서 새 로운 OS 설치를 위한 디스크 공간이 충분한지 확인합니다 . 5. 필요한 어댑터 포트 , 올바른 초기자 , FCoE 부팅을 위한 대상 매개변수에 FCoE 부팅 유형을 설정하도록 UEFI HII 를 구성합니다 . 6. 설정을 저장하고 시스템을 다시 부팅합니다 . 원격 시스템이 FCoE 대상에 연 결되고 DVD-ROM 장치로부터 부팅됩니다 . 7. DVD 에서 부팅하고 설치를 시작합니다 . 8. 화면에 나타나는 지시를 따릅니다 . 9. 설치에 사용 가능한 디스크의 목록을 보여주는 창에 FCoE 대상 디스크가 보 여야 합니다 . 이 대상은 FCoE 부트 프로토콜을 통해 연결된 디스크로 , 원격 FCoE 대상에 위치합니다 . 10.
PAGE 198
10–FCoE 구성 어댑터 드라이버를 Windows 이미지 파일로 삽입 ( 통합 설치 ) 어댑터 드라이버를 Windows 이미지 파일로 삽입 ( 통합 설치 ) 어댑터 드라이버를 Windows 이미지 파일에 삽입하려면 1. 해당 Windows Server 버전 (2012, 2012 R2 또는 2016) 을 위한 최신 드라이 버 패키지를 구합니다 . 2. 드라이버 패키지를 작업 디렉터리로 추출합니다 . a. 명령 행 세션을 연 다음 드라이버 패키지를 포함한 폴더를 탐색합니다 . b. 드라이버 설치 프로그램을 시작하려면 다음 명령을 발급합니다 . setup.exe /a c. Network location 필드에는 드라이버 패키지를 추출할 폴더의 경로 를 입력합니다 . 예를 들어 c:\temp 를 입력합니다 . d. 드라이버 설치 프로그램 명령을 따라 지정된 폴더에 드라이버를 설치합 니다 . 이 예에서는 드라이버 파일이 다음 위치에 설치됩니다 . c:\temp\Program File 64\Q
PAGE 199
10–FCoE 구성 Linux FCoE Offload 구성 6. 작업 디렉터리에 있는 결과 드라이버 ISO 이미지 파일을 포함한 DVD 를 굽 습니다 . 7. 새 DVD 를 사용하여 Windows Server 운영 체제를 설치합니다 . Linux FCoE Offload 구성 Cavium FastLinQ 41xxx 시리즈 어댑터 FCoE 소프트웨어는 qedf.ko(qedf) 라는 단 일 커널 모듈로 구성됩니다 . qedf 모듈은 다음과 같이 특정 기능을 위한 Linux 커널 의 추가 부분에 종속됩니다 .  qed.ko 는 공통 Cavium FastLinQ 41xxx 하드웨어 초기화 루틴에 사용되는 Linux eCore 커널 모듈입니다 .  libfcoe.ko 는 FCoE 전달자 (FCF) 요청과 FCoE 초기화 프로토콜 (FIP) 패 브릭 로그인 (FLOGI) 을 수행하는 데 필요한 Linux FCoE 커널 라이브러리입 니다 .  libfc.
PAGE 200
10–FCoE 구성 qedf.ko 구성  qedf 는 검색을 시작하기 위해 open-fcoe 사용자 공간 도구 (fipvlan, fcoemon, fcoeadm) 를 필요로 하지 않습니다 .  qedf는 FIP VLAN 요청을 직접 발급하고 fipvlan 유틸리티를 필요로 하지 않습 니다 .  qedf는 fcoemon용 fipvlan에 의해 생성된 FCoE 인터페이스를 필요로 하지 않 습니다 .  qedf 는 net_device 상에 위치하지 않습니다 .  qedf 는 네트워크 드라이버 ( 예 : bnx2x 와 cnic) 에 종속되지 않습니다 .  qedf는 FCoE 인터페이스 생성을 위해 fipvlan 또는 fcoemon에 종속되지 않으 므로 연결 시 FCoE 검색을 자동으로 시작합니다 . 주 FCoE 인터페이스는 더 이상 네트워크 인터페이스 위에 위치하지 않습니다 . qedf 드라이버가 FCoE 인터페이스를 네트워크 인터페이스와 별도로 자동 생 성합니다 .
PAGE 201
10–FCoE 구성 Linux 에서 FCoE 장치 확인 Linux 에서 FCoE 장치 확인 qedf 커널 모듈을 설치하고 로드한 후 다음 절차에 따라 FCoE 장치가 올바로 감지 되었는지 확인하십시오 . Linux 에서 FCoE 장치를 확인하려면 1. lsmod 를 검사하여 qedf 와 관련 커널 모듈이 로드되었는지 확인하십시오 . # lsmod | grep qedf 69632 1 qedf libfc 143360 2 qedf,libfcoe scsi_transport_fc 65536 2 qedf,libfc qed 806912 1 qedf scsi_mod 262144 14 sg,hpsa,qedf,scsi_dh_alua,scsi_dh_rdac,dm_multipath,scsi_transport_fc, scsi_transport_sas,libfc,scsi_transport_iscsi,scsi_dh_emc,libata,sd_mod,sr_mod 2.
PAGE 202
10–FCoE 구성 RHEL 7.4 이상일 때 SAN 에서 FCoE 부팅 구성 sdh 5:0:0:6 disk SANBlaze VLUN P2T1L6 V7.3 fc sdi 5:0:0:7 disk SANBlaze VLUN P2T1L7 V7.3 fc sdj 5:0:0:8 disk SANBlaze VLUN P2T1L8 V7.3 fc sdk 5:0:0:9 disk SANBlaze VLUN P2T1L9 V7.3 fc 호스트 구성 정보는 /sys/class/fc_host/hostX 파일에 있으며 , 여기에서 X 는 SCSI 호스트의 번호입니다 . 앞에 나온 예에서 X 는 4 또는 5 일 수 있습니다 . hostX 파일에는 월드와이드 포트 이름과 패브릭 ID 같은 FCoE 기능 속성이 포함 되어 있습니다 . RHEL 7.4 이상일 때 SAN 에서 FCoE 부팅 구성 RHEL 7.4 이상을 설치하려면 1. UEFI 에서 FCoE 대상이 연결되어 있을 때 RHEL 7.
PAGE 203
10–FCoE 구성 RHEL 7.4 이상일 때 SAN 에서 FCoE 부팅 구성 5. 설치 프로세스에 따라 그림 10-7 예와 같이 아웃오브박스 드라이버를 설치합 니다 . 그림 10-7. 아웃오브박스 설치 프롬프트 6. 설정하는 데 필요하여 추가 드라이버 디스크를 묻는 경우에는 FastLinQ 드라 이버 업데이트 디스크를 로드합니다. 그렇지 않고 설치할 드라이버 업데이트 디스크가 없는 경우에는 c 를 입력합니다 . 7. 설치를 계속 합니다 . 미디어 테스트는 건너뛰어도 좋습니다 . Next( 다음 ) 을 클릭하여 설치를 계속 합니다 . 8. Configuration( 구성 ) 창 ( 그림 10-8) 에서 설치 프로세스에 사용할 언어를 선 택한 다음 Continue( 계속 ) 를 클릭합니다 .
PAGE 204
10–FCoE 구성 RHEL 7.4 이상일 때 SAN 에서 FCoE 부팅 구성 그림 10-8. Red Hat Enterprise Linux 7.4 구성 9. Installation Summary( 설치 요약 ) 창에서 Installation Destination( 설치 대 상 ) 을 클릭합니다 . 디스크 레이블은 단일 경로 설치를 나타내는 sda 입니다 . 다중 경로를 구성했다면 디스크에 장치 매퍼 레이블이 있습니다 . 10. Specialized & Network Disks( 전용 및 네트워크 디스크 ) 섹션에서 FCoE LUN 을 선택합니다 . 11. 루트 사용자의 암호를 입력하고 Next( 다음 ) 를 클릭하여 설치를 마칩니다 . 12. 첫 번째 부팅 도중 다음 커널 명령줄을 입력해 셸로 나눕니다 . rd.driver.pre=qed,qede,qedr,qedf,qedi 13. 시스템이 부팅되면 /etc/modprobe.d/anaconda-blacklist.
PAGE 205
11 SR-IOV 구성 SR-IOV( 단일 루트 입 / 출력 가상화 ) 는 단일 PCIe(PCI Express) 장치가 여러 개 의 구분된 실제 PCIe 장치로 나타나도록 해주는 PCI SIG 의 사양입니다 . SR-IOV 는 성능 , 상호 운용성 및 관리성을 위해 PCIe 리소스의 격리를 허용합니다 . 주 현재 릴리스에서 일부 SR-IOV 기능은 완전히 사용하지 못할 수도 있습니다 . 이 장에서는 다음 작업의 지침을 제시합니다 .  Windows 에서 SR-IOV 구성  189 페이지의 "Linux 에서 SR-IOV 구성 "  195 페이지의 "VMware 에서 SR-IOV 구성 " Windows 에서 SR-IOV 구성 Windows 에서 SR-IOV 를 구성하려면 1. 서버 BIOS System Setup(BIOS 시스템 설정 ) 으로 이동하여 System BIOS Settings( 시스템 BIOS 설정 ) 를 클릭합니다 . 2.
PAGE 206
11–SR-IOV 구성 Windows 에서 SR-IOV 구성 그림 11-1. SR-IOV 를 위한 시스템 설정 : 통합 장치 4. 선택한 어댑터에 대한 Main Configuration( 기본 구성 ) 페이지에서 Device Level Configuration( 장치 레벨 구성 ) 을 클릭합니다 . 5. Main Configuration( 기본 구성 ) 페이지의 Device Level Configuration( 장치 레벨 구성 )( 그림 11-2) 에서 다음을 수행하십시오 . a. NPAR 모드를 사용 중인 경우 Virtualization Mode( 가상화 모드 ) 를 SR-IOV 또는 NPAR+SR-IOV 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 . 그림 11-2. SR-IOV 를 위한 시스템 설정 : 장치 레벨 구성 6. Main Configuration( 기본 구성 ) 페이지에서 Finish( 마침 ) 를 클릭합니다 . 7.
PAGE 207
11–SR-IOV 구성 Windows 에서 SR-IOV 구성 8. Success - Saving Changes( 성공 - 변경 내용 저장 ) 메시지 상자에서 OK ( 확인 ) 를 클릭합니다 . 9. 미니포트 어댑터에서 SR-IOV 를 활성화하려면 a. 장치 관리자에 액세스합니다 . b. 미니포트 어댑터 속성을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . c. Advanced properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 11-3) SR-IOV 를 선택한 후 값을 Enabled( 사용 가능 ) 로 설정합 니다 . d. OK( 확인 ) 를 클릭합니다 . 그림 11-3. 어댑터 속성 , 고급 : SR-IOV 활성화 10. SR-IOV 로 가상 머신 스위치를 생성하려면 (185 페이지의 그림 11-4) a. 하이퍼바이저 관리자를 시작합니다 . b. Virtual Switch Manager( 가상 스위치 관리자 ) 를 선택합니다 .
PAGE 208
11–SR-IOV 구성 Windows 에서 SR-IOV 구성 주 vSwitch 를 생성할 때 SR-IOV 를 반드시 활성화해야 합니다 . vSwitch 를 생성한 후에는 이 옵션을 사용할 수 없습니다 . 그림 11-4. 가상 스위치 관리자 : SR-IOV 활성화 f. Apply Networking Changes( 네트워킹 변경 사항 적용 ) 메시지 상자에 Pending changes may disrupt network connectivity( 보류 중인 변 경 사항으로 인해 네트워크 연결이 끊어질 수 있다 ) 는 내용이 표시됩니 다 . 변경 내용을 저장하고 계속하려면 Yes( 예 ) 를 클릭합니다 .
PAGE 209
11–SR-IOV 구성 Windows 에서 SR-IOV 구성 11. 가상 머신 스위치 기능을 사용하려면 다음 Windows PowerShell 명령을 실행 합니다 . PS C:\Users\Administrator> Get-VMSwitch -Name SR-IOV_vSwitch | fl Get-VMSwitch 명령 출력에 다음과 같은 SR-IOV 기능이 포함됩니다 . 12. IovVirtualFunctionCount : 96 IovVirtualFunctionsInUse : 1 다음과 같이 가상 머신 (VM) 을 생성하고 VM 에서 가상 기능 (VF) 을 내보냅 니다 . a. 가상 머신을 생성합니다 . b. VMNetworkadapter 를 가상 머신에 추가합니다 . c. 가상 스위치를 VMNetworkadapter 에 할당합니다 . d.
PAGE 210
11–SR-IOV 구성 Windows 에서 SR-IOV 구성 그림 11-5. VM 의 설정 : SR-IOV 활성화 13. VM 에서 감지된 어댑터에 QLogic 드라이버를 설치합니다 . 공급업체에서 호 스트 OS 의 최신 드라이버를 얻어 사용합니다 ( 기본 드라이버를 사용하지 마 십시오 ). 주 VM 과 호스트 시스템에서 동일한 드라이버 패키지를 사용해야 합니다 . 예를 들어 Windows VM 과 Windows Hyper-V 호스트에서 동일한 버전 의 qeVBD 및 qeND 드라이버를 사용하십시오 .
PAGE 211
11–SR-IOV 구성 Windows 에서 SR-IOV 구성 드라이버 설치 후 , VM 에 QLogic 어댑터가 표시됩니다 . 그림 11-6 은 이러한 예를 나타냅니다 . 그림 11-6. 장치 관리자 : QLogic 어댑터가 포함된 VM 14. SR-IOV VF 세부 정보를 확인하려면 다음 Windows PowerShell 명령을 실행 합니다 . PS C:\Users\Administrator> Get-NetadapterSriovVf 그림 11-7 에 출력 예가 나와 있습니다 . 그림 11-7.
PAGE 212
11–SR-IOV 구성 Linux 에서 SR-IOV 구성 Linux 에서 SR-IOV 구성 Linux 에서 SR-IOV 를 구성하려면 1. 서버 BIOS System Setup(BIOS 시스템 설정 ) 으로 이동하여 System BIOS Settings( 시스템 BIOS 설정 ) 를 클릭합니다 . 2. System BIOS Settings( 시스템 BIOS 설정 ) 페이지에서 Integrated Devices ( 통합 장치 ) 를 클릭합니다 . 3. System Integrated Devices( 시스템 통합 장치 ) 페이지 (183 페이지의 그 림 11-1 참조 ) 에서 다음 작업을 수행합니다 . a. SR-IOV Global Enable(SR-IOV 전역 활성화 ) 옵션을 Enabled( 사용 가능 ) 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 . 4.
PAGE 213
11–SR-IOV 구성 Linux 에서 SR-IOV 구성 그림 11-8. 시스템 설정 : SR-IOV 를 위한 프로세서 설정 6. System Setup( 시스템 설정 ) 페이지에서 Device Settings( 장치 설정 ) 를 선 택합니다 . 7. Device Settings( 장치 설정 ) 페이지에서 QLogic 어댑터용 Port 1( 포트 1) 을 선택합니다 .
PAGE 214
11–SR-IOV 구성 Linux 에서 SR-IOV 구성 8. Device Level Configuration( 장치 레벨 구성 ) 페이지 ( 그림 11-9) 에서 다음 작업을 수행합니다 . a. Virtualization Mode( 가상화 모드 ) 를 SR-IOV 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 . 그림 11-9. SR-IOV 를 위한 시스템 설정 : 통합 장치 9. Main Configuration( 기본 구성 ) 페이지에서 Finish( 마침 ) 를 클릭하고 설정 을 저장한 후 시스템을 재부팅합니다 . 10. 다음과 같이 가상화를 활성화하고 확인합니다 . a. 그림 11-10 과 같이 grub.conf 파일을 열고 iommu 매개변수를 구성 합니다 .   Intel 기반 시스템일 경우에는 intel_iommu=on 을 추가합니다 . AMD 기반 시스템일 경우에는 amd_iommu=on 을 추가합니다 .
PAGE 215
11–SR-IOV 구성 Linux 에서 SR-IOV 구성 그림 11-10. SR-IOV 용 grub.conf 파일 편집 b. grub.conf 파일을 저장하고 시스템을 재부팅합니다 . c. 변경 내용이 적용되는지 확인하려면 다음 명령을 발급합니다 . dmesg | grep -I iommu 예를 들어 다음과 같이 성공적인 IOMMU(input–output memory management unit) 명령 출력이 표시되어야 합니다 . Intel-IOMMU: enabled d. VF 세부 정보 (VF 수와 총 VF 수 ) 를 보려면 다음 명령을 실행합니다 . find /sys/|grep -I sriov 11. 특정 포트에 대해 VF 의 수량을 활성화합니다 . a. 예를 들어 다음과 같이 명령을 실행하여 PCI 인스턴스 04:00.0( 버스 4, 장치 0, 기능 0) 에서 VF 8 개를 활성화합니다 .
PAGE 216
11–SR-IOV 구성 Linux 에서 SR-IOV 구성 b. 명령 출력 ( 그림 11-11) 을 살펴보면서 실제로 VF 가 버스 4, 장치 2 (0000:00:02.0 매개변수 ), 기능 0~7 에 생성되었는지 확인합니다 . 단 , PF( 이 예에서 8070) 와 VF( 이 예에서 9090) 를 비교했을 때 실제 장치 ID 는 서로 다릅니다 . 그림 11-11. sriov_numvfs 에 대한 명령 출력 12. 모든 PF 및 VF 인터페이스의 목록을 보려면 다음 명령을 발급합니다 . # ip link show | grep -i vf -b2 그림 11-12 에 출력 예가 나와 있습니다 . 그림 11-12.
PAGE 217
11–SR-IOV 구성 Linux 에서 SR-IOV 구성 13. MAC 주소를 할당하고 확인합니다 . a. MAC 주소를 VF 에 할당하려면 다음 명령을 발급합니다 . ip link set vf mac b. 14. VF 인터페이스가 할당된 MAC 주소로 작동되어 실행 중인지 확인합 니다 . VM 을 끄고 VF 를 연결합니다 . ( 일부 OS 에서는 VF 를 VM 에 핫플러그 연 결할 수 있도록 지원합니다 .) a. Virtual Machine( 가상 머신 ) 대화 상자 ( 그림 11-13) 에서 Add Hardware( 하드웨어 추가 ) 를 클릭합니다 . 그림 11-13. RHEL68 가상 머신 b. Add New Virtual Hardware( 새 가상 하드웨어 추가 ) 대화 상자의 왼쪽 창에서 ( 그림 11-14) PCI Host Device(PCI 호스트 장치 ) 를 클릭합 니다 . c.
PAGE 218
11–SR-IOV 구성 VMware 에서 SR-IOV 구성 d. Finish( 마침 ) 를 클릭합니다 . 그림 11-14. 새 가상 하드웨어 추가 15. VM 을 켠 후 다음 명령을 발급합니다 . check lspci -vv|grep -I ether 16. VM 에서 감지된 어댑터에 드라이버를 설치합니다 . 공급업체에서 호스트 OS 의 최신 드라이버를 얻어 사용합니다 ( 기본 드라이버를 사용하지 마십시오 ). 호스트 및 VM 에 동일한 드라이버 버전을 설치해야 합니다 . 17. 필요한 경우 VM 에 VF 를 더 추가합니다 . VMware 에서 SR-IOV 구성 VMware 에서 SR-IOV 를 구성하려면 1. 서버 BIOS System Setup(BIOS 시스템 설정 ) 으로 이동하여 System BIOS Settings( 시스템 BIOS 설정 ) 를 클릭합니다 . 2.
PAGE 219
11–SR-IOV 구성 VMware 에서 SR-IOV 구성 5. Device Settings( 장치 설정 ) 페이지에서 25G 41xxx 시리즈 어댑터용 포트를 선택합니다 . 6. Device Level Configuration( 장치 레벨 구성 ) 페이지 (183 페이지의 그 림 11-2 참조 ) 에서 다음 작업을 수행합니다 . a. Virtualization Mode( 가상화 모드 ) 를 SR-IOV 로 설정합니다 . b. Back( 뒤로 ) 을 클릭합니다 . 7. Main Configuration( 기본 구성 ) 페이지에서 Finish( 마침 ) 를 클릭합니다 . 8. 구성 설정을 저장하고 시스템을 다시 부팅합니다 . 9. 포트 1 개당 필요한 VF 수량 ( 이 예에서는 듀얼 포트 어댑터의 각 포트당 16 개 ) 을 활성화하려면 다음 명령을 실행합니다 .
PAGE 220
11–SR-IOV 구성 VMware 에서 SR-IOV 구성 . . 0000:05:03.7 Network 10/25 GbE Controller 0000:05:0e.0 Network 10/25 GbE Controller 0000:05:0e.1 Network 10/25 GbE Controller 0000:05:0e.2 Network 10/25 GbE Controller 0000:05:0e.3 Network 10/25 GbE Controller . . . 0000:05:0f.6 Network 10/25 GbE Controller 0000:05:0f.7 Network 10/25 GbE Controller 13. 14. controller: (SR-IOV VF) controller: (SR-IOV VF) controller: (SR-IOV VF) controller: (SR-IOV VF) controller: (SR-IOV VF) QLogic Corp. QLogic [PF_0.5.
PAGE 221
11–SR-IOV 구성 VMware 에서 SR-IOV 구성 그림 11-15. VMware 호스트 편집 설정 15. 포트당 VF 수의 유효성을 검사하려면 다음과 같이 esxcli 명령을 발급합니다 . [root@localhost:~] esxcli network sriovnic vf list -n vmnic6 VF ID Active PCI Address Owner World ID ----- ------ ----------- -------------- 0 true 005:02.0 60591 1 true 005:02.
PAGE 222
11–SR-IOV 구성 VMware 에서 SR-IOV 구성 2 false 005:02.2 - 3 false 005:02.3 - 4 false 005:02.4 - 5 false 005:02.5 - 6 false 005:02.6 - 7 false 005:02.7 - 8 false 005:03.0 - 9 false 005:03.1 - 10 false 005:03.2 - 11 false 005:03.3 - 12 false 005:03.4 - 13 false 005:03.5 - 14 false 005:03.6 - 15 false 005:03.7 - 16. VM 에서 감지된 어댑터에 QLogic 드라이버를 설치합니다 . 공급업체에서 호 스트 OS 의 최신 드라이버를 얻어 사용합니다 ( 기본 드라이버를 사용하지 마 십시오 ). 호스트 및 VM 에 동일한 드라이버 버전을 설치해야 합니다 . 17.
PAGE 223
12 RDMA 를 사용한 NVMe-oF 구성 Non-Volatile Memory Express over Fabrics(NVMe-oF) 는 PCIe 에 대한 대체 전송 을 사용하여 NVMe 호스트 장치와 NVMe 스토리지 드라이브 또는 하위 시스템의 연결 거리를 연장할 수 있습니다 . 여기에서 NVMe-oF 란 스토리지 네트워킹 패브 릭을 통하는 NVMe 블록 스토리지 프로토콜에 다양한 스토리지 네트워킹 패브릭 을 지원하는 공통 아키텍처를 말합니다 . 이러한 아키텍처에는 스토리지 시스템의 전면 인터페이스 지원과 다수의 NVMe 장치 확장 , 그리고 데이터 센터 내에서 NVMe 장치와 NVMe 하위 시스템이 액세스할 수 있는 거리의 연장 등이 포함됩 니다 . 이 장에서 설명하는 NVMe-oF 구성 절차 및 옵션은 RoCE 및 iWARP 를 포함한 이 더넷 기반 RDMA 프로토콜에 적용됩니다 . RDMA 와 함께 NVMe-oF 의 개발은 NVMe 구성의 기술적 하위 그룹이라고 정의할 수 있습니다 .
PAGE 224
12–RDMA 를 사용한 NVMe-oF 구성 그림 12-1 은 네트워크 예를 나타낸 것입니다 . 41xxx 시리즈 어댑터 41xxx 시리즈 어댑터 그림 12-1. NVMe-oF 네트워크 NVMe-oF 구성 프로세스는 다음과 같은 절차로 이루어집니다 . 1. 두 서버에 장치 드라이버 설치 2. 대상 서버 구성 3. 초기자 서버 구성 4. 대상 서버의 전처리 5. NVMe-oF 장치 테스트 6.
PAGE 225
12–RDMA 를 사용한 NVMe-oF 구성 두 서버에 장치 드라이버 설치 두 서버에 장치 드라이버 설치 운영 체제 (RHEL 7.4 또는 SLES 12 SP3) 설치를 마친 후 두 서버에 장치 드라이 버를 설치합니다 . 커널을 최신 Linux 업스트림 커널로 업그레이드하려면 다 음 URL 로 이동하십시오 . https://www.kernel.org/pub/linux/kernel/v4.x/ 1. README 파일의 설치 지침에 따라 최신 FastLinQ 드라이버 (QED, QEDE, libqedr/QEDR) 를 설치 및 로드합니다 . 2. ( 옵션 )OS 커널을 업그레이드한 경우에는 최신 드라이버를 다음과 같이 다 시 설치하여 로드해야 합니다 . a. README 파일의 모든 설치 지침에 따라 최신 FastLinQ 펌웨어를 설치 합니다 . b. 다음 명령을 실행하여 OS RDMA 지원 응용프로그램 및 라이브러리를 설치합니다 .
PAGE 226
12–RDMA 를 사용한 NVMe-oF 구성 대상 서버 구성 f. 커널이 변경된 경우에는 새로운 OS 커널로 재부팅합니다 . 기본 부트 커널을 설정하는 방법에 대한 자세한 내용은 아래 URL 에서 확인할 수 있습니다 . https://wiki.centos.org/HowTos/Grub2 3. RDMA 서비스를 다음과 같이 활성화하여 시작합니다 . # systemctl enable rdma.service # systemctl start rdma.service RDMA Service Failed 오류는 무시하십시오 . QEDR 에 필요한 OFED 모듈 은 이미 모두 로드되었습니다 . 대상 서버 구성 재부팅 프로세스 후 대상 서버를 구성합니다 . 서버가 작동하기 시작한 후에는 재 부팅하지 않고 구성을 변경할 수 없습니다 .
PAGE 227
12–RDMA 를 사용한 NVMe-oF 구성 대상 서버 구성 표 12-1. 대상 매개변수 명령 설명 # echo 1 > attr_allow_any_host 모든 호스트의 연결을 허용합니다 . # mkdir namespaces/1 네임스페이스를 생성합니다 . # echo -n /dev/nvme0n1 >namespaces/ 1/device_path NVMe 장치 경로를 설정합니다 . NVMe 장치 경로 는 시스템마다 다를 수 있습니다 . lsblk 명령을 사용하여 장치 경로를 확인하십시오 . 시스템에는 NVMe 장치가 nvme0n1 과 nvme1n1, 2 개 있습 니다 . # echo 1 > namespaces/1/enable 네임스페이스를 활성화합니다 . # mkdir /sys/kernel/config/nvmet/ ports/1 NVMe 포트 1 을 생성합니다 . # cd /sys/kernel/config/nvmet/ports/1 # echo 1.1.1.
PAGE 228
12–RDMA 를 사용한 NVMe-oF 구성 초기자 서버 구성 초기자 서버 구성 재부팅 프로세스 후 초기자 서버를 구성합니다 . 서버가 작동하기 시작한 후에는 재부팅하지 않고 구성을 변경할 수 없습니다 . 시작 스크립트를 사용하여 초기자 서버를 구성하는 경우 , 다음 명령을 실행하기 전에 각 명령이 완료되는지 확인하 기 위해 필요에 따라 스크립트를 일시 중지 (wait 명령 또는 비슷한 것을 사용 ) 하 는 방법을 고려해보십시오 . 초기자 서버를 구성하려면 : 1. NVMe 모듈을 로드합니다 . 각 서버를 재부팅한 후 다음 명령을 실행합니다 . # modprobe qedr # modprobe nvme-rdma 2. nvme-cli 초기자 유틸리티를 다운로드한 후 컴파일하여 설치합니다 . 처음 구성할 때 이 명령을 실행하면 매번 재부팅 후 이 명령을 실행할 필요가 없습 니다 . # git clone https://github.com/linux-nvme/nvme-cli.
PAGE 229
12–RDMA 를 사용한 NVMe-oF 구성 대상 서버의 전처리 5. NQN 을 사용하여 검색된 NVMe-oF 대상 (nvme-qlogic-tgt1) 에 연결합 니다 . 각 서버를 재부팅한 후 다음 명령을 실행합니다 . 예 : # nvme connect -t rdma -n nvme-qlogic-tgt1 -a 1.1.1.1 -s 1023 6. 다음과 같이 NVMe-oF 대상과 NVMe-oF 장치가 서로 연결되었는지 확인합 니다 . # dmesg | grep nvme # lsblk # list nvme 그림 12-3 은 이러한 예를 나타냅니다 . 그림 12-3. NVMe-oF 연결 확인 대상 서버의 전처리 아웃오브박스로 테스트를 실시하는 NVMe 대상 서버는 예상보다 높은 성능을 보 입니다 . 단 , 대상 서버는 벤치마크를 실시하기 전에 사전 입력 또는 전처리가 필요 합니다 . 대상 서버를 전처리하려면 1. 공급업체에서 제공하는 도구를 사용해 대상 서버를 보안 삭제합니다 ( 포맷 과 비슷 ).
PAGE 230
12–RDMA 를 사용한 NVMe-oF 구성 NVMe-oF 장치 테스트 NVMe-oF 장치 테스트 대상 서버의 로컬 NVMe 장치 지연 시간과 초기자 서버의 NVMe-oF 장치 지연 시 간을 서로 비교하여 NVMe 장치에서 시스템에 더해지는 지연 시간을 표시합니다 . NVMe-oF 장치를 테스트하려면 : 1. 리포지토리 (Repo) 소스를 업데이트한 후 다음 명령을 실행하여 Flexible Input/Output(FIO) 벤치마크 유틸리티를 대상 서버와 초기자 서버에 모두 설 치합니다 . # yum install epel-release # yum install fio 그림 12-4. FIO 유틸리티 설치 2. FIO 유틸리티를 실행하여 NVMe-oF 장치의 지연 시간을 측정합니다 . 다음 명령을 실행합니다 .
PAGE 231
12–RDMA 를 사용한 NVMe-oF 구성 성능 최적화 이번 예에서 대상 NVMe 장치의 지연 시간은 8µsec 입니다 . NVMe-oF 를 사 용하여 발생하는 총 지연 시간은 초기자 장치 NVMe-oF 지연 시간 30usec 와 대상 장치 NVMe-oF 지연 시간 8µsec 의 차이 , 즉 22µsec 입니다 . 4. 대상 서버에서 FIO 를 실행하여 로컬 NVMe 장치의 대역폭을 측정합니다 . 다 음 명령을 실행합니다 .
PAGE 232
12–RDMA 를 사용한 NVMe-oF 구성 성능 최적화 d. 3. 서버를 재부팅하여 변경 내용을 적용합니다 . 모든 41xxx 시리즈 어댑터의 IRQ 선호도를 설정합니다 . multi_rss-affin.sh 파일은 209 페이지의 ".IRQ 선호도 (multi_rss-affin.sh)" 에 나열된 스크립트 파일입니다 . # systemctl stop irqbalance # ./multi_rss-affin.sh eth1 주 이 스크립트의 다른 버전인 qedr_affin.sh 는 \add-ons\performance\roce 디렉터리의 41xxx Linux Source Code Package 에 있습니다 . IRQ 선호도 설정에 대한 자세한 내용은 해당 디 렉터리의 multiple_irqs.txt 파일을 참조하십시오 . 4. CPU 주파수를 설정합니다 . cpufreq.sh 파일은 210 페이지의 "CPU 주파수 (cpufreq.sh)" 에 나열된 스크립트입니다 . # ./cpufreq.
PAGE 233
12–RDMA 를 사용한 NVMe-oF 구성 성능 최적화 echo "$eth: ${NUM} (${NUM_FP} fast path) starting irq ${INT}" CPUID=$((CPUID*OFFSET)) for ((A=1; A<=${NUM_FP}; A=${A}+1)) ; do INT='grep -m $A $eth /proc/interrupts | tail -1 | cut -d ":" -f 1' SMP='echo $CPUID 16 o p | dc' echo ${INT} smp affinity set to ${SMP} echo $((${SMP})) > /proc/irq/$((${INT}))/smp_affinity CPUID=$((CPUID*FACTOR)) if [ ${CPUID} -gt ${MAXCPUID} ]; then CPUID=1 CPUID=$((CPUID*OFFSET)) fi done done CPU 주파수 (cpufreq.sh) 다음은 CPU 주파수를 설정하는 스크립트입니다 .
PAGE 234
12–RDMA 를 사용한 NVMe-oF 구성 성능 최적화 sysctl -w net.ipv4.tcp_window_scaling=0 sysctl -w net.ipv4.tcp_adv_win_scale=1 주 다음 명령은 초기자 서버에만 적용됩니다 .
PAGE 235
13 Windows Server 2016 이 장에서는 Windows Server 2016 에 대해 다음 정보를 제공합니다 .  Hyper-V 를 이용한 RoCE 인터페이스 구성  218 페이지의 "RoCE over Switch Embedded Teaming"  219 페이지의 "RoCE 에 대한 QoS 구성 "  228 페이지의 "VMMQ 구성 "  235 페이지의 "VXLAN 구성 "  236 페이지의 "Storage Spaces Direct 구성 "  242 페이지의 "Nano 서버 배포 및 관리 " Hyper-V 를 이용한 RoCE 인터페이스 구성 Windows Server 2016 에서는 Hyper-V 에 Network Direct Kernel Provider Interface (NDKPI) Mode-2 가 구현되면서 호스트 가상 네트워크 어댑터 ( 호스트 가상 NIC) 가 RDMA 를 지원합니다 .
PAGE 236
13–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성  호스트 가상 NIC( 가상 포트 ) 추가  SMB 드라이브 매핑 및 RoCE 트래픽 실행 RDMA 가상 NIC 를 사용한 Hyper-V 가상 스위치 생성 이 섹션의 절차에 따라 Hyper-V 가상 스위치를 생성한 후 호스트 VNIC 에서 RDMA 를 활성화합니다 . RDMA 가상 NIC 로 Hyper-V 가상 스위치를 생성하려면 1. 하이퍼바이저 관리자를 시작합니다 . 2. Virtual Switch Manager( 가상 스위치 관리자 ) 를 클릭합니다 ( 그림 13-1 참조 ). 그림 13-1. 호스트 가상 NIC 에서 RDMA 활성화 3. 가상 스위치르르 생성합니다 . 4. Allow management operating system to share this network adapter ( 관리 운영 체제가 이 네트워크 어댑터를 공유하도록 허용 ) 확인란을 선택합 니다 .
PAGE 237
13–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 호스트 가상 NIC 에서 RDMA 를 활성화하려면 1. Hyper-V Virtual Ethernet Adapter Properties( 하이퍼바이저 가상 이더넷 어 댑터 속성 ) 창을 엽니다 . 2. Advanced( 고급 ) 탭을 클릭합니다 . 3. Advanced( 고급 ) 페이지 ( 그림 13-2) 에서 다음 작업을 수행합니다 . a. Property( 속성 ) 에서 Network Direct(RDMA) 를 선택합니다 . b. Value( 값 ) 에서 Enabled( 사용 가능 ) 를 선택합니다 . c. OK( 확인 ) 를 클릭합니다 . 그림 13-2. 하이퍼바이저 가상 이더넷 어댑터 속성 4. RDMA 를 활성화하려면 다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrator> Enable-NetAdapterRdma "vEthernet
PAGE 238
13–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 호스트 가상 NIC 에 VLAN ID 추가 호스트 가상 NIC 에 VLAN ID 를 추가하려면 1. 호스트 가상 NIC 이름을 찾으려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrator> Get-VMNetworkAdapter -ManagementOS 그림 13-3 은 명령 출력을 나타낸 것입니다 . 그림 13-3. Windows PowerShell 명령 : Get-VMNetworkAdapter 2. VLAN ID 를 호스트 가상 NIC 로 설정하려면 다음 Windows PowerShell 명령 을 실행합니다 . PS C:\Users\Administrator> Set-VMNetworkAdaptervlan -VMNetworkAdapterName "New Virtual Switch" -VlanId 5 -Access -Management05 주 호스트
PAGE 239
13–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 그림 13-4. Windows PowerShell 명령 : Get-NetAdapterRdma 호스트 가상 NIC( 가상 포트 ) 추가 호스트 가상 NIC 를 추가하려면 1. 호스트 가상 NIC 를 추가하려면 다음 명령을 발급합니다 . Add-VMNetworkAdapter -SwitchName "New Virtual Switch" -Name SMB - ManagementOS 2. 214 페이지의 " 호스트 가상 NIC 에서 RDMA 를 활성화하려면 " 에 표시된 것 처럼 호스트 가상 NIC 에서 RDMA 를 활성화합니다 . 3. 가상 포트에 VLAN ID 를 할당하려면 다음 명령을 발급합니다 .
PAGE 240
13–Windows Server 2016 Hyper-V 를 이용한 RoCE 인터페이스 구성 그림 13-5. Add Counters( 계수기 추가 ) 대화 상자 RoCE 트래픽이 실행 중인 경우 계수기가 그림 13-6 에 표시된 것처럼 나타납 니다 . 그림 13-6.
PAGE 241
13–Windows Server 2016 RoCE over Switch Embedded Teaming RoCE over Switch Embedded Teaming SET(Switch Embedded Teaming) 는 Windows Server 2016 Technical Preview 에 Hyper-V 및 SDN(Software Defined Networking) 스택을 포함하는 환경에서 사용하 기 위해 제공되는 Microsoft 의 대체 NIC 티밍 솔루션입니다 . SET 는 제한된 NIC 티밍 기능을 하이퍼바이저 가상 스위치로 통합합니다 . 하나의 실제 이더넷 네트워크 어댑터와 8 개의 실제 이더넷 네트워크 어댑터 사이 에서 SET 를 사용하여 하나 이상의 소프트웨어 기반 가상 네트워크 어댑터로 그룹 화합니다 . 이런 어댑터는 네트워크 어댑터 장애가 발생하는 경우 고속 성능 및 내 결함성을 제공합니다 .
PAGE 242
13–Windows Server 2016 RoCE 에 대한 QoS 구성 그림 13-8 은 명령 출력을 나타낸 것입니다 . 그림 13-8. Windows PowerShell 명령 : Get-NetAdapter 2. SET 에서 RDMA 를 활성화하려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrator> Enable-NetAdapterRdma "vEthernet (SET)" SET 에서 VLAN ID 할당 SET 에서 VLAN ID 를 할당하려면  SET 에서 VLAN ID 를 할당하려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrator> Set-VMNetworkAdapterVlan -VMNetworkAdapterName "SET" -VlanId 5 -Access -ManagementOS 주 호스트 가상 NIC 에 VLAN ID 를 추가할 때 다음 사항을 참고하십시오 .
PAGE 243
13–Windows Server 2016 RoCE 에 대한 QoS 구성 어댑터에서 DCBX 를 비활성화하여 QoS 구성 사용 중인 모든 시스템에서 모든 구성을 완료한 후에 어댑터에서 DCBX 를 비활성화 하여 서비스 품질을 구성해야 합니다 . 스위치와 서버에서 PFC( 우선순위 기반 흐름 제어 ), ETS( 향상된 전환 서비스 ) 및 트래픽 클래스 구성이 동일해야 합니다 . DCBX 를 비활성화하여 QoS 를 구성하려면 1. 어댑터에서 DCBX 를 비활성화합니다 . 2. HII 를 사용하여 RoCE Priority(RoCE 우선순위 ) 를 0 으로 설정합니다 . 3. 호스트에 DCB 역할을 설치하려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrators> Install-WindowsFeature Data-Center-Bridging 4.
PAGE 244
13–Windows Server 2016 RoCE 에 대한 QoS 구성 그림 13-9. 고급 속성 : QoS 활성화 6. 다음과 같이 VLAN ID 를 인터페이스에 할당합니다 . a. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . b. 어댑터의 Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 13-10) VLAN ID 를 선택한 후 값을 설정합니다 . c. OK( 확인 ) 를 클릭합니다 . 주 앞의 단계는 PFC( 우선순위 흐름 제어 ) 에 필수적입니다 .
PAGE 245
13–Windows Server 2016 RoCE 에 대한 QoS 구성 그림 13-10. 고급 속성 : VLAN ID 설정 7. 특정 우선순위에 대해 RoCE 의 우선순위 흐름 제어를 활성화하려면 다음 명 령을 발급합니다 . PS C:\Users\Administrators> Enable-NetQoSFlowControl -Priority 4 주 RoCE over Hyper-V 를 구성하는 경우 VLAN ID 를 실제 인터페이스에 할당하지 마십시오 . 8. 다른 우선순위에 대해 우선순위 흐름 제어를 비활성화하려면 다음 명령을 발 급합니다 . PS C:\Users\Administrator> Disable-NetQosFlowControl 0,1,2,3,5,6,7 PS C:\Users\Administrator> Get-NetQosFlowControl Priority Enabled PolicySet IfIndex IfAlias -------- ------- --------- ------- --
PAGE 246
13–Windows Server 2016 RoCE 에 대한 QoS 구성 4 True Global 5 False Global 6 False Global 7 False Global 9. QoS 를 구성하고 각 트래픽 유형에 적절한 우선순위를 할당하려면 다음 명령 을 발급합니다 ( 여기서 Priority 4 는 RoCE 용으로 , Priority 0 는 TCP 용으로 태그 지정됨 ). PS C:\Users\Administrators> New-NetQosPolicy "SMB" -NetDirectPortMatchCondition 445 -PriorityValue8021Action 4 -PolicyStore ActiveStore PS C:\Users\Administrators> New-NetQosPolicy "TCP" -IPProtocolMatchCondition TCP -PriorityValue8021Action 0 -Policystore ActiveStore PS C:\Users\Ad
PAGE 247
13–Windows Server 2016 RoCE 에 대한 QoS 구성 Name Algorithm Bandwidth(%) Priority ---- --------- ------------ -------- PolicySet --------- [Default] ETS 20 2-3,5-7 Global RDMA class ETS 50 4 Global TCP class ETS 30 0 Global 11. IfIndex IfAlias ------- ------- 앞의 구성에서 네트워크 어댑터 QoS 를 보려면 다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrator> Get-NetAdapterQos Name : SLOT 4 Port 1 Enabled : True Capabilities : Hardware Current -------- ------- MacSecBypass : NotSupported Not
PAGE 248
13–Windows Server 2016 RoCE 에 대한 QoS 구성 DCBX 를 활성화하여 QoS 를 구성하려면 1. DCBX(IEEE, CEE 또는 Dynamic) 를 활성화합니다 . 2. HII 를 사용하여 RoCE Priority(RoCE 우선순위 ) 를 0 으로 설정합니다 . 3. 호스트에 DCB 역할을 설치하려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrators> Install-WindowsFeature Data-Center-Bridging 주 이 구성의 경우 DCBX Protocol(DCBX 프로토콜 ) 을 CEE 로 설정합 니다 . 4. DCBX Willing(DCBX 의사 ) 모드를 True 로 설정하려면 다음 명령을 발급합 니다 . PS C:\Users\Administrators> set-NetQosDcbxSetting -Willing 1 5. 다음과 같이 미니포트에서 QoS 를 활성화합니다 . a.
PAGE 249
13–Windows Server 2016 RoCE 에 대한 QoS 구성 그림 13-11. 고급 속성 : QoS 활성화 6. 다음과 같이 VLAN ID 를 인터페이스 (PFC 의 경우 필수 ) 에 할당합니다 . a. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . b. 어댑터의 Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 13-12) VLAN ID 를 선택한 후 값을 설정합니다 . c. OK( 확인 ) 를 클릭합니다 .
PAGE 250
13–Windows Server 2016 RoCE 에 대한 QoS 구성 그림 13-12. 고급 속성 : VLAN ID 설정 7. 스위치를 구성하려면 다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrators> Get-NetAdapterQoS Name : Ethernet 5 Enabled : True Capabilities : Hardware Current -------- ------- MacSecBypass : NotSupported NotSupported DcbxSupport : CEE NumTCs(Max/ETS/PFC) : 4/4/4 OperationalTrafficClasses OperationalFlowControl : TC TSA Bandwidth Priorities -- --- --------- ---------- 0 ETS 5% 0-3,5-7 1 ETS 95% 4 CEE 4/4/4 : Pr
PAGE 251
13–Windows Server 2016 VMMQ 구성 NetDirect 445 RemoteTrafficClasses 4 : TC TSA Bandwidth Priorities -- --- --------- ---------- 0 ETS 5% 0-3,5-7 1 ETS 95% 4 RemoteFlowControl : Priority 4 Enabled RemoteClassifications : Protocol Port/Type Priority -------- --------- -------- NetDirect 445 4 주 앞서 나온 예는 어댑터 포트가 Arista 7060X 스위치에 연결되어 있을 때의 예 입니다 . 이 예에서는 스위치 PFC 가 Priority 4 에서 활성화됩니다 . RoCE App TLV 가 정의됩니다 . 이 두 트래픽 클래스는 TC0 및 TC1 로 정의되며 , 여기서 TC1 은 RoCE 용으로 정의됩니다 .
PAGE 252
13–Windows Server 2016 VMMQ 구성 어댑터에서 VMMQ 활성화 어댑터에서 VMMQ 를 활성화하려면 1. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . 2. Advanced Properties( 고급 속성 ) 페이지 ( 그림 13-13) 의 Property( 속성 ) 아래에서 Virtual Switch RSS( 가상 스위치 RSS) 를 선택한 후 값을 Enabled( 활성화 ) 로 설정합니다 . 3. OK( 확인 ) 를 클릭합니다 . 그림 13-13. 고급 속성 : 가상 스위치 RSS 활성화 VMMQ 최대 QP 기본값 및 비기본 VPort 설정 VMMQ 최대 QP 기본값 및 비기본 VPort 를 설정하려면 1. 미니포트 창을 열고 Advanced( 고급 ) 탭을 클릭합니다 . 2. Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 13-14) 다음 중 하나를 선택합니다 .
PAGE 253
13–Windows Server 2016 VMMQ 구성 3. 적절한 경우 선택한 속성에 대한 Value( 값 ) 를 조정합니다 . 그림 13-14. 고급 속성 : VMMQ 설정 4. OK( 확인 ) 를 클릭합니다 . SR-IOV 가 있거나 없는 가상 머신 스위치 생성 SR-IOV 가 있거나 없는 가상 머신 스위치를 생성하려면 1. 하이퍼바이저 관리자를 시작합니다 . 2. Virtual Switch Manager( 가상 스위치 관리자 ) 를 선택합니다 ( 그림 13-15 참조 ). 3. Name( 이름 ) 입력란에 가상 스위치의 이름을 입력합니다 . 4. Connection type( 연결 유형 ) 에서 다음 작업을 수행합니다 . a. External network( 외부 네트워크 ) 를 클릭합니다 . b.
PAGE 254
13–Windows Server 2016 VMMQ 구성 그림 13-15. 가상 스위치 관리자 5. OK( 확인 ) 를 클릭합니다 . 가상 머신 스위치에서 VMMQ 활성화 가상 머신 스위치에서 VMMQ 를 활성화하려면  다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrators> Set-VMSwitch -name q1 -defaultqueuevmmqenabled $true -defaultqueuevmmqqueuepairs 4 231 AH0054602-03 F
PAGE 255
13–Windows Server 2016 VMMQ 구성 가상 머신 스위치 기능 가져오기 가상 머신 스위치 기능을 가져오려면  다음 Windows PowerShell 명령을 실행합니다 . PS C:\Users\Administrator> Get-VMSwitch -Name ql | fl 그림 13-16 에 출력 예가 나와 있습니다 . 그림 13-16. Windows PowerShell 명령 : Get-VMSwitch VM 생성 후 VM 의 VMNetworkadapter 에서 VMMQ 활성화 가상 머신 (VM) 을 생성하고 VM 의 VMNetworksadapter 에서 VMMQ 를 활성화 하려면 1. VM 을 생성합니다 . 2. VMNetworkadapter 를 VM 에 추가합니다 . 3. 가상 스위치를 VMNetworkadapter 에 할당합니다 .
PAGE 256
13–Windows Server 2016 VMMQ 구성 4. VM 에서 VMMQ 를 활성화하려면 다음 Windows PowerShell 명령을 실행합 니다 . PS C:\Users\Administrators> set-vmnetworkadapter -vmname vm1 -VMNetworkAdapterName "network adapter" -vmmqenabled $true -vmmqqueuepairs 4 주 SR-IOV 지원 가상 스위치 : VM 스위치 및 하드웨어 가속이 SR-IOV 를 지원하는 경우 VMMQ 를 활용하려면 각각 8 개의 가상 NIC 가 있는 VM 을 10 개 생성해야합니다 . 이 요구 사항은 SR-IOV 가 VMMQ 보다 우선 하기 때문입니다 . 64 개의 가상 기능과 16 개의 VMMQ 에 대한 출력 예가 아래에 나와 있습 니다 . PS C:\Users\Administrator> get-netadaptervport Name ---Ethernet Ethernet Ethernet E
PAGE 257
13–Windows Server 2016 VMMQ 구성 Ethernet Ethernet Ethernet Ethernet 3 3 3 3 77 78 79 80 00-15-5D-36-0A-F7 00-15-5D-36-0A-F8 00-15-5D-36-0A-F9 00-15-5D-36-0A-FA 0:8 0:16 1:0 0:0 PF PF PF PF Activated Activated Activated Activated Adaptive Adaptive Adaptive Adaptive 4 4 4 4 PS C:\Users\Administrator> get-netadaptervmq Name InterfaceDescription ---Ethernet 4 -------------------QLogic FastLinQ 41xxx Enabled BaseVmqProcessor MaxProcessors NumberOfReceive Queues ------- ---------------- -------------
PAGE 258
13–Windows Server 2016 VXLAN 구성 VXLAN 구성 VXLAN 구성 정보는 다음을 포함합니다 .  어댑터에서 VXLAN 오프로드 활성화  소프트웨어 정의 네트워크 배포 어댑터에서 VXLAN 오프로드 활성화 어댑터에서 VXLAN 오프로드를 활성화하려면 1. 미니포트 창을 연 다음 Advanced( 고급 ) 탭을 클릭합니다 . 2. Advanced Properties( 고급 속성 ) 페이지의 Property( 속성 ) 아래에서 ( 그림 13-17) VXLAN Encapsulated Task Offload(VXLAN 캡슐화 작업 오프로드 ) 를 선택합니다 . 그림 13-17. 고급 속성 : VXLAN 활성화 3. Value( 값 ) 를 Enabled( 사용 가능 ) 로 설정합니다 . 4. OK( 확인 ) 를 클릭합니다 .
PAGE 259
13–Windows Server 2016 Storage Spaces Direct 구성 소프트웨어 정의 네트워크 배포 가상 머신에서 VXLAN 캡슐화 작업 오프로드를 이용하려면 Microsoft 네트워크 컨 트롤러를 활용하는 SDN( 소프트웨어 정의 네트워크 ) 스택을 배포해야 합니다 . 자세한 내용은 소프트웨어 정의 네트워크에 대한 다음 Microsoft TechNet 링크를 참조하십시오 . https://technet.microsoft.com/en-us/windows-server-docs/networking/sdn/ software-defined-networking--sdn- Storage Spaces Direct 구성 Windows Server 2016 에는 Storage Spaces Direct 가 도입되었는데 , 이를 이용해 로컬 스토리지로 고도의 가용성과 확장성을 지닌 스토리지 시스템을 만들 수 있습 니다 . 자세한 내용은 다음 Microsoft TechnNet 링크를 참조하십시오 .
PAGE 260
13–Windows Server 2016 Storage Spaces Direct 구성 주 이 예에서 사용되는 디스크는 4 × 400G NVMe™ 및 12 × 200G SSD 디스크 입니다 . Hyper-Converged 시스템 배포 이 섹션에서는 Windows Server 2016 을 사용하여 Hyper-Converged 시스템의 구 성요소를 설치 및 구성하기 위한 지침을 소개합니다 . Hyper-Converged 시스템을 배포하는 작업은 다음 세 가지 큰 단계로 나눌 수 있습니다 .  운영 체제 배포  네트워크 구성  Storage Spaces Direct 구성 운영 체제 배포 운영 체제를 배포하려면 1. 운영 체제를 설치합니다 . 2. Windows 서버 역할 ( 하이퍼바이저 ) 을 설치합니다 . 3. 다음 기능을 설치합니다 .    4. 장애 조치 클러스터 DCB(Data Center Bridging) 노드를 도메인에 연결하고 도메인 계정을 추가합니다 .
PAGE 261
13–Windows Server 2016 Storage Spaces Direct 구성 각 서버에서 네트워크를 구성하려면 1. 다음과 같이 실제 네트워크 스위치를 구성합니다 . a. 모든 어댑터 NIC 를 스위치 포트에 연결합니다 . 주 테스트 어댑터에 NIC 포트가 두 개 이상 있는 경우 두 포트 모두 같은 스위치에 연결해야 합니다 . b. 스위치 포트를 활성화하고 스위치 포트가 스위치에 독립적인 티밍 모드 를 지원하고 다중 VLAN 네트워크에 속하는지 확인하십시오 . Dell 스위치 구성 예 : no ip address mtu 9416 portmode hybrid switchport dcb-map roce_S2D protocol lldp dcbx version cee no shutdown 2. Network Quality of Service( 네트워크 서비스 품질 ) 를 활성화합니다 .
PAGE 262
13–Windows Server 2016 Storage Spaces Direct 구성 c. 가상 스위치에 호스트 가상 NIC 를 추가하려면 다음 명령을 발급합니다 . Add-VMNetworkAdapter –SwitchName SETswitch –Name SMB_1 –managementOS Add-VMNetworkAdapter –SwitchName SETswitch –Name SMB_2 –managementOS 주 앞의 명령들은 사용할 관리 운영 체제를 위해 방금 구성한 가상 스 위치에서 가상 NIC 를 구성합니다 . d. VLAN 을 사용하도록 호스트 가상 NIC 를 구성하려면 다음 명령을 발급 합니다 .
PAGE 263
13–Windows Server 2016 Storage Spaces Direct 구성 Storage Spaces Direct 구성 Windows Server 2016 에서 Storage Spaces Direct 를 구성하는 절차는 다음과 같 습니다 .  1 단계 . 클러스터 유효성 검사 도구 실행  2 단계 . 클러스터 생성  3 단계 . 클러스터 감시 장치 구성  4 단계 . Storage Spaces Direct 에 사용되는 디스크 정리  5 단계 . Storage Spaces Direct 활성화  6 단계 . 가상 디스크 생성  7 단계 . 가상 머신 생성 또는 배포 1 단계 . 클러스터 유효성 검사 도구 실행 클러스터 유효성 검사 도구를 실행하여 서버 노드가 Storage Spaces Direct 를 사 용하여 클러스터를 생성하도록 올바르게 구성되어 있는지 확인합니다 .
PAGE 264
13–Windows Server 2016 Storage Spaces Direct 구성 4 단계 . Storage Spaces Direct 에 사용되는 디스크 정리 Storage Spaces Direct 에 사용하려는 디스크는 비어 있고 파티션이나 다른 데이터 가 없어야 합니다 . 디스크에 파티션이나 다른 데이터가 있을 경우 Storage Spaces Direct 시스템에는 이런 파티션이나 데이터가 포함되지 않습니다 . 다음 Windows PowerShell 명령을 Windows PowerShell 스크립트 (.PS1) 파일에 넣고 관리자 권한으로 연 Windows PowerShell( 또는 Windows PowerShell ISE) 콘 솔의 관리 시스템에서 명령을 실행할 수 있습니다 . 주 다음 스크립트를 실행하면 Storage Spaces Direct 용으로 사용할 수 있는 디 스크를 각각의 노드에서 식별하는 데 도움이 되고 이런 디스크에서 모든 데이 터와 파티션이 제거됩니다 .
PAGE 265
13–Windows Server 2016 Nano 서버 배포 및 관리 5 단계 . Storage Spaces Direct 활성화 클러스터를 생성한 후 Enable-ClusterStorageSpacesDirect Windows PowerShell cmdlet 을 실행합니다 . cmdlet 은 스토리지 시스템을 Storage Spaces Direct 모드로 전환하고 다음 작업을 자동으로 수행합니다 .  S2D on Cluster1 같은 이름을 가진 대형 풀을 하나 생성합니다 .  Storage Spaces Direct 캐시를 구성합니다 . Storage Spaces Direct 가 사용할 수 있는 미디어 유형이 둘 이상 있는 경우 가장 효율적인 유형을 캐시 장치로 구성합니다 ( 대부분의 경우 읽기와 쓰기 ).  Capacity(용량) 및 Performance(성능)의 두 계층을 기본 계층으로 생성합니 다 .
PAGE 266
13–Windows Server 2016 Nano 서버 배포 및 관리 역할과 기능 표 13-1 에는 이 Nano 서버 릴리스에서 지원되는 역할 및 기능과 함께 , 이들을 위 한 패키지를 설치하는 Windows PowerShell 옵션이 나와 있습니다 . 일부 패키지는 고유의 Windows PowerShell 옵션 ( 예 : -Compute) 으로 직접 설치됩니다 . 다른 패 키지는 -Packages 옵션에 대한 확장 패키지로 설치되며 , 이들을 쉼표로 구분된 목록에 결합할 수 있습니다 . 표 13-1. Nano 서버의 역할과 기능 역할 또는 기능 옵션 하이퍼바이저 역할 -Compute 장애 복구 클러스터링 -Clustering Nano 서버를 가상 머신으로 호스트하기 위한 하이 퍼바이저 게스트 드라이버 -GuestDrivers 다양한 네트워크 어댑터 및 스토리지 컨트롤러용 기본 드라이버 .
PAGE 267
13–Windows Server 2016 Nano 서버 배포 및 관리 표 13-1. Nano 서버의 역할과 기능 ( 계속 ) 역할 또는 기능 옵션 -Packages Microsoft-Windows-ServerSCVMM-Package 시스템 센터 가상 머신 관리자 에이전트 -Packages Microsoft-Windows-ServerSCVMM-Compute-Package 참고 : 이 패키지는 Hyper-V 를 모니터링하는 경우 에만 사용하십시오 . 이 패키지를 설치하는 경우 -Compute 옵션을 Hyper-V 역할에 사용해서는 안 됩니다 . 대신에 -Packages 옵션을 사용하여 -Packages Microsoft-NanoServer-Compute-Package, Microsoft-Windows-Server-SCVMMCompute-Package 를 설치합니다 .
PAGE 268
13–Windows Server 2016 Nano 서버 배포 및 관리 6. 다음 명령을 발급하여 NanoServerImageGenerator 스크립트를 가져옵니다 . Import-Module .\NanoServerImageGenerator.psm1 -Verbose 7. 컴퓨터 이름을 설정하고 OEM 드라이버와 하이퍼바이저를 포함하는 VHD 를 생성하려면 다음 Windows PowerShell 명령을 실행합니다 . 주 이 명령을 발급하면 새 VHD 에 대한 관리자 암호를 입력하라는 메시지 가 표시됩니다 . New-NanoServerImage –DeploymentType Host –Edition -MediaPath -BasePath .\Base -TargetPath .\NanoServerPhysical\NanoServer.
PAGE 269
13–Windows Server 2016 Nano 서버 배포 및 관리 INFO : Windows path (I:) has been assigned. INFO : System volume location: I: INFO : Applying image to VHD. This could take a while... INFO : Image was applied successfully. INFO : Making image bootable... INFO : Fixing the Device ID in the BCD store on VHD... INFO : Drive is bootable. INFO : Dismounting VHD... INFO : Closing Windows image... INFO : Done. Cleaning up... Done. The log is at: C:\Users\ADMINI~1\AppData\Local\Temp\2\NanoServerImageGen
PAGE 270
13–Windows Server 2016 Nano 서버 배포 및 관리 가상 머신에 Nano 서버 배포 가상 머신에서 실행할 Nano 서버 VHD( 가상 하드 드라이브 ) 를 생성하려면 1. Windows Server 2016 OS 이미지를 다운로드합니다 . 2. 단계 1 에서 다운로드한 파일에서 NanoServer 폴더로 이동합니다 . 3. NanoServer 폴더에서 하드 드라이브에 있는 폴더로 다음 파일을 복사합니 다.  NanoServerImageGenerator.psm1  Convert-WindowsImage.ps1 4. Windows PowerShell 을 관리자 권한으로 시작합니다 . 5. 단계 3 에서 파일을 붙여 넣은 폴더로 디렉터리를 변경합니다 . 6. 다음 명령을 발급하여 NanoServerImageGenerator 스크립트를 가져옵니다 . Import-Module .\NanoServerImageGenerator.psm1 -Verbose 7.
PAGE 271
13–Windows Server 2016 Nano 서버 배포 및 관리 C:\tmp\TP4_iso\Bld_10586_iso -BasePath .\Base -TargetPath .\Nano1\VM_NanoServer.vhd -ComputerName Nano-VM1 –GuestDrivers cmdlet New-NanoServerImage at command pipeline position 1 Supply values for the following parameters: Windows(R) Image to Virtual Hard Disk Converter for Windows(R) 10 Copyright (C) Microsoft Corporation. All rights reserved. Version 10.0.14300. 1000.amd64fre.rs1_release_svc.
PAGE 272
13–Windows Server 2016 Nano 서버 배포 및 관리 Nano 서버 원격 관리 Nano 서버를 원격으로 관리하기 위한 옵션으로는 Windows PowerShell, WMI(Windows Management Instrumentation), Windows 원격 관리 및 EMS(Emergency Management Services) 가 있습니다 . 이 섹션에서는 Windows PowerShell 원격을 사용하여 Nano 서버에 액세스하는 방법을 설명합니다 . Windows PowerShell 원격 기능을 사용한 Nano 서버 관리 Windows PowerShell 원격 기능을 사용하여 Nano 서버를 관리하려면 1. 관리 컴퓨터의 신뢰할 수 있는 호스트 목록에 Nano 서버의 IP 주소를 추가합 니다 . 주 복구 콘솔을 사용하여 서버 IP 주소를 찾습니다 . 2. Nano 서버의 관리자에 자신이 사용 중인 계정을 추가합니다 . 3.
PAGE 273
13–Windows Server 2016 Nano 서버 배포 및 관리 이제는 평소대로 Nano 서버에서 Windows PowerShell 명령을 실행할 수 있습니다 . 하지만 이 Nano 서버 릴리스에서 일부 Windows PowerShell 명령은 지원되지 않습 니다 . 어떤 명령을 사용할 수 있는지 확인하려면 Get-Command -CommandType Cmdlet 명령을 발급합니다 . 원격 세션을 중지하려면 Exit-PSSession 명령을 발 급합니다 . Nano 서버에 대한 자세한 내용은 다음 링크를 참조하십시오 . https://technet.microsoft.com/en-us/library/mt126167.
PAGE 274
13–Windows Server 2016 Nano 서버 배포 및 관리 그림 13-19 에 출력 예가 나와 있습니다 . 그림 13-19. Windows PowerShell 명령 : Get-NetAdapter 3. 어댑터에서 RDMA 가 활성화되어 있는지 확인하려면 다음 Windows PowerShell 명령을 실행합니다 . [172.28.41.152]: PS C:\Users\Administrator\Documents> Get-NetAdapterRdma 그림 13-20 에 출력 예가 나와 있습니다 . 그림 13-20. Windows PowerShell 명령 : Get-NetAdapterRdma 4. 어댑터의 모든 인터페이스에 IP 주소와 VLAN ID 를 할당하려면 다음 Windows PowerShell 명령을 실행합니다 . [172.28.41.152]: PS C:\> Set-NetAdapterAdvancedProperty -InterfaceAlias "slot 1 port 1" -Registry
PAGE 275
13–Windows Server 2016 Nano 서버 배포 및 관리 [172.28.41.152]: PS C:\> New-SMBShare -Name "smbshare" -Path c:\smbshare -FullAccess Everyone 그림 13-22 에 출력 예가 나와 있습니다 . 그림 13-22. Windows PowerShell 명령 : New-SMBShare 6. 클라이언트 컴퓨터에서 SMBShare 를 네트워크 드라이브로 매핑하려면 다 음 Windows PowerShell 명령을 실행합니다 . 주 Nano 서버에서 인터페이스의 IP 주소는 192.168.10.10 입니다 . PS C:\Windows\system32> net use z: \\192.168.10.10\smbshare This command completed successfully. 7.
PAGE 276
14 문제 해결 이 장에서는 다음 문제 해결 정보를 제공합니다 .  문제 해결 검사 목록  254 페이지의 " 현재 드라이버의 로드 여부 확인 "  255 페이지의 " 네트워크 연결 테스트 "  256 페이지의 "Hyper-V 를 이용한 Microsoft 가상화 "  256 페이지의 "Linux 관련 문제 "  256 페이지의 " 기타 문제 "  257 페이지의 " 디버그 데이터 수집 " 문제 해결 검사 목록 주의 어댑터를 추가하거나 제거하기 위해 서버 캐비닛을 열기 전에 5 페이지의 " 안전 주의사항 " 을 검토하십시오 . 다음 검사 목록은 시스템에서 41xxx 시리즈 어댑터를 설치하거나 실행하는 중에 발생할 수 있는 문제를 해결하기 위해 권장되는 조치를 제공합니다 .  케이블과 연결 부분을 모두 검사합니다 . 네트워크 어댑터의 케이블과 스위치 가 올바로 연결되었는지 확인합니다 .  6 페이지의 " 어댑터 설치 " 를 검토하여 어댑터 설치를 확인합니다 .
PAGE 277
14– 문제 해결 현재 드라이버의 로드 여부 확인  결함이 있는 어댑터를 올바르게 작동하는 어댑터로 교체합니다. 첫 번째 어댑 터가 작동하지 않는 슬롯에 두 번째 어댑터가 작동하는 경우 원래 어댑터에 결함이 있을 수 있습니다 .  제대로 작동이 되는 다른 시스템에 어댑터를 설치한 후 테스트를 다시 실행합 니다 . 어댑터가 새 시스템에서 테스트를 통과한 경우 원래 시스템에 결함이 있을 수 있습니다 .  시스템에서 다른 어댑터를 모두 제거한 후 테스트를 다시 실행합니다. 어댑터 가 테스트를 통과한 경우 다른 어댑터에 충돌이 발생했을 수 있습니다 . 현재 드라이버의 로드 여부 확인 현재 드라이버가 Windows, Linux 또는 VMware 시스템용으로 로드되는지 확인합 니다 . Windows 드라이버 확인 어댑터 , 링크 상태 및 네트워크 연결에 대한 중요 정보는 장치 관리자에서 확인합 니다 . Linux 드라이버 확인 qed.
PAGE 278
14– 문제 해결 네트워크 연결 테스트 새로운 드라이버를 로드하여도 아직 재부팅 전인 경우에는 modinfo 명령을 실행 해도 업데이트된 드라이버 정보가 표시되지 않습니다. 이런 경우에는 다음과 같이 dmesg 명령을 발급하여 로그 정보를 확인할 수 있습니다. 아래 예에서 마지막 항목 이 재부팅 시 활성화되는 드라이버를 나타냅니다 . # dmesg | grep -i "Cavium" | grep -i "qede" [ 10.097526] QLogic FastLinQ 4xxxx Ethernet Driver qede x.x.x.x [ 23.093526] QLogic FastLinQ 4xxxx Ethernet Driver qede x.x.x.x [ 34.975396] QLogic FastLinQ 4xxxx Ethernet Driver qede x.x.x.x [ 34.975896] QLogic FastLinQ 4xxxx Ethernet Driver qede x.x.x.x [ 3334.
PAGE 279
14– 문제 해결 Hyper-V 를 이용한 Microsoft 가상화 표시되는 ping 통계는 네트워크 연결이 작동하는지 여부를 나타냅니다 . Linux 용 네트워크 연결 테스트 이더넷 인터페이스가 작동되어 실행 중인지 확인하려면 1. 이더넷 인터페이스의 상태를 확인하려면 ifconfig 명령을 발급합니다 . 2. 이더넷 인터페이스에 대한 통계를 확인하려면 netstat -i 명령을 발급합 니다 . 연결이 설정되었는지 확인하려면 1. 네트워크에서 IP 호스트를 Ping 합니다 . 명령 행에서 다음 명령을 발급합 니다 . ping 2. ENTER 키를 누릅니다 . 표시되는 ping 통계는 네트워크 연결이 작동하는지 여부를 나타냅니다 . 운영 체제 GUI 도구나 ethtool 명령 , ethtool –s ethX speed SSSS 를 사용하여 어댑터 링크 속도를 10Gbps 또는 25Gbps 로 강제 설정할 수 있습니다 .
PAGE 280
14– 문제 해결 디버그 데이터 수집 문제 : iSCSI 드라이버 (qedil) 가 설치된 ESXi 환경에서 VI 클라이언트가 호스트에 액세스하지 못하는 경우가 있습니다 . 이는 호스팅되는 데몬이 종료되어 VI 클라이언트와의 연결에 영향을 주었기 때문입 니다 . 해결책 : VMware 기술 지원에 문의하십시오 . 디버그 데이터 수집 표 14-1 의 명령을 사용하여 디버그 데이터를 수집합니다 . 표 14-1. 디버그 데이터 수집 명령 디버그 데이터 설명 demesg-T 커널 로그 ethtool-d 레지스터 덤프 sys_info.
PAGE 281
A 어댑터 LED 표 A-1 에는 어댑터 포트 링크 및 작동 상태를 나타내는 LED 표시등이 나와 있습 니다 . 표 A-1.
PAGE 282
B 케이블 및 광학 모듈 이 부록에서는 지원되는 케이블 및 광학 모듈에 대해 다음 정보를 제공합니다 .  지원되는 사양  260 페이지의 " 테스트를 거친 케이블 및 광학 모듈 "  264 페이지의 " 테스트를 거친 스위치 " 지원되는 사양 41xxx 시리즈 어댑터는 SFF8024 를 준수하는 다양한 케이블 및 광학 모듈을 지원 합니다 . 특정 폼팩터 규정 준수는 다음과 같습니다 .    SFP:  SFF8472( 메모리 맵용 )  SFF8419 또는 SFF8431( 저속 신호와 전력 ) QSFP(Quad small form factor pluggable):  SFF8636( 메모리 맵용 )  SFF8679 또는 SFF8436( 저속 신호와 전력 ) 광학 모듈 전기 입력/출력, ACC(Active Copper 케이블), AOC(능동형 광학 케 이블 ):  10G—SFF8431 제한 인터페이스  25G—IEEE802.
PAGE 283
B– 케이블 및 광학 모듈 테스트를 거친 케이블 및 광학 모듈 테스트를 거친 케이블 및 광학 모듈 Cavium은 규정 준수 요건을 충족하는 모든 케이블 또는 광학 모듈이 41xxx 시리즈 어댑터와 함께 작동할 것이라 보장하지 않습니다 . Cavium 은 표 B-1 에 나열된 구 성부품을 테스트한 후 편리하게 참조할 수 있도록 이 목록을 제시하는 것입니다 . 표 B-1.
PAGE 284
B– 케이블 및 광학 모듈 테스트를 거친 케이블 및 광학 모듈 표 B-1.
PAGE 285
B– 케이블 및 광학 모듈 테스트를 거친 케이블 및 광학 모듈 표 B-1.
PAGE 286
B– 케이블 및 광학 모듈 테스트를 거친 케이블 및 광학 모듈 표 B-1.
PAGE 287
B– 케이블 및 광학 모듈 테스트를 거친 스위치 테스트를 거친 스위치 표 B-2 는 41xxx 시리즈 어댑터와 상호 운용성 테스트를 거친 스위치를 나열한 것 입니다 . 이 목록은 제품 출시 시점에 사용 가능한 스위치를 기준으로 한 것이며 , 시간의 경과에 따라 새로운 스위치가 출시되거나 단종되는 스위치가 있을 때 변경 될 수 있습니다 . 표 B-2.
PAGE 288
C Dell Z9100 스위치 구성 41xxx 시리즈 어댑터는 Dell Z9100 이더넷 스위치와 연결할 수 있도록 지원합니다 . 단 , 자동 협상 프로세스가 표준화될 때까지는 25Gbps 의 속도로 어댑터에 연결할 수 있도록 수동으로 스위치를 구성해야 합니다 . 41xxx 시리즈 어댑터를 25Gbps 의 속도로 연결하도록 Dell Z9100 스위치 포트를 구성하는 방법은 다음과 같습니다 . 1. 관리 워크스테이션과 스위치 사이에 시리얼 포트 연결을 구성합니다 . 2. 다음과 같이 명령 행 세션을 연 다음 스위치에 로그인합니다 . Login: admin Password: admin 3. 스위치 포트 구성을 활성화합니다 . Dell> enable Password: xxxxxx Dell# config 4. 구성할 모듈과 포트를 지정합니다 . 다음 예에서는 모듈 1, 포트 5 를 사용합 니다 .
PAGE 289
C–Dell Z9100 스위치 구성 어댑터 링크 속도를 변경하는 방법에 대한 자세한 내용은 255 페이지의 " 네 트워크 연결 테스트 " 를 참조하십시오 . 5. 포트가 25Gbps 의 속도로 동작하는지 확인합니다 . Dell# Dell#show running-config | grep "port 5" stack-unit 1 port 5 portmode quad speed 25G 6. 스위치 포트 5 에서 자동 협상을 비활성화하려면 a. 스위치 포트 인터페이스 ( 모듈 1, 포트 5, 인터페이스 1) 를 지정한 후 자동 협상 상태를 확인합니다 . Dell(conf)#interface tw 1/5/1 Dell(conf-if-tf-1/5/1)#intf-type cr4 ? autoneg b. Enable autoneg 자동 협상을 비활성화합니다 . Dell(conf-if-tf-1/5/1)#no intf-type cr4 autoneg c. 자동 협상이 비활성화되었는지 확인합니다 .
PAGE 290
D 기능 제약 조건 이 부록에서는 현재 릴리스에서 구현되는 기능 제약 조건에 대한 정보를 제공합니다. 이러한 기능들에 수반되는 제약 조건은 향후 릴리스에서 제거될 예정입니다 . 고객 은 해당 기능의 활성화에 통상적으로 필요한 범위를 넘어서는 추가적인 구성 절차 없이 기능 조합을 사용할 수 있습니다 . NPAR 모드일 때 같은 포트에서는 FCoE 와 iSCSI 가 동시에 지원되지 않습니다 현재 릴리스에서는 NPAR 모드일 때 물리적으로 동일한 포트에서는 FCoE 와 iSCSI 를 동시에 구성할 수 없습니다 ( 현재 FCoE 와 iSCSI 는 기본 모드일 때만 동 일한 포트에서 지원됩니다 ). NPAR 모드일 때는 실제 포트에서 FCoE 또는 iSCSI 중 하나가 허용됩니다 . HII 또는 QLogic 관리 도구를 사용하여 포트에 iSCSI 또는 FCoE 프로필이 있는 PF 를 구성한 후에는 이런 관리 도구로 다른 PF 에 스토리지 프로토콜을 구성할 수 없 습니다 .
PAGE 291
용어 비휘발성 메모리 익스프레스 고급 구성 및 전원 인터페이스 NVMe 섹션을 참조하십시오 . ACPI 섹션을 참조하십시오 . 어댑터 호스트 시스템과 대상 장치를 서로 연결해 주는 보드 . 어댑터는 호스트 버스 어댑터 , 호스트 어댑터 및 보드와 동일한 의미로 사 용됩니다 . 대상 SCSI 세션의 스토리지 장치 엔드포인트 . 초기자는 대상으로부터 데이터를 요청합니 다 . 대상은 일반적으로 디스크 드라이브 , 테이프 드라이브 또는 기타 미디어 장치입 니다 . 일반적으로 SCSI 주변 장치는 대상 이지만 , 어댑터는 경우에 따라 대상일 수 있습니다 . 한 대상이 다수의 LUN 을 포함 할 수 있습니다 . 어댑터 포트 어댑터 보드의 포트 이더넷 컴퓨터끼리 정보를 전송하는 데 가장 널리 사용되는 LAN 기술로서 일반적으로 전송 속도가 10~100Mbps 에 이릅니다 . 대상은 초기자 ( 호스트 시스템 ) 의 요청에 응답하는 장치입니다 .
PAGE 292
User’s Guide—Converged Network Adapters 41xxx Series ACPI DCB ACPI(Advanced Configuration and Power Interface) 사양은 통합 운영 체제 중심의 장 치 구성 및 전원 관리를 위한 개방형 표준을 제공합니다 . ACPI 는 하드웨어 검색 , 구성 , 전원 관리 및 모니터링을 위한 플랫폼에 독 립적인 인터페이스를 정의합니다 . 이 사양 은 ACPI 를 구현하는 시스템을 설명하는 데 사용되는 용어인 OSPM(Operating System-directed configuration and Power Management) 의 중심이 되는 사양으로 , 레 거시 펌웨어 인터페이스에서 장치 관리 책임 을 없애줍니다 . Data Center Bridging. 데이터 센터의 프로 토콜과 응용프로그램 요구 사항을 충족하 기 위해 기존 802.1 브리지 사양에 개선 사 항을 제공합니다 .
PAGE 293
User’s Guide—Converged Network Adapters 41xxx Series EEE FCoE Energy Efficient Ethernet( 에너지 효율 이 더넷 ). 컴퓨터 네트워킹 표준의 연선 및 백 플레인 이더넷에 대한 개선 사항으로 데이 터 활동이 적은 기간 동안 전력 소모가 감소 합니다. 이는 기존 장치의 완전한 호환성을 유지하면서 전력 소모를 50% 이상 절감하 는 것이 그 의도였습니다 . IEEE(Institute of Electrical and Electronics Engineers) 에서 IEEE 802.3az 태스크 포스를 통해 표준을 개발했습니다 . Fibre Channel over Ethernet. 파이버 채널 프레임을 Layer 2 이더넷 프레임 내에 캡슐 화하여 기존의 파이버 채널 스토리지 네트 워킹 트래픽이 이더넷을 통해 이동할 수 있 도록 , T11 표준 기구에서 정의한 새로운 기 술입니다 . 자세한 내용은 www.fcoe.com 을 방문하십시오 .
PAGE 294
User’s Guide—Converged Network Adapters 41xxx Series Internet Small Computer System Interface Layer 2 iSCSI 섹션을 참조하십시오 . 다중 계층 통신 모델인 OSI(Open Systems Interconnection) 의 데이터 링크 계층을 지 칭합니다 . 데이터 링크 계층의 기능은 네트 워크에서 실제 링크를 통해 데이터를 이동 하는 것이며 , 이 경우 스위치는 메시지 대 상을 확인하기 위해 대상 MAC 주소를 사용 하여 Layer 2 레벨에서 데이터 메시지를 리 디렉트합니다 . Internet Wide Area RDMA Protocol iWARP 섹션을 참조하십시오 . IP Internet Protocol. 인터넷을 통해 한 컴퓨터 에서 다른 컴퓨터로 데이터를 전송하는 방 식 . IP 는 패킷의 형태를 규정한 것으로 , 데이터그램 및 주소 지정 구성표로도 불립 니다 .
PAGE 295
User’s Guide—Converged Network Adapters 41xxx Series Maximum Transmission Unit NPAR MTU 섹션을 참조하십시오 . NIC Partitioning. 단일 NIC 포트를 여러 개 의 실제 기능 또는 파티션으로 나누는 것으 로 , 분할된 부분은 각각 사용자가 구성할 수 있는 대역폭과 개인 설정 ( 인터페이스 유형 ) 이 있습니다 . 개인 설정에는 NIC, FCoE 및 iSCSI 가 포함됩니다 . Message Signaled Interrupts MSI, MSI-X 섹션을 참조하십시오 . MSI, MSI-X Message Signaled Interrupts. PCI 2.2 이상 버전과 PCI Express 에서 메시지 신호 인터 럽트 (MSI) 를 지원하기 위한 PCI 확장 슬 롯 2 개 중 1 개 . MSI 는 핀 어설션 또는 디 어설션을 에뮬레이션할 수 있는 특별한 메 시지를 통해 인터럽트 신호를 생성하는 대 체 방법입니다 .
PAGE 296
User’s Guide—Converged Network Adapters 41xxx Series SerDes Quality of Service Serializer/Deserializer. 고속 통신에서 제한 된 입 / 출력을 보상할 목적으로 널리 사용 되는 한 쌍의 기능 블록 . 이 블록은 직렬 데 이터와 병렬 인터페이스 사이에서 각 방향 으로 전송되는 데이터를 변환합니다 . QoS 섹션을 참조하십시오 . RDMA Remote Direct Memory Access. 네트워크 를 통해 하나의 노드를 직접 다른 노드의 메 모리에 쓸 수 있는 기능 ( 주소 및 크기 의미 체계 포함 ). 이 기능은 VI 네트워크에서 매 우 중요합니다 . Serializer/Deserializer SerDes 섹션을 참조하십시오 . Single Root Input/Output Virtualization RDMA over Converged Ethernet SR-IOV 섹션을 참조하십시오 .
PAGE 297
User’s Guide—Converged Network Adapters 41xxx Series VF  Type(유형) - 메시지의 이 부분이 나타 내는 필드의 종류를 표시하는 숫자 코 드. Virtual Function. VI  Length(길이) - 값 필드의 크기(일반적 으로 바이트 단위 ). Virtual Interface. 파이버 채널과 기타 통신 프로토콜에서 원격 직접 메모리 액세스를 위한 이니셔티브 . 클러스터링과 메시징에 사용됩니다 .  Value( 값 ) - 메시지의 이 부분에 대한 데이터를 포함한 가변 크기의 바이트 집합 . Virtual Interface Transmission Control Protocol VI 섹션을 참조하십시오 . TCP 섹션을 참조하십시오 . Virtual Logical Area Network Transmission Control Protocol/Internet Protocol VLAN 섹션을 참조하십시오 .
PAGE 298
User’s Guide—Converged Network Adapters 41xxx Series WoL Wake on LAN. 대개 네트워크상의 다른 컴 퓨터에서 실행되는 간단한 프로그램을 통 해 전송되는 네트워크 메시지에 의해 어떤 컴퓨터를 원격으로 켜거나 절전 모드를 해 제할 수 있도록 지원하는 이더넷 컴퓨터 네 트워킹 표준 .
PAGE 299
본사 Cavium, Inc. 인터내셔널 오피스 2315 N. First Street San Jose, CA 95131 EE. UU. 408-943-7100 영국 | 아일랜드 | 독일 | 프랑스 | 인도 | 일본 | 중국 | 홍콩 | 싱가포르 | 대만 | 이스라엘 Copyright © 2017, 2018 Cavium, Inc. 전세계 판권 본사 소유 . QLogic 코퍼레이션은 전적으로 Cavium, Inc. 의 자회사입니다 . Cavium, FastLinQ, QConvergeConsole, QLogic 및 SmartAN 은 Cavium, Inc. 의 등록 상표입니다 . 기타 모든 브랜드명 및 제품명은 해당 명칭을 소유한 회사의 상표 또는 등록상표입니다 . 본 문서는 참고용으로만 제공되며 오류가 있을 수 있습니다 . Cavium 은 본 문서 , 제품 설계 또는 사양을 사전 고지 없이 변경할 수 있는 권리가 있습니다 .