خلاصه مقاله

ENS24 یک NVMe Expansion Enclosure با 24 Drive نوع PCIe NVMe SSD است. این محفظه برای اتصال به Base Enclosure به Embedded Module v2 و کارت 2-port 100GbE نیاز دارد، از RoCE و NVMe-oF استفاده می‌کند، دارای دو LCC، دو منبع تغذیه 1800W، شش Fan Module، دو Clock Distribution Board و مجموعاً 16GB حافظه DDR4 است.

مسیر مطالعه این راهنما

جایگاه این مقاله در مجموعه

این قسمت از نظر فنی بر محفظه توسعه NVMe متمرکز است. قسمت بعدی ابعاد، وزن، توان، شرایط محیطی، نگهداری و محدودیت‌های عملیاتی خانواده PowerStore را پوشش می‌دهد.

معماری کلی ENS24 و ارتباط End-to-End NVMe

NVMe Expansion Enclosure مدل ENS24 برای نصب 24 Drive نوع 2.5-inch NVMe SSD طراحی شده است. ارتباط میان Nodeهای PowerStore و این محفظه از Interface نوع NVMe استفاده می‌کند؛ بنابراین مسیر داده از Base Enclosure تا Driveهای توسعه‌یافته، در چارچوب معماری NVMe باقی می‌ماند.

این محفظه برای فعال‌سازی Remote Direct Memory Access از پروتکل RDMA over Converged Ethernet یا RoCE استفاده می‌کند. Packetهای RDMA روی Ethernet کپسوله می‌شوند و این ساختار در معماری معرفی‌شده با Latency پایین‌تر، مصرف کمتر CPU و Bandwidth بیشتر همراه است.

PowerStore در این ارتباط از NVMe over Fabrics استفاده می‌کند. ترکیب NVMe-oF، RoCE، پورت‌های 100GbE و اتصال PCIe به Driveها باعث می‌شود ENS24 یک مسیر End-to-End نوع NVMe را از Interfaceهای Ethernet تا رسانه‌های ذخیره‌سازی ارائه کند.

تعریف

در ENS24، داده ذخیره‌سازی Persistent از Interfaceهای Ethernet وارد Access Module می‌شود، از طریق سازوکار NVMe-oF و RoCE پردازش می‌شود و سپس به اتصال‌های PCIe مربوط به Driveهای NVMe انتقال می‌یابد.

پیش‌نیازها و محدودیت‌های سازگاری

استفاده از ENS24 به چند شرط سخت‌افزاری و معماری وابسته است. Base Enclosure باید دارای Embedded Module v2 باشد و کارت 2-port 100GbE نیز برای برقراری اتصال با NVMe Expansion Enclosure در دسترس قرار گیرد.

محفظه ENS24 در سامانه‌ای که از SAS Expansion Enclosure استفاده می‌کند پشتیبانی نمی‌شود. در نتیجه، مسیر توسعه مبتنی بر SAS و مسیر توسعه مبتنی بر NVMe در یک سامانه به‌صورت هم‌زمان قابل استفاده نیستند.

این محفظه از Driveهای NVMe SCM پشتیبانی نمی‌کند و همراه Base Enclosureهایی که فقط مبتنی بر SCM هستند نیز پشتیبانی نمی‌شود. نوع Drive قابل استفاده در خود ENS24، PCIe NVMe SSD با اندازه 2.5-inch است.

محدودیت سازگاری

پیش از برنامه‌ریزی برای توسعه ظرفیت، وجود Embedded Module v2 و کارت 2-port 100GbE در Base Enclosure و همچنین نبود SAS Expansion Enclosure در همان سامانه باید بررسی شود.

خلاصه الزامات و محدودیت‌های ENS24
موضوعوضعیتشرح
نوع Driveپشتیبانی‌شده24 Drive نوع 2.5-inch PCIe NVMe SSD
Embedded ModuleالزامیEmbedded Module v2 در Base Enclosure
کارت اتصالالزامیکارت 2-port 100GbE
SAS Expansion Enclosureپشتیبانی‌نشده در همان سامانهENS24 روی سامانه دارای SAS Expansion Enclosure پشتیبانی نمی‌شود.
NVMe SCMپشتیبانی‌نشدهDriveهای NVMe SCM در ENS24 قابل استفاده نیستند.
Base Enclosure فقط مبتنی بر SCMپشتیبانی‌نشدهENS24 همراه این نوع Base Enclosure پشتیبانی نمی‌شود.

نمای جلوی NVMe Expansion Enclosure

نمای جلوی ENS24 محل دسترسی به Driveهای PCIe NVMe SSD، LEDهای وضعیت، WWN Seed Tag و Service Tag است. Driveها در Carrierهای 2.5-inch قرار می‌گیرند و قابلیت تعویض در حالت روشن دارند.

چیدمان اجزای جلویی

بخش اصلی نمای جلو را 24 Drive تشکیل می‌دهد. LEDهای وضعیت محفظه در کنار مجموعه Driveها قرار گرفته‌اند و هر Drive نیز نشانگر توان، فعالیت و خرابی خود را دارد.

در همین نما، World Wide Name Seed Tag و Service Tag برای شناسایی محفظه در دسترس هستند. این دو برچسب از اجزای شناسایی فیزیکی ENS24 محسوب می‌شوند و در کنار مجموعه Driveها قرار می‌گیرند.

اجزای نمای جلوی ENS24
موقعیتجزءکارکرد
1LEDهای وضعیت Expansion Enclosureنمایش وضعیت Drive، دما، وضعیت الکتریکی، حافظه، Interface و شناسایی سیستم
2Driveهای 2.5-inch NVMeرسانه‌های ذخیره‌سازی PCIe NVMe SSD
3LED توان و فعالیت Driveنمایش روشن‌بودن یا فعالیت Drive
4LED خرابی Driveنمایش خرابی Drive
5WWN Seed Tagشناسایی World Wide Name Seed
6Service Tagشناسایی سرویس و رهگیری سخت‌افزار

تفسیر LEDهای Drive و وضعیت محفظه

LEDهای نمای جلو برای تشخیص سریع وضعیت Driveها و زیرسامانه‌های داخلی محفظه استفاده می‌شوند. تفکیک وضعیت Blue، Green و Amber به کارشناس اجازه می‌دهد روشن‌بودن، فعالیت، خرابی یا حالت شناسایی را از روی پنل جلو بررسی کند.

LEDهای هر Drive

LED توان و فعالیت Drive در حالت Blue ثابت نشان می‌دهد Drive در حال روشن‌شدن یا روشن است. حالت Blue چشمک‌زن به معنی فعال‌بودن Drive است.

LED خرابی Drive در حالت Amber ثابت، وجود خرابی را نشان می‌دهد. خاموش‌بودن این LED به معنی نبود خرابی Drive است.

وضعیت LEDهای Drive در ENS24
LEDرنگوضعیتتفسیر
توان و فعالیت DriveBlueOnDrive در حال روشن‌شدن یا روشن است.
توان و فعالیت DriveBlueBlinkingDrive فعال است.
خرابی DriveAmberOnخرابی Drive رخ داده است.
خرابی DriveOffخرابی وجود ندارد.

LEDهای وضعیت کلی Expansion Enclosure

پنل وضعیت جلو، چند حوزه مستقل را پایش می‌کند: Drive، دما، وضعیت الکتریکی، حافظه، Interface Drive و شناسایی سیستم. در بیشتر حوزه‌های سلامت، Green به معنی نبود خرابی و Amber به معنی وجود وضعیت معیوب است.

LED وضعیت Drive در حالت Amber می‌تواند خرابی Drive، Drive پشتیبانی‌نشده یا Rebuild را نشان دهد. LED وضعیت Interface Drive نیز در حالت Amber به خرابی Clockboard یا Interface نوع Ethernet اشاره می‌کند.

LEDهای وضعیت نمای جلوی NVMe Expansion Enclosure
LEDرنگ و وضعیتشرح
وضعیت DriveAmber / Onخرابی Drive، Drive پشتیبانی‌نشده یا Rebuild
وضعیت DriveGreen / Onبدون خرابی
وضعیت دماAmber / Onافزایش بیش‌ازحد دمای جزء
وضعیت دماGreen / Onبدون خرابی
وضعیت الکتریکیAmber / Onخرابی PSU یا قرارداشتن ولتاژ خارج از محدوده
وضعیت الکتریکیGreen / Onبدون خرابی
وضعیت حافظهAmber / Onخرابی DIMM
وضعیت حافظهGreen / Onبدون خرابی
وضعیت Interface DriveAmber / Onخرابی Clockboard یا Interface نوع Ethernet
وضعیت Interface DriveGreen / Onبدون خرابی
LED شناساییOffسیستم روشن و سالم است.
LED شناساییBlue / BlinkingSystem ID Mode فعال است.
LED شناساییAmber / Blinkingخرابی سخت‌افزاری وجود دارد.
نکته

Amber در پنل جلو همیشه به یک جزء واحد محدود نیست. بسته به LED روشن‌شده، علت می‌تواند Drive، دما، PSU، ولتاژ، DIMM، Clockboard، Interface Ethernet یا خرابی سخت‌افزاری عمومی باشد.

نمای پشت و ساختار دوگانه LCC

نمای پشت ENS24 شامل دو Link Controller Card یا LCC و دو ماژول منبع تغذیه است. این چیدمان، کنترل ارتباط، مدیریت وضعیت محیطی و تأمین توان محفظه را میان اجزای مستقل توزیع می‌کند.

هر LCC از یک Access Module و یک Drive Interface Board تشکیل می‌شود. Drive Interface Board پشت Access Module قرار دارد و اتصال Front-end را به Back-end برقرار می‌کند.

اجزای نمای پشت ENS24
موقعیتجزءشرح
1LCC 1مجموعه شامل Access Module و Drive Interface Board
2Access Moduleمدیریت ارتباط، شرایط محیطی و وضعیت اجزا
3ماژول منبع تغذیهیکی از دو منبع تغذیه AC محفظه
4LCC 2مجموعه دوم شامل Access Module و Drive Interface Board
5Drive Interface Boardاتصال Front-end به Back-end و ارتباط PCIe میان Access Module و Driveها

نقش Access Module و Drive Interface Board

Drive Interface Board

Drive Interface Board بخش Front-end را به Back-end متصل می‌کند. این برد دارای Switchهای PCIe است که Driveها را به Access Module مرتبط می‌سازند.

به این ترتیب، مسیری که از پورت‌های Ethernet و Access Module آغاز می‌شود، در بخش داخلی LCC به اتصال‌های PCIe Driveهای NVMe می‌رسد. این بخش، حلقه اتصال میان ارتباط خارجی محفظه و رسانه‌های ذخیره‌سازی داخلی است.

Access Module

Access Module شرایط محیطی محفظه را مدیریت و گزارش می‌کند. توان، وضعیت حرارتی، نشانگرهای وضعیت و حضور اجزا در حوزه مدیریت این ماژول قرار دارند.

این ماژول با استفاده از RoCE روی Ethernet از NVMe-oF بهره می‌برد. داده Persistent دریافت‌شده از Interfaceهای Ethernet در این مسیر ترجمه و به اتصال‌های PCIe Driveهای NVMe منتقل می‌شود.

Access Module همچنین Data Protection اعمال‌شده توسط سیستم را اجرا می‌کند. بنابراین نقش آن فقط به برقراری Link محدود نیست و بخشی از عملیات حفاظتی و مدیریتی محفظه را نیز بر عهده دارد.

خلاصه:

Drive Interface Board مسیر PCIe میان Driveها و Access Module را فراهم می‌کند؛ Access Module نیز ارتباط NVMe-oF/RoCE، مدیریت شرایط محیطی، گزارش وضعیت و اجرای Data Protection را بر عهده دارد.

پورت‌ها و اتصال Daisy Chain

هر Access Module دارای دو پورت 100GbE با فرم QSFP28 است. این پورت‌ها برای اتصال NVMe Expansion Enclosure به Base Enclosure و همچنین Daisy Chain کردن محفظه‌های NVMe Expansion Enclosure اضافی استفاده می‌شوند.

علاوه بر پورت‌های اصلی 100GbE، یک پورت Micro USB و یک پورت USB روی ماژول وجود دارد که استفاده نمی‌شوند. دو پورت مدیریت 1GbE RJ45 نیز صرفاً برای Support در نظر گرفته شده‌اند.

پورت‌های Access Module
موقعیتپورتکاربرد
1دو پورت 100GbE QSFP28اتصال به Base Enclosure و Daisy Chain محفظه‌های اضافی
2Micro USBبدون استفاده
3USBبدون استفاده
4دو پورت مدیریت 1GbE RJ45فقط برای Support

LEDها و شناسه Daisy Chain در Access Module

Access Module دارای LEDهای وضعیت توان، خرابی و System ID است. علاوه بر این، Daisy Chain ID محل هر Expansion Enclosure را در زنجیره مشخص می‌کند.

شناسه‌های 50، 51 و 52 به‌ترتیب برای نخستین، دومین و سومین Expansion Enclosure در Daisy Chain استفاده می‌شوند. این شناسه در تشخیص موقعیت فیزیکی هر محفظه در زنجیره کاربرد دارد.

LEDها و Daisy Chain ID در Access Module
نشانگروضعیتشرح
وضعیت توانGreenتوان روشن است.
وضعیت توانOffتوان خاموش است.
وضعیت خرابیAmberسخت‌افزار معیوب است.
وضعیت خرابیOffخرابی رخ نداده و عملکرد عادی است.
System IDBlinking BlueSystem ID Mode فعال است.
System IDOffSystem ID Mode فعال نیست.
Daisy Chain ID50نخستین Expansion Enclosure
Daisy Chain ID51دومین Expansion Enclosure
Daisy Chain ID52سومین Expansion Enclosure

منابع تغذیه AC محفظه ENS24

NVMe Expansion Enclosure دارای دو منبع تغذیه AC است که توان هرکدام 1800W اعلام شده است. LEDهای هر منبع تغذیه برای تشخیص خرابی، وضعیت ورودی AC و وضعیت خروجی DC در نظر گرفته شده‌اند.

LED خروجی DC در این محفظه پشتیبانی نمی‌شود و وضعیت آن در جدول با N/A مشخص شده است. برای وضعیت ورودی AC، Green نشان‌دهنده روشن‌بودن توان AC و Off نشان‌دهنده خاموش‌بودن ورودی است.

LEDهای منبع تغذیه AC در ENS24
LEDوضعیتشرح
خرابیSolid Amberخرابی منبع تغذیه یا پشتیبان؛ اتصال کابل باید بررسی شود.
خرابیOffبدون خرابی
توان DC خروجیGreen یا OffN/A؛ این LED پشتیبانی نمی‌شود.
توان AC ورودیGreenتوان AC روشن است.
توان AC ورودیOffتوان AC خاموش است و منبع برق باید بررسی شود.

اجزای داخلی ENS24

اجزای داخلی NVMe Expansion Enclosure شامل Fan Moduleها، Clock Distribution Boardها و DIMMها است. این اجزا به‌ترتیب مسئول جریان هوای پیوسته، توزیع Clock مشترک و تأمین حافظه داخلی Access Module هستند.

Fan Moduleها

شش Fan Module افزونه در محفظه وجود دارد. این Fanها جریان هوای پیوسته‌ای را از میان Driveهای جلویی و بخش پشت محفظه ایجاد می‌کنند تا اجزا در دمای عملیاتی مناسب باقی بمانند.

هر Fan Module دارای دو Rotor است. اگر سه Rotor فن در یک Expansion Enclosure از کار بیفتند، سیستم برای حفاظت، محفظه را به‌صورت حرارتی Shutdown می‌کند.

هشدار عملیاتی

خرابی سه Rotor فن در ENS24 باعث Thermal Shutdown محفظه می‌شود. وضعیت Fanها باید پیش از رسیدن به این آستانه بررسی و رفع شود.

Clock Distribution Boardها

دو Clock Distribution Board در داخل محفظه قرار دارند. وظیفه این دو برد، فراهم‌کردن یک Clock مشترک برای Driveها است.

خرابی Clockboard می‌تواند در LED وضعیت Interface Drive در نمای جلو بازتاب پیدا کند؛ در این حالت LED مربوطه به رنگ Amber روشن می‌شود.

حافظه DIMM

دو DIMM نوع 8GB DDR4 در مجموع 16GB حافظه فراهم می‌کنند. این DIMMها داخل Access Module قرار دارند.

محل نصب DIMMها اسلات‌های 2 و 3 است. وضعیت خرابی حافظه نیز از طریق LED وضعیت حافظه در پنل جلوی محفظه قابل تشخیص است.

سیستم خنک‌سازی

6 Fan Module افزونه، هرکدام با 2 Rotor

توزیع Clock

2 Clock Distribution Board برای Clock مشترک Driveها

حافظه داخلی

2 DIMM هشت‌گیگابایتی DDR4، مجموعاً 16GB

نکات فنی و محدودیت‌های عملیاتی

برای ارزیابی ENS24 باید معماری ارتباط، محدودیت سازگاری، وضعیت سخت‌افزار و نشانه‌های پنل جلو و پشت به‌صورت یکپارچه بررسی شوند. صرف مشاهده Link یا روشن‌بودن Driveها برای نتیجه‌گیری درباره سلامت کامل محفظه کافی نیست؛ زیرا LEDهای جداگانه‌ای برای دما، وضعیت الکتریکی، حافظه، Interface و خرابی عمومی وجود دارد.

اتصال این محفظه به Base Enclosure از طریق پورت‌های 100GbE QSFP28 انجام می‌شود و همان پورت‌ها مسیر Daisy Chain محفظه‌های اضافی را نیز فراهم می‌کنند. شناسه‌های 50 تا 52 موقعیت سه محفظه نخست را در زنجیره مشخص می‌کنند.

در برنامه توسعه، باید نوع Expansion Enclosure از ابتدا مشخص باشد. ENS24 با SAS Expansion Enclosure در یک سامانه هم‌زمان پشتیبانی نمی‌شود و همچنین برای Driveهای NVMe SCM یا Base Enclosureهای فقط مبتنی بر SCM مناسب نیست.

توصیه فنی

در بررسی سلامت ENS24، وضعیت Driveها، LEDهای عمومی محفظه، LEDهای Access Module، شناسه Daisy Chain و LEDهای منبع تغذیه باید در کنار یکدیگر تفسیر شوند.

جمع‌بندی فنی

NVMe Expansion Enclosure مدل ENS24 یک محفظه 24-Drive برای توسعه PowerStore بر پایه PCIe NVMe SSD است. ارتباط آن با Base Enclosure از طریق Embedded Module v2 و کارت 2-port 100GbE برقرار می‌شود و مسیر داده با RoCE و NVMe-oF تا اتصال PCIe Driveها ادامه پیدا می‌کند.

در پشت محفظه، دو LCC شامل Access Module و Drive Interface Board وظیفه ارتباط، مدیریت وضعیت محیطی، اتصال Front-end به Back-end و اجرای Data Protection را بر عهده دارند. دو منبع تغذیه 1800W، شش Fan Module، دو Clock Distribution Board و 16GB حافظه DDR4 نیز زیرساخت داخلی ENS24 را تکمیل می‌کنند.

برای بهره‌برداری صحیح، محدودیت عدم هم‌زیستی با SAS Expansion Enclosure، الزام Embedded Module v2 و کارت 100GbE، نبود پشتیبانی از NVMe SCM و آستانه Thermal Shutdown در خرابی سه Rotor فن باید در طراحی و نگهداری سامانه لحاظ شوند.

سوالات متداول

ENS24 از چه نوع Driveهایی پشتیبانی می‌کند؟

این محفظه دارای 24 اسلات برای Driveهای 2.5-inch PCIe NVMe SSD است و از Driveهای NVMe SCM پشتیبانی نمی‌کند.

پیش‌نیاز اتصال ENS24 به Dell PowerStore چیست؟

Base Enclosure باید دارای Embedded Module v2 و کارت 2-port 100GbE باشد.

آیا ENS24 و SAS Expansion Enclosure را می‌توان در یک سامانه استفاده کرد؟

خیر. NVMe Expansion Enclosure روی سامانه‌ای که دارای SAS Expansion Enclosure است پشتیبانی نمی‌شود.

هر LCC در ENS24 از چه اجزایی تشکیل شده است؟

هر LCC شامل یک Access Module و یک Drive Interface Board است که پشت Access Module قرار دارد.

پورت‌های 100GbE در Access Module چه کاربردی دارند؟

این پورت‌های QSFP28 برای اتصال ENS24 به Base Enclosure و Daisy Chain کردن NVMe Expansion Enclosureهای اضافی استفاده می‌شوند.

شناسه‌های 50، 51 و 52 در Access Module چه معنایی دارند؟

این شناسه‌ها به‌ترتیب موقعیت نخستین، دومین و سومین Expansion Enclosure را در Daisy Chain مشخص می‌کنند.

خرابی چند Rotor فن باعث Shutdown حرارتی ENS24 می‌شود؟

اگر 3 Rotor فن در یک Expansion Enclosure از کار بیفتند، سیستم برای حفاظت، محفظه را به‌صورت حرارتی Shutdown می‌کند.

بررسی فنی توسعه Dell PowerStore

در قسمت بعدی، مشخصات فنی و الزامات محیطی Dell PowerStore بررسی می‌شود. برای ارزیابی سازگاری ENS24، طراحی مسیر توسعه ظرفیت و بررسی نیازهای زیرساختی، از خدمات تخصصی ذخیره‌سازی سازمانی آکو استفاده کنید.

ارتباط با کارشناسان آکو