ذخیره در باکت اختصاصی
معماری نرم‌افزاری هیبرید
داده‌لند بر پایه معماری هیبرید (Hybrid Architecture) و اصل جداسازی پردازش از ذخیره‌سازی (Separation of Compute and Storage) توسعه یافته است. در این ساختار دو لایه اصلی تعریف شده‌اند:
- لایه کنترل (Control Plane): در زیرساخت ابری داده‌لند میزبانی می‌شود و وظایف مدیریتی، احراز هویت، کنترل دسترسی‌ها، نودهای پردازشی (Compute) و اجرای کوئری‌ها را بر عهده دارد.
- لایه داده (Data Plane): تمامی داده‌های خام و پردازش‌شده در سرویس ذخیره‌سازی سازگار با S3 (نظیر Ceph یا MinIO) تحت مالکیت و مدیریت سازمان شما نگهداری می‌شوند.
تفکیک این دو لایه مزایای فنی متعددی به همراه دارد:
- مقیاس‌پذیری مستقل (Independent Scaling): توان محاسباتی و فضای ذخیره‌سازی بدون وابستگی متقابل رشد می‌کنند و افزایش حجم داده‌ها هزینه‌ای بابت سرورهای پردازشی تحمیل نمی‌سازد.
- بهینه‌سازی شافل داده‌ها (Optimized Data Shuffling): در کوئری‌های سنگین، نودهای محاسباتی از کش محلی پرسرعت برای تبادلات میانی استفاده می‌کنند و سرباری به باکت ذخیره‌سازی وارد نمی‌شود.
- تفکیک بارهای کاری (Workload Isolation): فرآیندهای لود پیوسته داده از بار کوئری‌های تحلیلی و داشبوردها جدا می‌شوند تا تداخلی در کارایی ایجاد نگردد.
- حاکمیت کامل بر داده‌ها (Data Sovereignty): داده‌ها به طور کامل درون باکت سازمان باقی می‌مانند و کلیه الزامات امنیتی، محرمانگی و سیاست‌های پشتیبان‌گیری در زیرساخت خودتان اعمال می‌شوند.
این مدل که با عنوان Bring Your Own Storage (BYOS) شناخته می‌شود، گزینه‌ای ایده‌آل برای سازمان‌هایی است که نیازمند حفظ داده‌ها در زیرساخت اختصاصی خود هستند.
زیرساخت‌های مجاز استقرار
تبادل مداوم حجم بالای داده در فرآیندهای لود و اجرای کوئری‌ها نیازمند کمترین میزان تأخیر (Latency) در بستر شبکه محلی است. بنابراین استقرار باکت تنها در مراکزی مجاز است که نودهای پردازشی داده‌لند نیز در همان‌جا مستقر باشند:
- دیتاسنتر پیام شاتل
هم‌مکانی باکت و نودهای پردازشی در یک دیتاسنتر مزایای زیر را فراهم می‌سازد:
- تأخیر ناچیز (Ultra-low Latency): زمان رفت و برگشت پکت‌ها در شبکه داخلی دیتاسنتر به زیر ۱ میلی‌ثانیه می‌رسد.
- پهنای باند وسیع (10G/40G): تبادل پرسرعت داده‌ها بدون محدودیت‌های پهنای باند اینترنت انجام می‌پذیرد.
- حذف هزینه ترافیک (Zero Traffic Cost): ارتباطات بر بستر شبکه محلی انجام می‌شود و هزینه‌ای بابت تبادل داده محاسبه نمی‌گردد.
- مصونیت از اختلالات اینترنت: پایداری کامل فرآیندهای تحلیلی و لود داده در برابر قطعی‌های شبکه عمومی حفظ می‌شود.
- پایداری کوئری‌ها: پردازش‌های سنگین تحلیلی با حداکثر سرعت اجرا می‌شوند و از خطای Network Timeout جلوگیری می‌گردد.
تنظیمات اتصال
هنگام ساخت فضا، با انتخاب گزینه «باکت اختصاصی S3» فیلدهای زیر جهت اتصال دریافت می‌شوند. این اتصال کاملاً بدون نیاز به نصب هرگونه نرم‌افزار یا ایجنت واسط (Agentless) برقرار می‌گردد:
| نام فیلد | توضیحات |
|---|---|
| نام باکت | نام باکت ایجادشده در آبجکت استوریج را تعیین می‌کند. |
| آدرس اندپوینت | آدرس وب‌سرویس پروتکل S3 را مشخص می‌نماید. |
| منطقه | شناسه ریجن (Region) تعریف‌شده در استوریج را مشخص می‌سازد. |
| مسیر | مسیر یا پیشوند (Prefix) پوشه داخل باکت را تعیین می‌کند (اختیاری). |
| کلید Access | شناسه کلید دسترسی (Access Key ID) جهت احراز هویت است. |
| کلید Secret | کلید امنیتی (Secret Access Key) برای اتصال است. |
| آدرس‌دهی مبتنی بر مسیر | ساختار Path-style (https://endpoint/bucket) را فعال می‌سازد که معمولاً در Ceph و MinIO کاربرد دارد. |
باکت مدیریت‌شده
در صورتی که سازمان شما مایل به راه‌اندازی و نگهداری کلاستر استوریج نیست، می‌توانید با پشتیبانی داده‌لند تماس بگیرید تا فهرست ارائه‌دهندگان معتبر باکت مدیریت‌شده (Managed Bucket) در دیتاسنتر تاییدشده را در اختیار شما قرار دهند.