رونمایی از جدیدترین محصول آروان‌کلاد؛ دیتا پلتفرم

آروان‌کلاد از جدیدترین عضو خانواده ابری خود رونمایی کرد؛ دیتا پلتفرم که یک بستر کاملن مدیریت‌شده برای جمع‌آوری، پردازش، پاک‌سازی، استانداردسازی، ذخیره‌سازی و تحلیل داده‌های کلان است. این محصول با توجه به استفاده از تکنولوژی‌های جدید نسبت به معماری های سنتی از انعطاف‌پذیری بالا و هزینه‌ی کم‌تری برخوردار است و برای سازمان‌هایی که داده‌های فراوانی دارند، مانند تیم‌های BI، بانک‌ها و فین‌تک‌ها، تیم‌های محصولی با نیاز به Real-time insight وE-commerce  و  SaaSها بسیار کاربردی خواهد بود.

ویژگی‌های محوری Data Platform

در این نسخه از محصول، ۲ ویژگی اصلی شامل دیتا کاتالوگ و موتور کوئری اضافه شده است که کاربران می‌توانند به سادگی و با چند کلیک از آن استفاده کنند.

• دیتا کاتالوگ (Data Catalog): با استفاده از ویژگی «دیتا کاتالوگ»، کاربران می‌توانند فضای ذخیره‌سازی ابری (Object Storage) خود را به یک پایگاه داده‌ی ساختاریافته و مطمین تبدیل کنند. این ویژگی امکانات زیر را ارایه می‌دهد:

• اجرای تراکنش‌های ACID: کاربران می‌توانند عملیات خواندن و نوشتن داده را با تضمین کامل صحت و یکپارچگی (مشابه پایگاه‌داده‌های سنتی) انجام دهند. این ویژگی به کاربران اجازه می‌دهد تا با اطمینان کامل، چند عملیات مختلف INSERT, UPDATE, DELETE و MERGE را به‌شکل هم‌زمان روی داده‌ها اجرا کنند، بدون آن‌که نگران تداخل یا خراب شدن داده‌ها باشند.

• استفاده از فضای ذخیره‌سازی به‌عنوان دیتابیس: دیگر نیازی به انتقال داده‌ها به یک دیتابیس جداگانه نیست. کاربران می‌توانند داده‌های ساختاریافته (Structured Data) را به‌شکل مستقیم در باکت‌های خود ذخیره کرده و با استفاده از کوئری‌های SQL، درست مانند یک انبار داده (Data Warehouse) با آن‌ها کار کنند. این ویژگی، پیچیدگی و هزینه معماری داده را به شکل چشم‌گیری کاهش می‌دهد.
• موتور کوئری (Query Engine – SQL Layer): ویژگی «کوئری انجین» به کاربران امکان می‌دهد که با استفاده از زبان SQL، به سرعت به هر منبع داده‌ای از جمله دیتا کاتالوگ متصل شده و آن را تحلیل کنند. بزرگ‌ترین مزیت این ویژگی، امکان اجرای پرس‌وجوهای هم‌زمان روی چند منبع داده متفاوت است. برای نمونه، کاربران می‌توانند در یک کوئری واحد، اطلاعات مشتریان از یک پایگاه داده را با لاگ‌های رفتار کاربران از یک Data Leak ترکیب کرده و به یک دید جامع دست پیدا کنند؛ بدون آن‌که نیازی به جابه‌جایی و تجمیع داده‌ها در یک انبار مرکزی داشته باشند. این ویژگی، پیچیدگی‌های دسترسی به داده را از بین برده و به تحلیلگران و دانشمندان داده اجازه می‌دهد تا تمام تمرکز خود را روی کشف بینش‌های ارزشمند از داده‌ها بگذارند.
• لایه ذخیره‌سازی (Storage Layer): لایه‌های ذخیره سازی در این محصول بر پایه جدول‌های Apache Iceberg  طراحی شده‌اند که هم‌زمان روی Object Storage آروان نیز ذخیره می‌شود. از Snapshot و Versioning داده‌ها  پشتیبانی شده و امکان Time Travel Querying (کوئری روی نسخه‌های قدیمی داده)  را نیز دارد.

مزایای دیتا پلتفرم آروان‌کلاد

محصول جدید دیتا پلتفرم مزایای زیادی برای کاربران دارد که در ادامه به برخی از آن‌ها اشاره می‌کنیم:

1. ذخیره‌سازی فوق ‌مقرون‌به‌صرفه: ذخیره سازی بر پایه Object Storage  آروان‌کلاد و بدون نیاز به Data Warehouse سنگین و گران‌قیمت انجام می‌شود.
2.  استاندارد مدرن : Iceberg Table Format در این محصول از  Snapshot، ویژگی  Time Travel، تکامل اسکیما  (Schema Evolution) و عملیات مشابه  ACID پشتیبانی می‌شود.
3. مناسب تیم‌های کوچک تا سازمان‌های بزرگ: این محصول بدون نیاز به مهندس داده یا تیم DevOps تخصصی به راحتی دردسترس است.
4. Real-time و Batch هم‌زمان: بر پایه معماری Spark + Iceberg، می‌توان از Real-time و Batch هم‌زمان لذت برد.
5. اتصال ساده به ابزارهای  BI: این محصول به راحتی به ابزارهای Power BI، Tableau، Superset، Grafana، Trino Client و درایورهای  ODBC / JDBC متصل می‌شود.

سخن نهایی

این محصول با فراهم آوردن مزایای بی‌شماری که قبل‌تر گفته شد، می‌تواند انتخاب اول سازمان‌ها و کسب‌وکارهایی مختلفی باشد که با داده‌های زیاد سروکار دارند.  Data Platformآروان‌کلاد، سریع‌ترین، ساده‌ترین و مقرون به صرفه‌ترین راه برای ساخت یک Lakehouse  مدرن بدون نیاز به تیم دیتا، ETL پیچیده یا زیرساخت سنگین است. برای آشنایی بیش‌تر با دیتا  پلتفرم آروان به این لینک سر بزنید.