MinIO
-
تحليل السلاسل الزمنية: نموذج VAR كخدمة مستخدمًا Flask و MinIO
VAR-As-A-Service هو نهج MLOps لتوحيد وإعادة استخدام نماذج إحصائية ونماذج تعلم الآلة لخطوط التوجيه. هذه المقالة هي الثانية في سلسلة من المقالات تبني على هذا المشروع، تمثل تجارب مع نماذج إحصائية ونماذج تعلم الآلة مختلفة، وخطوط البيانات التي تم تنفيذها باستخدام أدوات DAG موجودة، وخدمات التخزين، سواء كانت مستندة إلى الأشباه السحابية أو الحلول المحلية البديلة. يركز هذا المقال على تخزين ملفات النموذج باستخدام نهج يمكن تطبيقه واستخدامه لنماذج تعلم الآلة أيضًا. تم تنفيذ التخزين على أساس MinIO كخدمة تخزين…
-
بدء العمل مع Trino و Alluxio في خمس دقائق
ترينو هو محرك استعلام SQL موزع مفتوح المصدر مصمم لإجراء استعلامات على مجموعات كبيرة من البيانات الموزعة على واحد أو أكثر من المصادر المعقدة. تم تصميم ترينو للتعامل مع تخزين البيانات، ETL، والتحليلات التفاعلية بكميات كبيرة من البيانات وإنتاج تقارير. Alluxio هو منصة تنظيم البيانات مفتوحة المصدر للتحليلات والذكاء الاصطناعي على نطاق واسع. Alluxio يقع بين إطارات الحساب مثل ترينو وأباتشي سبارك وأنظمة تخزين متعددة مثل أمازون S3، جوجل كلاود ستوريج، HDFS، ومينيو. هذا درس تعليمي لنشر Alluxio كطبقة تخزين…
-
هل POSIX غير مناسب فعلاً لمخازن الكائنات؟ إجابة مدعومة بالبيانات
مؤلف هذا المنشور يشكك في المنظور المقدم في مقال MinIO، الذي يقترح أن POSIX ليس مناسبًا لمخازن الكائنات. لقد أجرى اختبارات شاملة تشمل MinIO s3fs-fuse و JuiceFS. أظهرت النتائج أن MinIO و JuiceFS يوفران أداءً ممتازًا بينما كان s3fs-fuse يتخلف. في سيناريو تجديد الملفات الصغيرة، يتفوق JuiceFS FUSE-POSIX على الحلول الأخرى. في الآونة الأخيرة، صادفت مقالًا على مدونة MinIO بعنوان “وضع نظام ملفات على قمة سحابة كائن هو فكرة سيئة. إليك السبب.” استخدم المؤلف s3fs-fuse كمثال لشرح التحديات الأداءية التي…