داسك

Dask هي مكتبة Python مفتوحة المصدر للحوسبة الموزعة تتيح للمستخدمين توسيع نطاق حساباتهم للحصول على أداء أفضل وقابلية للتوسع. تم إصداره لأول مرة في أغسطس 2016 ويتم صيانته بواسطة العديد من المطورين داخل المجتمع.

تم تصميم Dask للعمل مع أدوات Python الحالية مثل NumPy وpandas وscikit-learn، مما يجعلها أداة متعددة الاستخدامات لعلماء البيانات والمهندسين والباحثين. يتم استخدامه لتحليل البيانات والتعلم الآلي والتعلم العميق وتحليلات الرسم البياني.

يتكون Dask من مكونين: المجدول والعمال. يكون المجدول مسؤولاً عن تقسيم المهمة بين العديد من العمال ومراقبة تقدم كل عامل في العملية. عند اكتمال العمال، يوفر المجدول مخرجات يمكن تمريرها إلى المهمة التالية.

يمكن استخدام Dask في مجموعة متنوعة من السياقات، مثل أجهزة الكمبيوتر المحمولة التي بها عدد قليل من العاملين، أو في مجموعات من أجهزة الكمبيوتر في مركز البيانات. تم تحسينه لاستخدام الموارد المتاحة بكفاءة، عن طريق تشغيل نفس الحساب بالتوازي على أجهزة متعددة.

يحتوي Dask على مكتبات لدفق البيانات والدعم الموسع لمكتبات تحليل البيانات الأخرى، مثل Xarray وScikit-Learn وTensorFlow. كما أن لديه القدرة على تشغيل العمليات الحسابية على أنظمة الملفات الموزعة مثل HDFS وAmazon S3.

بشكل عام، Dask هي مكتبة قوية للحوسبة الموزعة وتستخدم في مجموعة واسعة من مجالات التطبيق. إنه قابل للتطوير بشكل كبير ويوفر المرونة لتشغيل المهام بكفاءة حتى عند إضافة الأجهزة أو إزالتها من المجموعة. إنها أداة رائعة لعلماء البيانات والمهندسين والباحثين الذين يحتاجون إلى العمل مع مجموعات بيانات واسعة النطاق.