نقل البيانات لمجموعات البيانات الكبيرة ذات النطاق الترددي المتوسط إلى العالي للشبكة

  • مقالة
  • قراءة خلال 5 دقائق

تقدم هذه المقالة نظرة عامة على حلول نقل البيانات عندما يكون لديك نطاق ترددي متوسط إلى مرتفع للشبكة في بيئتك وتخطط لنقل مجموعات بيانات كبيرة. تُبين المقالة أيضًا خيارات نقل البيانات الموصى بها ومصفوفة القدرات الرئيسية ذات الصلة لهذا السيناريو.

لفهم نظرة عامة على جميع خيارات نقل البيانات المتاحة، انتقل إلى ⁧⁩اختيار حل نقل بيانات Azure ⁧⁩.

وصف السيناريو

تشير مجموعات البيانات الكبيرة إلى أحجام البيانات بترتيب TBs إلى PBs. يشير عرض النطاق الترددي للشبكة المتوسط إلى العالي إلى 100ميجا بت في الثانية إلى 10 جيجابت في الثانية.

تعتمد الخيارات الموصى بها في هذا السيناريو على ما إذا كان لديك عرض نطاق شبكة متوسط أو عرض نطاق شبكة عالٍ.

عرض نطاق الشبكة المتوسط (100ميجا بت في الثانية - 1 جيجابت في الثانية)

مع عرض النطاق الترددي للشبكة المعتدل، تحتاج إلى عرض الوقت لنقل البيانات عبر الشبكة.

استخدم الجدول التالي لتقدير الوقت وبناءً على ذلك، اختر بين النقل دون اتصال أو عبر نقل الشبكة. يُبين الجدول الوقت المتوقع لنقل بيانات الشبكة، لمختلف عروض النطاق الترددي المتاحة للشبكة (بافتراض استخدام بنسبة 90%).

Network transfer or offline transfer

  • إذا كان متوقعًا أن يكون نقل الشبكة بطيئًا جدًا، فإنه يجب عليك استخدام جهاز مادي. الخيارات الموصى بها في هذه الحالة هي أجهزة النقل غير المتصلة من فئة صندوق بيانات Azure أو Azure Import/Export باستخدام الأقراص خاصتك.

    • ⁧⁩ فئة صندوق بيانات Azure للتحويلات دون اتصال بالإنترنت ⁧⁩ – استخدم الأجهزة من أجهزة صندوق بيانات Microsoft لنقل كميات كبيرة من البيانات إلى Azure عندما تكون محدودًا بالوقت أو توفر الشبكة أو التكاليف. انسخ البيانات في الموقع باستخدام أدوات مثل النسخ الآلي. اعتمادًا على حجم البيانات المطلوب نقلها، يمكنك الاختيار من بين ‏قرص صندوق البيانات أو صندوق البيانات أو صندوق البيانات الثقيل.
    • ⁧⁩Azure Import/Export⁧⁩ – استخدم خدمة الاستيراد/التصدير من Azure عن طريق شحن محركات الأقراص الخاصة بك لاستيراد كميات كبيرة من البيانات بأمان إلى وحدة تخزين Azure Blob وملفات Azure. يمكن أيضًا استخدام هذه الخدمة لنقل البيانات من تخزين كائن ثنائي كبير الحجم من Azure إلى محركات الأقراص والشحن إلى مواقعك المحلية.

  • إذا كان من المتوقع أن يكون نقل الشبكة مقبولاً، فإنه يمكنك استخدام أي من الأدوات التالية المفصلة في ⁧⁩ النطاق الترددي للشبكة العالية ⁧⁩.

نطاق ترددي عالي للشبكة (1 جيجابت في الثانية - 100 جيجابت في الثانية)

إذا كان عرض النطاق الترددي للشبكة المتاح مرتفعًا، فاستخدم إحدى الأدوات التالية.

  • ⁧⁩AzCopy ⁧⁩ - استخدم أداة سطر الأوامر هذه لنسخ البيانات بسهولة من وإلى كائنات ثنائية كبيرة الحجم من Azure وملفات وجدول بأداء مثالي. تدعم AzCopy التزامن والتوازي، والقدرة على استئناف عمليات النسخ عند انقطاعها.
  • ⁧⁩واجهات برمجة تطبيقات Azure Storage REST / SDKs⁧⁩ - عند إنشاء تطبيق، يمكنك تطوير التطبيق ضد واجهات برمجة تطبيقات Azure Storage REST واستخدام مجموعات Azure SDK المتوفرة بلغات متعددة.
  • ⁧⁩ فئة صندوق بيانات Azure للتحويلات عبر الإنترنت ⁧⁩ – حافة صندوق البيانات وبوابة صندوق البيانات هي أجهزة شبكة عبر الإنترنت يمكنها نقل البيانات من وإلى Azure. استخدم الجهاز المادي لحافة صندوق البيانات عندما تكون هناك حاجة متزامنة للابتلاع المستمر والمعالجة المسبقة للبيانات قبل التحميل. بوابة صندوق البيانات هي نسخة افتراضية من الجهاز لها نفس إمكانيات نقل البيانات. في كل حالة، تتم إدارة نقل البيانات بواسطة الجهاز.
  • ⁧⁩Azure⁧⁩ Data Factory – يجب استخدام Data Factory لتوسيع نطاق عملية النقل، وإذا كانت هناك حاجة إلى إمكانات التنسيق والمراقبة على مستوى المؤسسة. استخدم Data Factory لنقل الملفات بانتظام بين العديد من خدمات Azure المحلية أو مزيج من الاثنين. مع Data Factory، يمكنك إنشاء وجدولة سير العمل القائم على البيانات (يسمى خطوط الأنابيب) التي تستوعب البيانات من مخازن البيانات المتباينة ونقل البيانات تلقائيًا وتحويل البيانات.

مقارنة القدرات الرئيسية

وتلخص الجداول التالية الاختلافات في القدرات الرئيسية للخيارات الموصى بها.

عرض نطاق الشبكة المتوسط

في حالة استخدام نقل البيانات دون اتصال بالإنترنت، استخدم الجدول التالي لفهم الاختلافات في القدرات الرئيسية.

قرص صندوق البيانات Data Box Data Box Heavy استيراد / تصدير
حجم البيانات حتى 35 تيرابايت حتى 80 تيرابايت لكل جهاز حتى 800 تيرابايت لكل جهاز المتغير
نوع البيانات Azure Blobs Azure Blobs
ملفات Azure		 Azure Blobs
ملفات Azure		 Azure Blobs
ملفات Azure
عامل التصميم 5 محركات أقراص SSD لكل طلب 1 × 50 رطلاً. جهاز بحجم سطح المكتب لكل طلب 1 × ~ 500 رطل. جهاز كبير لكل طلب حتى 10 ‏ محركات أقراص ثابتة/محركات أقراص صلبة الحالة لكل طلب
⁧⁩ وقت الإنشاء الأولي⁧⁩ منخفض
(15 دقيقة)		 منخفضة إلى معتدلة
(⁧<⁩30 دقيقة)		 متوسط
(ساعتان)		 معتدل إلى صعب
(المتغير)
⁧⁩إرسال البيانات إلى Azure⁧⁩ نعم نعم نعم نعم
تصدير البيانات من Azure لا لا لا نعم
التشفير AES 128 بت AES 256 بت AES 256 بت AES 128 بت
الأجهزة مايكروسوفت المزودة مايكروسوفت المزودة مايكروسوفت المزودة العميل المورِد
واجهة الشبكة USB 3.1/SATA RJ 45, SFP+ RJ45, QSFP+ SATA II/SATA III
تكامل الشركاء بعض درجة عالية درجة عالية بعض
Shipping مايكروسوفت المدارة مايكروسوفت المدارة مايكروسوفت المدارة العميل المدار
⁧⁩استخدم عند نقل البيانات⁧⁩ داخل حدود تجارية داخل حدود تجارية داخل حدود تجارية عبر الحدود الجغرافية، على سبيل المثال من الولايات المتحدة إلى الاتحاد الأوروبي
التسعير التسعير التسعير التسعير التسعير

في حالة استخدام نقل البيانات عبر الإنترنت، استخدم الجدول في القسم التالي لعرض النطاق الترددي العالي للشبكة.

عرض النطاق الترددي العالي للشبكة

أدوات AzCopy،
Azure PowerShell.
Azure CLI		 Azure Storage REST APIs, SDKs بوابة صندوق البيانات أو حافة صندوق البيانات Azure Data Factory
نوع البيانات كائنات ثنائية كبيرة الحجم من Azure، ملفات Azure، جداول Azure كائنات ثنائية كبيرة الحجم من Azure، ملفات Azure، جداول Azure كائنات ثنائية كبيرة الحجم من Azure, ملفات Azure يدعم أكثر من 70 موصل بيانات لمخازن البيانات وتنسيقاتها
عامل التصميم أدوات سطر الأوامر واجهة برمجية توفر Microsoft افتراضي
أو جهاز مادي		 الخدمة في مدخل Microsoft Azure
⁧⁩الإنشاء الأولي لمرة واحدة⁧⁩ سهل متوسط من السهل (⁧<⁩30 دقيقة) إلى المتوسط (1-2 ساعة) جامع
⁧⁩ المعالجة المسبقة للبيانات⁧⁩ لا لا نعم (مع حساب الحافة) نعم
⁧⁩النقل من السُّحب الأخرى⁧⁩ لا لا لا نعم
⁧⁩نوع المستخدم⁧⁩ محترف أو مطور تكنولوجيا المعلومات مطور محترف تكنولوجيا المعلومات محترف تكنولوجيا المعلومات
التسعير تُطبق رسوم مجانية على خروج البيانات تُطبق رسوم مجانية على خروج البيانات التسعير التسعير

الخطوات التالية