نظام ملفات جوجل

قمنا بتصميم وتنفيذ نظام ملفات جوجل، وهو نظام ملفات موزع وقابل للتوسع لتطبيقات بيانات كثيفة التوزيع كبيرة الحجم. يوفر تحمل الأخطاء أثناء التشغيل على عتاد رخيص وعادي، كما يقدم أداءً عاليًا مجمعًا لعدد كبير من العملاء. في حين أنه يشترك في العديد من الأهداف نفسها مع أنظمة الملفات الموزعة السابقة، فقد تم دفع تصميمنا من خلال ملاحظات لأعباء عمل تطبيقاتنا والبيئة التكنولوجية، الحالية والمتوقعة، والتي تعكس انفصالًا واضحًا عن بعض افتراضات أنظمة الملفات السابقة. أدى هذا إلى إعادة فحص الخيارات التقليدية واستكشاف نقاط تصميم مختلفة جذريًا. نجح نظام الملفات في تلبية احتياجاتنا التخزينية. وهو منتشر على نطاق واسع داخل جوجل كمنصة تخزين لتوليد ومعالجة البيانات المستخدمة من قبل خدمتنا بالإضافة إلى جهود البحث والتطوير التي تتطلب مجموعات بيانات كبيرة. أكبر تجمع حتى الآن يوفر مئات التيرابايت من التخزين عبر آلاف الأقراص على أكثر من ألف جهاز، ويتم الوصول إليه بشكل متزامن من قبل مئات العملاء. في هذه الورقة، نقدم امتدادات واجهة نظام الملفات المصممة لدعم التطبيقات الموزعة، نناقش العديد من جوانب تصميمنا، ونبلغ عن القياسات من كل من الاختبارات الدقيقة والاستخدام الحقيقي.