تحول Coinbase نحو العمليات المدعومة بالذكاء الاصطناعي لا يسير على ما يرام

كوينباس (ناسداك: COIN) أظهرت مرة أخرى لمتداولي العملات المشفرة مدى بطء أجهزة السحابة التي يمكن أن تفسد حتى أسرع بورصة. يبدو أن استراتيجية التحول في عمليات الشركة المدعومة بالذكاء الاصطناعي ربما كانت أسوأ خطوة لها حتى الآن.

في يوم الجمعة، قالت الشركة إن فشل التبريد داخل خدمات أمازون ويب (ناسداك: AMZN)، ساعد في حدوث انقطاع استمر لعدة ساعات أثر على التداول، والوصول إلى البورصة، وتحديثات الرصيد عبر منصتها.

بدأت المشكلة حوالي الساعة 23:50 بالتوقيت العالمي في 7 مايو عندما اكتشفت المراقبات الداخلية انتشارًا واسعًا لفشل العروض داخل أنظمة الشركة.

في تلك اللحظة، تم إنشاء عدة حوادث من المستوى 1 من قبل المهندسين، وكان العملاء يتأثرون بالفعل من حيث الخدمات مثل التداول الفوري، و Coinbase Prime، والدولية، والمشتقات، والتجزئة، والمتقدمة، والبورصات المؤسسية.

كتب برايان أرمسترونغ، الرئيس التنفيذي لكوينباس، على إكس أن شركته “واجهت انقطاعًا” وأن مثل هذا الحدث كان “غير مقبول أبدًا”. ووفقًا له، كان السبب وراء ذلك “ارتفاع درجة حرارة غرفة في مركز بيانات AWS بسبب فشل عدة مبردات”.

وفقًا لبرايان، تضمن الشركة أن جميع خدماتها مصممة بحيث لا تتوقف عن العمل في حال فشل منطقة توافر واحدة من AWS. معظم الخدمات مصممة بهذه الطريقة، باستثناء البورصة، التي تستخدم بنية تحتية مختلفة بسبب متطلبات الكمون العالي.

تلوم كوينباس فشل مبردات AWS مع بدء أنظمة العروض في الانكسار قبل منتصف الليل بالتوقيت العالمي

تم الإبلاغ سابقًا من قبل كريبتوبوليتيان أن كوينباس تخطط لإنهاء 700 موظف من موظفيها لأنه يمثل حوالي 14% من إجمالي القوة العاملة. ويتم ذلك بهدف استبدال العمليات اليدوية بالذكاء الاصطناعي.

قدم روب ويتوف، الذي يرأس منصة كوينباس، التفاصيل الفنية للمسألة. ووفقًا له، استمر الانقطاع لفترة طويلة وأثر على “التداول، والوصول إلى البورصة، وتحديثات الرصيد”.

جاء التحذير الأول حوالي الساعة 23:50 بالتوقيت العالمي بسبب فشل العروض الناتج عن أنظمة داخلية. تلاه تحليل من المستوى 1 على الفور. وذكر روب أن سبب هذه المشكلة كان “حدث حراري” في نسبة صغيرة من الرفوف في أحد مرافق AWS في us-east-1.

كانت بنية تحتية للبورصة مفيدة في هذا السياق. قال روب إن كوينباس يحتفظ ببنيته التحتية للبورصة في منطقة توافر واحدة، حيث يقدر القطاع السرعة.

بالإضافة إلى ذلك، لدى الشركة نسخة احتياطية موزعة من بنية البورصة في حال حدوث مثل هذه السيناريوهات. لكن فشل جزء من بنية البورصة في تلك اللحظة لم يبق ضمن حدوده، مما أطال عملية إصلاح الوضع.

فشل مكونان. كان هناك خلل في الأجهزة أسفل محرك المطابقة. لذلك، قبل أي شيء آخر، كان من الضروري إجراء عمليات استرداد وفشل تلقائي.

أيضًا، تعطلت مجموعة كافكا الموزعة، المسؤولة عن مشاركة المعلومات عبر جميع أنظمة المنظمة. استغرق الأمر استعادة أقسام كافكا على جهاز جديد، والذي يحتوي على تيرابايتات من المعلومات.

قام المهندسون بإعادة بناء التصويت وإعادة تشغيل أسواق كوينباس عبر وضع الإلغاء فقط ووضع المزاد

كان محرك المطابقة مسؤولًا عن أكبر توقف في التداول. يعالج محرك المطابقة الطلبات ويحافظ على دفاتر الأوامر. يعمل النظام في مجموعة موزعة ويتطلب تصويتًا قبل اختيار قائد وإجراء الصفقات بأمان.

نظرًا لعدم بقاء جميع العقد بصحة جيدة بسبب قيود مركز البيانات أثناء الانقطاع، لم يتمكن من تحقيق التصويت، مما حال دون أنشطة التداول على بورصات التجزئة والمتقدمة والمؤسسية.

ذكر روب أن فرق الدعم على مدار الساعة والفرق الهندسية كان عليها تنفيذ إجراءات استرداد الكوارث للشركة، وإقامة التصويت، وتقييم صحة النظام في ظل ظروف بنية تحتية صعبة.

وفقًا له، كان على الفريق تطوير واختبار ونشر والتحقق من حل أثناء إدارة الانقطاع الأوسع. كان من الممكن أن يتطلب كافكا استردادًا يدويًا موسعًا لأنه يدير آلاف التيرابايتات يوميًا من البيانات.

كانت هناك بعض المشاكل مع تدفقات الرصيد المتأخرة لأن كافكا كان متأخرًا. قال روب إن هذه المشكلات مع الأرصدة اختفت بعد تزامن النسخ المتماثل. ووفقًا لكوينباس، لم يُفقد أي بيانات.

عندما عاد محرك المطابقة إلى الخدمة، لم يتم إعادة تفعيل الأسواق في وقت واحد. أولاً، حولت كوينباس جميع المنتجات إلى وضع الإلغاء فقط، وتحققت من حالات المنتجات، ثم حولت جميع الأسواق إلى وضع المزاد، وأخيرًا، فعلت التداول على بورصة كوينباس.

علاوة على ذلك، أكد روب أن العملاء لا ينبغي أن يُحرموا مؤقتًا من الوصول إلى حساباتهم. وأكدت كوينباس للجميع أن الشركة ستقدم شرحًا مفصلًا لهذا الحادث خلال عدة أسابيع.

ومع ذلك، رد جوش إليثورب على الشائعات بعد قراءة منشور روب على تويتر. وقال، “لم يبرمج أحد شيئًا فشل. لم يدفع غير المهندسين الكود الإنتاجي وأخرجوا محرك التداول. لم يكن ذلك عمدًا. لم يكن بسبب فشل كوينباس في تصميم نظام فشل تلقائي. تحدث أشياء على نطاق واسع، لا تدع مدربي الكراسي يروون لك حكايات خرافية.”

إذا كنت تريد نقطة دخول أكثر هدوءًا إلى العملات الرقمية اللامركزية بدون الضجيج المعتاد، ابدأ بهذا الفيديو المجاني.