التقاط تغييرات Oracle: بثّ التغييرات إلى الأنظمة الجديدة وOracle باقٍ في الإنتاج

تقع أغلب قواعد Oracle في الجهات السعودية في قلب أنظمة لا تحتمل التوقف: الفوترة والمالية وإدارة الطلبات والعمليات الأساسية. وحين تحدّث الجهة أنظمتها تحتاج الأجزاء الجديدة إلى بيانات Oracle، وتحتاجها محدَّثة. فالتصدير الليلي يجيب عن سؤال الأمس، أما التقاط تغييرات Oracle فيجيب عن سؤال اليوم: يُلتقط كل تغيير معتمد ويُسلَّم إلى النظام الجديد بترتيب حدوثه، وOracle مستمر في خدمة الإنتاج.

روابط ذات صلةصفحة ترحيل Oracleدليل التقاط تغييرات البيانات

لمعرفة ما تغيّر في قاعدة البيانات ثلاث طرق شائعة، والثلاث كلها ممكنة مع Oracle:

• الاستطلاع الدوري لعمود «آخر تعديل» وفق جدول زمني. طريقة بسيطة، لكنها تزيد الاستعلامات كلما كبرت الجداول، ولا ترى صفًّا حُذف نهائيًا.
• المشغّلات (triggers) على كل جدول، تكتب كل تغيير في جدول تغييرات. ترى الحذف، لكنها تضيف عملًا إلى كل عملية كتابة، وتصبح جزءًا من الهيكل الذي يجب نشره واختباره.
• قراءة سجل التغييرات المعتمدة، وهو في Oracle سجل الإعادة (redo log) ونسخه المؤرشفة. لا تحتاج إلى أي تعديل في التطبيق أو الجداول، وحملها قليل، ولهذا هي الخيار المعتاد لأنظمة الإنتاج.

بثّ تغييرات Oracle إلى Kafka يتيح للخدمات الجديدة أن تتفاعل مع طلب أو دفعة أو تغيّر حالة دون أن تلمس قاعدة الإنتاج. وApache Kafka من الأنظمة التي يذكرها موقع iblync، ويُؤكَّد الزوج المناسب لإصداراتكم عند تحديد النطاق. ونقاط التصميم التي تحدد هل يمكن الوثوق بالبث هي:

• المواضيع والمفاتيح. غالبًا موضوع لكل جدول أو كيان عمل، ومفتاحه المفتاح الأساسي، فتبقى تغييرات السجل الواحد مرتبة.
• التكرار. بعد إعادة التشغيل قد يصل بعض التغييرات مرتين، فيجب أن يتعامل المستهلك مع التغيير المكرر دون ضرر.
• تغييرات الهيكل. العمود الجديد أو المعاد تسميته في Oracle يغيّر شكل الحدث. فاتفقوا على طريقة إبلاغ المستهلكين.
• الأعمدة الحساسة. حدّدوا الأعمدة التي يجوز أن تخرج من Oracle أصلًا، وأخفوا الباقي أو احذفوه قبل وصوله إلى البث.

والبث العامل يحتاج إلى مراقبة: تأخر المستهلكين، وسلامة الوسطاء (brokers)، ومعدل النقل. وتغطي صفحة مراقبة Kafka هذا الجانب.

روابط ذات صلةصفحة مراقبة Kafka

iblync منصة إنتركي لترحيل البيانات ونسخها المتماثل، بُنيت في السعودية لنقل البيانات بين أنظمة لم تُصمَّم لتبادلها. وOracle ضمن قائمة الموصلات المنشورة لها. وفي النسخ المتماثل الفوري من Oracle تقدم ما يحمي الإنتاج والهدف:

• نسخ متماثل مستمر بعد تحميل أولي واحد، ومزامنة في الاتجاهين حين يلزم أن يقبل الطرفان الكتابة مدةً ما.
• ضبط المعدل حتى لا ينافس النسخ المتماثل الإنتاج على السعة، ومنه فترة اللحاق بعد انقطاع.
• طابور يحفظ التغييرات حين يغيب الهدف، ويسلّمها عند عودته.
• الاستئناف والتحقق. يذكر موقع iblync أن العمل المنقطع يُستأنف من حيث توقف، وأن التحقق يعتمد على المجاميع الاختبارية (checksums) وأعداد الصفوف.

ويصف موقع iblync النسخ المتماثل لديه بأنه فوري بأقل تأخير، دون تأخير ثابت لأي نظام. فالتأخير في بيئتكم يعتمد على معدل التغيير والشبكة والهدف، ولذلك يُقاس عند تحديد النطاق. وفي صفحة النسخ المتماثل الفوري تفاصيل أكثر.

روابط ذات صلةiblyncصفحة النسخ المتماثل الفوري

بث التغييرات نسخة من بيانات الإنتاج وهي تتحرك، فسؤال إقامة البيانات ينطبق عليه كما ينطبق على القاعدة نفسها. وتلتزم جهات سعودية كثيرة بإبقاء بيانات معينة داخل المملكة، وفق ضوابط الهيئة الوطنية للأمن السيبراني (nca.gov.sa) ونظام حماية البيانات الشخصية الذي تشرف عليه سدايا (sdaia.gov.sa). ويُحسم مكان تشغيل عملية الالتقاط والطابور والهدف في كل مشروع، وفق قواعد إقامة البيانات لديكم، قبل أن ينتقل أول تغيير. ويسرد دليل إقامة البيانات لدينا الأسئلة التي تُحسم.

ويعمل مهندسو إنتركي من الرياض، بالعربية والإنجليزية، إلى جانب مديري قواعد البيانات لديكم من تحديد النطاق حتى التشغيل.

روابط ذات صلةnca.gov.sasdaia.gov.saدليل إقامة البيانات

لا يلزم التقاط التغييرات في كل حالة. فإذا كان الهدف لا يحتاج إلا إلى أرقام الأمس، فالتحميل الدفعي المجدول أبسط في التشغيل. وإذا كنتم تنقلون قاعدة Oracle إلى قاعدة Oracle أخرى ونافذة التوقف كافية، فأدوات Oracle نفسها لهذا النقل هي أول ما يُقيَّم، وقد لا تحتاجون إلى iblync. والنسخة المتماثلة ليست نسخة احتياطية: الجدول المحذوف خطأً يُحذف في الهدف أيضًا. وسنخبركم أي هذه الحالات ينطبق عليكم.

لا ننشر سعرًا أو مدة لالتقاط تغييرات Oracle، لأن البيئة هي التي تحددهما. والعوامل هي:

• عدد الجداول المشمولة، ومقدار ما يتغير من البيانات كل يوم؛
• عدد الأهداف ونوعها، ومدى بُعد نماذج بياناتها عن نموذج Oracle؛
• مدى سرعة لحاق الهدف بـOracle؛
• الموافقات المطلوبة من فريق Oracle ومن فريق الأمن؛
• المكان الذي يجب أن يعمل فيه الجسر؛
• هل البث مؤقت لترحيل، أم دائم بوصفه تكاملًا.

ويحوّل تحديد النطاق هذه العوامل إلى جدول زمني وعرض سعر. وإن كنتم تفاضلون بين التحميل الدفعي والبث المستمر، فمقارنة ETL وCDC لدينا تعرض المزايا والقيود.