التدفق باستخدام Apache Kafka

رسم تخطيطي يوضح تدفق بيانات نموذجي باستخدام تدفق OCI باستخدام Kafka. يتكون المخطط من ثلاثة مربعات رئيسية متصلة بواسطة الأسهم:

1. يوضح المربع الأول على اليسار، المسمى "استيعاب البيانات"، مصادر بيانات مختلفة تتغذى على النظام: الإخطارات وإنترنت الأشياء (IoT) والسجلات.
2. سهم يحمل اسم "Source Kafka Connector" يشير من مربع "استيعاب البيانات" إلى المربع الثاني "تدفق OCI من خلال Kafka".
3. المربع الثاني، "تدفق OCI باستخدام Kafka"، يغطي ميزات خدمة Kafka الأساسية على OCI، وهو مثالي لمعالجة وتحليل بيانات التدفق في الوقت الفعلي، على سبيل المثال، تحليل بيانات السجل من مصادر مختلفة للحصول على رؤى فورية. مع هذه الخدمة المدارة بالكامل، يتم أتمتة كل جانب من جوانب إدارة مجموعة Kafka، بما في ذلك التوفر العالي والتصحيحات والترقيات والنسخ الاحتياطية والتوسع والتوافق. هذا متوافق بنسبة 100% مع Kafka، لذلك ليست هناك حاجة لتغيير أي رمز تطبيق. كما تتميز الخدمة بفعالية من حيث التكلفة، مع تسعير تنافسي قائم على الحوسبة واستخدام التخزين.
4. سهم يحمل اسم "Sink Kafka Connector" يشير من مربع "تدفق OCI باستخدام Kafka" إلى المربع الثالث "تخزين البيانات والتحليلات".
5. يوضح المربع الثالث، المسمى "تخزين البيانات والتحليلات"، كيفية تخزين البيانات المعالجة في قواعد البيانات أو مخازن البيانات أو حلول التخزين الأخرى وتحليلها باستخدام أدوات التحليلات المتقدمة.
6. يصور هذا المخطط بشكل مرئي تدفق البيانات من الاستيعاب، من خلال معالجة Kafka، إلى التخزين والتحليلات، مع تسليط الضوء على استخدام موصلات Kafka لإدارة حركة البيانات.