AWS PrivateLink

يمكنك استخدام AWS PrivateLink لإنشاء اتصال آمن بين ClickPipes ومصدر بيانات مستضاف على AWS. ينشئ ClickPipes نقطة نهاية خاصة عكسية (RPE) في شبكة VPC الخاصة به، ويوجّهها إلى خدمة نقطة نهاية خاصة منشورة لمصدر بياناتك، بحيث لا تتعرض حركة المرور للإنترنت العام مطلقًا.

تقتصر وظيفة نقطة نهاية خاصة عكسية في ClickPipes على أنواع مصادر البيانات التالية:

• Kafka
• Postgres
• MySQL
• MongoDB

يمكن تهيئة نقطة نهاية خاصة عكسية لـ ClickPipes باستخدام أحد أساليب AWS PrivateLink التالية:

• مورد VPC
• اتصال MSK multi-VPC لـ ClickPipe الخاص بـ MSK
• خدمة نقطة نهاية VPC

يمكن الوصول إلى موارد VPC الخاصة بك في ClickPipes باستخدام PrivateLink. ولا يتطلب هذا النهج إعداد موازن تحميل أمام مصدر البيانات.

يمكن أن يستهدف إعداد المورد مضيفًا محددًا أو ARN لمجموعة RDS.

وهو الخيار المفضّل لـ Postgres CDC عند استيعاب البيانات من مجموعة RDS.

لإعداد PrivateLink باستخدام مورد VPC:

1. أنشئ بوابة مورد
2. أنشئ إعداد مورد
3. أنشئ مشاركة مورد

aws vpc-lattice create-resource-gateway \
    --vpc-identifier <VPC_ID> \
    --subnet-ids <SUBNET_IDS> \
    --security-group-ids <SG_IDs> \
    --name <RESOURCE_GATEWAY_NAME>

aws vpc-lattice get-resource-gateway \
    --resource-gateway-identifier <RESOURCE_GATEWAY_ID>

aws vpc-lattice create-resource-configuration \
    --resource-gateway-identifier <RESOURCE_GATEWAY_ID> \
    --type <RESOURCE_CONFIGURATION_TYPE> \
    --resource-configuration-definition <RESOURCE_CONFIGURATION_DEFINITION> \
    --name <RESOURCE_CONFIGURATION_NAME>

aws vpc-lattice create-resource-configuration \
    --name my-rds-cluster-config \
    --type ARN \
    --resource-gateway-identifier rgw-0bba03f3d56060135 \
    --resource-configuration-definition 'arnResource={arn=arn:aws:rds:us-east-1:123456789012:cluster:my-rds-cluster}'

aws ram create-resource-share \
    --principals 072088201116 \
    --resource-arns <RESOURCE_CONFIGURATION_ARN> \
    --name <RESOURCE_SHARE_NAME>

تُعد ميزة اتصال multi-VPC ميزةً مضمّنة في AWS MSK، وتتيح توصيل عدة شبكات VPC بمجموعة MSK واحدة. يتوفر دعم DNS الخاص افتراضيًا ولا يتطلب أي إعداد إضافي. الاتصال عبر المناطق غير مدعوم.

يُوصى بهذا الخيار لخدمة ClickPipes for MSK. راجع دليل البدء لمزيد من التفاصيل.

اتبع دليل إعداد MSK لخدمة ClickPipes لمعرفة كيفية إعداد الاتصال.

تُعد خدمة نقطة نهاية VPC طريقةً أخرى لمشاركة مصدر بياناتك مع ClickPipes. ويتطلب ذلك إعداد NLB ‏(Network Load Balancer) أمام مصدر بياناتك، وتهيئة خدمة نقطة نهاية VPC لاستخدام NLB.

يمكن تهيئة خدمة نقطة نهاية VPC باستخدام DNS خاص يمكن الوصول إليه من خلال VPC الخاص بـ ClickPipes. ولا يُعد DNS الخاص المُدار بواسطة AWS PrivateLink خيارًا مناسبًا دائمًا:

• لا تملك اسم نطاق مصدر بياناتك، لذا لا يمكنك التحقق منه لدى AWS
• يطلب المزوّد من المستهلكين إدارة تحليل أسماء DNS، كما هو الحال في Confluent Cloud في هذه الحالات، راجع DNS خاص مخصص.

وهي خيار مفضّل لما يلي:

• أي إعداد Kafka محلي يتطلب دعم DNS خاص
• الاتصال الخاص بـ Confluent Cloud
• الاتصال عبر المناطق لـ Postgres CDC
• الاتصال عبر المناطق لمجموعات MSK

راجع دليل البدء لمزيد من التفاصيل.

بالنسبة إلى مجموعات MSK، راجع خدمة نقطة نهاية AWS PrivateLink VPC لمجموعة MSK لإعداد وسيط لكل خدمة نقطة نهاية يستخدم أسماء DNS خاصة مخصصة.

يوفر AWS PrivateLink DNS خاصًا مُدارًا لخدمات نقاط نهاية VPC ذات نطاق تم التحقق منه. تتطلب بعض الخدمات من كل مستهلك إدارة تحليل أسماء DNS ضمن VPC الخاص به؛ فعلى سبيل المثال، يتطلب Confluent Cloud من المستهلكين تحليل أسماء مضيفي الوسطاء إلى نقطة نهاية PrivateLink.

في هذه الحالات، يدعم ClickPipes إرفاق أسماء DNS خاصة مخصصة بنقطة نهاية خاصة عكسية. ويحل ClickPipes هذه الأسماء إلى العناوين الخاصة لنقطة النهاية، بحيث يمكن الوصول إلى مصدر بياناتك باستخدام اسم مضيفه الخاص عبر اتصال خاص.

يُكمل DNS الخاص المخصص DNS الخاص المُدار، ولا يحل محله. إذا كانت خدمة PrivateLink لديك توفر بالفعل أسماء DNS خاصة، فلست بحاجة إلى أسماء مخصصة.

تُدعم أسماء DNS الخاصة المخصصة لنوعي نقاط النهاية: خدمة نقطة نهاية VPC ومورد VPC. يوفر MSK متعدد VPC DNS خاصًا مُدارًا بشكل افتراضي، ولا يدعم الأسماء المخصصة.

تنطبق القواعد التالية على أسماء DNS الخاصة المخصصة:

• تُدعم الأسماء المطابقة تمامًا (kafka.internal.example.com) وأسماء البدل (*.example.com). يطابق حرف البدل تسمية DNS واحدة؛ على سبيل المثال، يطابق *.abcde12345.us-east-1.aws.confluent.cloud b0-lkc123.abcde12345.us-east-1.aws.confluent.cloud.
• يجب أن تكون الأسماء فريدة عبر جميع نقاط النهاية الخاصة العكسية لخدمة ClickHouse، بما في ذلك حالات التداخل بين أسماء البدل والأسماء المطابقة تمامًا.
• تُرفض الأسماء الواقعة ضمن اللواحق المحجوزة (مثل local وlocalhost وinternal وcorp وprivate).

لتهيئة أسماء DNS الخاصة المخصصة:

• في ClickHouse Cloud console، املأ حقل Custom private DNS name عند إنشاء نقطة نهاية خاصة عكسية. يظهر الحقل بمجرد تمكين الميزة لخدمتك.
• باستخدام OpenAPI، عيّن customPrivateDnsMappings عند إنشاء نقطة نهاية خاصة عكسية، أو حدّث نقطة نهاية موجودة عبر طلب PATCH. تستبدل التحديثات قائمة التعيينات بالكامل؛ وتؤدي القائمة الفارغة إلى إزالة جميع الأسماء المخصصة.
• باستخدام Terraform، استخدم مورد clickhouse_clickpipes_reverse_private_endpoint_custom_private_dns لإدارة التعيينات على نقطة نهاية خاصة عكسية موجودة.

1. انتقل إلى SQL Console لخدمة ClickHouse Cloud الخاصة بك.

2. اختر زر Data Sources من القائمة الجانبية اليسرى، ثم انقر على «Set up a ClickPipe».

3. اختر Kafka أو Postgres مصدرًا للبيانات.

4. اختر الخيار Reverse private endpoint.

5. اختر إحدى نقاط النهاية الخاصة العكسية الموجودة أو أنشئ نقطة نهاية جديدة.

6. أدخل المعلمات المطلوبة لنوع نقطة النهاية المحدد.

• بالنسبة إلى مورد VPC، أدخل ARN لمشاركة التكوين ومعرّف التكوين.
  • بالنسبة إلى MSK متعدد VPC، أدخل ARN للعنقود وطريقة المصادقة المستخدمة مع نقطة النهاية المنشأة.
  • بالنسبة إلى خدمة نقطة نهاية VPC، أدخل اسم الخدمة.
  • اختياريًا، أدخل اسم DNS خاص مخصص.

7. انقر على Create وانتظر حتى تصبح نقطة النهاية الخاصة العكسية جاهزة.

   إذا كنت تنشئ نقطة نهاية جديدة، فسيستغرق إعدادها بعض الوقت. ستُحدَّث الصفحة تلقائيًا بمجرد أن تصبح نقطة النهاية جاهزة. قد تتطلب خدمة نقطة نهاية VPC قبول طلب الاتصال من وحدة تحكم AWS الخاصة بك.

8. بعد أن تصبح نقطة النهاية جاهزة، يمكنك استخدام اسم DNS للاتصال بمصدر البيانات.

   في قائمة نقاط النهاية، يمكنك رؤية اسم DNS الخاص بنقطة النهاية المتاحة. وقد يكون اسم DNS داخليًا توفره ClickPipes، أو اسم DNS خاصًا توفره خدمة PrivateLink، أو اسم DNS خاصًا مخصصًا. اسم DNS ليس عنوان شبكة كاملًا. أضف المنفذ المناسب لمصدر البيانات.

   يمكنك الوصول إلى سلسلة اتصال MSK من وحدة تحكم AWS.

   للاطلاع على القائمة الكاملة لأسماء DNS، انتقل إلى إعدادات خدمة Cloud.

يمكنك إدارة نقاط النهاية الخاصة العكسية الموجودة في إعدادات خدمة ClickHouse Cloud:

1. في الشريط الجانبي، ابحث عن زر Settings وانقر عليه.

   

2. انقر على Reverse private endpoints ضمن قسم ClickPipe reverse private endpoints.

   

   تُعرض المعلومات التفصيلية لنقطة النهاية الخاصة العكسية في اللوحة المنبثقة.

   لا يمكن تعديل نقطة النهاية بعد إنشائها. يمكنك حذفها بالنقر على × بجوار نقطة النهاية ثم التأكيد — الحذف نهائي وسيعطّل أي ClickPipe يستخدم نقطة النهاية هذه حاليًا.

يقتصر دعم AWS PrivateLink لـ ClickPipes على مناطق AWS محددة. يُرجى الرجوع إلى قائمة مناطق ClickPipes للاطلاع على المناطق المتاحة.

لا ينطبق هذا القيد على خدمة نقطة نهاية VPC لـ PrivateLink عند تمكين الاتصال عبر المناطق.

لا يُضمن إنشاء نقاط نهاية AWS PrivateLink لـ ClickPipes التي أُنشئت في ClickHouse Cloud ضمن منطقة AWS نفسها التي توجد فيها خدمة ClickHouse Cloud.

حاليًا، تدعم خدمة نقطة نهاية VPC وحدها الاتصال عبر المناطق.

ترتبط نقاط النهاية الخاصة بخدمة ClickHouse محددة ولا يمكن نقلها بين الخدمات. يمكن لعدة ClickPipes لخدمة ClickHouse واحدة إعادة استخدام نقطة النهاية نفسها.

لا يدعم AWS MSK سوى PrivateLink واحد (نقطة نهاية VPC) لكل مجموعة MSK ولكل نوع مصادقة ‏(SASL_IAM أو SASL_SCRAM). ونتيجةً لذلك، لا يمكن لخدمات ClickHouse Cloud أو المؤسسات المتعددة إنشاء اتصالات PrivateLink منفصلة إلى مجموعة MSK نفسها باستخدام نوع المصادقة نفسه.

تُزال نقاط النهاية الخاصة العكسية التي تبقى في حالة نهائية تلقائيًا بعد فترة سماح محددة. يضمن ذلك عدم بقاء نقاط النهاية غير المستخدمة أو التي أُعدّت بشكل غير صحيح إلى أجل غير مسمى.

تُطبَّق فترات السماح التالية وفقًا لحالة نقطة النهاية:

بعد انقضاء فترة السماح، تُحذف نقطة النهاية وجميع الموارد المرتبطة بها تلقائيًا.

لمنع الإزالة التلقائية، عالج المشكلة الأساسية قبل انتهاء فترة السماح. على سبيل المثال، اقبل طلب اتصال معلّقًا في وحدة تحكم AWS، أو أعد إنشاء نقطة النهاية إذا أصبحت في حالة فاشلة.