الذكاء الاصطناعي في Document AI: حلقة Human in the Loop

1. مقدمة

Document AI API هي حل لفهم المستندات يستخدم البيانات غير المنظَّمة، مثل المستندات والرسائل الإلكترونية وغيرها، ويسهِّل فهم البيانات وتحليلها واستخدامها.

بفضل المراجعة التي يُجريها فريقنا، يمكنك معالجة المستندات بدقة أعلى بضمان أن يدقق فيها فريق المراجعين. يمكن أن تزيد المراجعات التي يجريها فريق من الدقة وتساعد الأنشطة التجارية في تقييم التوقّعات باستخدام أدوات مصمّمة خصيصًا لإتاحة عمليات المراجعة. في هذا التمرين المعملي، سوف تتولى إعداد معالج نفقات واختباره باستخدام المراجعة البشرية للتحقق من صحة النتائج من المعالج باستخدام أدوات التهيئة والإدارة البشرية داخل الحلقة.

ملاحظة: قد تتغير واجهة مستخدم Console بمرور الوقت، لذلك قد تبدو بيئتك مختلفة قليلاً. إذا واجهت أي مشاكل في هذا الدرس التطبيقي، يُرجى الإبلاغ عنها.

المتطلبات الأساسية

يعتمد هذا الدرس التطبيقي حول الترميز على المحتوى المقدَّم في الدروس التطبيقية الأخرى حول الترميز الخاص بالذكاء الاصطناعي للمستندات.

ننصحك بإكمال الدروس التطبيقية التالية حول الترميز قبل المتابعة.

• التعرّف البصري على الأحرف (OCR) باستخدام Document AI (Python)
• تحليل النماذج باستخدام الذكاء الاصطناعي للمستندات (Python)
• معالجات متخصّصة تستخدم الذكاء الاصطناعي للمستندات (Python)

المعلومات التي ستطّلع عليها

• يمكنك ضبط إعدادات المراجعة لمعالِج البيانات.
• إنشاء مجموعة لموارد المستخدمين الخاصة بالمراجعات
• إنشاء مهمة اختبارية يجريها فريق المراجعين
• إسناد مهمة مراجعة يجريها فريق إلى مستخدم
• أكمِل عملية مراجعة يجريها فريق لمستند معيّن.

المتطلبات

• مشروع على Google Cloud
• متصفح، مثل Chrome أو Firefox
• معرفة بايثون 3

2. بدء الإعداد

يفترض هذا الدرس التطبيقي حول الترميز أنّك أكملت خطوات إعداد Document AI الموضحة في الدرس التمهيدي حول الترميز.

يُرجى إكمال الخطوات التالية قبل المتابعة:

• بدء Cloud Shell
• تفعيل الذكاء الاصطناعي (AI) للمستندات واجهات Cloud Storage API
• تثبيت مكتبة برامج Python

عليك أيضًا تفعيل Vertex AI API.

1. باستخدام شريط البحث في أعلى وحدة التحكّم، ابحث عن "Vertex AI API"، ثم انقر على تفعيل لاستخدام واجهة برمجة التطبيقات في مشروعك على Google Cloud.
2. بدلاً من ذلك، يمكن تفعيل واجهة برمجة التطبيقات باستخدام الأمر gcloud التالي.

gcloud services enable aiplatform.googleapis.com

3- إنشاء معالج بيانات

يجب عليك أولاً إنشاء مثيل من معالج المصاريف لاستخدامه في هذا التمرين المعملي.

1. في وحدة التحكّم، انتقِل إلى Document AI Platform Overview
2. انقر على إنشاء معالج، ثم مرِّر لأسفل إلى متخصص واختر محلل نفقات.
3. أدخِل الاسم codelab-expense-parser (أو أي اسم آخر تتذكره) واختَر أقرب منطقة في القائمة.
4. انقر على إنشاء لإنشاء المعالج
5. انسخ رقم تعريف معالج البيانات. يجب استخدام هذا في الرمز لاحقًا.
6. في Cloud Shell، أنشِئ حزمة مساحة تخزين باستخدام الاسم "PROJECT_ID-hitl-results" كاسم:

export PROJECT_ID=$(gcloud config get-value core/project)
gsutil mb gs://$PROJECT_ID-hitl-results

7. ربط حساب المستخدم بدور إدارة الهوية وإمكانية الوصول (IAM) في Vertex AI في مشروع المختبر

export USER_ACCOUNT=$(gcloud config get-value core/account)
gcloud projects add-iam-policy-binding $PROJECT_ID --member=user:$USER_ACCOUNT --role=roles/aiplatform.admin

4. ضبط إعدادات الإنسان في الحلقة

في هذه المهمة، ستقوم بتهيئة المراجعة البشرية لمعالج النفقات الذي أنشأته سابقًا.

1. في وحدة التحكّم، افتح قائمة التنقّل واختَر المستند (AI).
2. انقر على الذكاء الاصطناعي البشري في الحلقة.
3. انقر على codelab-expense-parser لفتح صفحة المراجعة البشرية الخاصة بالمعالج.
4. انقر على إعداد الإنسان في حلقة.

5. حدد فلتر على مستوى المستند.
6. اضبط شريط تمرير النسبة المئوية لحدّ الثقة على %50.
7. اترك خيار المتخصصون معيّنًا على استخدام الاختصاصيين التابعين لي.

8. انقر على المربّع المنسدل مجموعة المتخصصين، وانقر على نقطة اهتمام جديدة لخبير.
9. بالنسبة إلى اسم المجموعة، أدخِل Codelab HITL Pool في مربّع حوار مجموعة متخصّصة جديدة.
10. يُرجى إدخال عنوان بريدك الإلكتروني الشخصي لمدراء حمامات السباحة والمتخصصين.
11. انقر على إنشاء مجموعة.

سيستغرق إكمال هذه الخطوة بضع دقائق. من المفترض أن تصلك رسالة إلكترونية من Vertex AI [e-mail].

ملاحظة: انقر على إعادة المحاولة في حال واجهت أي مشاكل متعلّقة بالأذونات. يجب أن يكون لديك إذن aiplatform.specialistPools.create في Cloud IAM والذي يتطلب منح دور "roles/aiplatform.admin" لحساب المستخدم على مستوى المشروع.

تجدر الإشارة إلى أنّ السمة roles/project.owner غير كافية بمفردها.

12. اترك مربّع الاختيار التعيين التلقائي بدون وضع علامة في المربّع.
13. انقر على مربّع الاختيار في القسم تأكيد الرسوم.
14. انقر على تعليمات الموقع الجغرافي وانسخ مكان التخزين هذا: - لا تضمِّن البادئة gs:// في المسار.

cloud-samples-data/documentai/codelabs/hitl/hitl-instructions.pdf

ملاحظة: هذا المستند هو نسخة من الإرشادات الخاصة بإنشاء مجموعات تعليمات المراجع، وليس نموذجًا عمليًا.

15. في موقع النتائج، انقر على تصفّح واختَر حزمة Cloud Storage التي أنشأتها سابقًا.
16. انقر على اختيار.
17. انقر على حفظ الإعداد.

ستعرِض وحدة التحكّم الآن إعداد ميزة "إنسان في حلقة" وسيستغرق إكمالها بضع دقائق.

18. عند اكتمال التهيئة، ستطالبك وحدة التحكم بتفعيل Human-in-the-loop.

• انقر على زر التبديل للتفعيل.
• بعد ذلك، انقر على تفعيل في مربّع الحوار المنبثق.

تحميل نموذج نفقة

1. لدينا نموذج نموذج لاستخدامه في Google Cloud Storage. يمكنك تنزيله باستخدام الزر أو الأمر أدناه:

تنزيل consent-claim.pdf

gsutil cp gs://cloud-samples-data/documentai/codelabs/hitl/expense-claim.pdf .

2. بعد تفعيل ميزة Human-in-loop، انقر على الزر تحميل مستند وتصفَّح للوصول إلى نموذج المستند الذي نزّلته.
3. انقر على تحميل وانتظر حتى تكتمل العملية.

5- إسناد عنصر للمراجعة

1. في هذه الصفحة، من المفترض أن ترى روابط تخصّ "مدير المسبح" ووحدات التحكّم المتخصّصة. وستظهر هذه الروابط أيضًا في رسالة إلكترونية من Vertex AI [e-mail].
   • من المفترض أن تبدو كـ https://datacompute.google.com/cm/cloudml_data_specialists_us_central1_xxxxxxx/tasks
   • انقر على رابط وحدة تحكّم المدير.

2. بعد دخولك إلى وحدة التحكّم في تصنيف البيانات، انقر على عنوان علامة التبويب المهام لفتح صفحة إسناد المهام.
3. انقر على مربّع الاختيار غير معيّنة. من المفترض أن يظهر لك إدخال جديد مُدرج في قائمة انتظار المهام codelab-expense-parser-P1.

4. اختَر codelab-expense-parser-P1.
5. انقر على إدارة المهمة.
6. أدخِل بريدك الإلكتروني الشخصي في مربّع النص تضمين المتخصصين عبر البريد الإلكتروني، ثم اختَره من القائمة المنسدلة.
7. انقر على تطبيق.

تعرض الشاشة الآن أنّ المهمة قد تم إسنادها إليك. قد يستغرق نشر هذا التحديث وظهوره على الشاشة بضع دقائق.

8. اختَر المستخدم الجديد وانقر على رمز القائمة.
9. انقر على تعيين إلى جميع المهام من القائمة المنبثقة التي تظهر.

10. انقر على الالتزام بالتغييرات.
11. انقر على التزام.

6- تنفيذ مهمة المراجعة البشرية

1. يمكنك الرجوع إلى صفحة إعداد Human-in-the-Loop في Cloud Console.

انقر على الرابط لزيارة وحدة تحكم الاختصاصي (العامل). سيبدو هذا الشكل مثل https://datacompute.google.com/w/cloudml_data_specialists_us_central1_xxxxxxxxxxx.

من المفترض أن يتم فتح وحدة تحكّم العمال وإدراج مهمتك الجديدة.

2. مرِّر مؤشر الماوس فوق العنصر الذي يحتوي على اجتماع باستخدام 4 دقائق وانقر على رمز التعديل (القلم الرصاص).
3. عدِّل القيمة لتغيير النص حتى تقول اجتماع مع Adam. قد تحتاج إلى الانتقال للأسفل في مربّع النص للاطّلاع على النص.
4. انقر على تطبيق.
5. انقر على رمز تأكيد (علامة خضراء) للعنصر أدناه.
6. انقر على رمز تأكيد للعناصر الأخرى المميّزة.
7. انقر على إرسال. تمت الآن إزالة مهمة المراجعة من قائمة انتظار المصنِّفين.

7. عرض المهام المكتملة

1. ارجع إلى وحدة تحكم المدير.
2. انقر على مهام Google واختَر مستمرة.
3. انقر على المتخصصون.
4. اختَر عنوان بريدك الإلكتروني.
5. انقر على إدارة المهمة.
6. اختَر expense-processor-P1 من القائمة المنسدلة Select specialists working on specific tasks وSelect tasks. انقر على تطبيق لكل اختيار. في قائمة السياقات الخاصة بـ expense-processor-P1 الذي تم تعيينه لك، اختَر عرض الخبراء.

بعد إرسال مهمة التصنيف من قبل المصنِّف، سيتم تحديث عدد المهام التي تمت الإجابة عليها وإجمالي الوقت المستغرق، ولكن قد يستغرق ظهور البيانات في طريقة العرض هذه بضع دقائق.

7. أغلق النافذة المنبثقة للمتخصصين وشاهد علامة التبويب المتخصصون.
8. انقر على قائمة السياقات لاسم المستخدم واختَر عرض المهام.

وتوضح طريقة العرض هذه قائمة المهام للمستخدم وأعداد عمليات إكمالها ومقدار الوقت المستغرق كما هو موضح أدناه:

8. تهانينا

تهانينا، لقد تمكّنت من استخدام Document AI Human-in-the-Loop بنجاح من أجل ضبط عمليات المراجعة البشرية للمستندات التي تتم معالجتها باستخدام أداة معالجة نفقات الذكاء الاصطناعي (AI) للمستندات.

تنظيف

لتجنُّب تحمُّل الرسوم المفروضة على حسابك على Google Cloud مقابل الموارد المستخدَمة في هذا البرنامج التعليمي:

• في Cloud Console، انتقِل إلى صفحة إدارة الموارد.
• في قائمة المشاريع، اختَر مشروعك ثم انقر على "حذف".
• في مربع الحوار، اكتب معرّف المشروع ثم انقر على "إيقاف التشغيل" لحذف المشروع.

مزيد من المعلومات

يمكنك مواصلة التعرّف على مزيد من المعلومات حول Document AI من خلال هذه الدروس التطبيقية حول الترميز.

• إدارة معالجات الذكاء الاصطناعي للمستندات باستخدام Python

المراجع

• مستقبل المستندات - قائمة تشغيل على YouTube
• مستندات الذكاء الاصطناعي للمستندات
• مكتبة برامج Python المستندة إلى الذكاء الاصطناعي (AI)
• نماذج الذكاء الاصطناعي للمستندات

الترخيص

هذا العمل مرخّص بموجب رخصة المشاع الإبداعي 2.0 مع نسب العمل إلى مؤلف عام.