Azure Document Intelligence: Complete Guide & Practical Implementation | Waseem Alhatmi

# Azure Document Intelligence: Complete Guide & Practical Implementation

**إعداد وتقديم: Waseem Alhatmi (وسيم مطلق الحاتمي)**

This presentation provides a comprehensive and practical introduction to **Azure Document Intelligence**, a Microsoft Azure cloud service for extracting and analyzing information from documents using artificial intelligence and machine learning.

The presentation covers the main concepts, capabilities, workflow, and practical use of Azure Document Intelligence, including document analysis, text extraction, OCR, structured data extraction, prebuilt models, custom models, and practical implementation.

### Topics Covered

* What is Azure Document Intelligence?
* Microsoft Azure and Document Intelligence
* Optical Character Recognition (OCR)
* Document text extraction
* Tables and structured data extraction
* Key-value pairs
* Document fields and entities
* Prebuilt Document Intelligence models
* Custom Document Intelligence models
* Document analysis workflow
* Azure Document Intelligence Studio
* Creating and configuring an Azure resource
* Connecting applications to the service
* API and practical usage
* Sending documents for analysis
* Processing and extracting results
* Practical examples
* Use cases and applications
* Benefits and limitations
* Best practices
* Practical implementation workflow

### Objective

The goal of this presentation is to provide students, developers, and AI enthusiasts with a clear understanding of Azure Document Intelligence and demonstrate how the service can be used to automatically extract useful information from digital documents.

### Author

**Waseem Alhatmi**
**وسيم مطلق الحاتمي**

GitHub: https://github.com/waseemalhatmi

Website: https://waseemalhatmi.42web.io/

SlideShare: https://www.slideshare.net/waseemalhatemy733

Transcript

1. ‫‪Azure Document Intelligence‬‬ ‫استخراج البيانات الذكي من المستندات بقوة الذكاء االصطناعي‬ ‫خدمة سحابية متقدمة من ‪ Microsoft Azure‬لمعالجة وتحليل المستندات تلقائيا‬ ‫الذكاء االصطناعي‬ ‫السحابة‬ ‫نماذج تعلم آلي متقدمة الستخراج البيانات بدقة ‪%98–95‬‬ ‫خدمة ُمدارة بالكامل ضمن منظومة ‪Azure AI‬‬ ‫األتمتة‬ ‫التكامل‬ ‫معالجة المستندات دون تدخل بشري مكثف‬ ‫يتكامل مع ‪ Power Automate‬و‪ Azure Logic Apps‬و‪Azure Search‬‬
2. ‫الفصل األول‬ ‫المقدمة‬ ‫تعرف على ‪ — Azure Document Intelligence‬ما هي‪ ،‬وكيف تعمل‪ ،‬ولماذا تُع ّد قفزة نوعية في عالم معالجة المستندات‬ ‫ّ‬ ‫‪01‬‬ ‫‪02‬‬ ‫‪03‬‬ ‫ما هي الخدمة؟‬ ‫كيف تعمل؟‬ ‫لماذا تستخدمها؟‬ ‫خدمة سحابية من ‪ Microsoft Azure‬تستخدم الذكاء االصطناعي‬ ‫الستخراج البيانات من المستندات‬ ‫تحليل المستندات بنماذج تعلم آلي متخصصة واستخراج البيانات‬ ‫الهيكلية تلقائيا‬ ‫توفير الوقت والتكلفة والقضاء على األخطاء البشرية في معالجة‬ ‫المستندات‬
3. ‫المقدمة‬ ‫ما هي ‪Azure Document Intelligence‬؟‬ ‫نظرة عامة‬ ‫خدمة سحابية من ‪ Microsoft Azure‬تستخدم تقنيات التعلم اآللي الستخراج النصوص‬ ‫والبيانات المهمة من المستندات والنماذج بشكل ذكي وآلي‪ ،‬دون الحاجة للتدخل اليدوي الكثيف‪.‬‬ ‫المعلومات األساسية‬ ‫المطورة‬ ‫الشركة‬ ‫ّ‬ ‫كانت تُعرف سابقا باسم ‪ Azure Form Recognizer‬قبل إعادة التسمية ضمن مظلة‬ ‫‪.Azure AI‬‬ ‫‪ — Azure AI‬ضمن خدمات ‪Microsoft Azure‬‬ ‫المجال الرئيسي‬ ‫معالجة المستندات الذكية واالستخراج اآللي للبيانات‬ ‫اإلصدار الحالي‬ ‫‪ — )AG(4.0‬اإلصدار األخير واألكثر تقدما‪v‬‬
4. ‫المقدمة‬ ‫وظيفة الخدمة واالستخدامات‬ ‫تُتيح الخدمة استخراج البيانات والنصوص والعناصر الهيكلية من المستندات بشكل ذكي وآلي — مما يُلغي الحاجة إلى اإلدخال اليدوي المضني ويُعجّل دورة العمل بشكل كبير‪.‬‬ ‫المستندات المالية‬ ‫النماذج والعقود‬ ‫معالجة الفواتير والشيكات والمستندات البنكية واستخراج البيانات المالية الدقيقة تلقائيا‬ ‫استخراج بيانات النماذج والعقود والمستندات القانونية والتأمينية بدقة عالية‬ ‫اإلدارة والتشغيل‬ ‫األرشفة الذكية‬ ‫إدارة سجالت الضيوف والمستندات اإلدارية وأتمتة عمليات االستقبال والتسجيل‬ ‫تصنيف المستندات وأرشفتها تلقائيا مع إمكانية البحث الفوري في محتواها‬
5. ‫الفصل الثاني‬ ‫المميزات والخصائص‬ ‫استكشف اإلمكانات التقنية المتقدمة التي تجعل ‪ Azure Document Intelligence‬الخيار األمثل لمعالجة المستندات على نطاق واسع‬ ‫نماذج مدمجة‬ ‫نماذج مخصصة‬ ‫جاهزة لالستخدام فورا دون تدريب‬ ‫تدريب خاص على بيانات عملك‬ ‫تكامل سلس‬ ‫معالجة دفعية‬ ‫مع منظومة ‪ Azure‬واألدوات الشائعة‬ ‫آالف المستندات في وقت واحد‬
6. ‫المميزات‬ ‫أهم مميزات الخدمة‬ ‫صيغ الملفات المدعومة‬ ‫نماذج مدمجة متخصصة‬ ‫تدعم نماذج مدمجة جاهزة ألنواع مستندات شائعة‪ :‬الفواتير‪ ،‬الشيكات‪ ،‬العقود‪ ،‬النماذج الضريبية — جاهزة‬ ‫لالستخدام الفوري دون أي تدريب مسبق‪.‬‬ ‫‪PDF‬‬ ‫الصور‬ ‫‪JPEG · PNG · BMP · TIFF‬‬ ‫المستندات الرقمية والممسوحة‬ ‫‪Office‬‬ ‫‪DOCX · PPTX · XLSX‬‬ ‫نماذج مخصصة قابلة للتدريب‬ ‫إمكانية تدريب نماذج خاصة بك على مستندات عملك المحددة لتحقيق دقة أعلى في سياقات متخصصة‪.‬‬ ‫استخراج ذكي للجداول‬ ‫تحديد واستخراج البيانات من الجداول المعقدة والمتداخلة بدقة عالية مع الحفاظ على الهيكل األصلي‪.‬‬ ‫المخرجات بصيغة ‪ Markdown‬تحافظ على هيكل المستند وتدعم تدفقات عمل ‪ RAG‬مع نماذج اللغة‬ ‫الكبيرة (‪.)LLM‬‬
7. ‫المميزات‬ ‫المميزات المتقدمة‬ ‫ما يميّز ‪ Azure Document Intelligence‬عن حلول ‪ OCR‬التقليدية هو مجموعة اإلمكانات االستخباراتية المضافة التي تجعلها حال متكامال وليس مجرد أداة استخراج نصوص‪.‬‬ ‫قابل للبحث‪PDF‬‬ ‫درجات الثقة (‪)Confidence Scores‬‬ ‫كل حقل مستخرج يُرفق بدرجة ثقة رقمية تشير إلى مستوى يقين النموذج — مما يُتيح التحقق‬ ‫االنتقائي من الحاالت غير المؤكدة فقط‪.‬‬ ‫إنشاء ملفات ‪ PDF‬قابلة للبحث من خالل تراكب النص المستخرج على الصورة األصلية‬ ‫يحول المستندات الممسوحة إلى أصول رقمية قابلة للفهرسة‪.‬‬ ‫— مما ّ‬ ‫التكامل مع المنظومة ‪Azure‬‬ ‫معالجة دفعية وتصنيف ذكي‬ ‫اتصال مباشر مع ‪ Power Automate‬و‪ Azure Logic Apps‬و ‪Azure‬‬ ‫‪ Cognitive Search‬لبناء تدفقات عمل متكاملة دون كتابة كود معقد‪.‬‬ ‫معالجة آالف المستندات في وقت واحد مع تصنيف تلقائي لنوع كل مستند قبل توجيهه‬ ‫للنموذج المناسب‪.‬‬
8. ‫المميزات‬ ‫ما الذي يميّز ‪Azure Document Intelligence‬؟‬ ‫مقارنة بحلول ‪ OCR‬التقليدية وخدمات استخراج النصوص األخرى‪ ،‬تتفوق ‪ Azure Document Intelligence‬في عدة محاور جوهرية‪:‬‬ ‫دقة استثنائية‬ ‫تُحقق دقة ‪ %98–95‬في استخراج‬ ‫البيانات بفضل نماذج التعلم اآللي المتقدمة‬ ‫المدربة على ماليين المستندات‪.‬‬ ‫ّ‬ ‫سهولة االستخدام‬ ‫واجهة ‪Document‬‬ ‫‪ Intelligence Studio‬سهلة‬ ‫وبديهية — ال تتطلب خبرة برمجية‬ ‫الختبار النماذج وضبط اإلعدادات‪.‬‬ ‫التكلفة الفعالة‬ ‫نموذج تسعير مرن يعتمد على عدد الصفحات المعالجة فعليا — ادفع ما تستخدمه فقط دون رسوم ثابتة‪.‬‬ ‫قابلية التخصيص‬ ‫تدريب نماذج مخصصة بأمثلة قليلة من‬ ‫مستنداتك الخاصة للوصول إلى دقة أعلى‬ ‫في سياقات متخصصة جدا‪.‬‬ ‫األمان واالمتثال‬ ‫معايير أمان عالية مع امتثال للمعايير‬ ‫الدولية ( ‪— )RPDG ،2ISO, SOC‬‬ ‫بيانات المستندات ال تُستخدم لتدريب نماذج‬ ‫عامة‪.‬‬
9. ‫الفصل الثالث‬ ‫الفوائد والتطبيقات العملية‬ ‫أرقام حقيقية وحاالت دراسية موثقة تُثبت األثر الفعلي لـ ‪ Azure Document Intelligence‬على أرض الواقع‬ ‫‪70%‬‬ ‫‪84%‬‬ ‫تقليل اإلدخال اليدوي‬ ‫معالجة مباشرة‬ ‫انخفاض في مهام إدخال البيانات اليدوية يوميا‬ ‫من المستندات تُعالج دون أي تدخل بشري‬ ‫‪$420K‬‬ ‫‪98%‬‬ ‫توفير سنوي‬ ‫دقة االستخراج‬ ‫في تكاليف العمالة والمعالجة اليدوية‬ ‫أعلى مستوى دقة في أفضل السيناريوهات‬
10. ‫الفوائد العملية‬ ‫الفوائد الرئيسية للخدمة‬ ‫الفوائد المالية واالستراتيجية‬ ‫الفوائد التشغيلية‬ ‫توفير الوقت‬ ‫تقليل األخطاء البشرية‬ ‫توفير ‪ 420,000$‬سنويا‬ ‫تحسين االمتثال‬ ‫تقليل ‪ %70‬من إدخال البيانات اليدوية —‬ ‫ما يعني تحرير فرق العمل للتركيز على‬ ‫المهام االستراتيجية عالية القيمة بدال من‬ ‫اإلدخال الروتيني‪.‬‬ ‫القضاء شبه التام على أخطاء اإلدخال اليدوي‬ ‫التي تُكلّف الشركات وقتا وماال في التصحيح‬ ‫واسترداد البيانات‪.‬‬ ‫في تكاليف العمالة والمعالجة — وفق‬ ‫حاالت دراسية موثقة من عمالء‬ ‫‪ Microsoft‬الفعليين في قطاعات متنوعة‪.‬‬ ‫ضمان معالجة موحدة وموثقة لجميع‬ ‫المستندات مع مسار تدقيق كامل يُس ّهل‬ ‫عمليات المراجعة واالمتثال التنظيمي‪.‬‬ ‫زيادة اإلنتاجية‬ ‫معدل معالجة مباشرة بنسبة ‪ %84‬دون تدخل بشري — تسريع جذري في دورة معالجة‬ ‫المستندات من أيام إلى دقائق‪.‬‬ ‫قابلية التوسع‬ ‫من معالجة عشرات المستندات يوميا إلى ماليين — دون الحاجة لزيادة الموارد البشرية أو‬ ‫تغيير البنية التحتية‪.‬‬
11. ‫‪Azure Portal‬إعداد وتأسيس المورد في بوابة ]‪1‬عملي [‬ ‫تحديد االشتراك والمجموعة‬ ‫جديد لتنظيم موارد التكليف ‪Resource Group‬وإنشاء ‪Subscription‬اختيار‬ ‫‪.‬السحابي‬ ‫االسم والشريحة السعرية‬ ‫‪).‬شهر‪/‬صفحة ‪Free F0 (500‬إدخال اسم فريد للمورد‪ ،‬واختيار الشريحة المجانية‬ ‫‪Review + Create‬‬ ‫‪.‬مراجعة التكوين والضغط على إنشاء ليتم نشر المورد في دقائق معدودة‬ ‫‪.‬لدعم التجارب األكاديمية دون تكلفة مالية ‪Free Tier‬نستخدم ‪:‬توضيح للدكتور‬
12. ‫‪Document Intelligence Studio‬بيئة العمل المرئية ]‪2‬عملي [‬ ‫الدخول إلى المنصة‬ ‫‪: documentintelligence.ai.azure.com/studio‬فتح الرابط الرسمي‬ ‫)‪(Connect Resource‬ربط المورد‬ ‫‪.‬والمورد المنشأ بالبوابة ‪Subscription‬الضغط على اإلعدادات وربط الـ‬ ‫استكشاف لوحة النماذج‬ ‫‪ ،Custom‬و ‪: Document Analysis ،Prebuilt Models‬تصنيفات واضحة‬ ‫‪Models.‬‬ ‫‪.‬كاملة تتيح اختبار كافة النماذج دون كتابة سطر كود واحد ‪No-Code‬يوفر االستوديو بيئة‬
13. ‫‪Read‬التعرف الضوئي عبر نموذج ‪:‬التجربة األولى ]‪3‬عملي [‬ ‫رفع المستند والتحليل‬ ‫‪Run Analysis.‬والضغط على زر ‪PDF‬رفع صورة ممسوحة أو‬ ‫)‪(Bounding Polygons‬مواقع الكلمات‬ ‫‪.‬تحديد دقيق لموقع كل كلمة وإحداثياتها الهندسية على الصفحة‬ ‫كشف الخط المكتوب باليد واللغات‬ ‫‪.‬التعرف اآللي على النصوص المطبوعة والمكتوبة بخط اليد مع تحديد لغة المستند‬ ‫هو اللبنة األساسية التي تحول البكسالت الجامدة إلى نص ‪Read‬نموذج " ‪:‬الشرح للدكتور‬ ‫"‪.‬نقي مفهوم برمجيا‬
14. ‫‪Layout‬استخراج الهياكل والجداول عبر نموذج ]‪4‬عملي [‬ ‫التعرف الذكي على الجداول‬ ‫‪.‬تلقائيا )‪(Merged Cells‬كشف الصفوف واألعمدة والخاليا المدمجة‬ ‫)‪(Selection Marks‬مربعات االختيار‬ ‫‪[ ].‬أو فارغة ]✓[محددة ‪:‬اكتشاف خانات االختيار وحالتها بدقة‬ ‫تقسيم الفقرات والعناوين‬ ‫‪.‬التمييز الداللي بين العناوين الرئيسية والفقرات وهوامش الصفحة‬ ‫‪.‬الحفاظ على بنية البيانات الجدولية ‪:‬العادية ‪OCR‬عن برامج ‪Azure‬هذا ما يميز‬
15. ‫‪Prebuilt Invoice‬تحليل الفواتير ‪:‬السيناريو الذهبي ]‪5‬عملي [‬ ‫استخراج الحقول المحاسبية‬ ‫‪.‬اسم المورد‪ ،‬رقم الفاتورة‪ ،‬تاريخ االستحقاق‪ ،‬واإلجمالي ‪:‬التقاط فوري لـ‬ ‫)‪(Line Items‬بنود الفاتورة التفصيلية‬ ‫‪.‬استخراج جدول المواد والكميات واألسعار الفردية بشكل مصفوفي جاهز‬ ‫)‪(Confidence Score‬مستوى الثقة‬ ‫‪98% - 99%).‬تصل عادة إلى (يعطي النظام نسبة تأكيد لكل قيمة مستخرجة‬ ‫مدرب على ماليين الفواتير العالمية وجاهز لالستخدام الفوري ‪:‬بدون تدريب مسبق‬ ‫‪.‬النموذج ّ‬
16. ‫المنظمة وجاهزية الربط البرمجي ‪JSON‬مخرجات ]‪6‬عملي [‬ ‫‪:‬المستخرج من الفاتورة ‪JSON‬هيكل كائن الـ‬ ‫‪"modelId‬‬ ‫‪"prebuilt‬‬‫‪"fields‬‬ ‫‪"Contoso‬‬ ‫‪"confidence‬‬ ‫‪"InvoiceId‬‬ ‫"‬ ‫"‪invoice‬‬ ‫"‬ ‫‪"confidence‬‬ ‫‪"InvoiceTotal " "value‬‬ ‫"‪Ltd.‬‬ ‫"‬ ‫‪"Items‬‬ ‫‪"description‬‬ ‫"‬ ‫"‬ ‫"‬ ‫‪"amount‬‬ ‫"‬ ‫"‬ ‫"‬ ‫‪"status‬‬ ‫‪"succeeded‬‬ ‫‪"VendorName‬‬ ‫‪"value‬‬ ‫"‬ ‫"‬ ‫‪"INV-2026‬‬‫‪" "value‬‬ ‫"‬ ‫‪"Cloud‬‬ ‫"‪Consulting‬‬ ‫‪"confidence‬‬ ‫"‬ ‫"‪09‬‬ ‫‪"quantity‬‬ ‫"‬ ‫"‬ ‫‪:‬في بيئة األعمال ‪JSON‬أهمية كائن‬ ‫يمثل هذا الملف الجسر الحقيقي بين الملف الورقي غير المهيكل واألنظمة المحاسبية‬ ‫‪.‬المؤتمتة‬ ‫‪.‬مباشرة بالقيود اليومية ‪ERP & SAP‬تغذية أنظمة‬ ‫•‬ ‫‪SQL & Data Warehouses.‬الترحيل اآللي لقواعد بيانات‬ ‫•‬ ‫‪Power BI.‬بناء لوحات مؤشرات األداء الحية في‬ ‫•‬ ‫ونمنع األخطاء ‪100%‬هكذا نلغي اإلدخال اليدوي للبيانات بنسبة " ‪:‬رسالتك للدكتور‬ ‫"‪.‬البشرية‬
17. ‫اإليصاالت ووثائق الهوية ‪:‬النماذج المتخصصة ]‪7‬عملي [‬ ‫)‪(Prebuilt Receipt‬نموذج اإليصاالت‬ ‫‪(Tip) ،‬اسم المتجر‪ ،‬التاريخ‪ ،‬اإلكرامية ‪:‬استخراج بيانات إيصاالت المطاعم والوقود‬ ‫‪.‬والضريبة‬ ‫)‪(IDs‬وثائق الهوية وجوازات السفر‬ ‫‪ICAO.‬قراءة بطاقات الهوية‪ ،‬تاريخ الميالد‪ ،‬تاريخ االنتهاء‪ ،‬ورقم الوثيقة مع دعم معايير‬ ‫في العرض العملي‪ ،‬استخدم عينات تجريبية افتراضية لحماية البيانات ‪:‬مالحظة خصوصية‬ ‫‪.‬الشخصية‬
18. ‫)‪(Custom Model‬النماذج المخصصة وتوسيم المستندات ]‪8‬عملي [‬ ‫‪Azure Blob‬تخزين العينات في‬ ‫‪.‬عينات على األقل للمستند المخصص لتكون مجموعة التدريب ‪5‬رفع‬ ‫)‪(Visual Labeling‬التوسيم البصري‬ ‫‪.‬رقم العقد أو البوليصة ‪:‬تحديد الحقول بالسحب واإلفالت وتعيين مسميات مثل‬ ‫)‪(Train‬التدريب بنقرة واحدة‬ ‫‪.‬بناء نموذج ذكاء اصطناعي مخصص للمنظمة خالل دقائق واختبار دقته‬ ‫‪.‬مناسب لنماذج العقود الحكومية‪ ،‬استمارات التأمين‪ ،‬والسجالت األكاديمية الفريدة‬