معالجة المستندات الذكية للمستندات العربية والإنجليزية: دليل المؤسسات السعودية
أبرز النقاط
- تحوّل معالجة المستندات الذكية المستندات الممسوحة وملفات PDF إلى بيانات منظّمة ومتحقَّق منها لأنظمة تخطيط الموارد والمالية.
- تحتاج المستندات العربية إلى تعرف ضوئي وقواعد تتعامل مع الحروف المتصلة واختلاط الاتجاه والأرقام الهندية والتاريخ الهجري.
- في المرحلة الثانية من الفوترة الإلكترونية تحمل الفواتير ملف XML منظّماً، فيجب قراءته مباشرة والاحتفاظ بالتعرف الضوئي لبقية المستندات.
- ابدأ بفواتير المورّدين، وقِس نسبة المعالجة المباشرة والدقة، ثم توسّع إلى أنواع أخرى من المستندات.
- المستندات التي تحتوي بيانات شخصية تخضع لنظام حماية البيانات الشخصية، فعالجها على بنية خاضعة لسيطرتك مع سجلات تدقيق.
معالجة المستندات الذكية هي استخدام التعرف الضوئي على الحروف وتحليل تخطيط الصفحة ونماذج الذكاء الاصطناعي لقراءة مستندات الأعمال، واستخراج الحقول المهمة، وتمريرها إلى أنظمة مثل تخطيط موارد المؤسسة كبيانات منظّمة. وفي المملكة، يجب أن تتعامل مع الخط العربي، والصفحات ثنائية اللغة، والتاريخ الهجري، وصيغ الفوترة الإلكترونية.
لا تزال معظم المؤسسات السعودية تنجز جزءاً كبيراً من أعمالها عبر المستندات: فواتير المورّدين، وأوامر الشراء، والعقود، والأوراق الجمركية، ونماذج الموارد البشرية، والمراسلات الحكومية. ويصل كثير منها في صورة ملفات ممسوحة ضوئياً أو ملفات PDF، ويجمع كثير منها بين العربية والإنجليزية في الصفحة نفسها. وإعادة إدخال هذه المعلومات يدوياً في أنظمة تخطيط موارد المؤسسة وإدارة المعاملات عمل بطيء ومكلف وعرضة للأخطاء، وهو تحديداً ما صُمّمت المعالجة الذكية للمستندات لإلغائه. يشرح هذا الدليل كيف تعمل هذه التقنية، ولماذا تحتاج المستندات العربية إلى معاملة خاصة، وكيف غيّرت الفوترة الإلكترونية طريقة استخراج البيانات من الفواتير، ومن أين تبدأ.
كيف تعمل معالجة المستندات الذكية؟
بدلاً من الاعتماد على قوالب ثابتة، تتعرف المعالجة الذكية على نوع كل مستند، وتحدد الحقول المهمة، وتتحقق منها قبل ترحيل أي قيد. ويمر المسار النموذجي بسبع مراحل:
- الاستلام: تصل المستندات من صناديق البريد الإلكتروني، والماسحات الضوئية، وبوابات المورّدين، والمجلدات المشتركة، أو عبر واجهات برمجية.
- التصنيف: يتعرف النظام على نوع كل مستند — فاتورة، أو أمر شراء، أو عقد، أو صورة هوية، أو مذكرة تسليم — ويفصل الملفات التي تضم أكثر من مستند.
- القراءة: يحوّل التعرف الضوئي على الحروف الصور إلى نص، بينما تفهم نماذج التخطيط الجداول وأزواج الحقول والقيم والأختام والتواقيع.
- الاستخراج: تستخرج نماذج الذكاء الاصطناعي الحقول المطلوبة — اسم المورّد، والرقم الضريبي، ورقم الفاتورة، والتواريخ، والإجماليات، والبنود — أينما كان موقعها في الصفحة.
- التحقق: تطابق قواعد العمل البيانات مع السجلات الرئيسية وأوامر الشراء والعمليات الحسابية، مثل التأكد من أن مجموع البنود والضريبة يساوي الإجمالي.
- المراجعة: تُحال الحقول التي تقل ثقة النظام بها عن حد معين، أو التي لا تجتاز القواعد، إلى موظف عبر شاشة مراجعة مبسطة.
- التكامل والتعلّم: تُرحَّل البيانات المعتمدة إلى أنظمة تخطيط الموارد أو المالية أو إدارة المستندات، وتُسهم تصحيحات المراجعين في رفع الدقة مستقبلاً.
ما الفرق بين التعرف الضوئي على الحروف ومعالجة المستندات الذكية وأتمتة العمليات الروبوتية؟
كثيراً ما يُخلط بين هذه التقنيات، لكن كلاً منها يحل جزءاً مختلفاً من المشكلة، وتعمل بأفضل صورة عند الجمع بينها.
| التقنية | ماذا تفعل | هل تتعامل مع تخطيطات جديدة؟ | دورها المعتاد |
|---|---|---|---|
| التعرف الضوئي على الحروف (OCR) | تحوّل صورة النص إلى حروف قابلة للقراءة آلياً | تقرأ أي تخطيط لكنها لا تفهم المعنى | مكوّن داخل المعالجة الذكية |
| الاستخراج بالقوالب | تستخرج الحقول من مواقع ثابتة في نماذج معروفة | لا، وتتعطل عند تغيّر التخطيط | أسلوب تقليدي للنماذج الموحدة |
| معالجة المستندات الذكية (IDP) | تصنّف البيانات وتستخرجها وتتحقق منها بالذكاء الاصطناعي | نعم، لأنها تتعلم الحقول لا المواقع | تحويل المستندات غير المنظّمة إلى بيانات منظّمة |
| أتمتة العمليات الروبوتية (RPA) | تؤتمت النقرات والإدخالات عبر التطبيقات | لا ينطبق، فهي تعمل على الأنظمة لا المستندات | نقل البيانات المستخرجة عبر خطوات العملية المحيطة |
وعملياً، تقرأ المعالجة الذكية المستند، ثم تنقل أتمتة العمليات الروبوتية النتيجة عبر سير العمل: الدخول إلى نظام تخطيط الموارد، ومطابقة الفاتورة مع أمر الشراء، وتوجيهها للاعتماد. ويشرح مقالنا عن الفرق بين أتمتة العمليات الروبوتية والأتمتة بالذكاء الاصطناعي كيف تتكامل التقنيتان.
لماذا تحتاج المستندات العربية إلى عناية خاصة؟
تطرح العربية تحديات تتعامل معها الأدوات العامة المصمَّمة للإنجليزية أولاً بشكل ضعيف غالباً، ولهذا يجب اختبار دقة التعرف الضوئي على الحروف العربية على مستنداتك أنت، لا الاكتفاء بما تذكره نشرات المورّدين:
- الحروف المتصلة: يتغير شكل الحرف العربي بحسب موقعه في الكلمة، والمسح الضعيف يقطع الاتصال الذي يعتمد عليه التعرف الضوئي.
- اتجاه الكتابة المختلط: يأتي النص العربي من اليمين إلى اليسار بجوار أرقام ورموز منتجات ومصطلحات إنجليزية من اليسار إلى اليمين، وكثيراً ما يكون ذلك في السطر نفسه.
- نظاما أرقام: قد تظهر الأرقام الهندية (٠١٢٣) والأرقام العربية الغربية (0123) في الفاتورة نفسها، ويجب توحيدها قبل التحقق.
- التاريخ الهجري والميلادي: تستخدم المستندات الحكومية وبعض المستندات التجارية القديمة التاريخ الهجري، ويلزم تحويله قبل وصوله إلى أنظمة تعتمد التاريخ الميلادي.
- تباين الأسماء والعناوين: قد يظهر المورّد نفسه بالعربية أو الإنجليزية أو بتهجئات لاتينية مختلفة، فتحتاج مطابقته مع البيانات الرئيسية إلى منطق مطابقة تقريبية.
- الأختام والتواقيع والكتابة اليدوية: كثيراً ما تتداخل الأختام الرسمية مع النص المطبوع، وتضيف الملاحظات المكتوبة بخط اليد مزيداً من التشويش.
ولذلك يجب تقييم أي حل مخصص للعمليات في المملكة على عينة ممثِّلة من المستندات العربية وثنائية اللغة الحقيقية، مع قياس الدقة لكل حقل على حدة.
كيف غيّرت الفوترة الإلكترونية استخراج البيانات من الفواتير؟
غيّر برنامج الفوترة الإلكترونية (فاتورة) الذي تطبقه هيئة الزكاة والضريبة والجمارك شكل فاتورة المورّد. فقد بدأت المرحلة الأولى (مرحلة الإصدار) في 4 ديسمبر 2021، وبدأت المرحلة الثانية (مرحلة الربط والتكامل) في 1 يناير 2023 وتُطبَّق على المكلفين على دفعات متتالية، بربط أنظمة الفوترة لديهم بمنصة فاتورة. وتنص الهيئة صراحة على أن الفاتورة الورقية التي تُحوَّل إلى صيغة إلكترونية بالمسح الضوئي أو النسخ لا تُعد فاتورة إلكترونية.
وفي المرحلة الثانية، تُنشأ الفواتير بصيغة XML منظّمة، ويمكن مشاركتها مع المشتري كملف XML أو كملف PDF/A-3 مضمَّن فيه ملف XML. وتخضع الفواتير الضريبية القياسية (بين المنشآت) للاعتماد من الهيئة قبل مشاركتها، بينما يُبلَّغ عن الفواتير المبسطة (للمستهلكين) خلال 24 ساعة. ولذلك ثلاث نتائج عملية لفرق الحسابات الدائنة:
- اقرأ ملف XML أولاً: عندما يرسل المورّد ملف PDF/A-3 أو XML متوافقاً، يجب أن تستخرج المعالجة الذكية البيانات المنظّمة المضمَّنة مباشرة بدلاً من قراءة الصفحة ضوئياً، فهذا أسرع ودقيق تماماً.
- احتفظ بالتعرف الضوئي لبقية المستندات: فالمورّدون غير المشمولين بعد، والمورّدون الأجانب، والفواتير القديمة، ومذكرات التسليم، والعقود، لا تزال تصل ممسوحة ضوئياً أو بصيغة PDF.
- تحقّق من البيانات الضريبية: طابِق الرقم الضريبي للمورّد المكوّن من 15 رقماً مع البيانات الرئيسية، وتأكد من أن ضريبة القيمة المضافة بالنسبة الأساسية 15% تتوافق مع الإجماليات.
وإذا كانت منشأتك تُصدر الفواتير إلى جانب استلامها، فإن خدمة الربط مع منصة فاتورة لدينا تربط نظام تخطيط الموارد أو نقاط البيع بمنصة الهيئة، ويغطي دليلنا للفوترة الإلكترونية في السعودية المتطلبات بالتفصيل.
ما المستندات التي يُفضّل أتمتتها أولاً؟
| نوع المستند | الحقول المعتادة | درجة التعقيد | هل يصلح للبدء؟ |
|---|---|---|---|
| فواتير المورّدين | المورّد، والرقم الضريبي، ورقم الفاتورة، والتاريخ، والبنود، والضريبة، والإجمالي | متوسطة: تخطيطات متنوعة ومحتوى متسق | نعم، حجم كبير وعائد واضح |
| أوامر الشراء ومذكرات التسليم | رقم أمر الشراء، والأصناف، والكميات، وتاريخ التسليم | متوسطة | نعم، مع الفواتير لإجراء المطابقة الثلاثية |
| المستندات الجمركية ومستندات الشحن | رموز النظام المنسق، والقيم، والمنشأ، والمستلم | متوسطة إلى عالية | نعم، للمنشآت التي تعتمد على الاستيراد |
| نماذج الموارد البشرية وصور الهويات | الأسماء، وأرقام الهوية، والتواريخ، والجنسية | منخفضة إلى متوسطة، لكنها بيانات شخصية | فقط مع ضوابط قوية لحماية البيانات الشخصية |
| العقود | الأطراف، والتواريخ، والقيم، وبنود التجديد والغرامات | عالية: نصوص طويلة غير منظّمة | لاحقاً، باستخدام النماذج اللغوية لاستخراج البنود |
كيف تبقى معالجة المستندات متوافقة مع نظام حماية البيانات الشخصية؟
تحتوي مستندات أعمال كثيرة على بيانات شخصية، مثل ملفات الموظفين، وصور الهوية الوطنية والإقامة، وبيانات العملاء. وينطبق على معالجتها نظام حماية البيانات الشخصية، الواجب التطبيق بالكامل منذ 14 سبتمبر 2024، والذي تشرف عليه سدايا عبر منصة حوكمة البيانات الوطنية. كما أن إرسال هذه المستندات إلى خدمة تعرف ضوئي أو ذكاء اصطناعي سحابية خارجية قد يثير مسائل تتعلق بنقل البيانات خارج المملكة. ومن الضوابط العملية: معالجة المستندات الحساسة على بنية داخل المملكة أو داخل المؤسسة، وإخفاء الحقول التي لا تحتاجها الأنظمة اللاحقة، وتطبيق صلاحيات قائمة على الأدوار على قائمة المراجعة، وتحديد مدد للاحتفاظ بصور المستندات الأصلية، والاحتفاظ بسجلات تدقيق توضح من اعتمد كل قيمة مستخرجة.
كيف يبدو مشروع تطبيق معالجة المستندات الذكية؟
يمر التطبيق المركّز عادة بأربع مراحل. في مرحلة الاستكشاف تُجمع عينة من بضع مئات من المستندات الحقيقية، وتُحدَّد الحقول التي يحتاجها كل نظام لاحق، وتُسجَّل التكلفة الحالية وزمن الدورة. وفي مرحلة البناء تُضبط قواعد التصنيف والاستخراج والتحقق، ويُحسَّن التعرف الضوئي على الحروف العربية على عيناتك، وتُصمَّم شاشة المراجعة. وفي مرحلة التكامل يُربط المسار بنظام تخطيط الموارد أو المالية أو إدارة المستندات عبر واجهات برمجية حيثما توفرت، أو عبر أتمتة العمليات الروبوتية حيث لا تتوفر — وتغطي خدمة أنظمة تخطيط الموارد والبرمجيات المخصّصة الأنظمة التي تحتاج إلى نقاط تكامل جديدة. أما مرحلة المتابعة المكثفة فيعمل فيها الحل بالتوازي مع العملية الحالية، وتُقارن النتائج، وتُعدَّل عتبات الثقة قبل إيقاف الخطوة اليدوية. ويُعد اختيار مكان تشغيل المسار — سحابة داخل المملكة أو خوادم داخل المؤسسة — جزءاً من مرحلة الاستكشاف، ويحدده مستوى حساسية المستندات وطبيعة البيانات الشخصية التي تحتويها.
كيف تقيس العائد من معالجة المستندات الذكية؟
قِس العملية الحالية قبل الأتمتة، ثم تابع المؤشرات نفسها بعدها:
- نسبة المعالجة المباشرة: حصة المستندات التي تُرحَّل دون أي تدخل بشري.
- الدقة على مستوى الحقل: تُقاس على عينة مستقلة، لكل حقل ولكل نوع مستند.
- زمن الدورة: من استلام المستند حتى ترحيله أو اعتماد الدفع.
- تكلفة المستند الواحد: شاملة جهد المراجعة ومعالجة الاستثناءات.
- معدل الاستثناءات وأسبابها: حتى تعالج القواعد أو سلوكيات المورّدين التي تقف خلفها.
أتمت نوعاً واحداً من المستندات من البداية إلى النهاية، وأثبت النتائج بالأرقام، ثم وسّع النطاق. ففي مشروع أتمتة العمليات لمجموعة صناعية سعودية، حققت أتمتة العمليات الروبوتية المدعومة بطبقات قرار بالذكاء الاصطناعي والمتكاملة مع أنظمة تخطيط الموارد التشغيلية انخفاضاً بنسبة 72% في زمن المعالجة، ومعدل أخطاء يقارب الصفر، مع إعادة توجيه الموظفين إلى أعمال أعلى قيمة. تصمّم أمواج للحلول مسارات معالجة مستندات ثنائية اللغة متكاملة مع أنظمة تخطيط الموارد والمالية لديك — تعرّف على خدمة الأتمتة الذكية وأتمتة العمليات الروبوتية لمعرفة منهجيتنا.
الأتمتة الذكية
الأسئلة الشائعة
ما هي معالجة المستندات الذكية؟
هي تقنية تستخدم التعرف الضوئي على الحروف وتحليل التخطيط ونماذج الذكاء الاصطناعي لتصنيف المستندات واستخراج البيانات المهمة والتحقق منها قبل تمريرها إلى أنظمة الأعمال. وخلافاً للاستخراج بالقوالب، تفهم الحقول لا مواقعها الثابتة، فتتعامل مع تخطيطات متنوعة، وتحيل القيم غير المؤكدة إلى موظف، وتتحسن دقتها مع التصحيحات.
هل تقرأ معالجة المستندات الذكية المستندات العربية بدقة؟
نعم، إذا كان الحل مبنياً ومختبَراً للعربية. فالتعرف الضوئي على الحروف العربية يجب أن يتعامل مع الحروف المتصلة، والنصوص المختلطة الاتجاه، والأرقام الهندية، والتاريخ الهجري، وتباين الأسماء. وتتفاوت الدقة كثيراً بين الأدوات، لذا قيّم المرشحين على عينة ممثِّلة من مستنداتك العربية وثنائية اللغة، وقِس الدقة لكل حقل.
كيف يتم استخراج البيانات من الفواتير تلقائياً؟
يستلم النظام الفاتورة، ويتعرف على نوعها، ثم يقرأ ملف XML المضمَّن إن وُجد أو يستخدم التعرف الضوئي على الحروف للفواتير الممسوحة. بعد ذلك تستخرج نماذج الذكاء الاصطناعي حقول المورّد والرقم الضريبي والتاريخ والبنود والإجماليات، وتتحقق قواعد العمل من الحسابات وأمر الشراء، ثم تُرحَّل البيانات إلى نظام تخطيط الموارد بعد المراجعة عند الحاجة.
هل ما زلنا بحاجة إلى استخراج بيانات الفواتير بعد تطبيق الفوترة الإلكترونية؟
نعم، لكن بأسلوب مختلف. ففواتير المرحلة الثانية بصيغة XML منظّمة، وتُشارك كملف XML أو PDF/A-3 مضمَّن فيه XML، فيجب قراءتها مباشرة. أما الفواتير الممسوحة ضوئياً فلا تُعد إلكترونية وفق الهيئة، وفواتير المورّدين الأجانب وغير المشمولين والفواتير القديمة لا تزال تحتاج إلى استخراج بالتعرف الضوئي وتحقق.
ما المستندات الأنسب للبدء بالأتمتة؟
ابدأ بالمستندات عالية الحجم ذات المحتوى المتسق والتخطيطات المتنوعة، وفواتير المورّدين هي المثال الأوضح، وغالباً مع أوامر الشراء ومذكرات التسليم للمطابقة. فهي تحقق وفورات واضحة وقابلة للقياس. أما العقود والمستندات التي تحتوي بيانات شخصية مثل صور الهويات فالأفضل تأجيلها حتى تثبت الضوابط وآلية المراجعة وقياس الدقة.
ما مدى دقة معالجة المستندات الذكية؟
تعتمد الدقة على جودة المستندات ولغتها وتنوع تخطيطاتها ومدى ضبط النماذج. وبدلاً من الاعتماد على رقم دعائي واحد، قِس الدقة لكل حقل على مستنداتك أنت، وحدد عتبات ثقة تحيل القيم غير المؤكدة إلى المراجعة البشرية. وتتحسن الأنظمة الجيدة بمرور الوقت مع تغذيتها بتصحيحات المراجعين.