قطاع تكنولوجيا المعلومات الجهاز المركزى للتعبئة العامة و الإحصاء قطاع تكنولوجيا المعلومات
التطبيقات التكنولوجية الحديثة فى تعداد 2006 اعداد : مهندسة / نبيلة طه مصطفى مدير عام بقطاع تكنولوجيا المعلومات
الأجــــــــــنـــدة CAPMAS الأجــــــــــنـــدة مـــقــــــــــــدمة التطبيقات التكنولوجية الحديثة في التعداد 2006 أولا : النظام الآلى لإدخال البيانات ثانيــا : الترمـــــــــــــــــيز الآلــــــى ثـالثـا : مســــــتودع البـــــــــــيانات رابعــا: التجـــــــــارب القــــــــــبلية خامسا: اللامركـــــــــزية في التعداد
مقـــــــــــــــــدمة CAPMAS مقـــــــــــــــــدمة ينبغى أن يسفر التعداد عن إحصاءات ملائمة لمستخدمى البيانات وهو الهدف الإحصائي الرئيسى من تنفيذ عملية التعداد وذلك للوصول الي ناتج يستوفي احتياجاتهم في الوقت المناسب وبدقة عالية . من هذا المنطلق تعاون كل من قطاع تكنولوجيا المعلومات وقطاع الإحصاء بالجهاز لتحقيق تلك الرؤيا وفقا لتخطيط مسبق .
أولا : النظام الآلي لإدخال البيانات CAPMAS ICR Data Entry System أولا : النظام الآلي لإدخال البيانات
1- الوسيلة التقليدية CAPMAS إدخال البيانات تسليم الإستمارة إستيفاء البيانات By Hand
العيــــــــــــوب CAPMAS تحتاج لوقت كبير لعملية الإدخال . زيـــادة نســــــــــبة الأخــــــــطاء . ﺠ - تحــتاج عـــدد كبير من العمـالة . د - زيــــــــــــــــــادة التكـــــــــــــــلفة.
2- النظم الحديثة لإدخال البيانات CAPMAS 2- النظم الحديثة لإدخال البيانات ICR Bar Code قارىء الأجهزة المحمولة المسح والتعرف
أهــــــــدافها CAPMAS زيـــــــــــــــادة معـــــــــــــــــــــــدل الأداء . توفير الوقت المطلوب لإستخراج النتائج . تقلـــــــــيل الأخـــــــــــطاء البشـــــــــــرية. الإستعاضة عن مساحات التخزين الكبيرة المطلوبة للإستمارات بالتخزين الألكترونى للإستمارات وإمكانية إعادة طبع الإســــتمارة في أى وقت .
3- التمييز الآلي للبيانات المدونة بخط اليد ICR CAPMAS 3- التمييز الآلي للبيانات المدونة بخط اليد ICR إعـــــــادة تصــــــميم الإستمارات لتناسب عملية التمييز الآلى . ب- يتم عمل المســـــــــح الضوئى للإستمارات بإستخدام ماسحات ضوئية عالية السرعة. ﺠ_ تتم عمــلية التعرف الآلى للأرقـــام والحروف وربطها بحقول قاعدة البيانات .
DE – Workflow Work Flow ICR Auto Indexing Validation Rules Batch Scanning 15% Auditing Validation Rules Archiving Database Administration Rules Editing Inquiry Monitoring Reporting
4- خصائص الاستمارة الجديدة المصممة CAPMAS 4- خصائص الاستمارة الجديدة المصممة أ - وجود مربــــعـات منفـــــــــــــــصلة لمنـــــــع التداخـــل بين الحروف . ب - خاصــــية الـ Drop out Color لتحســين نتــــائج التعرف الآلى . ﺠ - التعـــــــــــــــــــــــرف عــــــــــــلى العلامـــــــــــــــــــــــــات OMR . د - إســــــــــــــتخدام الأكــــــــواد لســرعـــــــــة إدخــــــــــــال البيانات . هـ - تتضمن العديد من الإرشادات لتسهيل مهمة العداد في إستيفاء الإستمارة .
5- برنامج تصميم الإستمارات CAPMAS 5- برنامج تصميم الإستمارات واجهة رسومية سهلة إمكانية تصـــميم أى عدد من الإســــتمارات ﺠ- إمكـــانية إدراج عناصـــــــر متعــددة (خطوط , نصوص , مستطيلات, دوائر,...) لتسـهيل تصميم الإستمارات. إمكانية إدراج صـورة ملف خارجي بهــــيئات مختلفة (tif, jpg, bmp,…) هـ - إمكانية إدراج D. Barcode 1في تصــــــــــمــيم الإستمارات وطبـــــــــــاعتها . إمكانية عمل تصميم لحقول ICR و التحـــــكم فى حجـــــمها ولونها. التكامل مع برامج التصميمات المعروفة للإستمارات الحالية والتعـــامل معها .
6- الأرشفة الألكترونية CAPMAS يقوم بالخطوة الأولى في تحــــــــويل إســـــتمارات التعـــــــداد الورقـــــــــية إلى صورة إلكترونية يتكون البرنامج من جزئيين أساسيين : أولا : المسح الضوئي : أ- تتـم عمـــــلية المســــح الضوئى في صورة مجموعات من الإستمارات (Batches) لتسريع عملية التصوير الضوئي. ب- يتم التعــــرف على الإستمارة عن طريق قراءة الباركود الأحادى المتضمن في الإستمارة ((1D. Barcode ثانيا : الأرشــــــــــفة : أ- أرشفة لصور الإستمارات و تخزينها في الأرشيف . ب- الفهرسة الآلية وإمكـــــانية البحـــث عن محتويات الصور ويــــتم ذلك عن طريق التعرف على Barcode وعلى أرقام الإستمارة .
7- برنامج القارئ الآلى للإستمارات CAPMAS 7- برنامج القارئ الآلى للإستمارات وظـــــائف البرنامج: أ- التعرف الآلى على الأرقـــــام المكتـــــــــــــــوبة يــــــدويا على الإستمارات . ب- إســــــــتخدام تكنولوجيا الخـــــــــــــــــلايا العصــــــبية (Neural Network Technology ) ﺠ- التحـــــــقق من قواعــــــد المراجعة . د- التعــــــــرف على العلامــــــــــــــــــــــــــــــــات OMR . ﮬ - عرض احصائيات عن الاستمارات التي تم التعرف عليها . و- تسجيل كل العمليات التي تمت من خلال البرنامج .
8- أدوات وبرمجيات تصحيح ومراجعة البيانات CAPMAS 8- أدوات وبرمجيات تصحيح ومراجعة البيانات تصحيح الأخطاء أو الأرقام التى لم يتم التعرف عليها خلال عملية التعرف الآلى . مراجـــعة البيانات المدخلة طبقا لقواعد التعرف الآلى.
CAPMAS 9- استخدام نظام المسح الضوئى للاستمارات وبرمجيات I.C.R فى التعداد العام للسكان والإسكان 2006 قام قطاع تكنولوجيا المعلومات بعمل دراسة مستفيضة عن نظام المسح الضوئى باستخدام برمجيات I.C.R مع الاستفادة من خبرة الدول التى استخدمت هذا النظــــــام و التعـــرف على المشاكل التى واجهتها لمحاولة تلافيها . تحديد عوامل نجاح إستخدام المسح الضوئى : (1) تصميم جيد للإســتمارة . (2) استيفاء جيــد للبــيانات . (3) أفـــــــــــــراد مدربــــين . (4) أجهزة على كفاءة عالية . (5) توفـــــــــــير إحتياجات . (6) صيــــــــــــــــــــــــــانة . ﺠ- إستخدام I.C.R للتجارب القبلية الأولى والثانية باللغة الإنجليزية . د- إستخدام I.C.R في التجربة القبلية الثالثة باللغة العربية .
10- استخدام نظام ICR باللغة العربية CAPMAS 10- استخدام نظام ICR باللغة العربية قامت منظمة الاسكوا بناء على طلب من الجهاز المركزى للتعبئة العامة والإحصاء بتقديم منحة لتطوير نظام I.C.R ليتم إستــــــخدامه باللغـــــــــة العربيــــــة لأول مرة على مستوى الدول الناطقة بالعربية . قام الجهاز بعقد ورشة عمل لعرض نتائج إستخدام نظام المسح الضوئى وتمييز الأرقام والحروف العربية المكتـــــــــوبة باليد وذلك خلال الفترة من 25/1/2004 إلى 27/1/2004 . ﺠ- تم عمل تحسين لأشكال الأرقام والحروف العربية أكثر من مرة . تابع فريق عمل الجـــــهاز أثناء عملية التطــــوير مستشار معلوماتية بمكتب الإحصاء بالأمم المتحدة .
CAPMAS هـ- حضر ورشة العمل ممثلين من 9 دول عربية بالإضافة الى ممثلين من جامعة الدول العربية والمعهد العربى للتدريب والبحوث الإحصائية إلى ممثلين من منظمة الأسكوا وهيئة الأمم المتحدة . أسفرت نتائج الورشة عن إصدار قرار إستخدام اللغة العربية فى إستيفاء إستمارات التعداد وإستخدام برمجيات I.C.R باللغة العربية . تم تنفيذ التجربة القبلية الثالثة باللغة العربية وذلك بإستخدام Two engines للمفاضلة بينهم لتحديد الأفضل الذى سيتم إستخدامه فى التعداد العام 2006 وتم الحصول على نتائج جيدة وأثناء العمل تم تحسين لبعض الأرقام مثل رقم 4 ورقم 5 .
11- تصميم الاستمارات CAPMAS إستدعى إستخدام نظام المسح الضوئى إعادة تصميم للإستمارات لتتلاءم مع متطلبات النظام . وقد روعى عند تصميم الإستمارات الآتى : أ – حـــــــــــجم مناســـــب منتـــــــظم . ب – إســــتخدام وجـــهى الإســــــتمارة . ﺠ - إســــــــــــــــــتخدام ورق 100 جم . د - اللون المســـــــتخدم وتجربة درجته .
12- استخدام الماسحات الضوئية CAPMAS 12- استخدام الماسحات الضوئية الاجهزة المستخدمة : (1) ماسـحات ضوئية . (2) حاسـبات خادمـة . (3) حاسبات شخصية . كل بمواصفات مختلفة حسب كل مرحلة تستخدم بها .
ب - البرمجيات المستخدمة CAPMAS ب - البرمجيات المستخدمة (1) برمجيات خاصة بعملية المسح الضوئى . (2) برمجيات خاصة بعملية Recognition . (3) برمجيات خاصة بعملية التصحيح . (4) برمجيات التصويب الآلى . (5) برمجيات استخراج الجداول .
ثانيا : التـــرمــيز الآلى CAPMAS ثانيا : التـــرمــيز الآلى
ثانيا: الترميز الآلى CAPMAS 1 - التعريف : 2- أسلوب العمل : هو تحويل المسمى الوصفى إلى كود ليتم التعامل معه من خلال الحاسب ويتم إستخدام الترميز الآلى بغرض زيادة كفاءة وسرعة الأداء وإرتفاع مستوى دقة الترميز. 2- أسلوب العمل : أ- تحويل جميع الأدلة إلى أدلة إلكترونية. ب- إستخدام شاشات تقوم بإستدعاء الأدلة الالكترونية بطريقة سهلة. ﺠ- مراجــــــــــــعة الترمـــــــــيز آلـــــــيا. د- إستخدام الصور فى الترميز كبديل للإستمارات. ﮬ - برنامج توزيع العمل للمرمزين يتم آليا دون تدخل من المشرفين .
معالجة البيانات وإستخراج النتائج ثــالـثــا معالجة البيانات وإستخراج النتائج
المراحل 1- استلام البيانات
2- التأكد من الإطار
3 - التأكد من ترميز كل الحقول
4- نقل البيانات للمعالجة
5- ملأ الحقول الخالية
رابعا : مستــــودع البيانات (D.W.H) CAPMAS رابعا : مستــــودع البيانات (D.W.H) والتنقيب عن البيانات( mining Data )
ثالثا: مستودع البيانات (D.W.H) والتنقيب عن البيانات( mining Data ) CAPMAS 1- الأسبــــــــاب التى دعــــــــــت لإستخــــدام مستودعات البيانات والتنقيب عن البيانات : أ- وجود حجم ضخم من البيانات بالاضافة الى بيانات تاريخية من سنوات سابقة . ب- البيانات موزعة على أكثر من نظام وأكثر من قاعدة بيانات . ﺠ - الرغبة فى الحصول على تقارير تحليلية غير تقليدية من أكثر من مشروع من أجل كل ذلك كانت هناك حاجة ملحة لاستخدام نظام (D.W.H) وتـــم الإستعــــــانة ببيانات التعداد لعمل مشروع إســـــــــترشادى ليكون الأساس لنظام (mining Data) .
رابعا : التجــارب القبليـة CAPMAS رابعا : التجــارب القبليـة
رابعا : التجارب القبلية CAPMAS قام قطاع تكنولوجيا المعلومات بتنفيذ ثلاث تجارب قبلية بإستخدام نظام المسح الضوئى و برمجيات I.C.R
التجربة القبلية الأولى CAPMAS التجربة القبلية الأولى تم إستخدام اللغة الإنجليزية لإستيفاء البيانات . ﺠ- تم تجربتها بإستخدام ورق 100 جم – 80 جم . تم اعادة تصميم الإستمارات لتتلاءم مع نظام المسح الضوئى تم تنفيذها لجميع أشكال إستمارات التعداد لعدد 7500 أسرة .
التجربة القبلية الثانية CAPMAS التجربة القبلية الثانية ﮬ - إستخدام نظام التكويد الآلى . د- إستخدام اللغة الإنجليزية ﺠ -إستخدام خاصية Drop out color ب- تم اعادة تصميم الإستمارات لتقليل حجم الإستمارة أ- تم تنفيذها لجميع أشكال إستمارات التعداد لعدد 20ألف أسرة
التجربة القبلية الثالثة CAPMAS التجربة القبلية الثالثة و- إستخدام نظام التكويد الآلى . ﮪ- تعديل بعض بيانات الإستمارات د- إستخدام نظام اللامركزية بمنطقة الإسماعيلية ﺠ- إستخدام اللغة العربية للأرقام والحروف المنفصلة ب- إلغاء حقول وإضافة حقول أخرى وإلغاء جداول أ- تم تنفيذها لجميع أشكال إستمارات التعداد لعدد75 الف أسرة
دورة العمل نشرات التعداد ملف تعليمات استيفاء الاستمارات الاستمارات مراجعة مكتبية مراجعة الاستمارات بناء على تعليمات استيفائها في المناطق الفرعية مسح ضوئي استخدام الماسح الضوئي في مسح الاستمارات وادخالها كصورة Recognize تمرير برنامج ICR وادراج بيانات الاستمارات Verification البيانات التي لم يتم تمييزها من المرحلة السابقة يتم تمرير عليها مرحلة verification ملف الادلة تكويد بعض البيانات الوصفية مثل النشاط الاقتصادى والمهنة Cover(الشمول) التحقق من صحة الوحدات الادارية السواقط والتكرارات ملف بيانات سليمة قائمة الاخطاء مراجعة مراجعة الاخطاء تجميع في DB تجميع البيانات ونقلها على قاعدة البيانات في المركز الرئيسي VALIDTION التحقق من صحة العلاقة بين الحقول مع بعضها والتحقق من الشمول TABULATION برامج استخراج الجداول جدول رقم نشرات التعداد دورة العمل
خامسا : إستــــخدام نظــــــام اللامركــزية CAPMAS خامسا : إستــــخدام نظــــــام اللامركــزية فى مرحلة التجهيز الآلى للبيانات
خامسا : إستخدام نظام اللامركزية فى مرحلة التجهيز الآلى للبيانات CAPMAS خامسا : إستخدام نظام اللامركزية فى مرحلة التجهيز الآلى للبيانات يقع على عاتق الجهاز المركزى للتعبئة العامة والاحصاء مسئولية الريادة فى تطوير نظم العمل بإستخدام الأساليب التكنولوجية الحديثة وبناء قاعدة فنية وبشرية قادرة على إستيعاب الإتجاهات العالمية الحديثة فى تكنولوجيا المعلومات ونقـــــل الخبرة إلى القطاعات المختلفة بالدولة .
أهداف نظام اللامركزية CAPMAS يعتـــــــبر مشـــــروع التعـــــداد العام للســــــكان والاسكان والمنشآت من المشروعات الرئيسية التى يمكن من خلالها تحقيق هذه الأهداف : أ- خلق جيل جديد من مستخدمى الحاسبات من شباب الخرجين بالمحافظات . ب- انشاء بنية أساسية لقطاع تكنولوجيا المعلومات بالمناطق . ﺠ- خـلــــــــق كوادر فنـــــــية بالمناطق . د- خلق فرص عمل للشباب بالمحافظات .
متطلبات نظام اللامركزية CAPMAS احتياجات فنيــة احتياجات بشــرية احتياجات إداريـة
نقاط تم أخذها فى الاعتبار عند اتخاذ قرار تطبيق اللامركزية نقاط تم أخذها فى الاعتبار عند اتخاذ قرار تطبيق اللامركزية CAPMAS توفير الأجهزة وشبكات الاتصال المناسبة . توفير فريق العمل المتمتع بالمهارات اللازمة . خطة لتنسيق أنشطة معالجة البيانات . نوعية بيانات التعداد وتوحيدها على المستوى القومى . الموقع الجغرافى لتسهيل وصول الاستمارات . التكاليف. عدد المواقع ( عدد ملائم يمكن السيطرة عليه ومتابعته) . الأمن ( أمن بيانات – أمن مواقع ) . التدريب للكوادر المتخصصة. مدى توفر خدمات المساندة .
تحديد مهــام المناطق اللامركزية CAPMAS المقر الرئيسى بالجهاز المركزى للتعبئة العامة والإحصاء * اجراء برامج التصويب الآلى * استخراج النتائج * المراجعة المكتبية * ادخال البيانات بالمسح الضوئى * تكويد البيانات آليا المناطق اللامركزية
7- التحديات و الدروس المستفادة : CAPMAS 7- التحديات و الدروس المستفادة : ظهرت بعض المشاكل أثناء عملية الأعداد والتنفيذ وذلك لكل من المراحل التالية : تصميم الإستمارات : (1) جــــــــــــــــــــــــــــودة الورق. (2) جــــــــــودة الطـــــــــــــــباعة. (3) خاصـــــية إســـقاط الألـــوان .
ب - إنتقاء الماسحات : CAPMAS تختلف أنواع الماسحات حسب الآتى: (1) الســــرعة ( وتتوقــف على عوامل كثيرة ) . (2)إمكانية التعامل مع خاصية التغذية الآلية للورق. (3) ســــــــــــــــــــــــــــــمــــــــــــــــــــــــك الورق.
جـ - إختيار برمجيات المسح الضوئى: CAPMAS جـ - إختيار برمجيات المسح الضوئى: (1) أنواع عديدة متــــــــــاحة للبرمجيات تختلف فى درجة دقتها . (2) إستخدام نوعـــــيات مختلفة من البرمجيات لتحديد الأفضلية . (3) إستخدام برمجيات مساعدة لتتلاءم مع نوعية إستمارات التعداد .
د - الإختلاف فى خط اليد : CAPMAS (1) العدد الهائل المستخدم من العدادين وإختلاف خطوط الأيدى . (2) تحســـــــــــــــــين عمــــــــــــــــلية التمـــــــــــــــــــــــــــــييز . (3) تخزين أكبر عدد ممكن من الأشكال والأرقام والحروف المكتوبة بخط اليد .
هـ - تجهيز كل المخرجات قبل تصميم قاعدة البيانات و - برامج تنقية الأخطاء يجب ان تغطى كل علاقات الحقول ى - اعتبارالتجربةعمل فعلى للتعداد
شكرا لحسن استماعكم CAPMAS ويأمل قطاع تكنولوجيا المعلومات أن يكون إستخدام التكنولوجيا الحديثة في مجال التجهيز الآلي للبيانات موجها نحو التوصل إلى ناتج يستوفي إحتياجات مستخدمي البيانات في الوقت المناسب وبدقة عالية شكرا لحسن استماعكم