تنظيف البيانات في مقاطعة جنوب آدمز

تأسست منطقة المياه والصرف الصحي بمقاطعة جنوب آدامز (SACWSD) في عام 1953 بموجب أحكام منطقة ولاية كولورادو الخاصة لخدمة المنطقة المعروفة الآن باسم المدينة التجارية. على الرغم من أن الإدارة تخدم سكان المدينة التجارية، إلا أنها كيان منفصل وهي حاليًا أكبر منطقة مشتركة للمياه والصرف الصحي في ولاية كولورادو، حيث تغطي 65 ميلًا مربعًا وتخدم ما يقرب من 50000 عميل.

يعتمد فريق نظم المعلومات الجغرافية في SACWSD على مصادر بيانات متعددة، بما في ذلك العمل الميداني لديهم، لتجميع ثلاث مجموعات بيانات منفصلة تغطي شبكات مياه الشرب والري والصرف الصحي. يستخدم الفريق برنامج ArcGIS لدعم توسيع الشبكات وصيانتها واستبدالها وتطويرها. بالإضافة إلى ذلك، تتم مشاركة البيانات مع تطبيقات الجهات الخارجية، مثل نظام إدارة الأصول المستخدم في المنطقة (لطلبات الخدمة اليومية وأوامر العمل المكتملة) وبرنامج نمذجة المياه، الذي له متطلباته الخاصة. لذا، فإن الحصول على بيانات موثوقة أمر مهم للغاية.

في خريف عام 2016، كانت منطقة المياه والصرف الصحي قد أكملت لتوها جمع البيانات باستخدام نظام تحديد المواقع العالمي (GPS). سرعان ما أدرك مشرف نظم المعلومات الجغرافية كليف سوليفان وفني نظم المعلومات الجغرافية مارك ديكمان أن جودة البيانات تختلف بدرجة كبيرة. من المحتمل أن تقلل البيانات غير الدقيقة من الكفاءة من خلال تقديم مواقع أصول غير صحيحة، وتجعل التكامل مع أنظمة الأعمال الأخرى أمرًا صعبًا. بينما تساعد البيانات الأفضل أيضًا على تحسين خدمة العملاء من خلال مهام عمل دقيقة واستجابة محسنة للطوارئ.

بدأت مهمة تنظيف البيانات كجهد طويل ومضجر. كان على سوليفان وديكمان ومتدرب معهما مراجعة كل معلم يدويًا للتأكد من الدقة المكانية وصحة جداول البيانات. كان هذا النوع من عمليات مراقبة الجودة محدودًا من حيث أنه كان استكشافيًا وليس شاملاً.

لاحظ سوليفان "فحص صحة البيانات" من Esri في جدول أعمال مؤتمر قادم. وقد علم أن ArcGIS Data Reviewer، وهو أحد ملحقات ArcGIS، يمكنه تسريع سير المهمة. وبالإضافة إلى ملحق ArcGIS، اشترت المنطقة خدمات استشارية في الموقع وعملت مع أحد مهندسي البيانات الجغرافية في Esri لاستخدام Data Reviewer وتسهيل عملية نقل المعرفة.

استخدم أعضاء فريق نظم المعلومات الجغرافية في SACWSD ملحق Data Reviewer في البداية للحصول على لقطة شاملة للبيانات لمساعدتهم على تحديد أي من مئات عمليات التحقق الممكنة من البيانات ستؤدى أولاً.

قال سوليفان: "لقد كان مستشار Esri صبورًا ومفصلًا للغاية في توضيح كيفية استخدام المنتج [لنا]. لقد غطينا الكثير في اليومين اللذين كان فيهما المستشار في الموقع. لقد كانت تجربتنا مع خدمات Esri المتخصصة ممتازة".

وذكر ديكمان: "لقد سمح العمل مع Esri لموظفي SACWSD بإحراز تقدم سريع. في حين أن بعض عمليات الفحص لم تكن بحاجة إلى الشرح، فقد احتاج الموظفون إلى مساعدة الخبراء لفهم المنطق الكامن وراء تكوين عمليات الفحص الأكثر تقدمًا وجعلهم يعملون بشكل صحيح ". يتم الآن جمع أفضل الممارسات في قالب وإتاحتها لأي شخص.

ساعد Data Reviewer في توحيد عملية مراقبة الجودة لتحديد الأولويات واكتشاف الأخطاء وتتبع الإجراءات التصحيحية. في غضون ثلاثة أشهر، تم تنظيف إحدى مجموعات البيانات بالكامل. كما تم الانتهاء من التعديلات المكانية على مجموعتي البيانات الأكبر حجمًا بعد ذلك بوقت قصير. كان التركيز الأولي هو العثور على المعالم غير متصلة. ضمنت فحوصات الاتصال توصيل جميع المعالم بشكل صحيح حتى يتم تشغيل برنامج نمذجة المياه بنجاح وحتى يتم تقديم نتائج دقيقة. بعد ذلك، ولكي يتم إنشاء طلبات الخدمة وأوامر العمل بشكل صحيح داخل برنامج إدارة الأصول، يجب ملء معرف كل أصل من الأصول ويجب ألا يحتوي على قيم مكررة. تم تحديد هذه باستخدام فحص المعرف الفريد.

لعبت Esri أيضًا دورًا فعالًا في مساعدة المنطقة على بناء قواعد بياناتها وتقديم المشورة بشأن نمذجة البيانات مثل استخدام المجالات بدلاً من الأنواع الفرعية. عملت المنطقة بشكل تعاوني مع Esri لبناء مخطط بيانات أصبح الآن مفهومًا للمستخدمين داخل المؤسسة.

قبل الحصول على Data Reviewer وإشراك مساعدة Esri، كان سوليفان وديكمان يبحثان في سنوات من عمليات الفحص اليدوي للمعالم أثناء قيامهما ببناء قاعدة البيانات الخاصة بهما. الآن، فقط ديكمان يعمل على هذه المهمة، وهو بالفعل سابق للموعد المحدد بستة أشهر. بحلول الوقت الذي تكتمل فيه مجموعات البيانات الثلاث، يتوقعون أن يكونوا قد وفروا ما يزيد عن مجهود موظف لعام كامل.

مع استمرار تطوير البنية التحتية الجديدة، تخطط المنطقة لاستخدام ArcGIS Data Reviewer لأداء مهام مراقبة الجودة على البيانات الجديدة وكذلك لصيانة بياناتها الحالية.