نظرة عامة على الكتالوج

Catalog Overview

تعريف بمركز Catalog في Validatar وقدراته الأساسية في اكتشاف البيانات وتقييم الثقة وتغطية الاختبارات وإدارة البيانات الوصفية.

لوحة المتابعة

نظرة عامة

يُعد الـ Catalog المركز الرئيسي لاستكشاف وفهم بيئة بياناتك. فهو يوفر عرضًا هرميًا لجميع مصادر البيانات، والمخططات (schemas)، والجداول، والأعمدة، مما يجعل عملية اكتشاف البيانات أمرًا سهلاً وفعالًا.

تشمل القدرات الأساسية لهذا الكتالوج ما يلي:

Data Discovery: تصفح البيانات الوصفية على أي مستوى، من مصدر البيانات وصولاً إلى الأعمدة الفردية.
Trust Scoring: عرض درجات الثقة ومقاييس الجودة لفهم مدى موثوقية البيانات.
Test Coverage: تحديد الفجوات في الاختبار ومعرفة أي الكائنات لديها اختبارات مرتبطة بها.
Data Profiling: الوصول إلى إحصاءات التوصيف (profile statistics) ورؤى جودة البيانات.
Metadata Management: إضافة سياق العمل عبر الأسماء الودّية (friendly names) والأوصاف والوسوم (tags).

التنقل في الكتالوج

يُنظَّم الكتالوج في هيكل هرمي يمكنك التنقل فيه إما عبر عرض الشجرة (tree view) الموجود على اليسار أو عبر النقر داخل شبكة البيانات (data grid).

مستوى مصدر البيانات (Data Source Level)

يعرض عرض الكتالوج الرئيسي جميع مصادر البيانات المتصلة مع إحصاءات ملخصة عنها.

شكل 1: مستوى مصدر البيانات (Data Source Level)

Column	Description
Data Source	اسم اتصال مصدر البيانات
Schemas	عدد المخططات (schemas) في مصدر البيانات
Tables	عدد الجداول والعروض (views) في مصدر البيانات
Average Trust Score	متوسط درجة الثقة عبر جميع الجداول
Average Quality Score	متوسط درجة جودة البيانات
Average Coverage Score	متوسط نسبة تغطية الاختبار
# Trusted Tables	عدد الجداول الموسومة كموثوقة
# Untrusted Tables	عدد الجداول الموسومة كغير موثوقة
# Unknown Tables	عدد الجداول التي لا تحمل تصنيف ثقة

مستوى المخطط (Schema Level)

انقر على مصدر بيانات لعرض مخططاته (schemas). يعرض كل مخطط مقاييس مجمّعة للجداول التي يحتويها.

Column	Description
Name	اسم المخطط
Tables	عدد الجداول في المخطط
Average Trust Score	متوسط درجة الثقة للجداول في هذا المخطط
Average Quality Score	متوسط درجة الجودة للمخطط
Average Coverage Score	متوسط تغطية الاختبار للجداول في هذا المخطط
# Trusted Tables	عدد الجداول الموثوقة
# Untrusted Tables	عدد الجداول غير الموثوقة
# Unknown	عدد الجداول التي لا تحمل تصنيف ثقة

مستوى الجدول (Table Level)

شكل 2: مستوى الجدول (Table Level)

توغّل داخل مخطط ما لعرض جميع جداوله مع مقاييس تفصيلية.

Column	Description
Schema	المخطط الذي يحتوي على الجدول
Name	اسم الجدول
Trust Score	درجة ثقة الجدول (0-5 نجوم)
Impact Rating	تصنيف الأثر التجاري للجدول
Trusted Table	ما إذا كان الجدول موسومًا كموثوق
Rows	عدد الصفوف من آخر عملية توصيف (profile)
Columns	عدد الأعمدة في الجدول
Passing	عدد الاختبارات الناجحة المرتبطة بهذا الجدول

من مستوى الجدول، يمكنك القيام بما يلي:

Bulk Edit: تحديث البيانات الوصفية لعدة جداول دفعة واحدة.
Add Test: إنشاء اختبار جديد مرتبط بالجدول المحدد.
Run Profiles: تنفيذ عملية توصيف البيانات (data profiling) على الجداول المحددة.

شكل 3: مستوى الجدول (Table Level)

مستوى العمود (Column Level)

انقر على جدول لعرض أعمدته مع إحصاءات التوصيف ونتائج الاختبارات.

Column	Description
Name	اسم العمود
Data Type	نوع بيانات العمود
Nulls	عدد ونسبة القيم الفارغة (null)
Uniqueness	عدد ونسبة القيم الفريدة
Min	القيمة الدنيا (للأعمدة الرقمية أو التاريخية)
Max	القيمة العليا (للأعمدة الرقمية أو التاريخية)
Passing Tests	عدد الاختبارات الناجحة لهذا العمود
Failing Tests	عدد الاختبارات الفاشلة لهذا العمود
Erroring Tests	عدد الاختبارات التي انتهت بخطأ لهذا العمود

ميزات إضافية

شكل 4: ميزات إضافية

يوفّر كل مستوى في الكتالوج علامات تبويب إضافية لتحليل أعمق:

Data Source Info / Table Info: عرض وتعديل خصائص البيانات الوصفية.
Preview: الاطلاع على عينة من بيانات الجداول.
Tests: عرض جميع الاختبارات المرتبطة بالكائن.
Lineage: تصور علاقات مسار البيانات (data lineage).
Profile History: مراجعة إحصاءات التوصيف السابقة.
Event History: تتبع التغييرات والأنشطة.

نصائح

استخدم مربع البحث Search للعثور بسرعة على كائنات محددة بالاسم.
انقر على Export to Excel لتنزيل العرض الحالي للتحليل غير المتصل.
استخدم Select Columns لتخصيص الأعمدة المعروضة في الشبكة.
يتيح لك شجرة التنقل الجانبية التنقل السريع بين مصادر البيانات دون فقدان السياق.

السابقإعداد التنميط — قوالب Python التالي التنقل في الكتالوج