بناء مستودعات بيانات قوية لتخزين وتحليل كميات ضخمة من البيانات لمدرسة ثانوية باستخدام Azure Cloud

بناء مستودعات بيانات قوية لتخزين وتحليل كميات ضخمة من البيانات لمدرسة ثانوية باستخدام Azure Cloud بناء مستودعات بيانات قوية لتخزين وتحليل كميات ضخمة من البيانات لمدرسة ثانوية باستخدام Azure Cloud بناء مستودعات بيانات قوية لتخزين وتحليل كميات ضخمة من البيانات لمدرسة ثانوية باستخدام Azure Cloud
تفاصيل العمل

قمت بتنفيذ نظام معالجة البيانات الآلي لمدرسه ثانويه حيث قمت بجمع البيانات ومعالجتها ونقلها الي Database سيقوم النظام بتنظيف البيانات ومراجعتها، ثم نقل البيانات المعالجة إلى Azure cloud ثم بعد التعديل اقوم بحفظ الداتا في ملفات اكسيل . -- خطوات تنفيذ المشروع: 1. تصميم مستودع البيانات: - إنشاء مستودع بيانات مركزي (باستخدام *Azure Synapse* أو *SQL Data Warehouse*) لتخزين البيانات الخام والمعالجة. 2. إنشاء خطوط أنابيب البيانات: - استخدام *Azure Data Factory* لأتمتة استيعاب البيانات كل خمس دقائق. - إعداد المحفزات لجمع البيانات ومعالجة الدفعات الواردة الجديدة. 3. معالجة البيانات باستخدام SSIS: - استخدم *خدمات تكامل SQL Server (SSIS)* لإنشاء حزم تعمل على أتمتة عملية ETL. - قم بتضمين *حاوية حلقة Foreach* لتكرار البيانات والتحقق من صحتها ومعالجة البيانات المطلوبة مع تصفية المعلومات غير ذات الصلة. 4. أتمتة نقل الملفات: - بعد المعالجة، يتم نقل الملفات تلقائيًا من مجلد المصدر إلى مجلد *الملفات المعالجة* باستخدام مهام نظام ملفات SSIS. 5. المراقبة والتنبيهات: - قم بتنفيذ المراقبة باستخدام *Azure Monitor* أو تسجيل SSI

مهارات العمل
شارك
بطاقة العمل
تاريخ النشر
منذ 7 أشهر
المشاهدات
188
المستقل
Yara Mohammed
Yara Mohammed
مهندس بيانات
طلب عمل مماثل
مهارات العمل
شارك
مركز المساعدة