مشروع هندسة بيانات الطقس – إنشاء منصة ETL متكاملة

أنا مطورة بيانات قمت ببناء مشروع منصة هندسة بيانات الطقس لإنشاء نظام ETL متكامل لجمع وتحويل وتحميل بيانات الطقس بشكل أوتوماتيكي يومياً، مع إمكانية تحليل البيانات لإنتاج رؤى دقيقة وقابلة للاستخدام في الأعمال. تفاصيل العمل المطلوب: تطوير سكريبتات Python لسحب البيانات من عدة APIs للطقس بشكل دوري. تصميم مستودع بيانات PostgreSQL لتخزين البيانات بشكل منظم ومرن. تنفيذ عمليات تحويل وتنظيف البيانات باستخدام DBT Core ونماذج ELT SQL. أتمتة العمليات بالكامل باستخدام Apache Airflow لضمان التشغيل اليومي دون تدخل بشري. إنشاء تقارير SQL تعرض مؤشرات دقيقة حول بيانات الطقس. المهارات المطلوبة: Python | SQL | PostgreSQL | DBT Core | Apache Airflow | APIs النتيجة المتوقعة: منصة ETL جاهزة لتشغيل يومي تلقائي، مع بيانات نظيفة وقابلة للتحليل وإمكانية توسيع المشروع مستقبليًا.