IntelliVision | نظام مساعدة ذكي للمكفوفين باستخدام ESP32-CAM و نموذج FOMO

قمت بالعمل في تصميم وتطوير جهاز ذكي قابل للارتداء لمساعدة المكفوفين على التعرف على البيئة المحيطة بهم والتنقل باستقلالية باستخدام تقنيات الذكاء الاصطناعي والرؤية الحاسوبية. يعتمد النظام على كاميرا ESP32-CAM ونموذج الذكاء الاصطناعي FOMO Object Detection للتعرّف على الأجسام في الوقت الحقيقي، ثم تحويل هذه المعلومات إلى تنبيهات صوتية عبر البلوتوث، بالإضافة إلى تنبيه اهتزازي للحالات الطارئة. دوري في المشروع: توصيل وبرمجة ESP32-CAM مع Arduino Uno تدريب نموذج FOMO على صور مخصصة واستخراج النموذج بصيغة متوافقة مع Arduino (TensorFlow Lite) كتابة الكود المسؤول عن التقاط الصور ومعالجتها وتشغيل النموذج ربط النظام بسماعة بلوتوث لإخراج الصوت الناتج عن التعرف على الأجسام دمج محرك الاهتزاز للتنبيهات الطارئة اختبار دقة النموذج في ظروف تصوير مختلفة وتحليل النتائج آلية عمل الجهاز: التقاط صورة عبر ESP32-CAM تحليل الصورة باستخدام نموذج FOMO تحديد نوع ومكان الجسم تحويل النتائج إلى صوت يُسمع عبر سماعة بلوتوث تشغيل الاهتزاز عند وجود عائق أو خطر نتائج المشروع: تكلفة الجهاز أقل من 300$ مقارنة بمنتجات تصل إلى 6000$ متوسط دقة النموذج 72% دقة 100% في الصور الواضحة و 66% في الصور غير الواضحة قدرة النظام على التعرف على عدة أجسام في نفس الوقت جهاز صغير قابل للارتداء على اليد أو النظارة التقنيات المستخدمة: ESP32-CAM — Arduino Uno — FOMO Model — TensorFlow Lite — Computer Vision — Bluetooth Audio — Vibration Motor — Arduino IDE هذا المشروع يوضح القدرة على دمج الذكاء الاصطناعي مع الأنظمة المدمجة (Embedded Systems) لتقديم حل عملي منخفض التكلفة يحل مشكلة حقيقية في المجتمع.