روبوت كشف الأغراض Object Detection Robot

المشروع عبارة عن روبوت ذكي قادر على التعامل مع:

  •  العجز البشري في الحصول على المعلومات
  • الأماكن التي لا يمكن الوصول لها
  • الكوارث الطبيعية
  • الاحتياجات الخاصة

 يعتمد على خوارزميات الـتعلم العميق Deep learning في اكتشاف وتصنيف الأشكال في الصورة الملتقطة من كاميرا باستخدام SSD-lite model ومجموعة البيانات COCO وOpenCV وTensorflow وNumpy. واستخدم للتحكم بالنظام الروبوتي  Raspberry pi3. يتم التحكم بالروبوت بطريقتين:

  • النمط اليدوي:

يتم التحكم به عن طريق لوحة المفاتيح من خلال اتصال شبكي لاسلكي (socket) بين المتحكم والروبوت والذي يستخدم لإرسال الأوامر من المتحكم إلى الروبوت بالإضافة إلى ارسال تدفق فيديوي (Video Streaming) من الروبوت إلى المتحكم لإعطاء صورة واضحة عن البيئة المحيطة بالروبوت.  يتم التحكم بالروبوت بطريقتين:

  • النمط اليدوي:

يتم التحكم به عن طريق لوحة المفاتيح من خلال اتصال شبكي لاسلكي (socket) بين المتحكم والروبوت والذي يستخدم لإرسال الأوامر من المتحكم إلى الروبوت بالإضافة إلى ارسال تدفق فيديوي (Video Streaming) من الروبوت إلى المتحكم لإعطاء صورة واضحة عن البيئة المحيطة بالروبوت.  

  • نمط آلي:ريعتمد هذا النمط على تلقي الأوامر الصوتية ليقوم بتنفيذها بشكل آلي وبدون تدخل من المتحكم حيث يقوم بالتقاط الصور المحيطة به ومعالجتها وقراءة العناصر التي تم استخلاصها من الصور والتي يمكن استخدامها لإعطاء صورة واضحة عن البيئة المحيطة للمتحكم. كما وتم تزويد الروبوت بحساس أشعة فوق صوتية Ultrasonic لتجنب العوائق أثناء الحركة وتغيير المسار.

اعداد:

حلا عبد الحي البهلول

حنان طعمة

حبيب نعمان قنجراوي

 اشراف :

د. سامر سليمان

م. سامي أبوبالا

صورة المشروع: