Real Time Object Detection and Recognition for Blind People

Abstract

يساعد مشروع النظارات الذكية المكفوفين وضعاف البصر الناس علي الكشف عن والاعتراف الاداات المكتبية من حولهم ، والتي يرون من خلال الصغيرة الكاميرا ، يتم إصلاح الكاميرا علي النظارات. تساعد هذه التقنية في توفير الوظائف الفرص للمكفوفين ، وخاصه مكتب العمل من خلال رسالة صوتيه أرسلت إلى سماعه وضعت علي الاذن العمياء لمساعدته/لها البحث عن العناصر المختلفة بسهوله و مستقل. وهذا يوفر الوقت والجهود.

هدفنا هو خلق نظام ذكي ، تقليد العين البشرية ، والتي تنقل مشاهد مختلفه والصور إلى الدماغ. الدماغ بدوره يحلل الصور أو المشاهد ، واستنادا إلى المعلومات المخزنة سابقا ، والكائنات المحيطة هي تحديد. لهذا الغرض ، ونحن نستخدم جهاز صغير الذي ينفذ مماثله الدماغ البشري ، ودعا "التوت بي " ؛ هو جهاز صغير يحلل الصور ومشاهد مع مساعده من الكاميرا ، والتي تتحرك الصور إلى الصغيرة الجهاز. ثم ، فان عمليه التحليل يبدا من خلال خوارزميات معقده طويلة المعروفة باسم خوارزميات الشبكة العصبية. هذه الشبكة يحلل الصور إلى أجزاء من أجل مقارنتها مع الخصائص الأكثر اهميه للكائنات في الصور المتعلقة بقاعده البيانات ، والتي من خلالها يتم مقارنه الصور. عندما التاكد من ان الخصائص تتطابق مع المعادلات الرياضية المبرمجة في لغة بيثون ، يتم الكشف عن الكائنات في الصورة. وأخيرا ، فان يتم استدعاء الصوت من كل أداه في قاعده البيانات ، ويتم إرسال رسالة لنقول للمكفوفين حول الاداات امامه/لها.

The Smart Glasses project helps blind and visually impaired people to detection and recognition the office tools around them, which they see through a small camera, the camera is fixed on the glasses. This technique helps providing job opportunities for the blind, especially office work through a voice message sent to an earphone placed on the blind ear to help him/her find various items easily and independently. This saves time and efforts.

Our aim is to create an intelligent system, imitating the human eye, which transfers different scenes and images to the brain. The brain in turn analyzes the images or scenes, and based on previously stored information, the surrounding objects are identified. For this purpose, we use a small device that performs similar to the human brain, called "Raspberry Pi"; it is a small device that analyzes the images and scenes with the help of the camera, which moves the images to the small device. Then, the process of analysis begins through long complex algorithms known as the neural network algorithms. This network analyzes the images to parts in order to compare them with the most important characteristics of the objects in the images related to the database, through which the images are compared. When ensuring that the characteristics match the mathematical equations programmed in the language of the Python, the objects in the image are detected. Finally, the sound of each tool in the database is called, and a message is sent to tell the blind about the tools in front of him/ her.