بدأ ذراع آلي مصمم للحصاد الآلي للفاكهة في إتلاف جذوع الأشجار بشكل منهجي في مزرعة ذكية. فشل نظام الرؤية المجسمة للروبوت، المسؤول عن حساب المسافة الدقيقة إلى الفروع، بشكل خطير. أثناء الخبرة الفنية، تم تحديد أن خريطة التباين الناتجة عن الكاميرات تحتوي على تشوهات بصرية. كان الهدف من التحليل الجنائي هو تحديد ما إذا كان انعكاس الشمس على الأوراق قد خدع خوارزمية اكتشاف العمق.
تحليل جنائي لخريطة التباين باستخدام MATLAB 🛠️
تألفت الخطوة الأولى من الخبرة من استخراج الإطارات الخام من الكاميرات المجسمة للروبوت. باستخدام MATLAB ومجموعة أدوات الرؤية الحاسوبية الخاصة به، تم إعادة بناء خريطة التباين للمشهد. أظهرت النتائج مناطق ذات قيم تباين شاذة، خاصة في المناطق التي كانت فيها الأوراق شديدة اللمعان. أدى الانعكاس الشمسي إلى توليد بكسلات مشبعة فسرتها خوارزمية المطابقة المجسمة على أنها كائنات على عمق أقل بكثير من العمق الحقيقي. تسبب هذا في أن الذراع الآلي، عند حساب مسار الإمساك، برمج حركة ماسكة قريبة جدًا من الجذع، مما أدى إلى الاصطدام باللحاء. باستخدام SolidWorks، تم نمذجة حركيات الذراع وتصدير الهندسة إلى MeshLab لتنظيف شبكة نقاط الاصطدام، مما أكد التصادم المنهجي في الإحداثيات الخاطئة.
حلول عملية ومحاكاة في Unity 🎯
لتجنب الحوادث المستقبلية، يُقترح خطان للتصحيح. الأول هو تركيب مرشحات استقطابية على عدسات الكاميرات المجسمة لتقليل الانعكاسات المرآوية للشمس. الثاني، الأكثر تقدمًا، هو تنفيذ شبكة عصبية للعمق الأحادي كنسخة احتياطية، مدربة على تجاهل تشوهات اللمعان. للتحقق من صحة هذه الحلول، تم إعادة إنشاء السيناريو الكامل في Unity، ومحاكاة ضوء الشمس الديناميكي وسلوك الذراع الآلي. أظهرت المحاكاة أنه مع تفعيل المرشح الاستقطابي الافتراضي، ظلت خريطة التباين مستقرة وقام الروبوت بحصاد الفاكهة دون إتلاف الجذع. تعزز دراسة الحالة هذه الحاجة إلى دمج أنظمة رؤية قوية ضد الظروف البيئية المعاكسة في الروبوتات الزراعية.
كيف يمكن للخبرة ثلاثية الأبعاد تحديد ما إذا كان خطأ العمق في روبوت الحصاد ناتجًا عن معايرة خاطئة لمستشعر LiDAR أو عن تفسير خاطئ لهندسة الجذع في نموذج الرؤية الاصطناعية
(ملاحظة: محاكاة الروبوتات ممتعة، حتى يقرروا عدم اتباع أوامرك.)