حوّل الباحثون في جامعة ماريلاند انعكاسات العين إلى مشاهد ثلاثية الأبعاد (يمكن التعرف عليها إلى حد ما). يعتمد العمل على Neural Radiance Fields (NeRF) ، وهي تقنية ذكاء اصطناعي يمكنها إعادة بناء البيئات من الصور ثنائية الأبعاد.
على الرغم من أن نهج انعكاس العين لا يزال أمامه طريق طويل قبل أن يولد أي تطبيقات عملية ، فإن الدراسة (التي أبلغت عنها شركة Tech Xplore لأول مرة) تقدم لمحة رائعة عن تقنية يمكن أن تكشف في النهاية عن بيئة من سلسلة من صور السيلفي البسيطة.
استخدم الفريق انعكاسات دقيقة للضوء الملتقط في عيون الإنسان (باستخدام صور متتالية تم التقاطها من مستشعر واحد) لمحاولة وصف البيئة المباشرة للشخص. لقد بدأوا بالعديد من الصور عالية الدقة من موضع كاميرا ثابت ، والتقطوا شخصًا متحركًا ينظر إلى الكاميرا ، ثم قاموا بتكبير الانعكاسات ، وعزلهم ، وحساب مكان نظر العينين إلى الصور.
تظهر النتائج (هنا المجموعة الكاملة في الرسوم المتحركة) إعادة بناء بيئية يمكن تمييزها بشكل لائق عن عيون الإنسان في بيئة خاضعة للرقابة ، والمشهد الذي تم التقاطه باستخدام عين اصطناعية أنتج مشهدًا أكثر إثارة للإعجاب يشبه الحلم.
ومع ذلك ، فإن محاولة لنمذجة انعكاسات العين من مقاطع الفيديو الموسيقية لمايلي سايروس وليدي غاغا أنتجت فقط نقاطًا ضبابية يمكن أن تخمنها فقط شبكة LED وكاميرا على حامل ثلاثي القوائم – مما يوضح مدى بُعد التكنولوجيا عن الاستخدام في العالم الحقيقي.
تغلب الفريق على عقبات كبيرة لإعادة بناء المشاهد البدائية والغامضة. على سبيل المثال ، تُدخل القرنية “ضوضاء متأصلة” تجعل من الصعب فصل الضوء المنعكس عن النسيج المعقد لقزحية الإنسان.
لمعالجة هذا الأمر ، أدخلوا تحسين القرنية (تقدير موضع القرنية واتجاهها) وأنسجة القزحية (استخراج السمات الفريدة لقزحية الفرد) أثناء التدريب. أخيرًا ، ساعد فقدان تنظيم النسيج الشعاعي (طريقة التعلم الآلي التي تحاكي القوام بشكل أكثر سلاسة من المواد المصدر) في عزل المشهد المنعكس وتحسينه.
على الرغم من التطورات والحلول الذكية ، لا تزال هناك عقبات كبيرة. كتب المؤلفون: “إن النتائج الحالية التي توصلنا إليها في العالم الحقيقي هي من” إعداد معمل “، مثل التقاط صورة مكبرة لوجه الشخص ، وأضواء المنطقة لإلقاء الضوء على المشهد ، والحركة المتعمدة للشخص”.
نعتقد أن المزيد من الإعدادات غير المقيدة لا تزال تمثل تحديًا (على سبيل المثال ، مؤتمرات الفيديو مع حركة رأس طبيعية) نظرًا لانخفاض دقة المستشعر والنطاق الديناميكي وضبابية الحركة. بالإضافة إلى ذلك ، يلاحظ الفريق أن افتراضاته العامة حول نسيج قزحية العين قد تكون مبسطة للغاية. واسع جدًا بحيث لا يمكن تطبيقه ، خاصةً عندما تدور العيون عادةً على نطاق أوسع مما في هذا النوع من الإعدادات الخاضعة للرقابة.
ومع ذلك ، يرى الفريق أن تقدمهم يمثل علامة فارقة يمكن أن تحفز الاختراقات المستقبلية. “من خلال هذا العمل ، نأمل في إلهام الاستكشافات المستقبلية التي تستفيد من الإشارات المرئية العرضية وغير المتوقعة للكشف عن معلومات حول العالم من حولنا ، مما يوسع آفاق إعادة بناء المناظر الطبيعية ثلاثية الأبعاد.” في حين أن الإصدارات الأكثر نضجًا من هذا العمل يمكن أن تفرز بعض عمليات التطفل المخيفة وغير المرغوب فيها على الخصوصية ، على الأقل يمكنك أن تشعر بالراحة مع العلم أن إصدار اليوم يمكن أن يصنع دمية كيربي بشكل غامض فقط حتى في ظل أفضل الظروف.
