Вчені перетворили тремтячий у руці смартфон на камеру, здатну заглянути за кут
22 мая 2026
Дослідники з Масачусетського технологічного інституту (MIT) продемонстрували, що звичайний споживчий LiDAR — рівня смартфона або недорогого датчика для комп'ютерного зору — можна перетворити на примітивну камеру, яка буквально дозволить заглянути за кут. Ефект базується на тремтінні рук і відсутності стабілізації камери — чим сильніше тремтіння, тим точніше прихована від очей картинка.
Джерело зображень: MIT
Візуалізація об'єктів поза прямою видимістю — важливе завдання для машинного зору. Поки що це в основному лабораторні експерименти, оскільки подібні рішення спираються на потужні лазери та надточну калібровку з надчутливими датчиками. Вчені з MIT запропонували інший підхід — вони використали слабкий, шумний, але масовий ToF-LiDAR і компенсували його недоліки алгоритмами багатокадрової обробки, які природним чином виникають, коли камера тремтить у руках і позбавлена стабілізації зображення.
Базовий принцип роботи «камери за кутом» ґрунтується на реєстрації вторинних відображень променя від невидимого об'єкта. Для цього не обов'язково безпосередньо світити на прихований об'єкт. Світло на нього і від нього може відбиватися від навколишніх стін і інших об'єктів і таким же чином повертатися до камери. Нововведенням стала реєстрація безлічі кадрів зі слабким переотраженим сигналом, які робляться під час нестабілізованої зйомки. Це той випадок, коли чим гірше, тим краще. Потім за серією кадрів відновлюється зображення прихованого об'єкта, для чого використовуються алгоритми прогнозування.
Таким чином, головна ідея дослідників з MIT — не боротися з рухом камери, а використовувати його як джерело додаткової просторової вибірки. Автори називають це MAS — «вибірка апертури, індукована рухом». За змістом це близько до синтетичної апертури: коли смартфон або датчик трохи зміщується, він отримує слабкі вимірювання з різних точок, а алгоритм об'єднує їх у більш інформативну картину. У моделі MAS форма прихованого об'єкта, його рух і положення камери зводяться до єдиної вимірювальної методики з подальшим моделюванням з використанням просторово-часового імпульсного відгуку сцени (STIR).
Під час демонстрації система виконувала три класи завдань: грубу 3D-реконструкцію прихованих об'єктів, відстеження одного або кількох об'єктів за межами прямої видимості та локалізацію камери з використанням прихованих об'єктів як орієнтирів. У всіх випадках система працювала з непоганим результатом, який можна розвивати.
Якщо вчені зможуть створити практичне рішення, це значно розширить можливості смартфонів, окулярів доповненої реальності, машинного зору роботів і дронів. Але технологія поки не дає «чіткої картинки за кутом»: роздільна здатність низька, сцени повинні бути відносно простими, відбивні властивості матеріалів сильно впливають на результат, а обчислювальна частина залишається складною. Проте, працювати є над чим, і це головне.
Хочеш дізнатися більше — читай відгуки
← Вернуться на предыдущую страницу
Читайте также:
Овоч, який можна їсти багато без шкоди для фігури 22 мая 2026
Гарбуз не тільки смачний, але й корисний.
Xiaomi вперше випустила навушники-кліпси: що вміють нові Xiaomi Clip 22 мая 2026
Xiaomi вперше випустила навушники-кліпси: що вміють нові Xiaomi Clip
Роналду після здобутого чемпіонства попозував із чотирма дітьми і нареченою в формі свого клубу. Фото 22 мая 2026
Зірковий футболіст Кріштіану Роналду похвалився своєю групою підтримки, а саме молодшими дітьми та нареченою, Джорджиною Родрігес, які у футбольній формі прийшли підтримати його на матчі
4.5
0.4