Студент Массачусетского технологического института Аниш Аталье вместе с тремя товарищами Кевином Квоком, Логаном Энстрёмом и Гильермо Вебстером создал сенсорный экран для MacBook и описал, как сделать такой же. На сборку потребовалось всего $1 и 16 часов времени.
В основу решения была положена разработка Квока, которую он сделал ещё в школе. Её суть в том, что по блестящим поверхностям под углом можно понять, касается ли палец экрана.
Если палец совпадает со своим отражением, то можно построить схему сенсорного дисплея.
Слегка доработав технологию Квока, ребята создали Project Sistine.
Что это и как работает
Это специальная система, помогающая экрану MacBook понять, какого именно места касается пользователь.
Идея состоит в том, чтобы установить небольшое зеркало перед встроенной камерой макбука, чтобы она смотрела на экран компьютера под острым углом.
Так камера сможет видеть пальцы пользователя. А с помощью компьютерного зрения трансформировать видеопоток в команды для сенсорного управления.
Полученное устройство для считывания касаний экрана MacBook
В итоге для реализации плана потребовалось:
• горячий клей
• миниатюрное зеркало
• жёсткая бумажная тарелка (это не шутка)
• дверные петли
С их помощью зеркальце крепится над камерой MacBook на самодельном креплении. Так оно собиралось:
Дальше студенты взялись за создание софта. Он должен был определять цвет кожи, размеры пальца по верхнему (отражение в экране) и нижнему (реальный палец, снятый камерой) контуру.
Дальше алгоритм оценивает среднюю линию между ними и принимает её за точку касания к экрану ноута.
Так камера считывает касание
После первоначальной калибровки системы камера и софт обучатся адекватно оценить расстояние от пальца до экрана и распознать координаты точки касания по методу RANSAC.
RANSAC — метод оценки параметров модели на основе случайных выборок
Итог
В итоговом прототипе разработчики преобразовали касания и движения пальца в команды мыши. При создании модели использовалась камера с разрешением 480p. И чем будет больше разрешение камеры, тем точнее будут считываться движения.
Исходный код для системы компьютерного зрения создатели опубликовали на GitHub. Там же подробные инструкции по установке. [AnishaTalye]
(23 голосов, общий рейтинг: 4.87 из 5)
Артём Баусов
@DralkerГлавный по новостям, кликбейту и опечаткам. Люблю электротехнику и занимаюсь огненной магией. По всем вопросам пишите в Telegram: @TemaBausov
11 комментариев
Форум →Это пять! Apple добавит эту функцию как опцию к МакуБуку … за 500 долларов.
@peper-, и назовет тачскрином
@peper-, даа, щяс – 1к$, не меньше
Гениально
Задержка весьма заметная. Плюс постоянное отслеживание пальца камерой высадит вашу батарею за час.
Найс колхоз xD
@Metal, можно и не придираться к студенту, создавшему это на коленке и выложившему ПО в общий доступ
@VsG, но колхозом это быть не перестаёт.
@drundel007, автомобили вспомните первые, телефоны… тут главное технология (в первую очередь), а не технология+удобство +внешний вид+стоимость. технология будет восребована, ее начнут развивать и уже 2-е поколение вполне может выглядеть миниатюрной элегантной насадкой, а 3-е уже может быть незаметным встроенным датчиком. ну просто к примеру. а если технология будет не востребована- о ней и забудут, и деньги не будут потрачены зря на внешний вид и миниатюрность, не так обидно будет разработчику потраченных затрат)
Талантливый парень! Компания потратит на подобное 200-300 млн. и повысит стоимость буков процентов на 17-20. Но, скорее всего, парнишка будет принят туда на работу.
Ещё несколько лет назад натыкался на сенсорные накладки для iMac, они прозрачные, крепятся поверх экрана и работают по типу как и сенсор на iPhone. А это колхоз какой-то.
Нашли орфографическую ошибку в новости?
Выделите ее мышью и нажмите Ctrl+Enter.Как просматривать старые версии текстовых документов на Mac
Как на iPhone открывать окно ввода пароля вместо авторизации Face ID без ожидания
Как убрать странный бейдж с иконки приложения?
Как настроить iPhone, чтобы при взгляде на экран звук звонка становился тише
Зачем на iPhone нужен режим разработчика. Как его включить в iOS 16?
Как включить разметку листа в приложении Заметки на iPhone
Не удаляется приложение с iPhone
Как следить за скидками на приложения в App Store