Баннер проекта

Светодиод вместо экрана: новый взгляд на пространственные вычисления

Современные представления о будущем взаимодействия человека и компьютера сосредоточены в основном на умных очках и шлемах — устройствах, которые стеснительны и социально неловки.

Этот проект изучает альтернативный путь: спекулятивное устройство под названием Lightbulb Computer, которое использует современные технологии проекторов и компьютерного зрения для объединения вычислений на фоне и пространственного отображения информации в повседневных помещениях.

В этой серии дизайн-прототипов предлагается направление вычислений, которое предполагает проецирование информации в реальный мир для её дополнения, а не её ограничение маленькими прямоугольными экранами или, что ещё хуже, устройствами, которые располагаются на нашем лице.

Lightbulb Computer — это устройство, которое объединяет проектор с компьютерным зрением в форме большого светодиода.

Изображение большого светодиода

Форма светодиода позволяет легко монтировать его в переносную лампу-основу, чтобы носить по дому, или ввинчивать в любой настенный или потолочный цоколь Эдисона для постоянной установки в масштабе комнаты.

Рука размещает цилиндрическую основу, на которую ввинчен большой светодиод

Установленный на переносную батарейную основу, Lightbulb Computer можно легко разместить где угодно на столе или по дому.

Широкоугольный потолочный вид гостиной, видна вся комната

Потолок — отличная позиция для просмотра всей комнаты и проецирования где угодно. Кроме того, цоколи светодиодов — это почти повсеместный мировой стандарт.

Диаграмма, показывающая пиктограммы четырёх модальностей ввода/вывода Lightbulb Computer: голос, жесты, зрение, проекция

Lightbulb Computer реагирует на голосовые команды, видит, куда вы указываете, может анализировать то, что видит, и может проецировать контент и выделять объекты в реальном мире.

Примеры использования

Вот несколько возможностей этого устройства:

На кухне можно закреплять виджеты вроде рецептов и таймеров или наложения для подготовки ингредиентов на различные поверхности. Это намного более естественный способ что-то сделать, особенно с влажными руками или руками в муке. Не нужно разблокировать телефон, имея дело с крошечным экраном, полным уведомлений и отвлечений.

При учёбе или чтении можно задавать вопросы о содержании. Ответ появляется прямо рядом, без необходимости доставать телефон и потенциально отвлекаться на что-то ещё.

При планировании поездки с кем-то вместо того, чтобы сутулиться над телефоном, получается большая карта для совместного просмотра, с базовыми жестами для панорамирования и прокрутки карты. Можно переключать наложения общественного транспорта и проверять все интересующие достопримечательности.

Конечно, по-прежнему можно пользоваться телефоном, если требуется набирать текст или более сложные взаимодействия, но совместный просмотр большой карты — это намного более уютный опыт.

Аналогично можно отправлять фотографии с телефона и проецировать их на любую поверхность. Это гораздо более приятный способ смотреть фотографии вместе. Такого рода социальные взаимодействия действительно сияют благодаря Lightbulb Computer.

Мужчина и женщина рассматривают настольную игру, плитки и фишки, спроецированные Lightbulb Computer

Можно даже играть в настольные игры — может быть, менее весело, чем с физической доской, но гораздо быстрее подготовить, без забот об уборке или беспокойстве о том, что дети или кошки опрокинут фишки.

Взаимодействие с умными домашними устройствами также становится намного более плавным — можно просто указать, чтобы управлять ими. Если у вас есть несколько умных домашних устройств, вы знаете, что невозможно помнить их конкретные названия, но Lightbulb Computer может просто видеть, на что вы указываете, и сделать эти взаимодействия намного более естественными.

Lightbulb Computer также можно использовать для фоновых дисплеев — например, рядом с кроватью, показывающих время, ваш будильник, погоду или календарь на следующий день — всё без необходимости смотреть на экран.

Совместная семейная доска может быть размещена в коридоре, где все видят её с первого взгляда. Элементы можно отмечать, просто нажимая на них. Это хорошо тем, что она просто вписывается в вашу среду и не является ещё одним экраном в доме.

Современные модели зрения могут читать информацию в мире за миллисекунды, гораздо быстрее, чем мы. Мне потребуется несколько минут, чтобы просмотреть все книги на этих полках, или я могу просто спросить устройство.

Другие физические объекты в доме также могут быть дополнены Lightbulb Computer.

Большая 3D карта, висящая на стене, со станциями катания, выделенными Lightbulb Computer, и условиями погоды, спроецированными рядом с картой

Эта красивая 3D-карта района вокруг дома может быть наложена на погоду или настраиваемую, зависящую от времени информацию, такую как условия на любимых горнолыжных курортах зимой. Она также может сделать карту интерактивной: можно попросить выделить местоположение небольшой горной деревни, место которой вы забыли.

Все видео, показанные здесь, из реального — хотя и громоздкого — прототипа. Нет видеомонтажа, спецэффектов или генерации AI.

И хотя технология, похоже, ещё не совсем готова к созданию потребительской версии Lightbulb Computer сегодня, не думаю, что мы далеко от этого.

Компьютерное зрение недавно значительно улучшилось, и технология проекторов неуклонно развивается. Яркие высокоразрешающие проекторы с малой площадью распространения теперь являются реальностью.

Конфиденциальность пользователя естественно должна быть приоритетом для такого устройства. Это можно решить с помощью существующих лучших практик, таких как обработка на устройстве, аппаратные защиты от несанкционированного доступа к камере (камера включается только при активации пользователем, с жёсткой индикаторной лампой, физическая крышка и т. д.).

В свете альтернатив, которые сейчас продвигает индустрия, это путь для будущего вычислений, который действительно стоит преследовать.

Представление нового горизонта пространственных и фоновых вычислений

Сегодня у нас есть два очень различных способа взаимодействия с информацией. С одной стороны, у нас есть физические объекты, которые были у нас в течение веков: книги, карты, печатные фотографии, физические инструменты. С другой — вычислительные устройства: ноутбуки, телефоны, планшеты — короче говоря, экраны.

Пустой спектр, показывающий с одной стороны человека, взаимодействующего с физической картой, с другой — человека, взаимодействующего с картой на планшете

В последнее время вычисления на основе экранов привлекли много критики: за вызывающие привыкание, за антисоциальность, за то, что они предлагают нам очень ограниченное представление мира. Когда мы взаимодействуем с экраном, мы не взаимодействуем с более широким физическим миром — мы ограничены маленьким стеклом, которое побуждает нас игнорировать то, что вокруг нас.

Возникла новая концепция вычислений, которую можно назвать "вычислениями на основе очков". Это также называют Virtual Reality, Mixed Reality, Augmented Reality и многим другим.

В основе всего этого лежит размещение чего-то на вашем лице, перед глазами.

Рядом маркетинговые снимки людей в Vision Pro, Meta Ray-ban, Snap Spectacles

И это уже слабое предложение: это может помешать вашим волосам, макияжу, украшениям, имеющимся оптическим средствам, таким как очки или контакты.

Не только это, но форм-фактор очков ограничивает многие аспекты вычислений: устройство должно быть очень маленьким и лёгким, что означает серьёзные ограничения на мощность, вычисления, тепловой режим.

И, пожалуй, самое главное, это кажется принципиально антисоциальным. Каждому нужно иметь своё устройство, и эти устройства должны быть совместимы друг с другом для любого общего опыта.

Два человека, каждый в Vision Pro, виртуальный контент, отображаемый на столе между ними

Это изображение, которое часто встречается в маркетинговых материалах. Но если вы действительно входили бы в эту комнату, вы бы это не видели.

Вот что вы бы видели:

Два человека через стол, каждый в Vision Pro, без визуализированного виртуального контента

Итак, хотя вычисления на основе очков интересны в некоторых отношениях, не думаю, что они решают глубинные проблемы, которые у нас есть с вычислениями на основе экранов — и именно здесь вычисления на основе проектора становятся намного более привлекательными.

Спектр с ранее обновлённым порядком: Физический объект, Вычисления на основе проектора, Вычисления на основе очков, Вычисления на основе экрана

Существует долгая история использования проекторов для вычислений: в научно-исследовательских и академических проектах (см., например, I/O Bulb, LuminAR), в продуктах, таких как Humane Pin, в общественных проектах, таких как Dynamicland или Folk Computer (которые используют вычисления на основе проектора для переизобретения отношения людей к вычислениям) и в установках в музеях и общественных местах.

Рядом изображения спроецированного контента в музее, маркетинговый снимок Humane Pin, заголовок Dynamicland.org

Но ни один из них не охватывает то, что мы называем персональными вычислениями: того рода деятельность, которую мы сегодня делаем на ноутбуках, телефонах и планшетах, особенно дома или на работе.

И именно здесь, я считаю, есть место для подлинного переизобретения.

Спасибо за то, что прочитали всё до конца — если это видение кажется вам захватывающим, обязательно свяжитесь и дайте мне знать, что вы думаете. Есть ещё демонстрации, которые я здесь не показал, и при наличии интереса я могу поделиться ими, а также рассказать кулисы того, как я запустил эти прототипы.

Фотография автора

Об авторе

Гийом Ардо — французко-американский дизайнер ПО и интерфейсов, живущий в Токио с 2023 года. Работал в Apple прототипистом и дизайнером более 8 лет над проектами, такими как Face ID, Apple Pencil и системой камер iPhone. С 2022 года независимо работает в качестве дизайнера и консультанта, основав Héliographe. Если хотите обсудить этот проект или любые другие проекты аппаратного, интерфейсного и программного дизайна, свяжитесь!