iOS - 2D-изображение превращается в 3D

Это широкий вопрос, но я могу указать вам правильное направление того, как работает 3D-рендеринг, поверьте мне, это огромная тема, за которой стоят десятилетия работы, и здесь есть что рассказать. Не уверен, насколько быстро вы разбираетесь в методах 3D-рендеринга, поэтому я дам вам базовое представление о текстурировании и укажу на хороший набор руководств.

1. Как они это делают?
   Идея заключается в том, что в 3D-рендеринге 3D-модели могут быть текстурированы с помощью 2D-изображения, известного как карта текстуры. Вы используете 2D-изображение и оборачиваете его вокруг 3D-модели, будь то простой примитив, такой как сфера куба, или более продвинутый, такой как классический чайник или модель человеческой головы и т. д. Текстуру можно взять откуда угодно, в прошлом я использовал канал камеры для текстурирования мешей с видео из потока камеры, я использовал фотографии с камеры, как это делается. Вот как лицо визуализируется в 3D-модели.

2. Эффективно ли это?
   На iOS и большинстве мобильных устройств 3D-рендеринг использует аппаратное ускорение с использованием OpenGLES. Что касается вашего вопроса, это действительно быстро, в зависимости от того, как вы реализуете свой код рендеринга.

То, как он использует сопоставление (шаблон поворота масштаба в видео), как упоминалось антициклопом, позволяет вам сделать текстуру подходящей для модели, а также разместить глаза, которые являются частью кода рендеринга.

Поэтому, если вы хотите изучить это, я рекомендую прочитать учебник Джеффа Ламарша «с нуля» в качестве учебника для начинающих:

http://iphonedevelopment.blogspot.com/2009/05/opengl-es-from-ground-up-table-of.html

Во-вторых, я прочитал около 4 книг по OpenGLES, по общему дизайну и по особенностям платформ. Я рекомендую эту книгу:

http://www.amazon.co.uk/iPhone-Programming-Developing-Graphical-Applications/dp/0596804822/ref=sr_1_1?ie=UTF8&qid=1331114559&sr=8-1

По-моему, вот как они это делают. Просто мои мысли, не видел приложение в реале.

У них есть 3D-модель головы человека. Когда вы нажимаете на определенные точки на 2D-изображении, они корректируют соответствующие точки в 3D-модели, поэтому они представляют определенные черты лица, такие как расстояние между глазами, ширина губ и так далее. Затем текстура из 2D-изображения применяется к 3D-модели с использованием этих контрольных точек, поэтому у нас есть текстурированная 3D-модель головы человека. Учитывая тот факт, что наше восприятие способно реконструировать 3D-форму из 2D-изображения (скажем, мы смотрим на 2D-фотографию и все еще представляем себе 3D-человека), нет необходимости точно восстанавливать 3D-форму, текстура сделает всю работу.

Существует проблема с визуализацией 3D-изображений, которая называется UV-отображение. Она берет 3D-модель и определяет набор ребер, и это создает изображение, которое используется для создания различных текстур для модели.

Теперь, если вы заметили в Morfo, вы определяете края головы, глаза, рот и нос. с этой информацией Морфо знает, как поместить текстуру в модель, которую он определил.

процесс загрузки текстуры на модель не очень сложен, и это можно сделать на любом устройстве, поддерживающем какую-либо технологию, например OpenGL.

Разве рендеринг и преобразование 2D-изображения в 3D не требуют больших вычислительных ресурсов?

Apple вкладывает миллиарды долларов в разработку нестандартных чипсетов, и последние модели обладают впечатляющей производительностью, учитывая время автономной работы и низкую рабочую температуру (без вентиляторов).