Lume Pad 2: la tableta 3D impulsada por IA es asombrosa y extraña

La descripción de Lume Pad 2 suena como si alguien hubiera juntado un montón de palabras de moda: ¡es una tableta 3D impulsada por IA!

Pero, ¿qué significa eso? En cuanto a la IA, cuenta con IA en el dispositivo para analizar fotos y videos y luego convertirlos a 3D, así como IA generativa en la nube para crear escenas 3D a partir de indicaciones de texto. ¿Y la parte 3D? Eso también es cierto: es una pantalla 3D sin anteojos. 3D real, real, con una imagen única emitida a cada ojo.

Este es el Lume Pad 2 de una compañía llamada Leia (sí, como la princesa de Star Wars). Es lo más singular y fascinante que he visto en mucho tiempo, pero no estoy convencido de que tenga un mercado más allá de un puñado de industrias especializadas.

Pantalla 3D sin gafas

En el corazón del dispositivo se encuentra una exclusiva tecnología de visualización patentada ("Light Field") que permite una único visor para ver las aplicaciones compatibles en una verdadera vista 3D sin anteojos adicionales o un auriculares. No se revela cómo funciona exactamente, pero probablemente sea una variación de las lentes lenticulares, del tipo que obtendrías en los paquetes de cereal cuando eras niño. A medida que movía la escena, el prisma translúcido en el frente dirigiría una parte diferente de la imagen de fondo a sus ojos, dando la apariencia de que la escena estaba cambiando. El Lume Pad 2 mostrará dos imágenes en cualquier momento, pero la capa de pantalla especial combinada con las cámaras frontales duales para el seguimiento de la cabeza y los ojos garantizará que cada ojo solo vea una. Cuando tu cerebro los combina, puedes ver una escena en 3D.

Puede ser bastante mágico contemplarlo en persona ("Whhhaaaaaaat", exclamó mi hijo, "Papá, está saliendo de la pantalla. ¿Qué? ¿Cómo? ¡¿Qué?!")

Además de eso, Lume Pad 2 es una tableta Android, repleta de software personalizado que le permite tomar imágenes y videos en 3D, o usar IA para transformar videos existentes en 3D.

El hardware

El Lume Pad 2 cuenta con una pantalla IPS de 12,4 pulgadas que funciona con una actualización de 120 Hz y 2560 x 1600 píxeles, con una densidad de píxeles de 244 PPI y una relación de 16:10. Sin embargo, cuando está en modo 3D, es seguro asumir que la resolución se reduce a la mitad.

Si olvidamos todas las cosas 3D de lujo por un momento y solo evaluara esto como una tableta Android, estaría muy impresionado. Es un buen chasis de metal sólido, se siente bien al tacto y hay una respuesta háptica agradable cuando se escribe. El estuche opcional se ajusta magnéticamente y permite algunos ángulos de lectura.

La interfaz de Android 12 es ágil y, aparte del software preinstalado, es una tableta estándar de Google Android sin demasiado trabajo personalizado.

En resumen: es una buena tableta, sin duda una de las mejores tabletas Android con las que he jugado hasta ahora. Sin embargo, puedes olvidarte de usarlo al aire libre; con un brillo máximo de 450 nits en modo 2D y 300 nits en 3D, esto es solo para uso en interiores.

También encontrarás cámaras traseras duales de 16MP, con las que puedes tomar fotos y videos en 3D directamente en el dispositivo. A diferencia de la mayoría de las cámaras 3D, no están separadas como lo estarían los ojos humanos. La mayoría de las cámaras destinadas a grabar un efecto 3D para los ojos humanos tienen lentes con una separación aproximada de 63 mm. separados, al igual que el ser humano promedio, lo que garantiza que se perciba un efecto 3D preciso para el objetivo espectador. Pero con Lume Pad 2, hay algo de magia en el dispositivo que extrapola la profundidad en tiempo real.

La tableta está alimentada por el chipset Qualcomm Snapdragon 888, con 8 GB de RAM y 128 GB de almacenamiento UFS 3.1. Puede expandirse a través de una ranura microSD con tarjetas de hasta 2 TB, lo que querrá hacer rápidamente si planea hacer un buen uso de esa cámara o reproducir sus propios medios sin conexión.

El software

Más allá de la mágica pantalla 3D sin anteojos, el valor real del Lume Pad 2 proviene del software personalizado incorporado.

LeiaJugador es un visor de medios todo en uno, para su propio rollo de cámara 3D y una buena colección de imágenes de muestra. Además, toque la pestaña Leia Link y podrá acceder al contenido que ha subido desde un teléfono inteligente normal con la aplicación Leia Link, que su software puede transformar mágicamente en 3D. Funciona principalmente, pero solo en escenas donde la profundidad es obvia. Probé con una foto familiar de estar sentado en unos karts, y la profundidad estaba mal. Leia Player puede reproducir videos con formato VR180 y de lado a lado (SBS), aunque a menudo es necesario especificarlo. Intenté ver un video con formato SBS y, para ser honesto, la profundidad era muy débil y no había sonido. Supongo que hubo problemas con el códec. Ciertamente, LeiaPlayer no está al mismo nivel que VLC cuando se trata de códecs aleatorios, por lo que fue un poco fallido. Incluso si tuviera sonido, no me habría molestado. Creo que unas gafas de realidad virtual que cuestan la mitad del precio harían un trabajo mucho mejor.

leiapix es una aplicación de red social para compartir y ver las fotos en 3D de otros. Profundice en un hashtag o tema específico y encontrará que el contenido es escaso, pero es una forma sencilla de ver imágenes 3D aleatorias. La calidad varía, por lo que es posible que se estén tomando con la versión anterior de Lume Pad.

LeiaChat le permite chatear en 3D con otros usuarios de Lume Pad 2, en 3D, para cuando las llamadas estándar de Zoom ya no sean suficientes. Por supuesto, ambos extremos necesitan un Lume Pad.

LeiaDream es una aplicación de arte generativo en 3D. Supongo que es una versión personalizada de StableDiffusion pero podría ser completamente propietario. De cualquier manera, le permite escribir un mensaje de texto y obtener una imagen 3D personalizada. No se acerca al nivel de realismo de Midjourney y, como servicio en la nube, su cuenta incluye suficiente para generar unas 250 imágenes; después de eso, deberá comprar más créditos.

LeiaViewer es un visor de modelos 3D con un puñado de modelos incluidos e integración con Sketchfab si desea ver más o ver sus propias creaciones (aunque solo se admite un inicio de sesión de correo electrónico de Sketchfab predeterminado, no si se registró a través de una red social proveedor). Este es probablemente el caso de uso más convincente para el Lume Pad 2, ya que los modelos 3D obviamente son una gran combinación para la tecnología de visualización sin gafas. Puede inclinar, rotar, hacer zoom, etc., así como controlar la profundidad del efecto 3D.

LeiaTube es un visor de YouTube y Vimeo. Ábralo y verá una selección de contenido, aunque incluso el contenido nativo con formato SBS 3D debe ejecutarse a través del algoritmo de conversión de IA. También puede compartir un video desde la aplicación estándar de YouTube directamente aquí y lo convertirá automáticamente para verlo en 3D. Lo probé con una de mis propias reseñas y, para ser honesto, no fue tan bueno. El efecto no fue tan pronunciado ni tan preciso como esperaba; ciertamente hubo algunas fallas aquí y allá, con bordes borrosos alrededor de los objetos donde podía decir cuál debería ser la profundidad.

Son muchas aplicaciones integradas, y también hay una Tienda de aplicaciones Leia. Sin embargo, es un poco escaso, con quizás cuatro juegos en total. Siendo realistas, a menos que sea un título propio de Leia Inc, es poco probable que muchos desarrolladores participen en un mercado tan pequeño. No puedes simplemente tomar juegos existentes y hacerlos 3D. Las dos demostraciones de juegos gratuitas preinstaladas en nuestro dispositivo eran demostraciones fascinantes, pero al final no pudieron captar mi atención durante más de cinco minutos cada una.

Si bien hay muchas aplicaciones integradas, no debe esperar que nada más sea compatible con la funcionalidad 3D. No puede abrir VLC y reproducir una película codificada en SBS, por ejemplo, ni Call of Duty obtendrá repentinamente una tercera dimensión. Para hacer uso de la tecnología 3D única, una aplicación debe ser compatible con Leia SDK. Felizmente ejecutará otras aplicaciones de Android, pero solo se mostrarán en 2D normal.

¿Cómo es el Efecto Profundidad?

Era escéptico acerca de la tecnología de visualización sin anteojos en esta revisión, pero puede ser bastante sorprendente en las condiciones adecuadas. Si bien es imposible mostrarlo en video, de lo que puedo hablar es de la calidad subjetiva del efecto 3D y la pantalla en general.

En primer lugar, el grado del efecto de profundidad varía significativamente según la aplicación y el tipo de contenido que está viendo.

El mejor efecto se obtendrá a partir de objetos renderizados en 3D. Por ejemplo, si abre la aplicación LeiaViewer 3D y echa un vistazo a la ciudad cyberpunk incluida (incluidos los coches animados haciendo zoom alrededor), encontrará que la aguja más alta parecerá sobresalir casi 6 pulgadas de la superficie de la tableta. Eso increíble.

Esto también se aplica a las demostraciones del juego, y es en el juego Dungeon donde también se pueden ver claramente las funciones de seguimiento de la cabeza. No solo las paredes de la mazmorra cobran vida en un glorioso 3D, sino que si inclinas la tableta o te mueves, verás ángulos previamente ocultos. Es una experiencia única que solo he tenido en realidad virtual.

Sin embargo, cuando se trata de imágenes o videos, el efecto no es tan pronunciado, en la medida en que no me molestaría en ver películas en 3D en esto; simplemente no es convincente en comparación con hacer lo mismo en el cine virtual VR. Esto podría ser simplemente un "factor de realismo". El contenido 3D renderizado siempre se verá más impresionante que una escena real, porque esta última es algo a lo que estamos muy acostumbrados en la vida real.

Seguimiento y Calidad Visual

En términos generales, siempre que no estuviera en un ángulo demasiado obtuso, el seguimiento de la cara y los ojos parecía funcionar bien. No experimenté muchos problemas técnicos en los que volvía al modo 2D, excepto cuando mi hijo decidió asomar la cabeza y ver de qué se trataba todo este alboroto. No puede rastrear a más de una persona al mismo tiempo y, a veces, toma uno o dos segundos darse cuenta de que hay un nuevo espectador. Entonces todo encaja mágicamente en la vista 3D.

Sin embargo, la pantalla está lejos de ser perfecta; Dos puntos restan valor a la experiencia general.

En primer lugar, hay un ligero tipo de puerta de malla de malla punteada en la pantalla. Presumiblemente, esa es una parte de la capa lenticular que separa la imagen de cada ojo. Esto es más obvio cuando se ajusta al modo 3D. Si bien el hardware de la tableta es muy agradable y receptivo como una tableta Android genérica, la calidad de la pantalla puede frustrar.

En segundo lugar, también hay un problema de efecto fantasma bastante obvio. Esto significa que cada ojo puede ver la imagen destinada al otro ojo, aunque muy débilmente. En el ejemplo anterior, la imagen posterior en la parte posterior de las alas también está presente cuando se ve en 3D, no solo como resultado de la filmación.

Esto no es tanto una crítica a esta tableta en particular como una falla en la tecnología subyacente, y tampoco es exclusivo de las pantallas sin anteojos. Si alguna vez ha visto películas en 3D pasivas (aquellas que involucran un par de anteojos endebles), también tienden a tener un poco de efecto fantasma. Eso es porque es casi imposible culminar perfectamente la luz en una dirección particular. Puede obtenerlo lo suficientemente bien como para obtener el efecto 3D, pero si hace una pausa y examina críticamente la imagen, verá imágenes fantasma. Esto es más obvio para objetos más brillantes sobre un fondo oscuro. Solo las pantallas Active 3D (aquellas que requieren anteojos LCD más pesados ​​con una batería) pueden elimine el efecto fantasma, ya que son imágenes alternas y bloquean completamente la vista para un ojo cada uno tiempo.

¿Es esta la pantalla 3D definitiva? No.

El Lume Pad 2 es realmente mágico para la vista. Es una maravilla tecnológica, y desearía tener una mejor manera de mostrártelo, pero al igual que la realidad virtual, es algo que debes experimentar por ti mismo.

Pero sé lo que estás pensando: esto es una moda pasajera. Fui un gran defensor de los televisores y proyectores 3D hasta hace una década. Incluso pasé gran parte de mi tiempo en la universidad jugando Unreal Tournament 2K con las gafas 3D Nvidia originales y un enorme monitor CRT Silicon Graphic. Pero los lanzamientos de películas en 3D se han agotado en gran medida (cuatro en lo que va del año, al parecer), y la gente ha se dio cuenta de que tener que usar anteojos especiales para ver una película era una molestia para obtener resultados a menudo peores que sin.

Por supuesto, la belleza del Lume Pad 2 es que funciona sin anteojos, y simplemente funciona (aunque solo para un solo espectador).

El hecho de que tenga un sistema de inteligencia artificial incorporado para convertir contenido que no sea 3D y una forma de producir fotos y películas en 3D en el propio dispositivo, creo que le da fuerza. Incluso si el mundo dejara de hacer contenido 3D mañana y el Internet colapsara, aún podrías producir y mostrar tus propias creaciones desde este único dispositivo. Leia se ha esforzado mucho para producir contenido atractivo con una red social personalizada solo para Lume Pad. usuarios, y entienden que no solo se puede tener una tecnología increíble, se necesitan las aplicaciones y el contenido para ir con eso. Eso es muy alentador.

Sin embargo, comprender un problema y ser capaz de resolverlo son dos cosas diferentes.

La mayor limitación del Lume Pad 2 es que no hay forma de usarlo como una pantalla 3D genérica para ninguna fuente de entrada. Si tuviera un puerto de entrada HDMI o un dongle, y pudiera reproducir cualquier entrada con formato SBS en modo 3D, sería una compra instantánea para un mercado mucho más grande. por ejemplo, el Auriculares de cine Goovis G3 Max persona, que analizamos la semana pasada, puede hacer precisamente eso. Admite cualquier entrada USB-C o HDMI, ya sea un reproductor de Blu-ray 3D o un reproductor multimedia genérico que ejecute VLC con algunos SBS archivos formateados, o YouTube, o incluso un juego de PC con algún software que genera juegos 3D en un formato de lado a lado, y simplemente obras.

Con Lume Pad 2, todo lo que quieras usar en 3D debe programarse específicamente con Leia SDK. Ni siquiera funcionará con aplicaciones de Android diseñadas para Google VR.

Si no hay una aplicación para eso, entonces eso es todo. Y, francamente, tampoco es tan fácil obtener su propio contenido en este dispositivo. La aplicación de transferencia de archivos de Android en Mac es incompleta en el mejor de los casos, así que tuve que instalar una aplicación aleatoria de Android con una interfaz horrenda solo para navegar por la red. Fue una experiencia miserable copiar un archivo.

Creo que el nicho real para este producto será el modelado 3D; o más bien, viendo los modelos 3D que ha producido en otro lugar y cargado en Sketchfab. Sin embargo, esa podría ser una audiencia muy específica. Es increíblemente convincente ver que el diseño de su objeto 3D cobra vida y, con los objetos 3D renderizados, la profundidad que puede obtener es increíblemente buena. Y para ese puñado de personas que todavía aman la fotografía estéreo: les va a encantar esto.

Para todos los demás, no estoy tan seguro. Puedo ver cómo Leia está tratando de hacerlo atractivo con la IA 3D-ifier de cualquier video de YouTube y la cámara en la parte posterior para hacer sus propias fotos en 3D. Pero para esas características, no funciona tan bien. Así como no creo que nadie grabe momentos familiares usando la cámara 3D frontal de Apple Vision Pro, no puedo imaginarte cargando una tableta de $1000 para tomar fotos o videos. Así que mi mayor preocupación es simplemente que no hay mercado para este dispositivo; al menos, no uno lo suficientemente grande como para convencer a los desarrolladores de que vale la pena agregar el soporte de Leia SDK a sus aplicaciones.

Aunque no es un punto de datos definitivo, el subreddit de Lume Pad, que es quizás el primer lugar al que saltaría para encontrar nuevas aplicaciones, consejos y sugerencias de contenido, tiene una suma total de 105 miembros.

El hardware es increíble, y el software se esfuerza mucho por encontrar un propósito real, y simplemente no creo que dé en el blanco. Sin embargo, tal vez lo haga con el tiempo. Pero si tiene el Lume Pad anterior y ya disfruta de lo que puede hacer con él, el Lume Pad 2 es, en cualquier medida, una mejora increíble. Consíguelo, te encantará.