La fotografía de teléfonos inteligentes ha cambiado la forma en que las personas miran las imágenes y la óptica. Hoy en día, no necesita llevar una cámara voluminosa con diferentes tipos de lentes cada vez que viaja. Si tiene una buena cámara de teléfono inteligente, se encargará de las cosas muy bien. Ahora, para mejorar aún más las cámaras de los teléfonos inteligentes, los OEM están haciendo mucho a puerta cerrada. Esto no solo incluye asociarse con marcas de cámaras heredadas y colocar sensores de cámara más grandes en los teléfonos inteligentes. Requiere una I+D compleja, muchos desafíos técnicos y bastante prueba y error.
Para comprender lo que sucede en el desarrollo de cámaras, tuvimos una pequeña conversación con el gerente de producto de Vivo para el desarrollo de cámaras, Keshav Chugh, al margen de la sesión informativa previa al lanzamiento de la serie Vivo X90 sobre el desarrollo de cámaras de Vivo. Con experiencia en fotografía, Chugh se ocupa del desarrollo de la cámara de Vivo, que incluye la creación de nuevas funciones, qué hardware usar, cómo ajustar el software de acuerdo con los diferentes mercados y mucho más. Así fue la conversación:
1. Para empezar, dénos una idea clara de lo que hay detrás del desarrollo de la cámara en los teléfonos inteligentes Vivo.
Así que cada vez que comenzamos con un nuevo dispositivo, hay un sistema de tres pasos que se suele seguir para poder sintonizar las cámaras. El primer paso es llegar a una declaración del problema. Una declaración del problema es lo que queremos lograr con una cámara, cuál será nuestro enfoque, para cualquier producto dado.
Luego viene la parte de la óptica, donde seleccionamos qué hardware usar para qué dispositivo. Zeiss también interviene en la etapa de la óptica. Son los expertos en términos de óptica e imágenes, y nos ayudan a ajustar el hardware de acuerdo con los diferentes mercados.
El tercer paso es la computación, donde el aprendizaje automático y la IA juegan un papel importante. Aquí es donde, después de tener todo en su lugar, observamos el software y cómo podemos usar nuestros algoritmos para mejorar la experiencia de la cámara. Esto no solo incluye la aplicación o los controles de la cámara, sino también cómo la IA mejora las imágenes capturadas por la cámara. Cuánta luz dejar entrar, cómo ajustar los colores, detección de bordes en retrato, todo el procesamiento posterior se decide y ajusta en esta etapa.
2. ¿Puede contarnos más sobre el chip Vivo V2 y cuál es el objetivo de la empresa con el chip ISP?
Sí, además de manejar todo el procesamiento de la cámara que se lleva a cabo en los buques insignia de Vivo (e iQOO), el chip V2 también actúa como un acelerador de aprendizaje profundo (DLA) que facilita y maneja todos los algoritmos de IA. El V2 es un chip de programación que organiza, controla y optimiza las cargas de trabajo en un proceso de producción. Básicamente actúa como un administrador para ayudar a resolver problemas e implementar nuevas funciones de la cámara.
Llegando al desarrollo, primero tenemos que averiguar qué problema estamos tratando de resolver. Luego, tratamos sobre cómo desarrollar el chip ISP. Entonces, entran en acción nuestros equipos que lo están desarrollando, los terceros que nos ayudan también entran en esta etapa. En última instancia, nuestro objetivo no es comercializar V2 ni nada de lo que hace Vivo, el objetivo final es que el problema planteado se resuelva. Por ejemplo, si te digo que el Vivo X90 Pro tiene la mejor cámara nocturna del mercado, debería tener los resultados para respaldarlo.
Además, con la cantidad de IA involucrada en la creación de funciones como Zeiss Cine Flare o nuestros modos de retrato junto con otras cosas, necesitamos soporte de hardware para ejecutar tantos algoritmos.
3. Cuéntenos más sobre la asociación de Vivo con Zeiss
Con Zeiss, tenemos dos tipos de colaboraciones: una es co-ingeniería, otra es colaboración. La parte de co-ingeniería es donde trabajan con nosotros producto por producto. Por ejemplo, cómo nos ayudaron con el desarrollo de la cámara en la serie Vivo X90 y otros buques insignia anteriores de la serie X. Eso es ingeniería de producto, donde están con nosotros en cada paso del camino en el desarrollo de la cámara.
Lo siguiente es la colaboración, que es algo más a largo plazo. Aquí, actualmente estamos haciendo investigación y desarrollo sobre lo que traeremos en el futuro. Esto implica mucha experimentación y pruebas. Hay un laboratorio específico en Zeiss en Alemania, solo para el desarrollo de productos Vivo. Así que aquí también, trabajamos sobre la base de la declaración del problema. Por ejemplo, cómo llevamos Zeiss Cine Flare a los teléfonos inteligentes es una declaración de problemas. Ahora, para el usuario es solo apuntar y disparar para traer destellos de cine a sus imágenes. Pero implementarlo es muy difícil, ya que tenemos que replicar ese destello de cine natural usando IA.
Esto incluye detectar cuál es la escena, de dónde proviene la luz, cuál es el sujeto, cuál es la fuente de luz, cuál es el balance de blancos en la escena, qué tan intensa es la luz y cosas por el estilo. En base a eso, la cámara tiene que hacer cálculos alrededor de la escena, simulación de escenas, luego hay diferentes tipos de destellos de cine. Allí también, tenemos que hacer cálculos sobre qué tamaño de destello necesito, en qué ubicación lo necesito según la luz, el color del destello según el escenario de iluminación y el balance de blancos. Entonces, para todo esto, hay muchas aplicaciones de IA involucradas. No se trata solo de colocar un filtro con una etiqueta png, solo porque sí.
Esta es otra razón por la que nuestra asociación con Zeiss ha sido exitosa. Porque si solo aplicáramos filtros, una gran marca heredada como Zeiss no querría asociarse con nosotros. Debido a que están contentos con el producto final, podemos usar su nombre con confianza.
4. ¿Quién está haciendo el proceso para el V2? ¿Vivo tiene algún plan para licenciar estos chips ISP?
Por lo tanto, la fabricación de silicio la realizan los fabricantes de silicio, pero el diseño y la arquitectura son de nuestra propiedad.
En cuanto a la licencia, no hay planes para licenciar esto. Esa no es la idea detrás de los chips de la serie Vivo V. Esto es algo en lo que hemos invertido mucho dinero y recursos, y es nuestra propiedad intelectual.
5. ¿Cómo ha respondido Zeiss a la respuesta positiva que están teniendo los nuevos smartphones Vivo para cámaras?
Por eso, Zeiss está con nosotros en cada paso, incluso cuando estamos ajustando el sensor. Es por eso que lo llamamos sensor Zeiss, aunque es el sensor de Sony, en cuanto al hardware. Pero en la optimización y puesta a punto del sensor, Zeiss juega un papel muy importante. Incluso en términos de colores, Zeiss está con nosotros. Somos uno de los pocos fabricantes de equipos originales que realiza múltiples ciencias del color. Tenemos Vivo Vivid Colour y Zeiss Natural Colour. Con la serie Vivo X90, Zeiss también nos ayuda a calibrar profesionalmente la pantalla. Porque si nuestra pantalla no está calibrada, entonces tomar imágenes en Zeiss Natural Color no tendrá sentido.
Entonces, la asociación ha evolucionado más allá de las cámaras y hacia el desarrollo de teléfonos de manera integral. Además, la configuración de pantalla Zeiss Natural Color no es solo un software que Zeiss está impulsando, estamos calibrando individualmente las pantallas.
6. ¿Cuál fue el mayor desafío al desarrollar las cámaras para la serie Vivo X90?
Diría que lo más difícil sería ajustar el sensor de tipo de 1 pulgada. Ahora, podemos hacer una afinación muy simple o podemos hacer una afinación muy compleja. Algunas marcas realizan una sintonización muy simple y una sintonización muy compleja es cuando localizas los teléfonos. Cada país tiene una demanda diferente. Dado que India es el mercado más importante para nosotros, ajustamos nuestras cámaras de acuerdo con el cliente indio, ya sea en términos de tonos de piel, retratos, cámaras frontales o traseras, o en términos de comprender sus necesidades, en qué se diferencian. de otros usuarios, es muy importante para nosotros.
Ahora, hacer todo eso bien y convertirlo en un producto real que no solo funcione, sino que sea el mejor en lo que hace, es la parte más difícil. También lleva mucho tiempo. Por ejemplo, tengo que ejecutar cientos y miles de simulaciones para encontrar los parámetros perfectos. Luego, lo ponemos en una versión de prueba, donde hacemos una prueba real. Luego repetimos este proceso hasta que estemos satisfechos con el resultado final. Es entonces cuando pensamos que un producto está listo para salir a los mercados.
7. ¿Cuál es tu función de cámara favorita en la serie Vivo X90?
En cuanto a la cámara, diría que me gustan mucho los modos de retrato. Por supuesto, Cine Flare es nuevo, pero en general todos los retratos de Zeiss son mis favoritos. Así que fui fotógrafo comercial antes de esto y me encanta la fotografía callejera. En fotografía callejera, 50 mm es la distancia focal perfecta. Combínalo con una apertura de f/1.6 y se convierte en algo increíble para la fotografía callejera. Este tipo de apertura (f/1.6) es muy grande. Deja entrar mucha luz y esta vez tenemos un sensor un 30 % más grande, por lo que los retratos han mejorado drásticamente con respecto a la generación anterior.
8. ¿Una función de cámara que desea en el próximo buque insignia de Vivo?
Ahora no hay una sola característica en la que pueda pensar. Como gerentes de producto, queremos incluir tantas características como podamos en nuestros productos. Sin embargo, para pensar en una sola cosa, me encantaría tener una lente de 35 mm en mi teléfono inteligente, pero eso no es factible. Si bien soy gerente de producto, también soy fotógrafo, por lo que mis demandas son así.
Esto no es factible porque aunque también atendemos a profesionales, todavía hay un equilibrio que mantener. Ese equilibrio es que tienes que hacer una gran cámara, sin dejar de ser un gran teléfono inteligente. No puede ser un buen teléfono inteligente con una mala cámara o una buena configuración de cámara en un teléfono inteligente malo.
9. Debes haber visto el concepto de teléfono de Xiaomi con una lente reemplazable. ¿Hay algo similar proveniente de Vivo o Vivo está trabajando en lentes reemplazables en teléfonos inteligentes?
No. Mira, todas las marcas tienen conceptos y nunca llegan al mercado. La idea detrás de esto es que los OEM están constantemente tratando de descubrir cuál será el futuro de la industria de los teléfonos inteligentes.
Ahora, esto es algo muy bueno para la industria ya que abre nuevas ideas. Y en el futuro, si queremos descubrir cómo los teléfonos inteligentes pueden reemplazar completamente las cámaras convencionales, entonces este tipo de conceptos son importantes. Incluso tenemos muchos teléfonos conceptuales, algunos los presentamos, otros no. Sin embargo, este tipo de conceptos son algo bueno, no solo para las marcas, sino para toda la industria en general.
10. ¿Crees que las lentes reemplazables en los teléfonos inteligentes son una buena idea?
Como fotógrafo, sí. Pero como usuario de un teléfono inteligente, no. Porque ahora mismo la tecnología no existe. Si bien la idea es buena, la tecnología aún no está a la altura. Mi opinión personal es que si tiene una lente de 5 pulgadas de grosor en su teléfono inteligente, también podría llevar solo una cámara y tener un sensor más grande. En segundo lugar, si mi teléfono siempre necesita una lente conectada a la cámara, eso significa que sin la lente, mi cámara es inútil. Como decía, tiene que ser un buen smartphone. Entonces, si obtengo una cámara de teléfono inteligente que me permite colocar lentes diferentes, tendría que llevar lentes múltiples al menos en algún momento. Ahora, si llevo tanto volumen, ¿por qué no conseguir una cámara adecuada?
Fuente: Digit