ENGLISH - SPANISH
Title: The AI-Powered Tools Supercharging Your Imagination | Bilawal Sidhu | TED
Speaker: Bilawal Sidhu
Link: https://youtu.be/eZsVDMsBTCQ?si=zlzMgVRRveBlVqGW
Tools used: Deepl and Google translate
0:00 - 0:18
All right. Good afternoon, y’all let’s about blending reality and imagination. But first, let's take a step back in time to 2021. As an 11-year-old in India,I became obsessed with computer graphics and visual effects.
0:18 - 0:31
Of course, at that age it meant making cheesy videos kind of like this. But therein started a foundational theme in my life, the quest to blend reality and imagination.
0:31 - 0:44
And that quest has stayed with me and permeated across my decade-long career in tech, working as a product manager at companies like Google and as a content creator on platforms like YouTube and TikTok.
0:44 - 0:54
So today, let's deconstruct this quest to blend reality and imagination and explore how it's getting supercharged - buzzword alert - by artificial intelligence.
0:54 - 1:16
Let's start with the reality bit. You probably heard about photogrammetry. It's the art and science of measuring stuff in the real world using photos and other sensors. What required massive data centers and teams of experts in the 2000s became increasingly democratized by the 2010s.
1:16 - 1:43
Then, of course, machine learning came along and took things to a whole new level which techniques like neutral radiance fields, or NeRFs. What you're seeing here is an AI model creating a ground-up volumetric 3D representation using 2D images alone. But unlike older techniques for reality capture, NeRFs do a really good job of encapsulating the sheer complexity and nuance of reality.
1:43 - 2:16
The vibe, if you will. Twelve months later, you can do all of this stuff using the iPhone in your pocket, using apps like Luma. It's like 3D screenshots for the real world. Capture anything once and reframe it infinitely in post-production, so you can building that collection of spaces, places and objects that you truly care about and conjure them up in your future creations. So that's the reality bit. As NeRFs were popping off last year, the AI summer was also in full effect.
2:16 - 2:45
Stable diffusion all hitting the market around the same time. But what I fell in love with was in painting. This techniques allows you to take existing imagery and augment it with whatever you like, and the results are photorealistically fantastic It blew my mind because stuff that would have taken me like three hours in classical workflows I could pull off in just three minutes. But I wanted more.
2:45 - 3:06
Enter Control Net, a game-changing techniques by Stanford researcheds that allows you to use various input conditions to guide and control the All imagine generation process. So in my case, I could take depth information and the texture detail from my 3D scans and use it to literally reskin reality.
0:00 - 0:18
De acuerdo. Buenas tardes a todos, vamos a mezclar realidad e imaginación. Pero primero, demos un paso atrás en el tiempo hasta 2021. Cuando tenía 11 años en la India, me obsesioné con los gráficos por ordenador y los efectos visuales.
0:18 - 0:31
Por supuesto, a esa edad significaba hacer vídeos cursis como éste. Pero ahí empezó un tema fundamental en mi vida, la búsqueda de la mezcla entre realidad e imaginación.
0:31 - 0:44
Y esa búsqueda me ha acompañado durante toda mi década de carrera en el mundo de la tecnología, trabajando como jefe de producto en empresas como Google y como creador de contenidos en plataformas como YouTube y TikTok.
0:44 - 0:54
Así que hoy vamos a deconstruir esta búsqueda de la mezcla de realidad e imaginación y explorar cómo se está sobrealimentando -alerta de palabra de moda- gracias a la inteligencia artificial.
0:54 - 1:16
Empecemos por la realidad. Probablemente haya oído hablar de la fotogrametría. Es el arte y la ciencia de medir cosas en el mundo real mediante fotos y otros sensores. Lo que en la década de 2000 requería enormes centros de datos y equipos de expertos, en la de 2010 se democratizó cada vez más.
1:16 - 1:43
Después, por supuesto, llegó el aprendizaje automático y llevó las cosas a un nivel completamente nuevo con técnicas como los campos de radiancia neutra o NeRF. Lo que vemos aquí es un modelo de inteligencia artificial que crea una representación volumétrica en 3D a partir de imágenes 2D. Pero a diferencia de las antiguas técnicas de captura de la realidad, los NeRF consiguen encapsular la complejidad y los matices de la realidad.
1:43 - 2:16
La vibración, por así decirlo. Doce meses después, todo esto se puede hacer con el iPhone en el bolsillo, gracias a aplicaciones como Luma. Es como hacer capturas de pantalla en 3D del mundo real. Capturar cualquier cosa una vez y reencuadrarla infinitamente en posproducción, para poder construir esa colección de espacios, lugares y objetos que realmente te interesan y evocarlos en tus futuras creaciones. Esa es la realidad. Mientras los NeRF despuntaban el año pasado, el verano de la IA también estaba en pleno apogeo.
2:16 - 2:45
Difusión estable que llegaba al mercado casi al mismo tiempo. Pero de lo que me enamoré fue de la pintura. Estas técnicas te permiten tomar imágenes existentes y aumentarlas con lo que quieras, y los resultados son fotorealistas fantásticos. Me dejó alucinado porque cosas que me habrían llevado como tres horas en los flujos de trabajo clásicos podía hacerlas en sólo tres minutos. Pero yo quería más.
2:45 - 3:06
Con Control Net, una técnica de Stanford que cambia las reglas del juego y permite utilizar varias condiciones de entrada para guiar y controlar el proceso de generación de imágenes. En mi caso, podía tomar la información de profundidad y los detalles de textura de mis escaneos 3D y utilizarlos para cambiar literalmente el aspecto de la realidad.
0:00 - 0:18
Está bien. Buenas tardes, vamos a combinar realidad e imaginación. Pero primero, retrocedamos en el tiempo hasta 2021. Cuando tenía 11 años en la India, me obsesioné con los gráficos por computadora y los efectos visuales.
0:18 - 0:31
Por supuesto, a esa edad eso significaba hacer videos cursis como este. Pero ahí comenzó un tema fundamental en mi vida: la búsqueda de combinar realidad e imaginación.
0:31 - 0:44
Y esa búsqueda permaneció conmigo y permeó a lo largo de mi carrera de una década en tecnología, trabajando como gerente de producto en empresas como Google y como creador de contenido en plataformas como YouTube y TikTok.
0:44 - 0:54
Así que hoy, deconstruyamos esta búsqueda para combinar realidad e imaginación y exploremos cómo la inteligencia artificial la está potenciando (alerta de palabra de moda).
0:54 - 1:16
Comencemos con la parte de la realidad. Probablemente hayas oído hablar de la fotogrametría. Es el arte y la ciencia de medir cosas en el mundo real utilizando fotografías y otros sensores. Lo que requería centros de datos masivos y equipos de expertos en la década de 2000 se democratizó cada vez más en la década de 2010.
1:16 - 1:43
Luego, por supuesto, apareció el aprendizaje automático y llevó las cosas a un nivel completamente nuevo con técnicas como los campos de radiación neutra o NeRF. Lo que estás viendo aquí es un modelo de IA que crea una representación 3D volumétrica desde cero utilizando únicamente imágenes 2D. Pero a diferencia de las técnicas más antiguas para capturar la realidad, los NeRF hacen un trabajo realmente bueno al encapsular la pura complejidad y matices de la realidad.
1:43 - 2:16
El ambiente, por así decirlo. Doce meses después, puedes hacer todo esto usando el iPhone que llevas en el bolsillo, usando aplicaciones como Luma. Son como capturas de pantalla en 3D del mundo real. Capture cualquier cosa una vez y reencuadre infinitamente en posproducción, para que pueda crear esa colección de espacios, lugares y objetos que realmente le interesan y evocarlos en sus creaciones futuras. Entonces esa es la parte de la realidad. Mientras los NeRF aparecían el año pasado, el verano de la IA también estaba en pleno efecto.
2:16 - 2:45
La difusión estable llega al mercado aproximadamente al mismo tiempo. Pero lo que me enamoró fue la pintura. Esta técnica te permite tomar imágenes existentes y aumentarlas con lo que quieras, y los resultados son fotorrealistas fantásticos. Me dejó alucinado porque cosas que me habrían llevado como tres horas en flujos de trabajo clásicos las podía realizar en sólo tres minutos. Pero quería más.
2:45 - 3:06
Ingrese a Control Net, una técnica revolucionaria investigada por Stanford que le permite utilizar varias condiciones de entrada para guiar y controlar el proceso de generación de imágenes. Entonces, en mi caso, podría tomar información de profundidad y el detalle de la textura de mis escaneos 3D y usarlos para literalmente cambiar la piel de la realidad.
Comments: I really like this project since listening to videos and then translating them usually seems difficult, but it was a way to prove to myself that I can do it.
Based on the translation tools used, there is a lot of difference in the translation of each one.