Ampliando la adopción de IA con AutoML

Rate this content
Bookmark

La adopción de IA se ha visto frenada por los desafíos involucrados en obtener modelos de rendimiento, que requieren experiencia y esfuerzo significativos, y el número limitado de profesionales con experiencia en aprendizaje automático. El aprendizaje automático automatizado (AutoML) elimina los pasos rutinarios en el flujo de trabajo de aprendizaje automático, lo que permite a los expertos en el dominio sin experiencia en aprendizaje automático construir modelos iniciales sólidos y permite a los profesionales experimentados enfocarse en la optimización manual adicional del modelo. Esta charla describe el nivel de automatización disponible para los diversos pasos y demuestra AutoML con un clasificador de actividades humanas basado en datos de sensores de acelerómetro.

This talk has been presented at ML conf EU 2020, check out the latest edition of this Tech Conference.

FAQ

AutomL es una herramienta de automatización diseñada para simplificar la construcción de modelos de aprendizaje automático, eliminando la necesidad de realizar tareas iterativas y consumir menos tiempo en la ciencia de datos, especialmente en la ingeniería de características y la optimización.

AutomL facilita la construcción de modelos de aprendizaje automático sin necesidad de experiencia extensiva en IA, lo que permite a los ingenieros concentrarse en aplicar IA a problemas complejos sin tener que buscar expertos externos costosos.

El enfoque de AutomL de MathWorks incluye tres pasos principales: aplicación de 'scattering de wavelets' para extraer características, selección automática de características para reducir su número y tamaño del modelo, y selección y ajuste de hiperparámetros de modelos utilizando optimización bayesiana.

AutomL es particularmente útil en el procesamiento de datos de señales e imágenes donde la ingeniería de características es compleja, permitiendo una generación automática de características relevantes y eficientes que se ajustan a las limitaciones de los sistemas integrados.

Los modelos generados mediante AutomL han mostrado buenos resultados, comparablemente altos, a pesar de utilizar menos pasos y experiencia que el proceso manual tradicional, como se demostró en estudios de clasificación de actividad humana y sonidos cardíacos.

MATLAB puede traducir automáticamente modelos de IA a código de bajo nivel como C o C++, lo que facilita la implementación de estos modelos en sistemas integrados y dispositivos en el borde.

Bernhard Suhm
Bernhard Suhm
9 min
02 Jul, 2021

Comments

Sign in or register to post your comment.

Video Summary and Transcription

AutoML simplifica la complejidad de construir modelos de aprendizaje automático, permitiendo a los ingenieros enfocarse en los problemas y aplicaciones difíciles. Permite resolver problemas que de otra manera no serían factibles. El enfoque de AutoML de tres pasos de MathWorks incluye scattering wavelet para la extracción de características. AutoML también permite la selección de características y la optimización del modelo para sistemas integrados con limitaciones de memoria y energía. MATLAB puede traducir a código de bajo nivel para implementación.

1. Introduction to AutomL and its Benefits

Short description:

Hola a todos, mi nombre es Bernhard Suhm, soy gerente de producto de aprendizaje automático con MathWorks. Hoy me enfocaré en AutomL, una automatización que elimina el esfuerzo iterativo rutinario y la mayor parte de la ciencia en la construcción de modelos de aprendizaje automático. El objetivo de AutomL es simplificar la complejidad de construir modelos de aprendizaje automático, liberando a los ingenieros para que se centren en los problemas difíciles de aprendizaje automático y en sus aplicaciones. AutomL te permite resolver problemas que de otra manera no serían factibles, como casos de uso en los que necesitas construir muchos modelos diferentes que representen diferentes variaciones o etapas ambientales diferentes. En MathWorks hemos desarrollado un enfoque de AutomL de tres pasos que incluye el scattering de wavelets para extraer buenas características de datos de señales e imágenes.

Hola a todos, mi nombre es Bernhard Suhm, soy gerente de producto de aprendizaje automático con MathWorks. Permítanme motivar mi tema con algunas preguntas para ustedes. ¿Dónde desean aplicar IA? ¿Están preocupados por la falta de experiencia en IA o por los modelos de caja negra? La comunidad reconoce ampliamente estos desafíos y barreras para una adopción más amplia de la IA en muchas industrias. Hoy me enfocaré en AutomL, una automatización que elimina el esfuerzo iterativo rutinario y la mayor parte de la ciencia en la construcción de modelos de aprendizaje automático. Entonces, ¿qué es exactamente AutomL? Para entender eso, necesitan conocer un poco sobre el flujo de trabajo típico para construir modelos de aprendizaje automático, el enfoque de esta charla, pero construir redes neuronales profundas no es muy diferente. Primero, necesitan procesar sus datos crudos, lidiar con su desorden y darle una forma adecuada para etapas posteriores, como lidiar con datos faltantes y valores atípicos. Luego, necesitan diseñar características, extraer algunas variables de sus datos que sirvan como entrada para su modelo y capturar la mayoría de la variabilidad. Eso es bastante fácil para datos numéricos, pero mucho más difícil para señales. Luego, se enfrentan a la elección de diferentes modelos de aprendizaje automático. Incluso para los expertos, no está claro qué modelo funciona mejor en cualquier problema dado. Por lo tanto, deben probar múltiples modelos, lo que conduce a la etapa de ajuste del modelo, donde evalúan el rendimiento de algunos modelos iniciales, optimizan sus hiperparámetros y tal vez seleccionan un subconjunto de características para evitar el sobreajuste. Pero eso puede no ser suficiente para obtener un rendimiento realmente bueno. Es posible que deban retroceder, reemplazar algunas características por otras y hacer todo esto nuevamente. Si están familiarizados con el aprendizaje automático, sabrán que las etapas más difíciles y que consumen más tiempo son la ingeniería de características y la optimización. Si ahora tienen la cabeza dando vueltas, no se desesperen porque no necesitan conocer toda esta complejidad. El objetivo de AutomL es simplificarla. Idealmente, pasar directamente de sus datos iniciales y su problema de aprendizaje automático a un modelo que puedan implementar. Sin embargo, tomarlo en serio, eso no es una expectativa realista. El aprendizaje automático en un solo paso no es posible. Sin embargo, lo que es realista es liberar a ingenieros como ustedes para que se centren en los problemas difíciles de aprendizaje automático y en su aplicación. De lo contrario, sin AutomL, tendrán que buscar esa experiencia en IA dentro de su equipo y organización o externamente. Esos científicos de datos son difíciles de encontrar y costosos. Como la primera barrera que AutomL elimina, supera la falta de experiencia en aprendizaje automático. Pero incluso si tienen esa experiencia, aumentarán su productividad porque AutomL elimina esos pasos que consumen mucho tiempo y son iterativos. Finalmente, AutomL les permite resolver problemas que de otra manera no serían factibles, como casos de uso en los que necesitan construir muchos modelos diferentes que representen diferentes variaciones o etapas ambientales diferentes. Entonces, ¿cómo aplican AutomL en la ingeniería? La mayoría de esas aplicaciones de ingeniería se basan en datos de señales e imágenes, y ahí es donde la ingeniería de características se vuelve crítica para un buen rendimiento, y eso es notoriamente difícil. En MathWorks hemos aplicado nuestros conocimientos en procesamiento de señales y hemos desarrollado el siguiente enfoque de AutomL de tres pasos. Primero, aplican scattering de wavelets. Estos wavelets son muy adecuados en su forma limitada en el tiempo para representar picos y

2. Automated Feature Selection and Model Optimization

Short description:

Muchas aplicaciones de ingeniería requieren implementación en sistemas integrados con limitaciones de memoria y energía. Aplicamos selección automática de características para reducir las características de wavelet y el tamaño del modelo. AutoML capacita a los ingenieros para construir modelos optimizados sin experiencia. AutoML se puede aplicar a aplicaciones de señales con generación automática de características, selección y ajuste de modelos. MATLAB puede traducir a código de bajo nivel para implementación. Únete a la sesión más larga sobre interpretabilidad automática y al taller práctico sobre aprendizaje automático y profundo utilizando MATLAB en línea.

irregularidades en su señal. Por lo tanto, obtienes características muy buenas. Sin embargo, muchas aplicaciones de ingeniería requieren implementación en sistemas integrados con limitaciones de memoria y energía. Para esos casos, no puedes implementar modelos grandes. Entonces, en segundo lugar, aplicamos selección automática de características para reducir las posiblemente cientos de características de wavelet a solo unas pocas características muy eficientes y reducir el tamaño del modelo. Finalmente, y lo más importante, está el paso de selección de modelo y ajuste de hiperparámetros. Tienes diferentes modelos para elegir, y para que el modelo funcione bien, los hiperparámetros deben ajustarse correctamente. Veamos esa etapa con un poco más de detalle.

¿Cómo funciona esa optimización simultánea del modelo y los hiperparámetros? Bueno, puedes realizar una búsqueda aleatoria, pero eso tampoco es eficiente porque el espacio de búsqueda es muy grande. Utilizamos optimización bayesiana que construye un modelo del espacio de búsqueda. Y aquí puedes ver cómo esa optimización bayesiana cambia entre diferentes tipos de modelos y optimiza el error a lo largo de las iteraciones.

¿Cómo sabemos que AutoML funciona? Comparamos AutoML con el proceso manual tradicional en dos problemas de clasificación. Primero, analizamos el reconocimiento de actividad humana, donde se utilizan datos auxiliares de medidores de teléfonos móviles. Tenemos alrededor de 7K observaciones en el conjunto que recopilamos y creamos manualmente 66 características utilizando diversas funciones de procesamiento de señales. En segundo lugar, analizamos la clasificación de sonidos cardíacos. Imagina estar en el consultorio de tu médico con un estetoscopio y escuchar el sonido de tu corazón. Para esos fonogramas, podríamos tener un conjunto de 10K observaciones disponibles públicamente y crear menos de 30 características.

¿Qué resultados obtuvimos? Puedes ver aquí que con el proceso manual, logramos precisión en los altos 90, como se desearía para una aplicación tan importante. Para AutoML, en una aplicación ligeramente menor, pero el punto es que, sin toda esa experiencia y proceso iterativo que consume mucho tiempo, obtienes muy buenos modelos en pocos pasos. Entonces, AutoML capacita a los ingenieros sin experiencia en IA para construir modelos optimizados, incluso para aplicaciones de señales donde la extracción de características es notoriamente difícil. Podemos aplicar AutoML a aplicaciones de señales en pocos pasos. Generación automática de características con wavelets. Selección automática de características para reducir el tamaño del modelo y hacer que se ajuste a tu hardware. Y selección de modelo junto con ajuste de hiperparámetros de manera eficiente utilizando optimización bayesiana. Finalmente, para implementar tu modelo de IA en sistemas integrados y en el borde, necesitas código de bajo nivel como C. MATLAB puede traducir automáticamente a código C, C++ que se puede implementar directamente y así eliminar otra barrera para una adopción más amplia de la IA.

Gracias por su atención y si desean saber más, el lunes por la tarde o por la noche, tendré una sesión más larga sobre interpretabilidad automática, un seminario sobre esos dos temas de una hora y un taller práctico de dos horas sobre aprendizaje automático y profundo utilizando MATLAB en línea. Y ahora regresaré al moderador para preguntas.

Check out more articles and videos

We constantly think of articles and videos that might spark Git people interest / skill us up or help building a stellar career

Construyendo un Asistente AI Activado por Voz con Javascript
JSNation 2023JSNation 2023
21 min
Construyendo un Asistente AI Activado por Voz con Javascript
Top Content
This Talk discusses building a voice-activated AI assistant using web APIs and JavaScript. It covers using the Web Speech API for speech recognition and the speech synthesis API for text to speech. The speaker demonstrates how to communicate with the Open AI API and handle the response. The Talk also explores enabling speech recognition and addressing the user. The speaker concludes by mentioning the possibility of creating a product out of the project and using Tauri for native desktop-like experiences.
IA y Desarrollo Web: ¿Exageración o Realidad?
JSNation 2023JSNation 2023
24 min
IA y Desarrollo Web: ¿Exageración o Realidad?
Top Content
This talk explores the use of AI in web development, including tools like GitHub Copilot and Fig for CLI commands. AI can generate boilerplate code, provide context-aware solutions, and generate dummy data. It can also assist with CSS selectors and regexes, and be integrated into applications. AI is used to enhance the podcast experience by transcribing episodes and providing JSON data. The talk also discusses formatting AI output, crafting requests, and analyzing embeddings for similarity.
El Ascenso del Ingeniero de IA
React Summit US 2023React Summit US 2023
30 min
El Ascenso del Ingeniero de IA
The rise of AI engineers is driven by the demand for AI and the emergence of ML research and engineering organizations. Start-ups are leveraging AI through APIs, resulting in a time-to-market advantage. The future of AI engineering holds promising results, with a focus on AI UX and the role of AI agents. Equity in AI and the central problems of AI engineering require collective efforts to address. The day-to-day life of an AI engineer involves working on products or infrastructure and dealing with specialties and tools specific to the field.
TensorFlow.js 101: Aprendizaje automático en el navegador y más allá
ML conf EU 2020ML conf EU 2020
41 min
TensorFlow.js 101: Aprendizaje automático en el navegador y más allá
TensorFlow.js enables machine learning in the browser and beyond, with features like face mesh, body segmentation, and pose estimation. It offers JavaScript prototyping and transfer learning capabilities, as well as the ability to recognize custom objects using the Image Project feature. TensorFlow.js can be used with Cloud AutoML for training custom vision models and provides performance benefits in both JavaScript and Python development. It offers interactivity, reach, scale, and performance, and encourages community engagement and collaboration between the JavaScript and machine learning communities.
Aplicaciones Web del Futuro con Web AI
JSNation 2024JSNation 2024
32 min
Aplicaciones Web del Futuro con Web AI
Web AI in JavaScript allows for running machine learning models client-side in a web browser, offering advantages such as privacy, offline capabilities, low latency, and cost savings. Various AI models can be used for tasks like background blur, text toxicity detection, 3D data extraction, face mesh recognition, hand tracking, pose detection, and body segmentation. JavaScript libraries like MediaPipe LLM inference API and Visual Blocks facilitate the use of AI models. Web AI is in its early stages but has the potential to revolutionize web experiences and improve accessibility.
Construyendo la IA para Athena Crisis
JS GameDev Summit 2023JS GameDev Summit 2023
37 min
Construyendo la IA para Athena Crisis
Join Christoph from Nakazawa Tech in building the AI for Athena Crisis, a game where the AI performs actions just like a player. Learn about the importance of abstractions, primitives, and search algorithms in building an AI for a video game. Explore the architecture of Athena Crisis, which uses immutable persistent data structures and optimistic updates. Discover how to implement AI behaviors and create a class for the AI. Find out how to analyze units, assign weights, and prioritize actions based on the game state. Consider the next steps in building the AI and explore the possibility of building an AI for a real-time strategy game.

Workshops on related topic

IA a demanda: IA sin servidor
DevOps.js Conf 2024DevOps.js Conf 2024
163 min
IA a demanda: IA sin servidor
Top Content
Featured WorkshopFree
Nathan Disidore
Nathan Disidore
En esta masterclass, discutimos los méritos de la arquitectura sin servidor y cómo se puede aplicar al espacio de la IA. Exploraremos opciones para construir aplicaciones RAG sin servidor para un enfoque más lambda-esque a la IA. A continuación, nos pondremos manos a la obra y construiremos una aplicación CRUD de muestra que te permite almacenar información y consultarla utilizando un LLM con Workers AI, Vectorize, D1 y Cloudflare Workers.
Aprovechando LLMs para Construir Experiencias de IA Intuitivas con JavaScript
JSNation 2024JSNation 2024
108 min
Aprovechando LLMs para Construir Experiencias de IA Intuitivas con JavaScript
Featured Workshop
Roy Derks
Shivay Lamba
2 authors
Hoy en día, todos los desarrolladores están utilizando LLMs en diferentes formas y variantes, desde ChatGPT hasta asistentes de código como GitHub CoPilot. Siguiendo esto, muchos productos han introducido capacidades de IA integradas, y en este masterclass haremos que los LLMs sean comprensibles para los desarrolladores web. Y nos adentraremos en la codificación de tu propia aplicación impulsada por IA. No se necesita experiencia previa en trabajar con LLMs o aprendizaje automático. En su lugar, utilizaremos tecnologías web como JavaScript, React que ya conoces y amas, al mismo tiempo que aprendemos sobre algunas nuevas bibliotecas como OpenAI, Transformers.js
Masterclass: Qué son y cómo aprovechar los LLMs
React Summit 2024React Summit 2024
66 min
Masterclass: Qué son y cómo aprovechar los LLMs
Featured Workshop
Nathan Marrs
Haris Rozajac
2 authors
Únete a Nathan en esta sesión práctica donde primero aprenderás a alto nivel qué son los modelos de lenguaje grandes (LLMs) y cómo funcionan. Luego sumérgete en un ejercicio de codificación interactivo donde implementarás la funcionalidad de LLM en una aplicación de ejemplo básica. Durante este ejercicio, adquirirás habilidades clave para trabajar con LLMs en tus propias aplicaciones, como la ingeniería de indicaciones y la exposición a la API de OpenAI.
Después de esta sesión, tendrás una idea de qué son los LLMs y cómo se pueden utilizar prácticamente para mejorar tus propias aplicaciones.
Tabla de contenidos:- Demostración interactiva de la implementación de funciones básicas impulsadas por LLM en una aplicación de demostración- Discutir cómo decidir dónde aprovechar los LLMs en un producto- Lecciones aprendidas sobre la integración con OpenAI / descripción general de la API de OpenAI- Mejores prácticas para la ingeniería de indicaciones- Desafíos comunes específicos de React (gestión de estado :D / buenas prácticas de UX)
Trabajando con OpenAI y la Ingeniería de Prompts para Desarrolladores de React
React Advanced Conference 2023React Advanced Conference 2023
98 min
Trabajando con OpenAI y la Ingeniería de Prompts para Desarrolladores de React
Top Content
Workshop
Richard Moss
Richard Moss
En esta masterclass daremos un recorrido por la IA aplicada desde la perspectiva de los desarrolladores de front end, enfocándonos en las mejores prácticas emergentes cuando se trata de trabajar con LLMs para construir grandes productos. Esta masterclass se basa en los aprendizajes obtenidos al trabajar con la API de OpenAI desde su debut en noviembre pasado para construir un MVP funcional que se convirtió en PowerModeAI (una herramienta de creación de ideas y presentaciones orientada al cliente).
En la masterclass habrá una mezcla de presentación y ejercicios prácticos para cubrir temas que incluyen:
- Fundamentos de GPT- Trampas de los LLMs- Mejores prácticas y técnicas de ingeniería de prompts- Uso efectivo del playground- Instalación y configuración del SDK de OpenAI- Enfoques para trabajar con la API y la gestión de prompts- Implementación de la API para construir una aplicación orientada al cliente potenciada por IA- Ajuste fino y embeddings- Mejores prácticas emergentes en LLMOps
Construyendo Aplicaciones AI para la Web
React Day Berlin 2023React Day Berlin 2023
98 min
Construyendo Aplicaciones AI para la Web
Workshop
Roy Derks
Roy Derks
Hoy en día, cada desarrollador está utilizando LLMs en diferentes formas y figuras. Muchos productos han introducido capacidades AI incorporadas, y en esta masterclass aprenderás cómo construir tu propia aplicación AI. No se necesita experiencia en la construcción de LLMs o en el aprendizaje automático. En cambio, utilizaremos tecnologías web como JavaScript, React y GraphQL que ya conoces y amas.
Construyendo tu Aplicación de IA Generativa
React Summit 2024React Summit 2024
82 min
Construyendo tu Aplicación de IA Generativa
WorkshopFree
Dieter Flick
Dieter Flick
La IA generativa está emocionando a los entusiastas de la tecnología y a las empresas con su vasto potencial. En esta sesión, presentaremos Retrieval Augmented Generation (RAG), un marco que proporciona contexto a los Modelos de Lenguaje Grande (LLMs) sin necesidad de volver a entrenarlos. Te guiaremos paso a paso en la construcción de tu propia aplicación RAG, culminando en un chatbot completamente funcional.
Conceptos Clave: IA Generativa, Retrieval Augmented Generation
Tecnologías: OpenAI, LangChain, AstraDB Vector Store, Streamlit, Langflow