Control a Robot with Your Voice: from WebBluetooth to WhatsApp en pt

Modern toy robots use Bluetooth Low Energy (BLE) to communicate with controllers and mobile apps. In this talk, you’ll learn how to go beyond traditional controls and use voice commands to interact with physical hardware. We’ll explore how the WebBluetooth API can send instructions directly to robots and how, by integrating it with the WhatsApp API, you can turn them into devices controlled by both voice and messaging. Through practical examples, you’ll see how to trigger movements, lights, and sounds using only your voice—creating interactive experiences that blend IoT, APIs, and real-time communication.

Controle um Robô com sua Voz: de WebBluetooth ao WhatsApp en pt

Robôs de brinquedo modernos utilizam Bluetooth Low Energy (BLE) para se comunicar com controles e aplicativos móveis. Nesta palestra, você vai aprender como ir além desses controles tradicionais e dar comandos de voz para manipular hardware físico. Vamos explorar como a API WebBluetooth permite enviar instruções diretas para robôs e como, ao integrar essa camada com a API de WhatsApp, é possível transformá-los em dispositivos controlados por mensagens e voz. A partir de exemplos práticos, veremos como acionar movimentos, luzes e sons apenas com a fala, criando experiências interativas que unem IoT, APIs e comunicação em tempo real.

Implementando modelos customizados de autenticação no Firebase pt

Esta palestra aborda o uso do modelo "custom provider" para construir outras formas de autenticação no Firebase para uso da plataforma em dispositivos móveis e páginas web.

O Firebase já possibilidade a autenticação por SMS, porém é possível utilizar outras plataformas para criar e autenticar usuários de acordo com a necessidade do serviço que está desenvolvendo.

Nesta palestra demonstraremos ao vivo a implementação de autenticação utilizando WhatsApp e a integração com o Firebase Authentication.

Existe ainda uma necessidade de apontar as possibilidades de uso de provedores customizados de autenticação. O Firebase é a principal ferramenta para implementação de soluções mobile e web da Google e possui vários produtos para ajudar pessoas desenvolvedoras a construir rapidamente aplicações e serviços com escala.

Nesta apresentação o objetivo é incluir possibilidades de autenticação além das disponibilizadas pela plataforma e ensinar pessoas desenvolvedoras sobre sua implementação, com um exemplo prático do envio de pins através do WhatsApp, SMS ou por chamadas telefônicas.

IA generativa aplicada em chamadas de voz ou streaming de áudio pt

A IA generativa vai impactar várias áreas na tecnologia e principalmente em serviços. Para quem acha que LLMs (ou grandes modelos de linguagem) são apenas para conversas de texto, imagine que existem ainda muitas oportunidades, desde o reconhecimento de imagem até a implementação de bots de voz.

Nesta palestra abordarei com um exemplo prático o uso de LLMs para atendimento de voz, partindo de uma solução "low code" com a implementação de um backend com ChatGPT da OpenAI e/ou Gemini da Google para realizar um atendimento por telefone.

Ainda existem desafios sobre o uso de IA generativa em "real time", especialmente pra conversas assíncronas. Vou mostrar de forma prática exemplos simples e como reduzir a fricção dos usuários com algumas medidas de usabilidade.

The Impact of AI on the Evolution of Speech Recognition and Synthesis en pt

Google Chrome has incorporated speech-to-text functionality since its version 25. However, it is only now that we have robust tools and APIs to integrate artificial intelligence, intention recognition, and LLM (Language Model) services, opening up new possibilities for the development of intelligent services, both within the browser and across other communication channels.

In this lecture, we will embark on a practical journey that spans from utilizing the speech-to-text and text-to-speech (TTS) functionalities in the browser to integrating these capabilities into cloud platforms, providing a broader and more in-depth experience.

From NLU chatbots to ChatGPT. How to start and thrive with AI and bots using JavaScript? en pt

LLMs (Large Language Models) and AI are the top notch techs for the moment, but isn't clear for developers how to start with them and the pros and cons about each chatbot technology.

From DialogFlow to ChatGPT, this workshop will be a hands on about how to start with each chatbot technology and what you need to take care when implementing them.

Game On: How to gamify customer engagement with WhatsApp API en

Learn how to build and start experimenting on gamification using WhatsApp UI and how to get the best of its interface using rich media content, cards, buttons and lists to play games, control IoT devices push its boundaries to more than notifications, customer support or simple chatbots.

Hacking a Vending Machine with Javascript, WhatsApp and Firebase en

Sometimes you don't need to reinvent the wheel when you are building something, or maybe you would like to create a new interface to control devices and put then connected to the internet.

In this talk I'll walk through the process to build a vending machine using WhatsApp as the main interface and Firebase as the backend and the database. How to make that easy and skip get into the hard way to build hardware.

O impacto da IA na evolução o reconhecimento e síntese de voz en pt

O Google Chrome incorpora a funcionalidade de transcrição de fala (speech-to-text) desde a sua versão 25. No entanto, é somente agora que dispomos de APIs e ferramentas robustas para integrar inteligência artificial, reconhecimento de intenções e serviços de LLM, abrindo novas possibilidades para o desenvolvimento de serviços inteligentes, tanto dentro do navegador quanto em outros canais de comunicação.

Nesta palestra, conduziremos uma jornada prática que abrange desde a utilização das funcionalidades de speech-to-text e text-to-speech (TTS) no navegador até a integração destas capacidades em plataformas na nuvem, proporcionando uma experiência mais ampla e aprofundada.

A ideia é apresentar sobre a evolução das APIs e ferramentas para reconhecimento de voz com exemplos práticos, desde o webspeech API residente no Chrome e disponível em outros navegadores e demonstrar outros casos de uso, passando por outros serviços de transcrição como o Whisper da OpenAI, Google Speech to Text, entre outros e apresentar soluções de síntese de voz, como Elevenlabs, Google TTS, etc que já fazem uso de IA Generativa.

Using Firebase for Gamification on WhatsApp: A Next-Level DevRel Strategy to measure impact en

In the realm of Developer Relations (DevRel), the ability to measure impact and explore innovative communication APIs are paramount for driving engagement and fostering developer success. This session delves into the strategic fusion of Firebase, Google Cloud, gamification principles, and communication platforms, offering a cutting-edge approach to DevRel. By harnessing Google Cloud robust features and seamlessly integrating them with any communication platform, developers can unlock a realm of possibilities for engaging and incentivizing their communities.

From gamification elements to unconventional applications like controlling a vending machine via WhatsApp or sharing each other LinkedIn accounts, these examples illustrate the creative potential of combining Google Products and other APIs to drive engagement and foster community interaction while it's generating data that will result in insights about their community and their applications.

Unveiling the Potential of ChatGPT: Image Recognition and Interactions on WhatsApp en pt

We will practically explore the application of ChatGPT's image recognition functionality on WhatsApp for the development of innovative applications. We will use a specific case study from a Climate hackathon, where we utilized the ChatGPT API to identify and suggest the appropriate destination for waste. Additionally, we will integrate other WhatsApp API functionalities to capture user geolocation and provide a list of the nearest and most suitable waste collection points based on the identification performed.

Workshop or talk format!

Necessary to use Twilio's WhatsApp sandbox (free) and have a paid OpenAI account.

Desvendando o Potencial da IA Generativa: Reconhecimento de Imagens e Interações no WhatsApp en pt

Exploraremos de forma prática a aplicação da funcionalidade de reconhecimento de imagens da Gemini e do ChatGPT no WhatsApp para o desenvolvimento de aplicações inovadoras. Utilizaremos como estudo de caso um exemplo concreto proveniente de um hackathon do Clima, onde empregamos a API do ChatGPT para identificar e sugerir o destino adequado para resíduos. Além disso, integraremos outras funcionalidades da API do WhatsApp para capturar a geolocalização do usuário e apresentar uma lista dos pontos de entrega de resíduos mais próximos e apropriados, com base na identificação realizada.

Formato de workshop ou palestra!

Necessário utilizar a Sandbox da API de WhatsApp da Twilio e ter uma conta paga da OpenAI account.

Internet das Coisas aplicada em eventos: como construir e controlar dispositivos pelo WhatsApp pt

Grandes show e eventos fazem uso de tecnologias de iluminação muito conhecidas, porém é improvável que estes tecnologias tenham algum tipo de conectividade para além do local do evento. Apresentaremos nesta palestra como criamos uma interface via WhatsApp para comunicação com estes dispositivos de iluminação e realizaremos uma demonstração interativa ao vivo com participantes do evento.

De Chatbots com NLU ao ChatGPT. Como começar e prosperar com IA e bots usando JavaScript? en pt

Os LLMs (Grandes Modelos de Linguagem) e a IA são as tecnologias de ponta do momento, mas não está claro para os desenvolvedores como começar com elas e os prós e contras de cada tecnologia de chatbot.

Do DialogFlow ao ChatGPT, este workshop será uma prática sobre como começar com cada tecnologia de chatbot e o que você precisa ter em mente ao implementá-las.

IA Generativa aplicada em contextos de voz: de ligações telefônicas ao reconhecimento no navegador pt

Nesta palestra, voltada para pessoas desenvolvedoras, vamos explorar aplicações práticas de Modelos de Linguagem de Grande Escala (LLMs) no contexto de reconhecimento de voz. Focaremos em como a IA generativa pode ser utilizada para criar experiências interativas e inteligentes independentemente do canal escolhido.

Utilizando as principais ferramentas para síntese de voz, apresentaremos exemplos práticos e demonstrações ao vivo de um bot para atendimento telefônico e de um sistema de reconhecimento e síntese de voz utilizando o próprio navegador.

Generative AI and Firebase: Updates from Google I/O 2024 en pt

From Data Connect to the new App Hosting, get up to date about what's new in Firebase, directly from Google I/O.

IA Generativa e Firebase: atualizações do Google I/O en pt

Desde o Data Connect até o novo App Hosting, confira todas as novidades sobre Firebase, diretamente do Google I/O.