Pare de usar métricas prontas para avaliar suas aplicações de IA. Você está perdendo seu tempo, e sua aplicação não está melhorando. Aqui estão algumas dessas métricas: relevância, taxa de alucinação, correção, completude, naturalidade, coerência, etc. Pare. Eu vi aplicações se destacando em cada uma dessas métricas e ainda assim falhando em produzir bons resultados. O que você precisa fazer: realizar uma Análise de Erros para identificar métricas específicas para sua aplicação. Em vez de "Completude", quero ver você acompanhando algo como "A resposta contém todos os campos relevantes", ou "O tempo de agendamento na resposta usa o fuso horário correto." Métricas específicas e personalizadas funcionam. Métricas prontas não.

Quero ajudar cada desenvolvedor a tornar-se uma ordem de magnitude melhor em Engenharia de IA/ML. Aqui estão os tópicos que vou abordar na minha próxima turma. Começamos em duas semanas (4 de agosto). • Mais de 20 horas de aulas ao vivo • Prática prática com uma implementação de sistema de ponta a ponta • Ferramentas de código aberto • Construa uma vez, implemente em qualquer lugar Estudantes do Google, AWS, Netflix e outras grandes empresas. Mais de 2.000 graduados. Melhor programa de engenharia online.

O que é isto?

A autenticação do MCP é um grande passo! Se quisermos que os agentes façam trabalho prático, precisamos que eles: • Chamem APIs de terceiros em seu nome • Realizem ações que devem ser rastreáveis • Apliquem diferentes permissões para diferentes funções Por exemplo, suponha que você queira que seu assistente de IA envie e-mails em seu nome. Agora você pode fazer com que o assistente use um Servidor MCP, peça para você se autenticar em um navegador e, em seguida, use o token gerado para enviar esses e-mails. Isso é muito legal!

Aqueles que são tolos o suficiente para confiar na empolgação e parar de aprender programação merecem o futuro que os aguarda.

O caching é uma das coisas mais difíceis em que você vai trabalhar. Atualmente, estou trabalhando em um cache semântico para uma aplicação de IA. Com base no que estamos vendo, é um enorme compromisso entre custos e precisão. Estamos economizando cerca de 20% da nossa conta de inferência: muitas das consultas estão atingindo o cache, então não precisamos gastar o modelo gerando respostas para elas. No entanto, muitas das consultas estão agora retornando informações ligeiramente desatualizadas, pois não acessam o modelo, resultando em respostas obsoletas. Estou passando a maior parte do meu tempo trabalhando na função de similaridade para detectar acertos no cache. Parece simples, mas está se mostrando muito difícil de fazer isso corretamente. Nota lateral: Este cache semântico introduz latência extra, especialmente porque a maioria das consultas vai perder o cache. Quando elas acertam, as respostas são mais rápidas, mas essas são a exceção. De qualquer forma, isso valeu muito a pena.

Estou a cobrar $1,000/hora para arranjar a sua confusão codificada de vibrações.

O primeiro agente de design já lançado é realmente incrível! Este é um designer a tempo inteiro, disponível 24/7, que pode trabalhar de forma autónoma em qualquer projeto de design para você. Isto é suficiente para 99% das minhas necessidades de design. Aqui estão alguns exemplos do que eu criei usando-o:

Literalmente ninguém sabe o que é um agente. Já vi muitas pessoas a referir-se a aplicações como "agentes" desde que utilizem um LLM. Depois temos aqueles que falam sobre "sistemas agenticos" e "fluxos de trabalho agenticos." Se você perguntar o que eles querem dizer, eles começam a gaguejar.

GRANDE ATUALIZAÇÃO para AG-UI! Os 3 protocolos nativos de IA: MCP, A2A e AG-UI. Há uma enorme adoção em todos os setores, e atualizações massivas e contínuas para cada um desses protocolos. Aqui estão algumas atualizações massivas para AG-UI: Para aqueles que ainda não ouviram, AG-UI (Protocolo de Interação Agente-Usuário) permite integrar agentes em aplicações frontend. Ele oferece: • Atualizações em tempo real • Orquestração de ferramentas • Estado mutável compartilhado • Limites de segurança • Sincronização de UI Eles acabaram de atualizar o protocolo, e aqui está o que há de novo: 1. AG-UI agora tem um CLI! 2. Pydantic AI agora é compatível com AG-UI. 3. Novo fluxo 10x mais simples para construir clientes adicionais de AG-UI. 4. Pré-lançamento de um handshake entre AG-UI e A2A. 5. Agora você pode visualizar suas interações A2A. 6. Interações A2A agora podem contatar usuários. 7. Há um fluxo de contribuição completamente reformulado. Você pode construir sua primeira aplicação alimentada por AG-UI com um único comando: $ npx create-ag-ui-app my-agent-app Verifique o repositório do protocolo no GitHub: