O LangSmith, plataforma especializada em construção e otimização de aplicações de linguagem, revelou uma nova homepage e ferramentas de organização que facilitam o trabalho de equipes de engenharia. Com base em feedbacks coletados de milhares de desenvolvedores, a companhia implementou mudanças focadas em três áreas principais: observabilidade, avaliação e engenharia de prompts.

Na seção de *Observabilidade*, foram introduzidos *Tracing Projects* e *Dashboards*. Essas ferramentas permitem que os engenheiros analisem o desempenho de suas aplicações LLM, identificando problemas e monitorando métricas cruciais ao longo do tempo. Essa capacidade de observar dados em nível granular se torna essencial para a depuração e otimização durante o ciclo de vida das aplicações.

A seção de *Avaliação* contém recursos como *Datasets*, *Experiments* e *Annotation Queues*, que ajudam os desenvolvedores a realizar avaliações contínuas de suas aplicações. A ferramenta de avaliação destaca regressões e melhorias em métricas como precisão e estilo, facilitando o processo criativo e a revisão por humanos.

1. Observabilidade: rastreamento detalhado de projetos e dashboards personalizáveis.

2. Avaliação: gerenciamento de datasets e organização de feedback humano.

3. Engenharia de Prompts: armazenamento e versão de prompts para colaboração eficaz.

4. Melhorias no uso de Resource Tags para organizar recursos.

5. Planejamento para introdução de Controle de Acesso Baseado em Atributos (ABAC).

Na seção de *Engenharia de Prompts*, os usuários podem armazenar, versionar prompts e utilizar um *Playground* para testar prompts em tempo real. LangSmith também introduziu novas *Resource Tags*, permitindo uma organização mais flexível dos recursos, que pode agora abranger múltiplos projetos e ambientes, como desenvolvimento, staging e produção.

- Acesso facilitado a métricas e desempenho. - Organização personalizável de recursos. - Integração contínua de feedback. - Preparação para futuras atualizações de segurança.

O LangSmith se destaca como uma ferramenta crucial para desenvolvedores que buscam não apenas construir, mas também otimizar suas aplicações LLM. A versatilidade das novas funcionalidades promete uma experiência mais rica e eficiente para os usuários, ao mesmo tempo em que prepara o terreno para melhorias futuras.

Com as novas implementações, a LangSmith reafirma seu compromisso em facilitar a vida dos desenvolvedores. Ao explorar a homepage reformulada e os novos recursos, os usuários são incentivados a compartilhar suas opiniões através do formulário de feedback no aplicativo. Para mais atualizações e conteúdos sobre inovação em tecnologia, assine nossa newsletter e acompanhe nossas publicações diárias.

FONTES:

1. LangSmith Blog

2. LangChain Product Announcement

3. LangChain Documentation