Recursive Harness Engineering
Primeiro harness engineering, depois melhoria recursiva.
Sistemas de AI em produção · Berlim
Construo sistemas de AI que melhoram com base em evidências
Desenho sistemas de AI em produção que abrangem engenharia de software, agentes, avaliação, retrieval, segurança e infraestrutura, transformando traces e falhas em experiências controladas, releases fiáveis e comportamentos mais seguros.
A minha série Recursive Harness Engineering começa pelos fundamentos: construir um harness, avaliar o seu comportamento de forma independente e testar alterações. Os capítulos seguintes automatizarão a procura de melhorias e investigarão se a experiência de rondas anteriores ajuda em tarefas novas.
Automatize a experiência, não a autoridade para a declarar segura.
- Staff AI System Engineersoftware · agentes · avaliação · segurança
- Mais de 11 anosAI e software em produção
- Doutoramentodiagnóstico com AI · equivalente a PhD
- Código abertosistemas reproduzíveis
Séries de artigos
Engineering the Agentic Stack
Em ordem. Comece pelo ciclo.
Por tema
Agentes de IA 17 Engenharia de modelos 9 Infraestrutura de IA 6 Sistemas de recuperação e linguagem 4 Ferramentas de desenvolvimento 8
Mais lidos
- Sistemas de recuperação e linguagem Guia de NER 2026: GLiNER, spaCy, Transformers e LLMs 50 min
- Sistemas de recuperação e linguagem OCR em 2026: pipelines clássicos, VLMs e Document AI 27 min
- Sistemas de recuperação e linguagem Métricas de avaliação de RAG: retrieval, reranking e geração 54 min
- Engenharia de modelos Guia de fine-tuning de LLMs: quando fazer fine-tuning, LoRA e QLoRA 35 min
Artigos recentes
Todos os artigos →- Agente ou fluxo de trabalho: cinco desenhos para um assistente de apoio ao cliente 25 min Recursive Harness Engineering · Parte 3 de 3
As mesmas tarefas de apoio ao cliente como agente, agente com aprovação, agente dentro de um fluxo de trabalho, router e fluxo de trabalho sem agente, comparadas no mesmo conjunto de testes.
- Desenhar um agent harness: da tarefa à arquitetura 32 min Recursive Harness Engineering · Parte 2 de 3
Como os requisitos da tarefa moldam um agent harness: escolher o fluxo de controlo, as ferramentas, a execução de código, o estado, as permissões e a evidência antes de escolher um framework.
- Recursive harness engineering: dos traces a uma memória melhor 22 min Recursive Harness Engineering · Parte 1 de 3
Um prólogo ao recursive harness engineering: testar alterações sequenciais de um LLM a uma ferramenta de memória e compará-las com uma pesquisa simples.
Sobre
Os sistemas em torno do modelo são o produto.
Sou Slava Dubrov, Staff AI System Engineer com um doutoramento em diagnóstico com AI. Trabalho em engenharia de software, sistemas de agentes, avaliação, retrieval, segurança e infraestrutura de produção.