QwenCloudBRASIL
Tradução de apoio para consulta. Código e identificadores técnicos preservados. Consultar referência original ↗

Ajuste de precisão

Maximize a correção e o comportamento consistente em modelos de texto, imagem, vídeo, fala e visão em QwenCloud

“Precisão” significa coisas diferentes para modalidades diferentes: para geração de texto significa respostas factualmente corretas e bem formatadas; para geração de imagens e vídeos significa combinar fielmente a intenção do prompt com alta qualidade visual; para síntese de fala, significa áudio com som natural e características de voz corretas; e para modelos de visão ou omni significa interpretar corretamente as entradas visuais. A abordagem de otimização subjacente, entretanto, é a mesma em todos eles.

Este guia aborda uma abordagem estruturada para diagnosticar e corrigir problemas de precisão — desde a engenharia imediata até o RAG e o ajuste fino — para que você possa passar de um protótipo funcional para um sistema de produção confiável. Embora grande parte da orientação detalhada se concentre na geração de texto, cada seção inclui estratégias para outras modalidades, quando aplicável.

A estrutura de otimização

Pense na otimização da precisão em dois eixos:

A maioria das aplicações do mundo real precisa de melhorias em ambos os eixos. Uma jornada de otimização típica é assim:

  1. Comece com engenharia imediata – obtenha os melhores resultados possíveis com instruções e exemplos claros
  2. Construir um conjunto de avaliação para medir o progresso de forma objetiva
  3. Diagnosticar se o problema é falta de conhecimento, comportamento inconsistente ou ambos
  4. Adicione RAG se o modelo precisar de informações externas
  5. Adicione ajustes finos se o modelo precisar aprender novos padrões
  6. Combine técnicas e repita

Engenharia imediata

A engenharia imediata é sempre o primeiro passo. Não requer infraestrutura, fornece feedback imediato e muitas vezes resolve mais do que o esperado.

Estratégia Quando usar Exemplo
Seja específico Modelo dá respostas vagas ou equivocadas Em vez de "Resuma isto", diga "Resuma este artigo em 3 marcadores, cada um com menos de 20 palavras"
Adicionar contexto Modelo carece de conhecimento de domínio Incluir texto de referência, definições ou restrições relevantes no prompt do sistema
Use exemplos de poucas fotos O formato ou estilo do modelo é inconsistente Forneça de 2 a 5 exemplos de entrada/saída que demonstrem o comportamento exato que você want
Cadeia de pensamento Modelo comete erros de raciocínio Adicione "Pense passo a passo" ou forneça um exemplo prático mostrando o processo de raciocínio
Definir restrições Modelo produz conteúdo indesejado Declare explicitamente o que incluir, excluir e como lidar com casos extremos

Para técnicas detalhadas de engenharia de prompt, consulte Engenharia de prompt de geração de texto.

Modelos de contexto longo como qwen3.7-max suportam entradas de até 256 mil tokens, mas as informações colocadas no meio de contextos muito longos podem receber menos atenção do que as informações no início ou no final. Coloque o contexto mais importante – instruções, material de referência principal – no início ou no final do prompt.

Prompt de engenharia para outras modalidades

Geração de imagem

Geração de vídeo

Modelos Vision e Omni

Discurso

Construa um conjunto de avaliação

Antes de otimizar, você precisa encontrar uma forma de medir a melhoria. Crie um conjunto de avaliação de 30 a 50 pares de perguntas e respostas que representem seu caso de uso real. Cada par deve incluir:

Execute seu conjunto de avaliação em relação ao modelo atual para estabelecer uma pontuação de linha de base. Em seguida, execute-o novamente após cada alteração para confirmar se a alteração realmente ajuda.

Abordagens de avaliação automatizadas

A revisão manual não é escalonável. Considere estas abordagens automatizadas:

Abordagem Melhor para Como funciona
Correspondência exata Classificação, extração, tarefas sim/não Compare a saída do modelo diretamente com a resposta esperada
ROUGE / BERTScore Resumo, tradução Medir a sobreposição de tokens ou a semelhança semântica entre a saída do modelo e a referência
LLM como juiz Geração aberta, tarefas complexas Use um modelo capaz como qwen3.7-max pontuar resultados em relação à sua rubrica
Métricas específicas de tarefas Tarefas específicas do domínio Métricas personalizadas (como JSON válido, sintaxe SQL correta, cobertura de entidade)

Para tarefas em que a correção é diferenciada, o LLM como juiz com uma rubrica de pontuação clara geralmente fornece a melhor relação sinal-ruído.

Avaliando modalidades não textuais

Diagnosticar o problema

Depois de obter os resultados da avaliação, classifique as falhas em dois tipos:

Estas categorias são complementares e não mutuamente exclusivas. Um único aplicativo pode ter ambos os problemas – e muitas vezes acontece. Diagnostique cada caso de falha individualmente para escolher a solução certa.

Geração aumentada de recuperação (RAG)

O RAG injeta conhecimento externo relevante em cada solicitação no momento da inferência. Em vez de confiar apenas no que o modelo aprendeu durante o treinamento, você recupera os documentos mais relevantes da sua base de conhecimento e os inclui no prompt. O RAG aplica-se principalmente a tarefas de texto e visão. Para geração de imagens e vídeos, a abordagem equivalente é fornecer imagens de referência, descrições detalhadas de estilo ou amostras de áudio para orientar a saída.

Use RAG quando:

Avalie seu pipeline RAG

A precisão do RAG depende de duas coisas: qualidade de recuperação e qualidade de geração. Avalie-os separadamente:

Métrica O que mede Como verificar
Precisão de recuperação Os documentos recuperados são relevantes? Amostra de 50 consultas, verifique se os 3 primeiros resultados contêm as informações necessárias
Recuperação de recuperação Todos os documentos relevantes foram encontrados? Para perguntas de resposta conhecida, verifique se o documento de origem aparece nos resultados
Fidelidade de geração O modelo segue o conteúdo recuperado? Verifique se as respostas são fundamentadas no contexto fornecido e não alucinadas
Precisão de ponta a ponta O pipeline completo fornece respostas corretas? Execute seu conjunto de avaliação por meio do pipeline RAG completo

Dicas de otimização de recuperação

Para construir pipelines RAG com QwenCloud:

Combinando técnicas

Os sistemas de produção mais eficazes combinam engenharia imediata e RAG:

Ao combinar técnicas, tenha em mente dois princípios:

  1. Mais contexto pode adicionar ruído. Recuperar muitos documentos ou colocar muitas informações no prompt pode confundir o modelo. Sempre valide se adicionar contexto realmente melhora suas pontuações de avaliação.
  2. Esgote primeiro os métodos mais simples. A engenharia imediata é rápida e gratuita. RAG requer esforço moderado. Passe para a próxima técnica somente quando a atual estabilizar.

Quanta precisão é boa o suficiente

Perspectiva de negócios

A precisão perfeita raramente é alcançável ou necessária. A meta certa depende do custo dos erros versus o custo da melhoria.

Considere um cenário de atendimento ao cliente:

Nível de precisão Comportamento Impacto nos negócios
80% Lida corretamente com questões comuns, falha em casos extremos Reduz o volume de suporte, mas requer revisão humana para ~20% das consultas
90% Lida com a maioria das questões, incluindo alguns casos extremos Economias de custos significativas, escalonamentos ocasionais
95% Lida com quase todas as questões corretamente Automação quase total, rara intervenção humana
99% Respostas quase perfeitas Retornos decrescentes — os últimos 4% podem custar mais do que os primeiros 95%

O salto de 90% para 95% muitas vezes requer mais esforço do que o salto de 0% para 90%. Decida onde o custo marginal da melhoria excede o valor marginal.

Perspectiva técnica

Projete seu sistema para falhar normalmente quando o modelo errar:

##Próximas etapas