BRASILDimensões de avaliação
Criar e gerenciar dimensões de avaliação em QwenCloud com pontuação numérica LLM, classificação LLM e anotação manual.
As dimensões de avaliação definem os critérios de pontuação para tarefas de avaliação. Você pode criar e gerenciar dimensões em Dimensões de avaliação página do console.
Tipos de dimensão
| Tipo | Descrição | Método de pontuação | Casos de uso |
|---|---|---|---|
| LLM - Numérico | Um modelo de juiz pontua as respostas em uma escala numérica (por exemplo, 0-5) | Saída numérica | Qualidade de perguntas e respostas, qualidade de geração de conteúdo |
| LLM - Classificação | Um modelo de juiz classifica as respostas como aprovado/reprovado | Saída de etiqueta | Segurança de conteúdo, verificações de correção |
| Manual - Classificação | Anotadores humanos rotulam respostas usando categorias personalizadas | Rotulagem manual | Avaliação da criatividade, parecer especializado |
Uma única tarefa de avaliação pode combinar múltiplas dimensões para avaliar o desempenho do modelo sob diferentes perspectivas.
Crie uma dimensão de avaliação
Abra a página de criação.
Na página de lista de dimensões de avaliação, clique em **Criar**.
Enter basic information
Insira um **nome da dimensão** (obrigatório) e uma **descrição** (opcional, usada para descrever o propósito de avaliação da dimensão).
Selecione o tipo de dimensão
Escolha LLM - Numérico, LLM - Classificação ou Manual - Classificação. Os campos restantes variam de acordo com o tipo.
Configure regras de pontuação.
Conclua a configuração específica do tipo (veja abaixo) e clique em **Criar**.
LLM - Numérico
Para cenários que exigem pontuação quantitativa (por exemplo, qualidade de resposta classificada de 1 a 5).
| Campo | Descrição |
|---|---|
| Modelo de juiz | O modelo de IA que realiza pontuação |
| Modelo de pontuação | Um modelo de prompt de pontuação predefinido. Opções: Avaliação geral (padrão — pontuações em relevância, informatividade, clareza, etc.), Semelhança semântica (avalia quão próximo o resultado corresponde à resposta de referência), Pontuador personalizado (escreva seu próprio prompt de pontuação) |
| Alerta | Instruções de pontuação. Suporta variáveis ${prompt}, ${output}e ${completion} |
| Faixa de pontuação | Pontuações mínimas e máximas (padrão 0-5) |
| Limiar de aprovação | Pontuações iguais ou superiores a este valor são consideradas aprovadas (padrão 3) |
As variáveis a seguir podem ser usadas em prompts e são automaticamente substituídas pelo conteúdo real durante a avaliação:
${prompt}— Entrada do usuário (a pergunta dos dados de avaliação)${output}— Saída do modelo (a resposta gerada pelo modelo avaliado)${completion}— Resposta de referência (a resposta esperada dos dados de avaliação, usada quando uma resposta padrão estiver disponível)
LLM - Classificação
Para cenários binários de aprovação/reprovação (por exemplo, se uma resposta atende a critérios específicos, verificações de segurança de conteúdo).
| Campo | Descrição |
|---|---|
| Modelo de juiz | O modelo de IA que realiza a classificação |
| Modelo de pontuação | Um modelo de prompt de classificação predefinido. Opções: Correspondência padrão (padrão), Análise de sentimento (classifica o sentimento da resposta), Pontuador personalizado (escreva seu próprio prompt de classificação) |
| Alerta | Instruções de classificação. Suporta variáveis ${prompt}, ${output}e ${completion}. O modelo do juiz produz [[Pass]] ou [[Fail]] |
| Etiquetas | Defina conjuntos de rótulos de aprovação e reprovação. Etiquetas personalizadas podem ser adicionadas (até 20 por categoria) |
Manual - Classificação
Para cenários que exigem julgamento humano. Nenhum modelo de juiz ou configuração de prompt é necessário.
| Campo | Descrição |
|---|---|
| Etiquetas | Defina conjuntos de rótulos de aprovação e reprovação. Etiquetas personalizadas podem ser adicionadas (até 20 por categoria) |
Modelos de juízes
As dimensões baseadas em LLM suportam os seguintes modelos de juiz (sujeitos à disponibilidade do console):
- Qwen3.7-Plus-2026-05-26
- Qwen3.7-Max-2026-06-08
- Qwen3.6-Flash-2026-04-16
- DeepSeek-V4-Pro
- DeepSeek-V4-Flash-0731
Gerenciar dimensões de avaliação
Na página da lista de dimensões de avaliação, você pode:
-
Filtro — Use o menu suspenso de tipo para filtrar por tipo de dimensão.
-
Detalhes — Clique no botão de detalhes na coluna de ações para visualizar as configurações de dimensão.
-
Excluir — Clique no botão excluir na coluna de ações para remover uma dimensão.
As dimensões de avaliação referenciadas por tarefas de avaliação não podem ser excluídas. Para excluir uma dimensão, primeiro exclua as tarefas de avaliação que fazem referência a ela.
##Próximas etapas
- Tarefas de avaliação – Use dimensões de avaliação para criar tarefas de avaliação.
- Criar um conjunto de dados - Prepare um conjunto de dados de avaliação.