Artificial Analysis Lança Benchmarks de IA Específicos da Indústria; Claude Fable 5 Lidera, GLM-5.2 Desafia Modelos de Código Fechado

A Artificial Analysis lançou seis índices de desempenho específicos da indústria para avaliar aplicações empresariais reais nas áreas de finanças, direito, saúde, operações, engenharia e economia, de acordo com a monitorização da Beating. Ao contrário dos tradicionais benchmarks de uso geral que dependem de conjuntos de dados académicos, os novos índices utilizam ponderações personalizadas baseadas nas classificações de atividade laboral O*NET para simular distribuições reais de tarefas em cada setor. Nos testes iniciais, o Claude Fable 5 liderou todos os oito índices, enquanto o GLM-5.2 de código aberto conquistou o primeiro lugar em cinco dos seis índices da indústria e obteve 53 pontos no índice de engenharia, aproximando-se dos 55 do Claude Sonnet 5. Os índices revelam lacunas significativas de desempenho: no benchmark jurídico, o Gemini 3.1 Pro Preview igualou a precisão do Claude Fable 5 dentro de 11 pontos, enquanto era 7 vezes mais rápido.
Aviso legal: As informações contidas nesta página podem provir de fontes externas e têm caráter meramente informativo. Não refletem os pontos de vista nem as opiniões da Gate e não constituem qualquer tipo de aconselhamento financeiro, de investimento ou jurídico. A negociação de ativos virtuais envolve um risco elevado. Não se baseie exclusivamente nas informações contidas nesta página ao tomar decisões. Para mais detalhes, consulte o Aviso legal.
Comentar
0/400
Nenhum comentário