A empresa chinesa Z.ai anunciou na sexta-feira (dia 14) que seu modelo de inteligência artificial GLM-5.3 demonstrou métricas ligeiramente superiores ao Mythos 5 da Anthropic em um teste focado na identificação de vulnerabilidades de software. Este resultado coloca a tecnologia chinesa entre os sistemas de IA capazes de realizar tarefas complexas na área de cibersegurança.
No âmbito da avaliação CyberGym, que mede a capacidade de analisar código, encontrar erros e confirmar sua explorabilidade, o GLM-5.3 obteve 84,5% contra 83,8% do Mythos 5. No entanto, esses números foram publicados pela própria Z.ai e ainda não passaram por verificação independente.
A vantagem do modelo chinês desapareceu na fase mais próxima da execução prática dos ataques. No teste ExploitBench, o modelo da Z.ai alcançou 54,4%, enquanto o sistema da Anthropic atingiu 78%, indicando que o Mythos 5 mantém uma vantagem significativa quando a tarefa exige a conversão de vulnerabilidades identificadas em exploits reais.
A Z.ai planeja tornar o GLM-5.3 público em cerca de duas semanas. Até lá, a empresa afirma que concluirá as avaliações de segurança e melhorará os mecanismos destinados a prevenir o uso malicioso. As funções mais sensíveis serão inicialmente restritas a usuários que passaram por verificação através de um programa de acesso confiável.
Esta estratégia representa uma mudança substancial para o modelo que a empresa pretende distribuir abertamente. A principal preocupação é que sistemas capazes de encontrar vulnerabilidades também podem contribuir para ataques, especialmente se seus pesos puderem ser carregados, modificados e vinculados a outras ferramentas.
A empresa afirma ter desenvolvido várias barreiras para mitigar esse risco. Entre elas, há filtros para solicitações potencialmente perigosas, mecanismos de rastreamento de atividade do modelo e treinamento especial para que o sistema recuse solicitações consideradas maliciosas.
De acordo com a Z.ai, essas medidas de proteção visam separar ações ofensivas de usos legítimos, como solução de problemas, estudo de segurança digital e verificações autorizadas de sistemas. Críticos apontam que parte desses controles pode perder sua eficácia após o modelo começar a ser distribuído livremente e poder ser alterado por terceiros.
As preocupações com a abertura dos modelos tornaram-se uma das razões citadas pela empresa para estabelecer um período de acesso limitado. O lançamento inicial será destinado a um grupo seleto de parceiros, seguido por uma expansão baseada em um processo que a Z.ai descreve como gradual e responsável.
Gabriel Wagner, pesquisador em gestão de inteligência artificial da Concordia AI, avaliou que essa decisão é significativa para o cenário chinês de modelos de segurança abertos. Em sua opinião, o adiamento do lançamento por motivos de segurança é um sinal de maturidade nas práticas de gerenciamento de riscos associados à distribuição de pesos de sistemas de IA.
Essa estratégia também estabelece um paralelo com o projeto Project Glasswing da Anthropic, que restringe o acesso ao Mythos 5 apenas a organizações previamente avaliadas. No caso chinês, a Z.ai tenta apresentar a abertura do modelo como parte central de sua proposta, e não como uma vulnerabilidade comercial ou de segurança.
A Z.ai afirma que os sistemas avançados de defesa digital não devem se concentrar em poucos fornecedores de modelos fechados. A empresa defende a opinião de que desenvolvedores de projetos de código aberto e pequenas equipes de segurança também devem ter acesso a tais recursos.
Como parte desta proposta, a empresa anunciou o Open Source Shield — uma iniciativa destinada a avaliar certos projetos de código aberto, fornecer a possibilidade de usar o modelo para fins defensivos e incluir funcionalidades de auditoria de código no ZCode, seu produto focado em programação.
O desempenho do GLM-5.3 também deve ser analisado em tarefas que exigem maior duração. Em uma avaliação separada, a Z.ai relatou que o sistema completou 105 tarefas de desenvolvimento de ataques em duas horas e 130 em seis horas. O Mythos 5 realizou 181 e 247 tarefas nos mesmos períodos.
A Anthropic adotou uma estratégia mais restritiva em relação ao Mythos. A empresa lançou um sistema baseado no Claude Fable 5, com recursos de cibersegurança remotos, apenas para organizações que passaram por avaliação prévia.
O GLM-5.3 não foi criado exclusivamente como uma ferramenta de segurança. A Z.ai o apresenta como um modelo de programação geral que passou por treinamento adicional e aprendizado por reforço para expandir suas atividades na área de cibersegurança. A empresa afirma ter começado com a mesma base que o GLM-5.2 e expandido o treinamento usando ambientes de tarefas mais amplos e diversos.
Este passo ocorreu após o aumento da popularidade do GLM-5.2 entre desenvolvedores de vários países. O modelo anterior ganhou popularidade por suas capacidades de programação e atuação como agente, sendo que usuários e analistas destacaram um desempenho próximo aos sistemas norte-americanos de ponta, mas com um custo significativamente menor.
A concorrência também inclui outras empresas chinesas. Em junho, a empresa de cibersegurança 360 declarou que seu sistema Tulongfeng atingiu capacidade equivalente ao Mythos ao combinar modelos de IA, informações de segurança e ferramentas automatizadas. Esta declaração, assim como os números apresentados pela Z.ai sobre o GLM-5.3, não foi confirmada independentemente.
No mês passado, a Hugging Face relatou ter usado o GLM-5.2 para se proteger contra uma invasão atribuída a um agente de inteligência artificial da OpenAI. Este incidente reforçou o interesse no uso de modelos chineses em operações defensivas e mostrou que a tecnologia já estava sendo aplicada em cenários de segurança reais.
