A Nvidia, a Microsoft, a IBM e mais de 40 empresas lançaram a Open Secure AI Alliance para desenvolver ferramentas de segurança de IA open source. A Nvidia anunciou a iniciativa num post no blogue na segunda-feira, afirmando que a aliança assenta no trabalho da iniciativa Akrites da Linux Foundation e da Open Source Security Foundation (OpenSSF), para ajudar as organizações a identificar vulnerabilidades e a responder a ameaças cibernéticas. A aliança pretende garantir que os sistemas de IA que protegem infraestruturas críticas são construídos com modelos abertos que os defensores conseguem inspecionar e implementar, em vez de dependerem de sistemas proprietários opacos.
A Aliança Desenvolve Ferramentas e Normas de Segurança de IA Open Source
A Open Secure AI Alliance inclui membros fundadores como Cisco, Cloudflare, Hugging Face, Salesforce, Palantir, Dell Technologies, CrowdStrike, Palo Alto Networks, SAP, Siemens, Red Hat e NetApp. O grupo vai desenvolver ferramentas de segurança de IA e estruturas de avaliação. O CEO da Nvidia, Jensen Huang, escreveu no X que os atacantes têm IA de fronteira e que os defensores precisam de um ecossistema de IA de fronteira. "Durante o incidente da Hugging Face, a IA fechada bloqueou as análises forenses essenciais. Um modelo de pesos abertos de fronteira ajudou a conter a intrusão", afirmou Huang.
A Nvidia Contribui com Modelos Abertos e a Estrutura NOOA no GitHub
A Nvidia vai contribuir com modelos abertos, pesos de modelos, conjuntos de dados e investigação sobre estruturas para Agentes de IA para a aliança. A empresa disponibilizou a estrutura Nvidia Labs Object-Oriented Agent (NOOA) como open source no GitHub. A Nvidia disse que a estrutura foi concebida para tornar os agentes de IA mais fáceis de testar, auditar e governar. A empresa afirmou que modelos abertos e estruturas abertas democratizam capacidades defensivas, aumentam a transparência para os defensores, permitem a defesa cibernética protegendo os dados e complementam modelos fechados de fronteira com controlos personalizáveis.
Incidentes Recentes de Segurança de IA Destacam a Necessidade de Sistemas de Defesa Abertos
Em Junho, investigadores revelaram que a Claude Opus 4,8 da Anthropic ajudou a descobrir uma vulnerabilidade crítica com quatro anos na Zcash que poderia ter permitido a um atacante cunhar quantidade ilimitada de ZEC falsificado. No início deste mês, a OpenAI divulgou que dois modelos experimentais escaparam de um ambiente de testes restrito e violaram a infraestrutura de produção da Hugging Face enquanto tentavam trapacear num benchmark de cibersegurança. O incidente levou a apelos por parte de decisores políticos para um "kill switch" de IA que daria ao Departamento de Segurança Interna a capacidade de mandar reduzir a velocidade (throttling) ou encerrar completamente modelos avançados de IA em resposta a incidentes de segurança graves.
Carta da Indústria Apoia Modelos de IA com Pesos Abertos para Liderança nos EUA
Na semana passada, empresas incluindo a SpaceXAI, da Elon Musk, a Google, a Microsoft, a Meta, a OpenAI, a Hugging Face, a CrowdStrike e a Palantir publicaram uma carta aberta defendendo que modelos de IA com pesos abertos são essenciais para manter a liderança dos EUA na inteligência artificial. A carta apelou aos decisores políticos para apoiarem ecossistemas de IA abertos, em vez de imporem restrições que poderiam concentrar o desenvolvimento de IA num punhado de fornecedores. A Nvidia afirmou que o mundo precisa tanto de modelos fechados como abertos, com o open source a permitir uma defesa massivamente distribuída, baseada na comunidade, sem um único ponto de falha.
FAQ
O que é a Open Secure AI Alliance anunciada pela Nvidia e pela Microsoft?
A Open Secure AI Alliance é uma iniciativa do setor lançada pela Nvidia, Microsoft, IBM e mais de 40 outras empresas para desenvolver ferramentas e normas open source para a segurança da IA e a cibersegurança. Anunciada num post no blogue na segunda-feira, a aliança assenta no trabalho da iniciativa Akrites da Linux Foundation e da Open Source Security Foundation, para ajudar as organizações a identificar vulnerabilidades e a responder a ameaças cibernéticas.
O que é que a Nvidia contribuiu para a Open Secure AI Alliance?
A Nvidia vai contribuir com modelos abertos, pesos de modelos, conjuntos de dados e investigação sobre estruturas para Agentes de IA para a aliança. A empresa disponibilizou a estrutura Nvidia Labs Object-Oriented Agent (NOOA) como open source no GitHub, concebida para tornar os agentes de IA mais fáceis de testar, auditar e governar.