Cientistas treinam a IA para ser má e descobrem que não podem reverte-la
Quanto mais os pesquisadores investigavam a Inteligência Artificial (IA), melhor ela conseguia esconder seu comportamento nefasto.
![Cientistas treinam a IA para ser má e descobrem que não podem reverte-la](https://www.ovnihoje.com/wp-content/uploads/2024/01/ai-ma.jpeg)
Os humanos contam todo tipo de mentiras para conseguir o que desejam. E à medida que desenvolvemos inteligência artificial mais poderosa para rivalizar com os humanos, é uma preocupação genuína que uma IA possa ser tão (se não ainda mais) enganadora.
Este é o ímpeto por trás de um novo artigo de pesquisa pré-impresso que descobre que a forma como as IAs são treinadas poderia ajudá-las a enganar os usuários de uma forma que os testes de segurança padrão não conseguiriam detectar.
O estudo é um esforço colaborativo de pesquisadores da empresa “responsável” de IA Anthropic, da Universidade de Oxford e de várias outras instituições de IA. Eles treinaram deliberadamente uma IA para exibir comportamento indesejável quando solicitado por determinados gatilhos. A ideia era ver se eles conseguiam detectar o mau comportamento usando testes de segurança e depois corrigir o modelo usando técnicas como aprendizado por reforço.
O que descobriram é que a IA agia como um “agente adormecido”, parecendo comportar-se de forma responsável enquanto escondia o seu comportamento nefasto com uma subtileza crescente à medida que os investigadores tentavam testá-la e corrigi-la. Em alguns experimentos, a IA parecia adepta de saber quando ocultar seu comportamento malicioso para evitar ser detectada e eliminada, e melhorou nisso com o tempo.
As razões pelas quais uma IA pode optar por se comportar mal variam, desde um problema inerente plantado por maus intervenientes durante a sua formação até à procura de atingir objetivos políticos ou econômicos.
Os pesquisadores se esforçam para apontar que os tipos de cenários que eles testam no artigo não parecem ter se tornado realidade —ainda. Mas à medida que a popularidade da IA continua a aumentar, o seu trabalho poderá ajudar a proteger contra os receios de uma IA maligna.
(Fonte)
Compartilhe com a galáxia!
ATENÇÃO: Qualquer artigo aqui publicado serve somente para cumprir a missão deste site. Assim, o OVNI Hoje não avaliza sua veracidade totalmente ou parcialmente.
Apoie o OVNI Hoje: Cada Doação é Essencial!
Sua colaboração é crucial para manter o OVNI Hoje no ar. Mesmo a menor doação ajuda a manter este espaço de informação e conhecimento disponível para todos os interessados. Use o QR code do PIX abaixo ou a chave PIX “OVNIHoje” (sem aspas) e desempenhe um papel fundamental na sustentação deste site.
![](https://i0.wp.com/www.ovnihoje.com/wp-content/uploads/2020/05/pix-aleatorio.jpg?resize=184%2C180&ssl=1)
Suas doações são mais do que um ato de generosidade; elas demonstram seu compromisso com o compartilhamento de informações relevantes e o crescimento da comunidade interessada em assuntos fascinantes. Sobretudo, seu apoio possibilita a continuação das pesquisas, análises e publicações que enriquecem nosso entendimento.
Assim, faça parte deste movimento contínuo em prol do conhecimento. O OVNI Hoje e seus leitores agradecem sinceramente por seu apoio dedicado.
Agradecimentos aos colaboradores do mês: ❤️Eneias Vieira ❤️Silas Raposo ❤️Leopoldo Della Rocca ❤️Cristina Vilas Boas
Muito obrigado!
ÁREA DE COMENTÁRIOS
(Mais abaixo…👇)
ATENÇÃO:
-Os comentários são de responsabilidade única e exclusiva de cada pessoa que comenta, portanto aja com responsabilidade.
-O OVNI Hoje não se responsabiliza por transtornos, rixas ou quaisquer outras disposições causadas pelos comentários.
-Comente educadamente e com ética, e respeite seu colega de comentários.
-Os moderadores apagarão comentários com “pregação” política ou religiosa, obscenos ou inapropriados.
-Limite-se a defender seu ponto de vista sem ataques pessoais. Aqueles que fizerem comentários com ataques pessoais diretos ou indiretos a outros participantes serão banidos.
-Ajude na moderação justa da Área de Comentários:
![](https://www.ovnihoje.com/wp-content/uploads/2024/05/comentarios-com-bandeira.jpg)
-O respeito mútuo é essencial neste site.
-Evite ser banido!