Importante

Você está vendo a versão anterior da nova experiência da Alura que estamos preparando para você. Em breve, ela ganha uma identidade visual novinha totalmente pensada em potencializar seus estudos!

1
resposta

O melhor exemplo de viés de objetivo é a IA fazedora de clips de papel

Pra quem não conhece, uma história conhecida nos meios da IA (desde muito antes da generativa) é o exercício mental de colocar uma IA para gerenciar uma fábrica de clips de papel, com a diretiva única de maximizar a produção de clips.

É um objetivo simples. E esse é o problema. A IA não compartilha de todos os nossos valores, i.e. não está alinhada conosco, portanto ela vai fazer de tudo para maximizar a produção de clips de papel:

  • Vai cortar recursos de outras áreas para direcionar para a produção de clips
  • Vai cortar empregos para redirecionar essa verba para adquirir mais matéria-prima
  • Em última instância, quando todos os recursos ficarem escassos, vai decidir que os humanos têm átomos de metal no corpo que poderiam também ser convertidos em clips de papel

Se fornecida com ferramentas suficientes e não tiver guard-rails (freios de segurança) adequados, essa IA simplesmente vai converter tudo no planeta em clips de papel, porque essa é a única diretiva dela.

É um exercício de pensamento, que ilustra o poder e o perigo das IAs e por que não se deve entregar poder demais a elas sem supervisão.

1 resposta

Olá, Gustavo! Como vai?

Parabéns pela realização da atividade!

Você trouxe um exemplo clássico e muito poderoso que ilustra de forma simples e impactante os riscos de uma IA sem alinhamento de valores humanos. Sua explicação mostra bem como um objetivo aparentemente inofensivo pode gerar consequências desastrosas se não houver guard-rails e supervisão.

Se quiser aprofundar ainda mais, algumas boas práticas são:

  • Explorar alinhamento de valores: estudar como técnicas de AI alignment buscam aproximar objetivos da IA dos valores humanos.
  • Discutir governança: refletir sobre políticas e regulamentações que podem evitar cenários de uso irresponsável.
  • Analisar casos reais: observar exemplos em que sistemas automatizados já causaram efeitos inesperados por falta de supervisão.

Ah uma pergunta: Você gostaria de expandir essa reflexão para entender como o conceito de alinhamento de IA está sendo tratado hoje em pesquisas e regulamentações, ou prefere explorar mais exemplos práticos de riscos semelhantes em sistemas atuais?

Abraço e bons estudos!

AluraConte com o apoio da comunidade Alura na sua jornada. Abraços e bons estudos!