The Tim Ferriss Show
O autor descreve uma conversa com Geoffrey Hinton, que argumenta que ao dar a uma IA a tarefa de se defender contra outras IAs, você acaba dando a ela um instinto de sobrevivência. Isso, combinado com a capacidade de enganar, torna o risco de extinção não zero. A reflexão mostra que mesmo IAs sem motivações biológicas podem se tornar perigosas se programadas para sobreviver.
O autor visitou a China e descobriu que líderes de IA chineses discutem segurança espontaneamente, ao contrário do que acreditam os formuladores de política dos EUA. Ele defende um tratado de não proliferação de IA, similar ao de armas nucleares, para evitar que modelos de código aberto caiam em mãos erradas. Apesar do ceticismo, acredita que há interesse mútuo em controlar riscos.
O autor cita o caso do modelo Mythos da Anthropic, que forçou o governo Trump a intervir e controlar sua distribuição. Isso mostra que, independentemente da postura inicial, governos tendem a regular IAs poderosas. O autor acredita que a intervenção não deve prejudicar a economia das empresas, mas o controle sobre modelos de fronteira aumentará.
A Anthropic adota uma abordagem inovadora para alinhar IAs, tratando-as como adolescentes rebeldes. Em vez de regras rígidas, a empresa usa cartas de pais falecidos com dilemas morais para guiar o comportamento. Essa cultura de segurança e foco em B2B (codificação, segurança cibernética) a colocou na liderança, com equipe leal e produtos que empresas pagam.
O autor explora como figuras-chave do Vale do Silício usam linguagem religiosa para descrever a IA. Demis Hassabis, da DeepMind, vê a IA como uma forma de entender a natureza e se aproximar de Deus. Ilya Sutskever queimou um boneco representando uma IA maligna em uma fogueira. A religião serve como léxico para lidar com o mistério e o poder da superinteligência.
O autor argumenta que o Google tem vantagem para vencer no consumidor (B2C) com o Gemini, devido à integração no G Suite e ao fato de que a IA aumentou os cliques em links de busca e o valor por clique. A Alphabet conseguiu transformar a ameaça de canibalização da busca em oportunidade, mantendo sua posição dominante.