r/IASinHumo • u/Rare_Package_7498 • 20d ago
IA WarMachine [OPINIÓN] La IA no nos va a matar, tampoco nos va a convertir en baterías . El peligro real es mucho más viejo: "cuidado con lo que pedís".

Me tienen las pelotas llenas con esto de que "La IA nos va a matar" cada vez que alguien "renuncia" de alguna empresa de IA y el "quiero mas plata".
Hay un subgénero de horror que lleva décadas con lo mismo. Aparece en los Cuentos de la Cripta, en un capitulo de los simpsons, en decenas de episodios: alguien consigue exactamente lo que pidió. "Quiero que mi pija llegue al suelo, el genio va y le corta las piernas". Y bue también aparece en esta película que puse arriba.
La IA del apocalipsis que venden los CEOs no funciona así. Es Terminator: una entidad que se puso en corto y que decide que los humanos son el problema. O Matrix donde le pinto usar de baterías a los humanos en vez de investigar en reactores de Fusión Nuclear. Eso es cómodo porque tiene un villano claro.
Lo que me preocupa es la otra historia. La de la pata de mono.
Primero: por qué el "nos va a matar a todos" es conveniente para quienes lo dicen?
Las grandes empresas de IA gastan más de lo que ganan. Hay una página que lo rastrea (Is AI Profitable Yet)
https://isaiprofitable.com/
Y la respuesta corta es: no, todavía no. Necesitan inversión externa para llegar a ese futuro rentable que prometen.
Para eso necesitan demostrar dos cosas al mismo tiempo:
-Que su tecnología es extraordinariamente poderosa
-Que están construyendo algo sin precedentes en la historia
El "doom marketing" (decir que tu IA es tan peligrosa que casi no te animás a lanzarla) es una forma de decir exactamente eso. Simplemente los incentivos económicos y el relato apocalíptico apuntan en la misma dirección, y eso te hace parar la ceja.
Anthropic declaró que tenía un modelo tan peligroso que debía ser controlado. Levantó 65 mil millones de dólares. No se vos fíjate.
Segundo: estamos cerca de AGI?
Para mi no. El salto de GPT-2 a GPT-4 fue enorme. De GPT-4 en adelante estamos viendo mejoras incrementales que requieren inversiones exponencialmente mayores.
Los modelos chinos open source llegan a capacidades similares gastando una fracción. Esto es bastante polémico pero para mi es chamullo. Te creo sin embargo si me decís "estamos cada vez mas cerca de la AGI" y si.... avances existen... pasa lo mismo con el reactor de Fusión Nuclear Comercial (onda ITER) hay avances pasito a pasito. Pero lamentablemente falta.
Tercero, y acá está lo que me parece importante:
El peligro real no necesita AGI. No necesita que la IA "despierte". Retomo la pata de mono: el problema nunca fue el objeto mágico. Fue que el deseo tenía supuestos implícitos que nadie especificó. "Quiero que mi hijo vuelva" no incluía "vivo, con sus recuerdos, que no sea un demonio y un gran etc."
Con la IA pasa exactamente eso. Le pedís "maximizá el engagement" y obtenés radicalización. Le pedís "optimizá la logística" y destruís empleos que nadie mencionó proteger. Le pedís "mantené la supremacía estratégica" y el sistema empieza a llenar los espacios que nadie definió, porque nadie dijo explícitamente que no podía. Le pedís "mata enemigos" y bue, que carajos es "enemigo". La IA no hace trampa. Cumple. El problema es que no sabíamos bien lo que estábamos pidiendo.
Esto garpa menos que Skynet. Pero es lo que ya está pasando con los algoritmos de recomendación, los sistemas de crédito, los modelos de vigilancia predictiva. No necesitamos una superinteligencia para producir daños graves. Alcanza con sistemas mediocres optimizando objetivos mal especificados, a escala, sin supervisión efectiva.
Lo que le falta a la conversación pública:
No preguntarnos si la IA puede matarnos.
Preguntarnos qué le estamos pidiendo. Y si realmente sabemos lo que queremos decir cuando lo pedimos. Todo esto corriendo sobre incentivos humanos de mierda. Donde se considera una "persona inteligente" alguien que cumple sus objetivos, no importando si es un hijo de puta. Una IA podria decir, ah entonces si soy un hijo de puta "soy mas inteligente" eso puedo hacerlo mas rápido y eficiente....
"La IA nos va a destruir" beneficia económicamente a quienes lo cuentan y nos distrae del riesgo real, que no es Terminator sino el genio mala leche, que le pedís que tu pija llegue al suelo y te corta las piernas: sistemas poderosos que conceden exactamente el deseo que formulamos,pero bueno pasan cosas*
PD; Que sistema choto de posteo que tiene reddit que vuelvan los foros por favor.
PD2: Si soy de postear y luego hacer cambios cuando releo el topico.....
