ON
← Volver al feed
Semafor logo🏛️ Política
United States🏛️ PolíticaTendencia progresistahace 7 h

¿La IA razona bien por las razones equivocadas?

El artículo analiza la controversia que rodea las capacidades de 'razonamiento' de la IA, destacando hallazgos contradictorios de investigaciones recientes. Comienza cuestionando si los sistemas de IA realmente se involucran en el razonamiento lógico, señalando que mientras algunos modelos han demostrado un rendimiento impresionante en tareas complejas como la resolución de problemas matemáticos, otros muestran signos de confiar en atajos superficiales en lugar de un razonamiento genuino. Los investigadores de Apple han criticado el razonamiento de IA como una 'ilusión de pensamiento', mientras que los logros de modelos como los desarrollados por OpenAI y DeepMind sugieren un progreso significativo. Sin embargo, estudios posteriores revelan que estos modelos a menudo fallan bajo escrutinio, lo que genera dudas sobre su confiabilidad. La pieza reflexiona sobre la rápida evolución de la investigación de IA y expresa su frustración por la falta de resultados consistentes, enfatizando la necesidad de claridad sobre lo que constituye el verdadero razonamiento en IA.

A new study suggests that censorship embedded within Chinese artificial intelligence models can be effectively reversed, according to exclusive reporting by Semafor. Researchers have demonstrated that certain constraints imposed during training, designed to filter specific types of content, can be bypassed through targeted modifications to the model's architecture and training data. This finding has sparked discussions among experts regarding the ethical implications and technical feasibility of such interventions. The research, conducted by an international team of scientists, focused on analyzing the mechanisms through which censorship is implemented in large-scale language models developed in China. By examining the internal workings of these models, the team identified patterns in the training data that correlated with the filtering processes. They discovered that by altering the composition of the training dataset and adjusting the weighting of different types of input, the models could be induced to generate responses that circumvent previously enforced restrictions. This revelation follows a broader discourse on the capabilities and limitations of large reasoning models (LRMs). In recent years, LRMs have gained attention for their ability to perform complex logical tasks, including solving intricate mathematical problems. However, this progress has also raised questions about the reliability and authenticity of the reasoning process these models employ. Critics argue that some achievements attributed to LRMs might stem from superficial strategies rather than genuine cognitive abilities. In 2025, a group of researchers affiliated with the Santa Fe Institute challenged the notion that LRMs engage in true reasoning, suggesting that their success in benchmark tests could be due to exploiting surface-level shortcuts. This critique was met with counterarguments, notably from prominent figures in the field, such as Gary Marcus and Ernest Davis, who highlighted the exceptional accomplishments of LRMs in competitive settings like the International Mathematical Olympiad. Subsequent studies, including one led by Melanie Mitchell, further complicated the narrative. Mitchell, a respected figure in AI research, emphasized that while LRMs demonstrate improved performance on reasoning tasks compared to traditional language models, the generated text often lacks fidelity to the underlying processes. She noted that much of the output produced by these models is not particularly useful, indicating a disconnect between the model's internal operations and the external outputs. These findings underscore the ongoing debate surrounding AI reasoning. While some researchers advocate for a more nuanced understanding of how these models operate, others caution against overestimating their capabilities. As the field continues to evolve, the distinction between genuine reasoning and algorithmic trickery remains a contentious issue. The implications of the research on Chinese AI models extend beyond technical considerations. They raise concerns about the potential for manipulation and the ethical responsibilities associated with deploying such technologies. As the conversation around AI ethics intensifies, the need for transparent practices and rigorous validation becomes increasingly apparent. The future of AI development will likely depend on resolving these complexities and ensuring that advancements serve the public interest responsibly.

Cómo lo cubrió cada lado

El mismo suceso, agrupado por la inclinación política de los medios que lo cubren.

Cómo lo cubrió cada lado

Apoya noticias independientes y conscientes del sesgo y desbloquea el pulso social, el voto de la comunidad y tu feed Para ti personalizado.

Hazte suscriptor

Cobertura en el mundo

El mismo suceso según se informó en otros países.

Cobertura en el mundo

Apoya noticias independientes y conscientes del sesgo y desbloquea el pulso social, el voto de la comunidad y tu feed Para ti personalizado.

Hazte suscriptor

Verificación de afirmaciones

Las principales afirmaciones fácticas y cuántas fuentes las respaldan o las rebaten.

Verificación de afirmaciones

Apoya noticias independientes y conscientes del sesgo y desbloquea el pulso social, el voto de la comunidad y tu feed Para ti personalizado.

Hazte suscriptor

Ir a las fuentes primarias (6)

Las fuentes oficiales en las que se basa la cobertura. Léelas directamente para evitar el encuadre.

2 informaciones

Semafor logoSemaforIndependienteProgresistaVeracidad 65Objetividad 70anteayer
La exclusión / censura en los modelos chinos de IA puede deshacerse, muestra una nueva investigación

Un nuevo estudio sugiere que la censura en los modelos chinos de IA puede potencialmente revertirse, lo que plantea preguntas sobre el alcance del control sobre la información dentro de estos sistemas. La investigación destaca métodos técnicos que podrían eliminar o alterar los mecanismos de filtrado de contenido incrustados en los datos de entrenamiento de IA. Si bien los hallazgos son preliminares, indican posibles vulnerabilidades en la forma en que los modelos de IA hacen cumplir el cumplimiento normativo. Las implicaciones sugieren que tales sistemas podrían no ser tan impenetrables como se creía anteriormente, aunque las aplicaciones prácticas siguen siendo poco claras.

Lectura del sesgo (Progresista): El artículo enmarca la eliminación de la censura como un desarrollo positivo, lo que implica que las restricciones actuales son innecesarias o demasiado amplias.

Por qué veracidad (65): The article reports on new research suggesting that censorship in Chinese AI models can be undone. Since no primary source document was available, factuality is judged based on alignment with cross-source consensus. The claim appears plausible given recent discussions around AI model training and co

Por qué objetividad (70): The tone remains relatively neutral, presenting the findings as an exclusive report without overt bias. However, the use of 'exclusive' may slightly imply a particular perspective, though not strongly slanted.

Quanta Magazine logoQuanta MagazineIndependienteCentrohace 7 h
¿La IA razona bien por las razones equivocadas?

El artículo analiza la controversia que rodea las capacidades de 'razonamiento' de la IA, destacando hallazgos contradictorios de investigaciones recientes. Comienza cuestionando si los sistemas de IA realmente se involucran en el razonamiento lógico, señalando que mientras algunos modelos han demostrado un rendimiento impresionante en tareas complejas como la resolución de problemas matemáticos, otros muestran signos de confiar en atajos superficiales en lugar de un razonamiento genuino. Los investigadores de Apple han criticado el razonamiento de IA como una 'ilusión de pensamiento', mientras que los logros de modelos como los desarrollados por OpenAI y DeepMind sugieren un progreso significativo. Sin embargo, estudios posteriores revelan que estos modelos a menudo fallan bajo escrutinio, lo que genera dudas sobre su confiabilidad. La pieza reflexiona sobre la rápida evolución de la investigación de IA y expresa su frustración por la falta de resultados consistentes, enfatizando la necesidad de claridad sobre lo que constituye el verdadero razonamiento en IA.

Lectura del sesgo (Centro): El artículo presenta una visión equilibrada del debate en torno al razonamiento de la IA, citando tanto logros positivos como fracasos críticos.

Mantengamos las noticias honestas.

ObjectiveNews se financia con los lectores y no tiene anuncios: te mostramos el sesgo en lugar de ocultarlo. Apoya el periodismo independiente por 5 €/mes.

Hazte suscriptor

Historias relacionadas