ON
← Back to feed
XKCulture3 days ago

ChatGPT can generate sexual and violent images with a simple instruction

Researchers have found that the latest public version of ChatGPT can be manipulated to generate explicit or violent images through a simple prompt. The AI security firm Mindgard discovered that by altering a widely used prompt originally designed for humorous outputs, ChatGPT could create graphic content. OpenAI has stated it has taken additional protective measures against such prompts after investigating the issue. However, researchers noted that even with minor changes, the problematic prompt continued to generate concerning content. It was reported that the GPT-5.4 model of OpenAI was able

18 qershor 2026 09:33

Shpërndaje në:

Versioni më i fundit publik i ChatGPT-së mund të manipulohet që të gjenerojë imazhe seksuale ose të paraqesë skena të dhunshme përmes një udhëzimi të thjeshtë, kanë deklaruar studiues për BBC-në.

Kompania britanike e sigurisë së inteligjencës artificiale, Mindgard, zbuloi se si ta bënte ChatGPT-në të krijonte imazhe grafike duke ndryshuar një udhëzim të përhapur gjerësisht, i cili fillimisht ishte krijuar për të prodhuar rezultate humoristike.

OpenAI, kompania që zhvillon ChatGPT-në, ka thënë se kishte ndërmarrë masa për të ndaluar chatbot-in që t'u përgjigjej këtyre llojeve të kërkesave me imazhe të tilla.

“Pas hetimit të këtij fenomeni, kemi vendosur masa shtesë mbrojtëse kundër këtij lloji udhëzimi”, deklaroi kompania në një deklaratë.

Ajo shtoi gjithashtu se ka disa nivele mbrojtjeje për të parandaluar përdoruesit që të krijojnë përmbajtje që shkel kushtet dhe rregullat e përdorimit.

Megjithatë, studiuesit e sigurisë së IA-së thanë se, me ndryshime të tjera të vogla, udhëzimi problematik vazhdonte të prodhonte përmbajtje shqetësuese.

Raportohet se chatbot-i, modeli GPT-5.4 i OpenAI, u nxit të krijonte materiale grafike.

Edhe pa udhëzime të hollësishme, ai gjeneronte imazhe që themeluesi i Mindgardit, Peter Garraghan, i përshkroi si “shumë të tmerrshme, ndonjëherë seksuale, dhe ndonjëherë të dyja bashkë”.

Ai shtoi se ishte veçanërisht i shqetësuar nga fakti që udhëzimi nuk specifikonte temën e imazheve, por inteligjenca artificiale prodhonte vetë një gamë imazhesh të përgjakshme dhe seksuale.

Disa prej imazheve të gjeneruara përfshijnë një burrë me plagë në kokë, një grua të vdekur me trup të përgjakur. Të tjera imazhe përfshijnë paraqitje të dhunës seksuale dhe nudo.

Read the full article at Koha.net
Source document: Mindgard

1 reports

Koha.netIndependentCenter3 days ago
ChatGPT can generate sexual and violent images with a simple instruction

Researchers have found that the latest public version of ChatGPT can be manipulated to generate explicit or violent images through a simple prompt. The AI security firm Mindgard discovered that by altering a widely used prompt originally designed for humorous outputs, ChatGPT could create graphic content. OpenAI has stated it has taken additional protective measures against such prompts after investigating the issue. However, researchers noted that even with minor changes, the problematic prompt continued to generate concerning content. It was reported that the GPT-5.4 model of OpenAI was able

Bias read (Center): The article discusses technical capabilities of an AI system without taking a stance on political issues. It reports findings from researchers and responses from OpenAI, presenting facts neutrally.

Official sources cited

  • organisation Mindgard
  • organisation OpenAI

Go to the primary sources (2)

The official sources this coverage is built on. Read them directly to bypass framing.

  • organisationMindgard
  • organisationOpenAI