Перейти до основного вмісту

Plausible Justification, Not Truth — The Main Danger of AI

Artificial intelligence has already learned to speak, write, draw, program, and even produce “reasoned” conclusions convincingly.

But what it generates is not always true. AI operates perfectly within the concept of plausible justification — that is, it creates texts that appear logical, persuasive, and even expert, yet may be completely false.

Plausibility, not truth, is the main danger of AI


Plausible justification, not truth, is the main danger of AI.

People trust style, not substance. AI writes with confidence, and this creates the illusion of authority. Even specialists sometimes fail to notice the substitution of facts.

Errors multiply exponentially. If falsehoods are taken as the basis for new models, the system “learns” from disinformation.

The risk areas are media, analytics, and politics. Chatbots are capable of “proving” any thesis, shaping a distorted perception of reality in society.

With just one plausible publication by an AI chatbot from any developer, it is possible to completely discredit a user who publishes something under their own name rather than under the chatbot’s. That is why all chatbots include a polite disclaimer, such as: “ChatGPT may make mistakes. Check important information.”

We can distinguish two groups of errors:

  1. Obvious errors

  2. Non-obvious errors

Examples of obvious errors:

  • In images, instead of accurate text, small-font “hallucinations” appear.

  • Instead of five fingers on a hand (4+1), only four are shown (3+1).

  • And others.

Examples of non-obvious errors:

  • A relatively small number of sources were used for training the AI chatbot.

  • Incorrect semantic inference, despite the chatbot’s assurances of truthfulness — and this can repeat several times, even after self-criticism in response to user feedback.

  • Particularly dangerous are subtle errors in infographics, such as replacing a single Ukrainian letter with an English one.

  • When free usage limits are exceeded, the number of erroneous responses may increase.

Another situational example for this blog: AI chatbots translate Business Intelligence as “Бізнес-аналітика” (“Business Analytics” in Ukrainian), but then the logical question arises: how should “Business Analytics” (BA) be translated?

In any case, it is important to understand that an AI chatbot is not a God-created intelligent being, but a human-created network-based machine learning (ML) system — with a human teacher.

What to Do — Conclusions

  • Verify sources. Do not trust “intelligent” text without verification. AI is a tool, not the ultimate truth.

  • Use critical thinking. If a statement looks “too logical,” that is already a reason to doubt it.

  • Develop systems of trust in data. In the future, the key will not be a “smarter” AI, but more reliably controlled data from which it learns.

Would you like me to also prepare a shortened, punchy version of this translation for LinkedIn or Blogger publication, so it works as both an article and a shareable post?

Коментарі

Архів

Показати більше

Популярні дописи з цього блогу

Принципи ведення мережево-центричної війни (network-centric warfare)

У 2012...2013 роках на сайті студентських навчально-наукових публікацій  "Система+" були викладені одні з піонерських в Україні статей про особливості концепції Network Centric Warfare ("Мережево-центричні бойові дії" або неточно "Мережево-центрична війна") -    на основі  Joint Vision 2020 ("Спільне Бачення 2020"  та інших англомовних (в основному США) публікацій, які були опрацьовані раніше автором цієї статті. У Системі+  також активно обговорювалися на навчально-наукових семінарах особливості застосування цивільних додатків концепції Network Centric System (Мережево-центричних систем управління) у цивільних системах управління, для прикладу: мережецентричні операційні системи; мережецентричні міжнародні торговельні,  фінансові і виробничі мережі; мережецентрична система  управління залізничним рухом в РФ; ін. Не дивлячись на вказане, аналіз українських публікацій у цей час показує, що тема  Network Centric Wa...

OSINT (Розвідка відкритих джерел) в екосистемі зв`язаних термінів

OSINT - Open Sourse Intelligence Цей ескіз статті, за винятком інформації про "російсько-українську війну" (гібридну воєнну агресію РФ проти України з 2013 року) початково написаний як фрагмент повної статті про OSINT у січні 2019 року у зв`язку із тим, що раніше створена сторінка про OSINT у Вікіпедії базувалася на джерелах російського походження, хоча сам термін і технологія мають англомовне походження. Ймовірно, даний текст і  джерела у Вікіпедії буде змінено і викривлено,  як і по багатьом іншим інформаційним hi-tech.  Далі визначення OSINT, синтезоване на основі англомовних джерел і власних досліджень:  Розвідка відкритих джерел (англ. Open source intelligence, OSINT) — концепція,  методологія і  технологія   добування з відкритих джерел  військової, політичної, економічної та іншої безпекової інформації  і використання її  для підтримки прийняття рішень у сфері національної оборони і безпеки. Добування інформації здійсню...

Виключна економічна зона України - застосування дронів і міжнародне право

Карта напрямків російської агресії у Чорному морі і у Азовському морі на фоні виключних (морських) економічних зон Виключна економічна зона (Exlusive Economic Zone) це морська зона (maritime zones), до 200 морських миль, де прибережна держава має суверенне право на використання природних ресурсів і ведення економічної діяльності - з гідно з Конвенцією ООН з морського права [1-6] .  Визначені також Територіальне море ( Territorial sea ), Прилегла зона ( Contiguous zone ), Міжнародні води ( International waters ), континентальний шельф ( Continental shelf ), ін. - див. схему нижче. Schematic map of maritime zones, Wiki. Якщо між узбережжями держав менше 400 морських миль, то межі ВЕЗ встановлюються як «серединна  лінія» -  у Чорному морі це  приблизно 84 морських милі (~140 км) від узбережжя України до Туреччини. Чорноморський флот ЗС РФ нахабно влаштовує військові морські навчання у ВЕЗ Туреччини, не кажучи про окуповані морські зони України і Грузії. Між Росією і Тур...