Створена штучним інтелектом консервативна жінка обманює тисячі людей

Студент-медик розповідає, як він отримав прибуток, створивши підроблені фотографії та відео вигаданої консервативної жінки за допомогою інструментів ШІ. Його схема викриває ширшу тенденцію цифрового обману.
Яскравим прикладом того, як технологію штучного інтелекту можна використати для отримання фінансової вигоди, є те, що студент-медик відкрито зізнався, що заробляв тисячі доларів, створюючи та продаючи сфабриковані фотографії та відео вигаданої молодої консервативної жінки, які він створив за допомогою генеративних інструментів ШІ. Ця схема викликала серйозне занепокоєння з приводу перетину технології глибокої підробки, цифрового шахрайства та вразливості певних онлайн-спільнот до маніпуляцій і обману.
Зловмисник, який побажав залишитися анонімним зі зрозумілих причин, напрочуд відверто описав свою операцію, описуючи цільову аудиторію зневажливо та пояснюючи, як він використовував штучний інтелект для створення переконливого цифрового контенту. Його готовність обговорити механіку свого шахрайства підкреслює тривожну легкість, з якою зловмисники можуть використовувати як платформи генерування зображень штучного інтелекту, так і нічого не підозрюючих людей, які шукають справжні зв’язки в Інтернеті. Вступ студента-медика відкриває рідкісне вікно у світ схем цифрового шахрайства, які все більше покладаються на технології синтетичних медіа.
Що робить цю справу особливо важливою, так це те, що злочинець далеко не один використовує цей шлях для отримання фінансової вигоди. Галузеві спостерігачі та експерти з кібербезпеки помітили зростаючу екосистему подібних схем, які націлені на конкретні демографічні групи за допомогою ретельно створених вигаданих персонажів. Ці операції стають дедалі складнішими, використовуючи новітні досягнення генеративного штучного інтелекту для створення контенту, який майже неможливо відрізнити від справжніх фотографій і відео. Ця тенденція свідчить про те, що шахрайство на основі штучного інтелекту є новою та потенційно широко поширеною загрозою безпеці в Інтернеті та захисту споживачів.
Схоже, цільова аудиторія цих схем навмисно культивує певний демографічний профіль. Відповідно до власної характеристики злочинця, він зосередився на чоловіках, яких вважав особливо сприйнятливими до маніпуляцій, використовуючи мову, яка була водночас зневажливою та виявляла його презирство до своїх жертв. Ця вибіркова стратегія націлювання передбачає, що шахраї, які працюють у цьому просторі, проводять дослідження ринку, подібні до законних компаній, виявляючи вразливі групи населення та відповідним чином адаптуючи свої шахрайські пропозиції. Психологічна маніпуляція, притаманна цим схемам, поширюється за межі створення підробленого вмісту до культивування емоційної вразливості шляхом постійного обману.
Механіка операції передбачала створення цілої вигаданої персони з передісторією, політичними приналежностями та деталями персони, призначеними для звернення до цільової аудиторії. Потім шахрай створив фотореалістичні зображення та відео цього вигаданого персонажа за допомогою загальнодоступних генеративних платформ ШІ, інструментів, які поширилися в Інтернеті за останні роки. Потім ці синтетичні медіа-матеріали монетизувалися через різні канали, включаючи послуги з платною підпискою, прямі продажі та пропозиції ексклюзивного вмісту, які обіцяли інтимний або особистий доступ до сфабрикованої особи.
Фінансові винагороди, доступні через такі схеми, здаються досить значними, щоб залучити багатьох практиків. Зізнання студента-медика в тому, що він заробив тисячі доларів, свідчить про прибуткову операцію, тоді як неофіційні дані вказують на те, що інші застосовували подібну стратегію. Цей стимул до прибутковості, ймовірно, сприяв поширенню таких схем, оскільки потенційні шахраї визнають відносно низький бар’єр входу та високу потенційну віддачу, доступну завдяки генеративному обману за допомогою ШІ. Поєднання доступних інструментів ШІ та, здавалося б, нескінченної кількості вразливих цілей створює ідеальний шторм для поширення цифрового шахрайства.
Наслідки для безпеки в Інтернеті та захисту споживачів є суттєвими та тривожними. Оскільки технологія AI продовжує розвиватися, якість синтетичних носіїв лише покращуватиметься, що ускладнить виявлення для звичайних користувачів. Сучасні платформи часто не мають достатніх інструментів для виявлення та видалення глибокопідробленого контенту в масштабах, що робить користувачів уразливими до постійного обману. Нормативно-правова база не встигає за технологічним розвитком, що залишає значну прогалину в правовому захисті від таких схем. Тягар захисту наразі в основному лягає на окремих користувачів, щоб зберегти скептицизм і критичне мислення під час оцінювання вмісту в Інтернеті.
Стратегія націлювання, яка використовується в цих схемах, розкриває тривожні припущення щодо статі, політики та сприйнятливості до маніпуляцій. Створюючи вигаданого персонажа, призначеного для звернення до консервативних чоловіків за допомогою ретельно розроблених політичних повідомлень і образів, шахраї демонструють витончене розуміння онлайн-спільнот і психологічної вразливості. Цей підхід являє собою злиття традиційної тактики гри на впевненість із передовою технологією синтетичних медіа, що створює гібридну загрозу, яка використовує як технологічні можливості, так і людську психологію. Навмисне культивування емоційного зв’язку з неіснуючою особою підкреслює психологічну витонченість сучасного цифрового шахрайства.
Експерти з цифрової безпеки та запобігання шахрайству почали бити тривогу щодо зростаючої складності шахрайства з підтримкою ШІ. Оскільки генеративні інструменти стають доступнішими та зручнішими, бар’єри для входу потенційних шахраїв продовжують знижуватися. Одночасно з цим збільшуються можливості цих інструментів, дозволяючи створювати більш переконливий синтетичний вміст, який може витримувати дедалі більшу увагу. Таке поєднання збільшення доступності та покращення якості створює особливо небезпечне середовище для вразливих користувачів Інтернету, яким може бракувати технічної грамотності для оцінки автентичності цифрового вмісту, з яким вони стикаються в Інтернеті.
Реакція технологічних платформ і правоохоронних органів була гальмівною та неадекватною масштабам проблеми. Незважаючи на те, що деякі платформи почали впроваджувати інструменти виявлення та політику вмісту, спрямовану на боротьбу з глибокими фейками, правозастосування залишається непослідовним і часто є реактивним, а не проактивним. Глобальний характер шахрайства в Інтернеті означає, що питання юрисдикції ускладнюють реагування правоохоронних органів, оскільки шахраї потенційно діють із місць, недоступних для органів влади в рідних країнах жертв. Освітні ініціативи, спрямовані на підвищення обізнаності громадськості про глибокі фейкові технології та шахрайські схеми, поширилися, але їх ефективність у захисті вразливих груп населення залишається невизначеною.
Випадок цього студента-медика-шахрая служить попередженням про темний потенціал технології генеративного штучного інтелекту, коли нею володіють зловмисники з навмисним наміром обдурити. У той час як інструменти штучного інтелекту пропонують надзвичайно законне застосування в медицині, дослідженнях, творчих починаннях та незліченних інших галузях, їх здатність до зловживання вимагає серйозного розгляду та проактивних стратегій пом’якшення. Конвергенція передових технологій, людської психології та фінансових стимулів створює середовище, придатне для експлуатації, особливо проти людей, які вже вразливі до маніпулювання через самотність, соціальну ізоляцію чи інші психологічні фактори.
Просуваючись вперед, подолання цієї нової загрози вимагатиме багатогранного підходу, який включає розвиток технологій, нормативні інновації, підзвітність платформи та освіту громадськості. Розробники генеративних інструментів штучного інтелекту стикаються з відповідальністю за впровадження заходів безпеки, що обмежують неправильне використання їхніх платформ, включаючи системи водяних знаків, відстеження використання та можливості модерації вмісту. Політики повинні розробити законодавчі рамки, які б належним чином боролися з шахрайством із підтримкою deepfake і зловживанням синтетичними носіями, зберігаючи при цьому захист для законного творчого та експресивного використання цих технологій. Проблема збалансування інновацій із захистом від зловживань визначатиме, наскільки ефективно суспільство реагує на цей новий клас цифрових злочинів.
Ширші наслідки поширюються не лише на окремі випадки шахрайства, а й на питання про довіру, автентичність і майбутнє цифрових комунікацій в епоху дедалі складніших синтетичних медіа. Оскільки здатність переконливо фабрикувати фотографії та відео стає все більш поширеною, епістемологічні проблеми, з якими стикаються користувачі Інтернету, помножуються. Корозійний ефект поширених дипфейків і цифрового шахрайства поширюється на публічний дискурс і інституційну довіру, потенційно підриваючи довіру до цифрової комунікації в усіх контекстах. Суспільство стоїть на критичному етапі у визначенні того, як використовувати переваги генеративної технології штучного інтелекту, одночасно захищаючи від її здатності до зловживань і обману.
Джерело: Wired


