پرش به محتوای اصلی

صدها برنامه هوش مصنوعی دنیوی ویژگی های Deepfake سوء استفاده جنسی را پنهان می کنند

وایرد۱۴۰۵ آبان ۱۱, دوشنبه، ساعت ۱۳:۳۰حدود 9 دقیقه مطالعه

WIRED حدود 400 برنامه و وب‌سایت مرتبط با توسعه‌دهندگان چینی زبان را کشف کرد که شبیه ابزارهای معمولی هوش مصنوعی هستند، اما دارای ویژگی‌های مخفی بودند که به کاربران اجازه می‌داد تصاویر و ویدیوهای خشن تولید شده توسط هوش مصنوعی ایجاد کنند.

همه اینها پوششی است برای آنچه به نظر می رسد هدف واقعی برنامه است: ایجاد تصاویر عمیق جعلی توهین آمیز جنسی. یک تحقیق WIRED نشان داد که این برنامه بخشی از شبکه ای از بیش از 400 دامنه و برنامه متصل است که مانند Viefur اغلب ادعا می کنند خدمات روزمره هستند - مانند آموزش زبان یا مربیان تمرین هوش مصنوعی. با این حال، هنگامی که تحت شرایط خاصی به برنامه‌ها دسترسی پیدا می‌کنند، برنامه‌های موجود در شبکه به‌طور مخفیانه یک رابط وب را بارگیری می‌کنند که اجازه تولید تصاویر و ویدیوهای جنسی صریح هوش مصنوعی را با استفاده از عکس‌هایی که کاربران آپلود می‌کنند، می‌دهد.

این برنامه‌ها شامل صحنه‌های هوش مصنوعی مانند «تجاوز در اتاق خواب» و «چاقوی تهدیدآمیز» است که در آن مردی چاقو را به گردن زن می‌گیرد. چندین محقق پس از بررسی پیوندهایی از هزاران تبلیغ ویدیویی حاوی محتوای عمیق جعلی صریح که در فیس بوک و اینستاگرام متا منتشر شده بودند، توسط چندین محقق پنهان شده در دید آشکار کشف شد. همانطور که WIRED در ماه‌های اخیر گزارش داده است، صدها نفر از این تبلیغات حاوی مواد سوء استفاده جنسی از کودکان از جمله تصاویر کودکان واقعی و یکی از اعضای خانواده سلطنتی اروپایی هستند.

این تبلیغات به ده ها هزار نفر رسید و باعث تحقیقات از سوی تنظیم کننده ها در سراسر جهان شد. در هر مورد، تبلیغات به برنامه‌های فریبنده در فروشگاه‌های اپل و گوگل مرتبط می‌شدند - به افراد اجازه می‌داد تصاویر واضح تولید کنند و با استفاده از Apple و Google Pay پرداخت‌ها را انجام دهند. به نظر می‌رسد شبکه پشت برنامه‌های nudify حدود یک سال است که آنها را منتشر می‌کند و گاهی ده‌ها در هفته منتشر می‌کند.

این در حالی است که گوگل، اپل و متا می‌گویند که سیاست‌های خود را اجرا می‌کنند که اجازه نمی‌دهد محتوای دیپ‌فیک مضر در پلتفرم‌هایشان وجود داشته باشد. طبق بررسی دامنه‌های وب و نحوه عملکرد سرویس‌ها، به نظر می‌رسد برنامه‌ها و دامنه‌های مورد بررسی WIRED توسط توسعه‌دهندگان چینی و یک نهاد ثبت شده در هنگ‌کنگ به نام KeLing Technology Limited اجرا می‌شوند.

آدرس‌های ایمیل مرتبط با نهاد، برنامه‌ها و سرویس‌های مرتبط، به درخواست‌های متعدد برای نظر دادن از سوی WIRED پاسخ نمی‌دهند، اما پس از تماس با آنها، به نظر می‌رسد که ارتباطات عمومی بین KeLing Technology Limited و ابزارهای دیپ‌فیک را پاک می‌کنند. Paul Bouchaud، محقق اصلی در موسسه غیرانتفاعی AI Forensics که در مورد شبکه تحقیق کرده است، می‌گوید: «این یک عملیات سازمان‌یافته و تجاری است: یک اپراتور در پشت صدها برنامه و دامنه یکبار مصرف، پنهان‌سازی شده تا بررسی App Store را پشت سر بگذارد و ده‌ها هزار آگهی متا را تحت نام‌های جعلی پرداخت‌کننده انجام دهد».

"آنها انتظار ندارند که اجرای قانون به نتیجه برسد و تا کنون هم چنین نشده است." رفتار پنهان یکی از برنامه ها را در شبکه دیپ فیک دانلود کنید و ممکن است دقیقا آنچه را که تبلیغ شده است ببینید - مانند برنامه ای برای ایجاد تصاویر حیوانات خانگی با هوش مصنوعی. اما محققان دریافتند که در پشت صحنه، برنامه‌ها بی‌صدا در مورد نمایش محتوای خوش‌خیم یا بارگذاری یک رابط وب که دیپ‌فیک‌های صریح را نشان می‌دهد، تصمیم‌گیری می‌کنند. هر بار که برنامه دانلود می شود، با برخی از اطلاعات با سرور تماس گرفته می شود، از جمله اینکه کاربر از کجا آمده است، زبان، یک شناسه منحصر به فرد، و سپس سرور پاسخ می دهد

Bouchaud که کد برنامه‌ها و وب‌سایت‌های مرتبط را مهندسی معکوس کرده است، توضیح می‌دهد که او یا عدم نمایش صریح یا غیر صریح آن. وب‌سایت‌های مرتبط با این برنامه‌ها اسرار شبکه و مقیاسی که بر اساس آن کار می‌کند را فاش کرده‌اند. باز کردن یکی از وب‌سایت‌های برنامه احتمالا یک صفحه کاملا سیاه و بدون محتوا نشان می‌دهد.

تنها تغییر قابل توجه این است که URL به روز می شود تا کلمه "ریسک" را شامل شود. اما وب‌سایت‌ها میزبان لایه عمقی آشکار پنهان هستند که می‌تواند در هر برنامه بارگذاری شود. این رابط وب حاوی ده‌ها قالب ویدئویی و تصویری عمیق جعلی پورنوگرافی است که کاربران می‌توانند تصاویر افراد را برای اضافه شدن به صحنه‌های جنسی آپلود کنند. این رابط به خرید "الماس" اجازه می دهد تا تصاویر و پیوندهایی به سایر حساب های رسانه های اجتماعی ایجاد کند که در آن کاربران می توانند با توسعه دهندگان با سؤالات یا شکایات تماس بگیرند. همچنین در کد وب سایت ها جزئیات مربوط به کل شبکه پنهان است.

به گفته محققان، یک بسته جاوا اسکریپت که به راحتی قابل برداشتن است، حاوی لیستی از همه دامنه ها و برنامه هایی است که توسط توسعه دهندگان ایجاد شده اند - از جمله جزئیات بسته برنامه، کلیدهای رمزگذاری، ردیاب های تبلیغاتی فیس بوک و موارد دیگر. Maël Le Touz، محقق تهدید کارکنان در شرکت امنیتی Infoblox که تقریبا 500 دامنه مرتبط را شناسایی کرده است، می‌گوید: «آنها حاوی این فهرست پیکربندی غول‌پیکر دامنه‌های دیگر با کلیدهای رمزگذاری متفاوت بودند.

"آنها یک کد را اجرا می کنند و همه به یکدیگر ارجاع می دهند." تجزیه و تحلیل بوچارد از زمان ثبت دامنه ها نشان داد که برنامه ها در اواخر سال 2025 ظاهر شدند و در بهار امسال افزایش یافت. این محقق می‌گوید در یک مقطع زمانی، حدود 30 وب‌سایت برهنگی هر هفته ثبت می‌شد، که 27 مورد آن در ماه سپتامبر در فروشگاه پلی استور گوگل به‌صورت زنده ثبت می‌شد.

تحقیقات بوچارد می گوید که این برنامه ها بیش از 350000 بار به طور جمعی دانلود شده اند و بسیاری از آنها برای همه گروه های سنی مناسب ارزیابی شده اند. یکی از محبوب ترین اپلیکیشن ها به نام DiffAI در دسامبر 2025 ساخته شد و بیش از 100000 بار از پلی استور دانلود شده است. یک بررسی کاربر در فروشگاه Play Google بیان کرد: "این برنامه حاوی الگوهایی برای ایجاد CSAM و سایر انواع مطالب مستهجن است. هیچ تأیید سنی را انجام نمی دهد." DiffAI کمی قبل از تماس WIRED با گوگل در مورد شبکه از فروشگاه Play حذف شد.

گوگل به درخواست WIRED برای اظهار نظر پاسخ نداد، اگرچه اکثر برنامه ها را قبل از تماس با آنها حذف کرده بود. (بخش هایی از شبکه دیپ فیک توسط روزنامه نگاران دانمارکی در ماه سپتامبر گزارش شد.) به طور مشابه، اپل 19 برنامه را از اپ استور خود حذف کرد، از جمله برنامه عکس حیوانات خانگی Viefur، پس از اینکه WIRED از شرکت در مورد فعالیت و دامنه های مرتبط با آن به اشتراک گذاشت.

آدام دما، سخنگوی اپل می‌گوید: «ما اپ استور را به‌گونه‌ای طراحی کردیم که مکانی امن و قابل اعتماد برای کاربرانمان باشد و برنامه‌های برهنگی و سایر محتوای مستهجن اکیدا ممنوع هستند. Dema می‌گوید: «ما هر برنامه‌ای را قبل از انتشار بررسی می‌کنیم، و این برنامه‌ها زمانی که آن‌ها را بررسی کردیم با قوانین ما مطابقت داشتند.

پس از تأیید، توسعه‌دهندگان آنها وب‌سایتی را که برنامه محتوای خود را از آن بیرون می‌کشد تغییر دادند، و آنچه را که ما تأیید کردیم با محتوای مستهجن جایگزین کردند و آن را از طریق تبلیغات مستهجن که در یک پلتفرم شخص ثالث میزبانی می‌شد تبلیغ کردند.» این شرکت می‌گوید که ده‌ها هزار برنامه را به دلیل استفاده از این تاکتیک‌های «طعمه‌ای و تغییر» در سال گذشته به حالت تعلیق درآورده است و اخیرا قوانین فروشگاه برنامه خود را برای محدود کردن بیشتر ابزارهای «برهنه‌سازی» به‌روزرسانی کرده است. ریشه های چینی به نظر می رسد مرکز شبکه "nudify" میزبانی از توسعه دهندگان چینی باشد که به نظر می رسد هویت آنها عمدا پنهان شده است.

لو توز با اشاره به ویدئوهای صریح در تبلیغات منتشر شده در پلتفرم های متا که برنامه ها را تبلیغ می کنند حاوی واترمارک از نرم افزار ویرایش ویدیو به زبان چینی است، می گوید: "این برنامه از میزبانی انحصاری چینی استفاده می کند، کد به زبان چینی نوشته شده است و نظرات زیادی به زبان چینی دارد." برنامه‌ها و دامنه‌های سراسر شبکه اغلب از سیاست‌های حفظ حریم خصوصی عمومی، آدرس‌های ایمیل رایگان از Gmail یا Outlook و نام‌های مبهم توسعه‌دهندگان به عنوان بخشی از تلاش‌های ادعایی خود برای پنهان کردن ارتباطات خود استفاده می‌کنند.

در تبلیغات برنامه‌های ارسال شده در پلتفرم‌های متا از نام‌های ظاهرا جعلی مانند Draftmondcreldbro Duhustepre و Swaldmungsha Glasirdcroldshold و صفحات بدون دنبال‌کننده استفاده شده است. از آغاز سال جاری، تحقیقات Bouchaud ده‌ها هزار آگهی عمیق جعلی صریح و صریح را پیدا کرده است که به شبکه مرتبط هستند - اغلب از زبانی مشابه در نسخه تبلیغاتی خود استفاده می‌کنند - در پلتفرم‌های متا. کیتی پل، مدیر پروژه شفافیت فناوری، که برای اولین بار از تبلیغاتی که تصاویر صریح و صریح افراد زیر سن قانونی را نشان می‌دهند، می‌گوید: «این تبلیغات نه تنها یک، بلکه چندین خط‌مشی متا را نقض می‌کنند.

او می‌گوید: «در مورد چیزی که می‌بینید، چه برنامه‌ای تبلیغ می‌کند، هیچ سؤالی وجود ندارد. پل می‌گوید شرکت‌های فناوری باید به سؤالاتی درباره اینکه پول تولید شده از برنامه‌ها کجا می‌رود و چگونه به نظر می‌رسد کسانی که پشت برنامه‌ها و خدمات برهنگی هستند دائما سیستم‌های اعتدال محتوا و ایمنی خود را دور می‌زنند، پاسخ دهند. به نظر می رسد که KeLing Technology Limited بخش مهمی از این عملیات باشد. در حالی که وب سایت این شرکت کمی بیشتر از یک پوسته است، نام آن به عنوان اطلاعات تماس اولین وب سایت ثبت شده در شبکه ذکر شده است.

نام تجاری این وب سایت همچنین به عنوان بخشی از جزئیات تماس در قالب عمیق عمیق که در برنامه ها استفاده می شد ظاهر می شود. Bouchaud همچنین یک صفحه ورود به سیستم را شناسایی کرد که به رابط عمیق جعلی صریح مرتبط است که به "Keling" اشاره می کند. و آدرس‌های ایمیل با استفاده از دامنه شرکت در حداقل یک برنامه که از فروشگاه‌های برنامه حذف شده است ظاهر می‌شود. در اواخر ماه سپتامبر، اعلانی برای کاربران رابط عمیق دیپ‌فیک ارسال شد که اعلام کرد که می‌توان از یک مدل هوش مصنوعی جدید استفاده کرد – مدل Veyra نام داشت که در برنامه‌ها یک برچسب «واقعی‌تر. طبیعی‌تر» بود.

وحشی تر.» صفحه اصلی وب سایتی به نام Veyra AI ایمیل تماس آن را به عنوان آدرس فناوری KeLing ذکر کرده است. وقتی WIRED با آدرس‌های ایمیل KeLing، به‌علاوه برخی از آن‌هایی که در خط‌مشی‌های رازداری برنامه‌ها فهرست شده‌اند، تماس گرفت، هیچ پاسخی دریافت نکردیم. با این حال، پس از تماس WIRED، شخصی نام برخی از کانال‌های رسانه اجتماعی آنلاین مرتبط را تغییر داد، آدرس‌های ایمیل KeLing را از وب‌سایت AI Veyra حذف کرد و آدرس KeLing Technology Limited را از اولین وب‌سایت ثبت‌شده حذف کرد. متا می‌گوید که شرکت KeLing Technology Limited را در سال 2025 از تبلیغات منع کرده است، زیرا این شرکت نتوانست از توقف و توقف خود پیروی کند.

نامه.» (متا با استناد به دلایل قانونی از به اشتراک گذاشتن نامه با WIRED خودداری کرد.) یکی از سخنگویان متا می گوید: "ما قوانین سختگیرانه ای علیه تبلیغ برنامه های برهنگی داریم و به شدت تلاش می کنیم تا این مطالب را از سرویس های خود دور نگه داریم." متا می‌گوید در حالی که KeLing Technology Limited به تلاش و تبلیغ از راه‌های دیگر ادامه می‌دهد، زمانی که از تبلیغات مطلع شود، علیه آن‌ها اقدام می‌کند. پس از اینکه WIRED بیش از 400 دامنه را با متا به اشتراک گذاشت، سخنگوی گفت که آنها بیش از 3000 آگهی مرتبط مرتبط با آنها را به اشتراک گذاشته اند که دو سوم آنها را قبلا از سیستم خود حذف کرده است.

متا بعدا به WIRED گفت که علیه 11600 حساب تبلیغاتی، بیش از 4700 صفحه تجاری، 5200 کاربر و 15000 صفحه مرتبط با دامنه ها اقدام کرده است و 209 برنامه را از تبلیغات در پلتفرم های خود مسدود کرده است. سخنگوی می‌گوید: «جنایتکاران پشت سر آنها گام‌های فریبنده فزاینده‌ای برای فرار از شناسایی برمی‌دارند – مخفی شدن در پشت نام‌ها و هویت‌های جعلی، اجرای تبلیغاتی که به نظر خوش‌خیم می‌آیند، و گاهی اوقات به فروشگاه‌های اپلیکیشن گوگل و اپل لینک می‌دهند، در حالی که هدف واقعی تبلیغات تنها پس از یک کلیک آشکار می‌شود. همانطور که WIRED گزارش این داستان را به پایان رساند، تبلیغات و برنامه های مشابه همچنان در پلاتف فناوری منتشر می شدند.

کرم

خواندن متن کامل در وایردبه زبان اصلی، در سایت ناشر باز می‌شود
متن اصلی (انگلیسی)

Hundreds of Mundane AI Apps Are Hiding Sexually Abusive Deepfake Features

WIRED uncovered some 400 apps and websites linked to Chinese-language developers that look like regular AI tools but had secret features that let users create violent AI-generated images and video.

همه‌ی اخبار فناوری