مهندس سابق OpenAI می‌گوید آزمایشگاه‌های هوش مصنوعی چینی با وجود کنترل‌های صادراتی در حال آموزش مدل‌های بلک‌ول انویدیا هستند.

بر اساس گزارش یک مهندس سابق OpenAI، کنترل‌های صادرات ایالات متحده مانع از استفاده آزمایشگاه‌های هوش مصنوعی در چین از تراشه‌های محدود Nvidia نمی‌شود.

ویل دیپو، که اوایل سال جاری غول هوش مصنوعی را ترک کرد تا آزمایشگاه های بیکاری، یک شرکت مشاوره تحقیقاتی هوش مصنوعی را راه اندازی کند، شواهد پزشکی قانونی منتشر کرد که نشان می داد «DeepSeek، Moonshot AI، MiniMax و Ant Group علیرغم محدودیت هایی که در صادرات این تراشه ها به چین وجود دارد، به پردازنده های گرافیکی بلک ول انویدیا دسترسی پیدا کرده اند و از این سخت افزارهای AI برای ایجاد مدل های سخت افزاری خود استفاده می کنند».

DePue در یک پست رسانه اجتماعی گفت: "این دیوانه به نظر می رسد، اما من متوجه شدم که تقریبا هر مدل هوش مصنوعی دارای امضای پنهانی از GPU است که آن را آموزش داده است." هنگامی که یک مدل برای اولین بار راه اندازی می شود، مقادیر اولیه وزن آن در الگویی قرار می گیرد که به پردازنده گرافیکی دقیق بستگی دارد. هر ترکیبی از GPU و عدد دانه، یک الگوی منحصر به فرد ایجاد می کند - نوعی اثر انگشت از سخت افزار مورد استفاده برای ایجاد مدل. ردپایی از آن الگو از آموزش در مدل منتشر شده باقی می ماند.

به نظر دیوانه کننده نیست استعفای جنسن هوانگ، مدیر عامل انویدیا، به دنبال افشای رابطه او با تاجر چینی آلیس هوانگ، که در سال 2023، Megaspeed International مستقر در سنگاپور را تأسیس کرد، به وجود آمد. گزارش شده است که این شرکت به اتهام قاچاق چیپ های انویدیا به چین توسط مقامات آمریکایی تحت بازرسی قرار دارد.

خروج هوانگ همزمان با تلاش مجدد برای تشدید کنترل صادرات تراشه ایالات متحده است. مایک جانسون، رئیس مجلس نمایندگان از این ایده حمایت می کند. و حداقل چهار لایحه در انتظار بررسی هستند که هدف آنها محدود کردن دسترسی چین به فناوری پیشرفته هوش مصنوعی است: قانون AI Overwatch، قانون امنیت تراشه، قانون Match، و قانون امنیت ابری.

روز دوشنبه، سناتورهای آمریکایی، جیم بنکس (رئیس جمهور) و الیزابت وارن (دولت ماساچوست) «رابطه جنسن هوانگ با یک جاسوس مظنون چینی» را به عنوان توجیهی برای تصویب قانون AI Overwatch ذکر کردند که کنترل‌های فعلی صادرات تراشه دولت ترامپ را مدون می‌کند. دولت ترامپ روز پنجشنبه گفت مطمئن نیست که آلیس هوانگ جاسوس بوده یا خیر، ادعایی که پکن آن را رد کرده و در حال حاضر توسط FBI تحت تحقیق است.

به هر حال، قوانین فعلی به وضوح کار نمی کنند. تنها چند هفته پیش، لاوا، یک شرکت امنیتی مستقر در اسرائیل، اعلام کرد که «32 پردازنده گرافیکی Nvidia B300، بخشی از نسل بلک‌ول اولترا انویدیا، را از طریق نقاط پایانی نظارتی در معرض عموم با آدرس‌های IP که در چین قرار دارند، پیدا کرده است».

لاوا خاطرنشان کرد که این پردازنده‌های گرافیکی تحت کنترل صادرات ایالات متحده هستند [PDF]. بخش امنیتی گفت که یافته‌های آن از قرار گرفتن در معرض سیستم‌های نظارتی در نظر گرفته شده برای مدیریت زیرساخت داخلی است که در معرض عموم قرار گرفته است.

چگونه DePue به نتیجه خود رسید

تجزیه و تحلیل منتشر شده از طریق مشاوره DePue، "مدل های برتر چینی AI مرزی اثر انگشت GPU های Nvidia Blackwell با کنترل صادرات را دارند" رویکرد متفاوتی دارد: تجزیه و تحلیل وزن های منتشر شده مدل های مختلف از آزمایشگاه های هوش مصنوعی چینی.

همانطور که در گزارش توضیح داده شد، وزن مدل - پارامترهایی که در رابطه با داده های آموزشی تغییر می کنند - باید با مقداری مقداردهی اولیه شوند. یک روش برای انجام این کار شامل الگوریتم تولید اعداد شبه تصادفی (PRNG) به نام Philox است. الگوریتم با یک مقدار seed شروع می شود که هر زمان که اجرا می شود همان مجموعه مقادیر اولیه را تولید می کند.

با استفاده از PyTorch، مقداردهی اولیه را می توان با ایجاد چندین رشته GPU که به صورت موازی کار می کنند، با کمک کتابخانه CURAND انویدیا انجام داد. و از آنجایی که این فرآیند واقعا تصادفی نیست، می‌توان یک تراشه و یک مقدار دانه را انتخاب کرد، وزن‌های اولیه آن سخت‌افزار را تولید کرد و آن الگو را با وزن‌های منتشر شده مدل مقایسه کرد.

DePue گفت: "من بیش از شش تریلیون ترکیب از چیدمان تراشه و شماره دانه را جستجو کردم و آنها را با مدل های وزن باز تطبیق دادم." با انجام این کار، شواهد قطعی پیدا کردم مبنی بر اینکه شش مدل هوش مصنوعی چینی – از جمله DeepSeek-V4-Pro، Kimi K3 و MiniMax-M3 – در سیستم‌های Nvidia Blackwell راه‌اندازی شده‌اند. چهار مدل از آن‌ها با قطعات Grace Blackwell، GB200 و GB300 در سیستم‌های پرچم‌دار رک خنک‌کننده Nvidia مطابقت دارند.

با اشاره به اینکه این اولین بار است که MiniMax و Ant Group به طور عمومی به استفاده از Blackwell انویدیا مرتبط می شوند، او همچنین به چندین محدودیت برای رویکرد خود اشاره کرد. یکی این است که استفاده از پردازنده‌های گرافیکی بلک‌ول ثابت نمی‌کند که پردازنده‌های گرافیکی در کجا قرار گرفته‌اند، بنابراین ممکن است برخی از این آزمایشگاه‌های چینی از این سخت‌افزار از طریق ارائه‌دهندگان ایالات متحده استفاده کنند – خللی که قانون امنیت ابری قصد دارد آن را ببندد.

گزارش DePue شامل مقادیر اولیه اولیه است که DeepSeek-V3 را به Hopper انویدیا و DeepSeek-V4-Flash را به Blackwell مرتبط می کند، برای کسانی که می خواهند تلاش کنند نتایج را بازتولید کنند. DuPue ادعا می کند که چندین محقق ارشد، چه مستقل و چه در آزمایشگاه های مرزی هوش مصنوعی مانند OpenAI و Anthropic، این نتیجه را تایید کرده اند.

به طور تصادفی، OpenAI و Anthropic هر یک از آزمایشگاه‌های چینی شکایت کرده‌اند که مدل‌های آنها را از طریق تقطیر کپی می‌کنند، سرگرمی که آژانس امنیت سایبری و امنیت زیرساخت ایالات متحده نیز به آن اشاره کرده است. ®