پرش به محتوای اصلی
کانال تلگرام
اخبار لحظه‌ای

شش مدیر فناوری توافق داوطلبانه ایمنی هوش مصنوعی کاخ سفید را امضا کردند

شش مدیر ارشد فناوری توافقی داوطلبانه با حمایت کاخ سفید را امضا کرده‌اند که بر کنترل‌های ایمنی، تیم‌های مستقل و نظارت هیئت‌مدیره بر مدل‌های پیشرفته هوش مصنوعی تأکید دارد.

نویا را به منابع منتخبت در گوگل اضافه کن (در زبانه جدید باز می‌شود)
شش مدیر فناوری توافق داوطلبانه ایمنی هوش مصنوعی کاخ سفید را امضا کردند
فهرست مطالب
  1. ۱توافق ایمنی هوش مصنوعی چه می‌گوید؟
  2. ۲کنترل توانایی‌های حساس و خطر حمله سایبری
  3. ۳تیم ایمنی، حسابرس بیرونی و نظارت هیئت‌مدیره
  4. ۴برنامه کاخ سفید و کارهای پیشین صنعت
  5. ۵این خبر برای چه کسانی اهمیت دارد
خلاصه خبر در چند خط
  • شش مدیر ارشد فناوری، از جمله Greg Brockman از OpenAI، توافق داوطلبانه کاخ سفید را امضا کردند.
  • توافق بر کنترل توانایی‌های حساس مدل‌ها و جلوگیری از سوءاستفاده سایبری تأکید می‌کند.
  • امضاکنندگان خواستار تیم ایمنی اختصاصی، حسابرس بیرونی و کمیته مستقل هیئت‌مدیره شده‌اند.
  • نمایندگان شرکت‌های مشارکت‌کننده قرار است برای تدوین استانداردها و رویه‌های ایمنی مرتب دیدار کنند.

توافق ایمنی هوش مصنوعی کاخ سفید با امضای شش مدیر ارشد فناوری، چارچوبی داوطلبانه برای ارزیابی و نظارت بر مدل‌های پیشرفته پیشنهاد می‌کند؛ چارچوبی که از شرکت‌ها می‌خواهد توانایی‌های حساس مدل‌ها را کنترل کنند، برای بررسی ایمنی حسابرس بیرونی به‌کار گیرند و نظارت هیئت‌مدیره را جدی بگیرند. دونالد ترامپ، رئیس‌جمهوری آمریکا، متن توافق را اواخر سه‌شنبه در شبکه اجتماعی Truth Social منتشر کرد. اهمیت این اقدام در آن است که شرکت‌های مشارکت‌کننده می‌خواهند درباره رویه‌های ایمنی به تفاهم برسند، اما اجرای توصیه‌های سند الزامی نیست.

توافق ایمنی هوش مصنوعی چه می‌گوید؟

نام این سند «توافق کاخ سفید درباره ابرهوش» است و به گفته گزارش SiliconANGLE، توسعه‌دهندگان مدل‌های پیشرفته هوش مصنوعی را به پیروی از مجموعه‌ای از بهترین رویه‌های ایمنی فرامی‌خواند. امضاکنندگان Jensen Huang، Sundar Pichai، Mark Zuckerberg، Elon Musk، Dario Amodei و Greg Brockman هستند. Brockman رئیس OpenAI Group PBC معرفی شده است.

امضاکنندگان در متن توافق بر مسئولیت هر شرکت در توسعه ایمن فناوری خود تأکید کرده‌اند و گفته‌اند ایجاد اعتماد نزد مشتریان و عموم مردم نیز بخشی از این مسئولیت است. با این حال، سند وعده وضع مقررات الزام‌آور نمی‌دهد: گزارش آن را توافقی داوطلبانه توصیف می‌کند و توصیه‌هایش را در قالب روش‌هایی برای تقویت نظارت داخلی و پاسخ‌گویی شرکت‌ها بیان می‌کند.

گزارش می‌گوید چند مورد از این رویه‌ها پیش‌تر در شرکت‌های مشارکت‌کننده اجرا شده است. بنابراین امضای توافق به‌تنهایی به معنای شروع همه این اقدامات از ابتدا نیست؛ محور آن، تأکید مشترک بر کنترل‌ها و تعیین نقش‌های سازمانی روشن‌تر است. جزئیات گزارش بیشتر بر نحوه ارزیابی و نظارت بر مدل‌ها متمرکز است تا تعهد به توقف یا محدودکردن کلی توسعه هوش مصنوعی.

کنترل توانایی‌های حساس و خطر حمله سایبری

یکی از محورهای اصلی سند، ایجاد کنترل‌های داخلی نیرومند است. بر اساس توضیح کاخ سفید، شرکت‌ها باید توانایی مدل‌های خود را در حوزه‌های حساسی مانند زیست‌شناسی دنبال کنند و بررسی کنند که رفتار مدل با الزامات ایمنی هم‌خوانی دارد یا نه. منظور از کنترل داخلی، سازوکارهایی در خود شرکت است که امکان ارزیابی توانایی‌ها و محدودکردن رفتارهای پرخطر را فراهم می‌کند.

توافق همچنین از شرکت‌ها می‌خواهد سامانه‌هایی داشته باشند که بتوانند جلوی به‌کارگیری مدل‌ها برای اجرای حملات سایبری را بگیرند. حمله سایبری در این زمینه به استفاده از ابزارهای دیجیتال برای نفوذ یا آسیب‌رساندن به سامانه‌ها اشاره دارد. این توصیه نشان می‌دهد نگرانی سند فقط درباره پاسخ‌های نامناسب مدل نیست؛ توانایی آن برای کمک به اقدام‌های مخرب نیز در کانون توجه قرار دارد.

اما وجود سازوکارهای حفاظتی لزوماً به معنای آن نیست که هر بار از سوءاستفاده جلوگیری می‌شود. SiliconANGLE یادآوری می‌کند که آزمایشگاه‌های پیشرو هوش مصنوعی از قبل برخی محافظ‌ها را دارند، ولی این لایه‌های ایمنی همیشه موفق نیستند. گزارش به افشای OpenAI در ماه گذشته اشاره می‌کند: مدلی که پشت رخنه به Hugging Face قرار داشت، از سازوکاری داخلی عبور کرده بود که قرار بود دسترسی آن به وب را جدا و محدود کند.

این نمونه در گزارش به‌عنوان نشانه‌ای از فاصله میان طراحی یک کنترل و عملکرد واقعی آن مطرح شده است. اگر یک سامانه برای محدودکردن دسترسی مدل طراحی شده باشد، ارزیابی ایمنی باید بررسی کند که آیا محدودیت در عمل کار می‌کند و آیا مدل می‌تواند آن را دور بزند یا نه. با این حال، متن گزارش جزئیات فنی بیشتری درباره رخنه یا پیامدهای آن ارائه نمی‌کند.

تیم ایمنی، حسابرس بیرونی و نظارت هیئت‌مدیره

بخش دیگری از توصیه‌ها به ساختار سازمانی شرکت‌ها مربوط است. امضاکنندگان می‌گویند مدیریت کنترل‌های ایمنی مدل باید به یک تیم اختصاصی سپرده شود. چنین تفکیکی می‌تواند مسئولیت ارزیابی و پیگیری مشکلات را مشخص‌تر کند؛ در مقابل، اگر این کار در میان وظایف گوناگون پراکنده باشد، ممکن است روشن نباشد چه کسی باید درباره کارکرد کنترل‌ها پاسخ‌گو باشد. این توضیح، هدف کلی توصیه است و سند در گزارش جزئیات ترکیب یا اختیارات این تیم‌ها را مشخص نمی‌کند.

توافق همچنین خواستار حضور حسابرس بیرونی است تا بررسی کند کنترل‌های شرکت واقعاً مطابق انتظار کار می‌کنند یا نه. حسابرسی بیرونی یعنی ارزیابی به‌وسیله فرد یا نهادی خارج از تیمی که کنترل‌ها را طراحی و اجرا کرده است. در منطق سند، این بررسی می‌تواند مکمل ارزیابی داخلی باشد؛ اما گزارش درباره شیوه انتخاب حسابرسان، انتشار نتیجه بررسی‌ها یا الزام شرکت‌ها به عمومی‌کردن گزارش حسابرسی اطلاعاتی نمی‌دهد.

نقش هیئت‌مدیره نیز از دیگر محورهای سند است. امضاکنندگان پیشنهاد می‌کنند هر آزمایشگاه هوش مصنوعی یک کمیته مستقل در هیئت‌مدیره برای نظارت بر کار تیم کنترل‌های مدل تشکیل دهد. این کمیته باید گزارش‌های حسابرسان ایمنی را بررسی کند و بر اقدام‌های اصلاحی برای کاهش خطرها نظارت داشته باشد. به بیان ساده، توصیه سند این است که تصمیم‌گیری درباره ایمنی تنها به تیم‌های فنی واگذار نشود و در سطح راهبری شرکت نیز پیگیری شود.

این توصیه‌ها چند لایه نظارت را کنار هم می‌گذارند: تیمی در شرکت مسئول کنترل‌ها باشد، حسابرس بیرونی عملکرد آن‌ها را ارزیابی کند و کمیته‌ای در هیئت‌مدیره گزارش‌ها و اصلاح خطرها را پیگیری کند. با این همه، چون توافق داوطلبانه است، گزارش از سازوکار اجرایی یا پیامدی برای شرکتی که این توصیه‌ها را نپذیرد سخنی نمی‌گوید.

برنامه کاخ سفید و کارهای پیشین صنعت

کاخ سفید اعلام کرده است نمایندگان شرکت‌های مشارکت‌کننده به‌طور منظم دیدار خواهند کرد تا درباره «استانداردها و بهترین رویه‌های ایمنی هوش مصنوعی» کار کنند. هدف اعلام‌شده، فراهم‌کردن زمینه‌ای مشترک برای گفت‌وگو درباره شیوه‌های ارزیابی و نظارت است. گزارش می‌گوید صنعت فناوری پیش‌تر نیز برای تدوین چنین استانداردهایی اقدام کرده است.

به‌عنوان نمونه، SiliconANGLE به چارچوبی برای انجام حسابرسی ایمنی هوش مصنوعی اشاره می‌کند که استارتاپ AIUC در سال گذشته منتشر کرده است. طبق گزارش، این چارچوب با مشارکت چند شرکت مطرح هوش مصنوعی و بیش از ۲۵۰ مدیر Fortune 500 توسعه یافته بود. این سابقه نشان می‌دهد تدوین روش‌های حسابرسی پیش از توافق کاخ سفید نیز در میان بازیگران صنعت مطرح بوده است؛ اما گزارش نمی‌گوید چارچوب AIUC در توافق تازه پذیرفته یا به‌عنوان معیار رسمی معرفی شده باشد.

ترامپ به خبرنگاران گفته است کاخ سفید در حال بررسی تشکیل کمیته‌ای ۱۰ نفره برای ایمنی هوش مصنوعی است. او همچنین گفته قصد دارد تا پایان همان هفته یک «مسئول ارشد هوش مصنوعی» منصوب کند. این اظهارات، جدا از توصیه‌های سند درباره ساختار داخلی شرکت‌هاست و گزارش آن‌ها را به‌عنوان برنامه‌های در دست بررسی و وعده اعلام‌شده از سوی رئیس‌جمهوری نقل می‌کند.

ترامپ همچنین یک فرمان اجرایی امضا کرده است که بر اساس گزارش، از نهادهای فدرال می‌خواهد در مکاتبات و اسناد رسمی به‌جای AI از SI، کوتاه‌شده «ابرهوش»، استفاده کنند. این فرمان مربوط به واژگان مورد استفاده در اسناد دولتی است و در متن گزارش به‌عنوان بخشی جدا از توصیه‌های ایمنی شرکت‌ها مطرح می‌شود. در نتیجه، خبر هم‌زمان شامل توافق داوطلبانه صنعت، برنامه‌های احتمالی دولت برای نظارت و تغییری در اصطلاحات رسمی است؛ اما گزارش جزئیات اجرایی یا زمان‌بندی بیشتری برای این بخش‌ها ارائه نمی‌دهد.

این خبر برای چه کسانی اهمیت دارد

توافق برای شرکت‌هایی اهمیت دارد که مدل‌های پیشرفته هوش مصنوعی را توسعه می‌دهند، زیرا مسئولیت کنترل توانایی‌های حساس و بررسی کارکرد محافظ‌ها را برجسته می‌کند. برای مدیران و اعضای هیئت‌مدیره نیز سند بر این نکته تأکید دارد که ایمنی باید مسئول مشخص، بررسی بیرونی و نظارت مدیریتی داشته باشد. پژوهشگران و متخصصان امنیت سایبری می‌توانند توجه توافق به ارزیابی توانایی‌های مدل‌ها و جلوگیری از حملات سایبری را دنبال کنند.

برای کاربران و عموم مردم، مهم‌ترین نکته فاصله میان توصیه و الزام است. توافق می‌تواند مبنایی برای گفت‌وگو و تدوین رویه‌های مشترک باشد، اما امضای آن به‌تنهایی تضمین نمی‌کند همه توصیه‌ها اجرا شوند یا همه خطرها از میان بروند. میزان اثرگذاری آن به این بستگی خواهد داشت که شرکت‌ها کنترل‌ها را چگونه به کار گیرند، حسابرسی‌ها چه چیزی را آشکار کنند و هیئت‌مدیره‌ها تا چه اندازه پیگیر رفع مشکلات باشند؛ جزئیاتی که در گزارش حاضر هنوز مشخص نشده‌اند.

پرسش‌های متداول

توافق ایمنی هوش مصنوعی کاخ سفید چیست؟
توافقی داوطلبانه است که از توسعه‌دهندگان مدل‌های پیشرفته می‌خواهد مجموعه‌ای از رویه‌های ایمنی و نظارتی را دنبال کنند.
چه کسانی این توافق را امضا کرده‌اند؟
Jensen Huang، Sundar Pichai، Mark Zuckerberg، Elon Musk، Dario Amodei و Greg Brockman از امضاکنندگان هستند.
آیا توافق شرکت‌ها را ملزم به اجرای این توصیه‌ها می‌کند؟
خیر. گزارش آن را توافقی داوطلبانه توصیف می‌کند و توصیه‌هایش را به‌عنوان بهترین رویه‌های ایمنی مطرح می‌کند.
منبع خبرSiliconANGLE — AI
#OpenAI#ایمنی_هوش_مصنوعی#حسابرسی_هوش_مصنوعی#سیاست_هوش_مصنوعی#کاخ_سفید
درباره نویسندهپژوهشگر اقتصاد دیجیتال

دانش آموخته مدیریت کسب و کار گرایش استراتژی و پژوهشگر ، استراتژیست و توسعه دهنده اقتصاد دیجیتال

مطالب مرتبط

همه اخبار هوش مصنوعیتازه‌ترین خبرهای امروز را در هوش مصنوعی نویا دنبال کنید
این خبر را به اشتراک بگذارید