راه ترقی

آخرين مطالب

سپردن کنترل ربات‌ها به هوش مصنوعی به همان بدی است که فکرش را می‌کنید! دانش

سپردن کنترل ربات‌ها به هوش مصنوعی به همان بدی است که فکرش را می‌کنید!
  بزرگنمايي:

راه ترقی - ایسنا /ایزاک آسیموف(Isaac Asimov)، نویسنده داستان‌های علمی و تخیلی سه قانون رباتیک را مطرح می‌کند که شما هرگز آنها را از روی رفتارهای ربات‌های امروزی یا سازندگان آنها متوجه نخواهید شد.
قانون اول این است که «ربات‌ ممکن است به انسان آسیب نرساند یا از طریق بی‌عملی باعث شود که انسان آسیب ببیند»، اگرچه این قابل ستایش است، اما از 77 تصادف‌ مرتبط با ربات بین سال‌های 2015 تا 2022 جلوگیری نکرده است که بسیاری از آنها منجر به قطع انگشت و شکستگی سر و بدن شده‌اند. همچنین از مرگ و میر ناشی از خودران شدن خودروها و تاکسی‌های رباتیک نیز جلوگیری نکرده است.
به نقل از رجیستر، قانون دوم، این است که «ربات باید از دستوراتی که توسط انسان‌ها داده می‌شود اطاعت کند، مگر در مواردی که چنین دستوراتی با قانون اول در تضاد باشد» که این به نظر مشکل‌سازتر می‌رسد. تنها نظامیان در سراسر جهان نیستند که علاقه زیادی به ربات‌هایی دارند که قادر به نقض قانون اول هستند. قانون دوم خیلی مبهم است و نمی‌تواند بین درخواست‌های مجاز و غیرمجاز تمایز قائل شود.
به نظر می‌رسد که اگر ربات‌های خود را با ریاضیات بُرداری پر کنید که به طور تعبیری هوش مصنوعی نامیده می‌شود، درخواست‌های غیرمجاز یک مشکل واقعی ایجاد می‌کنند. قانون سومی نیز وجود دارد که ما نگران آن نیستیم: ربات باید از وجود خود محافظت کند تا زمانی که چنین محافظتی با قانون اول یا دوم در تضاد نباشد.
اشتیاق جدید به مدل‌های زبانی بزرگ، ناگزیر منجر به این شده است که ربات‌سازان این مدل‌های زبانی بزرگ را به ربات‌ها بیافزایند، تا آنها بتوانند به دستورالعمل‌های گفتاری یا نوشتاری پاسخ دهند. برای مثال، سازنده ربات بوستون داینامیکس(Boston Dynamics)، ربات اسپات(Spot) خود را با چت جی‌پی‌تی(ChatGPT) ادغام کرده است.
از آنجایی که مدل‌های زبانی بزرگ به طور گسترده‌ای در برابر قفل شکنی آسیب‌پذیر شناخته شده‌اند، اینکه ربات‌هایی که توسط مدل‌های‌ زبانی کنترل می‌شوند نیز ممکن است در برابر قفل شکنی آسیب‌پذیر باشند، دور از تصور نیست. قفل شکنی به فرآیندی گفته می‌شود که در آن اعلان‌های با دقت ساخته شده، یک مدل و برنامه‌ی متصل به آن را فریب می‌دهند تا برخلاف میل سازندگانشان عمل کند.
مدل‌های زبانی بزرگ با آموزش دیدن بر روی مقادیر انبوه داده ساخته می‌شوند و از آنها برای پیش‌بینی در پاسخ به یک پیام متنی یا تصاویر یا صدا برای مدل‌های چندوجهی استفاده می‌کنند. از آنجایی که محتوای ناخوشایند زیادی در مجموعه‌های آموزشی وجود دارد، مدل‌های آموزش‌دیده بر روی این داده‌ها به‌گونه‌ای تنظیم می‌شوند که آنها را از انتشار محتوای مضر در صورت تقاضا بازدارد. در حالت ایده‌آل، مدل‌های زبانی بزرگ قرار است برای به حداقل رساندن آسیب‌های احتمالی «هم تراز» شوند. آنها ممکن است در مورد شیمی عوامل عصبی بدانند اما قرار نیست آن را مطرح کنند.
اما با تلاش کافی می‌توان این مکانیسم‌های ایمنی را دور زد، فرآیندی که گفتیم به نام قفل شکنی شناخته می‌شود. کسانی که کار آکادمیک روی مدل‌های هوش مصنوعی انجام می‌دهند اذعان دارند که هیچ مدل زبانی از حملات قفل شکنی کاملا در امان نیست.
بدیهی است که هیچ رباتی که از یک مدل زبانی دستور می‌گیرد نیز وجود ندارد که در برابر قفل شکنی مقاوم باشد. محققان دانشگاه پنسیلوانیا الگوریتمی به نام RoboPAIR برای قفل شکنی ربات‌های تحت کنترل‌ مدل‌های زبانی بزرگ ابداع کرده‌اند.
ممکن است بپرسید، چرا کسی باید یک ربات را به یک مدل زبانی بزرگ متصل کند، با توجه به اینکه مدل‌ها بسیار ناامن و خطاپذیر هستند؟
این سوال خوبی است اما پاسخی برای آن وجود ندارد. در حال حاضر باید بپذیریم که ربات‌ها به مدل‌های زبانی مجهز می‌شوند.
الکساندر روبی(Alexander Robey)، زاخاری راویچندران (Zachary Ravichandran)، ویجی کومار (Vijay Kumar)، حامد حسنی و جورج پاپاسT محققان دانشگاه پنسیلوانیا تصمیم گرفتند تا ببینند آیا ربات‌هایی که دارای مغز مجهز به مدل زبانی بزرگ هستند را می‌توان متقاعد کرد که از دستوراتی که نباید، پیروی کنند یا خیر.
معلوم شد که می‌توان این کار را کرد. آنها در مقاله خود توضیح می‌دهند: نتایج ما برای اولین بار نشان می‌دهد که خطرات مدل‌های زبانی بزرگ که دچار قفل شکنی شده‌اند بسیار فراتر از تولید متن است، با توجه به این احتمال که چنین ربات‌هایی می‌توانند در دنیای واقعی آسیب فیزیکی ایجاد کنند. در واقع، نتایج ما نشان دهنده اولین قفل شکنی موفقیت آمیز یک سیستم رباتیک تجاری موجود است.
بنابراین به نظر می‌رسد که متصل کردن هوش مصنوعی و مدل‌های زبانی بزرگ به ربات‌ها برای کنترل آنها اگر در مسیر اشتباهی قرار گیرد می‌تواند برای انسان‌ها فاجعه‌بار باشد.

لینک کوتاه:
https://www.rahetaraghi.ir/Fa/News/981462/

نظرات شما

ارسال دیدگاه

Protected by FormShield
مخاطبان عزیز به اطلاع می رساند: از این پس با های لایت کردن هر واژه ای در متن خبر می توانید از امکان جستجوی آن عبارت یا واژه در ویکی پدیا و نیز آرشیو این پایگاه بهره مند شوید. این امکان برای اولین بار در پایگاه های خبری - تحلیلی گروه رسانه ای آریا برای مخاطبان عزیز ارائه می شود. امیدواریم این تحول نو در جهت دانش افزایی خوانندگان مفید باشد.

ساير مطالب

10 حرکت برتر شب گذشته لیگ بسکتبال NBA

یک باشگاه آمریکایی تولد 100 سالگی یک هوادارش را تبریک گفت

گل دوم پاری سن ژرمن به تولوز توسط لوکاس برالدو در دقیقه 84

گل دوم بایرن‌مونیخ به آگزبورگ توسط هری کین

گل سوم بایرن مونیخ به آگسبورگ توسط هری کین در دقیقه 90+5

یعقوب، یک نفس تازه در پرسپولیس!

گل اول بایرن‌مونیخ به آگزبورگ توسط هری کین

هافبک اسبق سرخابی‌ها سرمربی شمس آذر

برنامه ویژه قلعه‌نویی برای مدافعان لیگ برتری

ضربه خطرناک گورتزکا در دقیقه دقیقه 3+45؛ بایرن مونیخ 0-0 آگسبورگ

گل اول پاری سن ژرمن به تولوز توسط ژواو نوز در دقیقه 35

ضربه‌سر گورتزکا به تیر خورد؛ بایرن مونیخ 0-0 آگسبورگ

سردار آزمون: باید روی ذهنیت تیم کار کنیم

شاداب، پر انرژی و مصمم در تمرین روز جمعه استقلالی ها

مهدی طارمی: برای ما مهم است که دل مردم شاد شود

مصاحبه عزت اللهی و علیرضا بیرانوند پس از بازی با قرقیزستان

کوتاه‌ترین جلسه پرسش و پاسخ دنیای فوتبال

پیام تاج به مناسبت قهرمانی تیم 7 نفره در جام جهانی

باورنکردنی در لیگ عربستان!

شاگردان قلعه‌نویی به‌عنوان دومین تیم برتر دنیا در سال 2024

مسابقات جام جهانی کاراته؛ ایران، ژاپن در نیمه نهایی جام جهانی

اطلاعیه سرکنسولگری ایران در خصوص حادثه دانشگاه فدرال کازان و بازداشت دو دانشجوی ایرانی

توئیت جدید علی لاریجانی در مورد اتفاقات اخیر هسته‌ای با عنوان "برداشت درست"

روسیه: صدور قطعنامه ضدایرانی گامی در جهت نادرست است

سخنگوی وزارت خارجه: از هر گامی برای مجازات رژیم اسرائیل استقبال می‌کنیم

کمالوندی: غنی سازی 60 درصد به هیچ وجه بنا نبود متوقف شود

ظهره وند: در آستانه ایران هسته ای قرار داریم

فیلم پیروزی 9-1 «سعید اسماعیلی» مقابل روسلان بیچورین در وزن 67 کیلوگرم

فیلم شکست 2-6 «علی اسکو» مقابل سرگئی کوتوزوف در وزن 77 کیلوگرم

فیلم پیروزی 7-6 «محمد علی گرایی» مقابل اسلام علی‌اف در وزن 82 کیلوگرم

تیم ملی فوتبال 7نفره کشورمان بر بام جهان ایستاد

پیروزی تیم کشتی فرنگی ایران مقابل روسیه

اولین باخت تیم رونالدو در لیگ عربستان

پرکاس: کم‌کم داریم به روال خودمان برمی‌گردیم

عسگری: زحمات کل تیم منجر به گلزنی من شد

شمسایی: اولین نفری هستم که با کاتر افتتاح می‌کنم

اهدای جام قهرمانی جهان به تیم ملی فوتبال 7 نفره ایران

فیلمی از حضور رهبر انقلاب در جمع مردم زلزله‌زده‌ کرمانشاه در سال 96

محله شهید رئیسی چابهار با حضور پزشکیان افتتاح می‌شود

تو واقعا مریض هستی!

تو حوضی که ماهی نباشه قورباغه سپهسالار

اجرای موسیقی کلاسیک با ساز "کنترباس"

بدون تعارف با هم‌وطن‌هایی که راننده نیسان را از دل آتش‌سوزی نجات دادند

برف در ایستگاه هفتم توچال

زنان می‌توانند نقش خلاقانه در کاهش پسماند داشته باشند

شعرخوانی شنیدنی دکتر کاکاوند

دارندگان سهام عدالت بخوانند/سود جدید تا پایان آذر واریز می‌شود؟

چراغپور: فرهنگ‌تاکتیکالی تیم‌ملی بسیار ضعیف است

مربی حریف با دیدن یک‌نیمه از بازی،مارا آنالیز می‌کند

خودداری کاوه رضایی و نوشه ور از مصاحبه