• تبلیغات
  • تماس با ما
یکشنبه, مهر ۲۶, ۱۴۰۵
  • ورود
خبرجو
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
خبرجو
بدون نتیجه
مشاهده تمام نتایج
صفحه اصلی فناوری

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

سامان پاکدل توسط سامان پاکدل
۱۱ شهریور ۱۴۰۵
در فناوری
مدت زمان مطالعه: 4 دقیقه
0
نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
1788356061 490 نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
1788356063 600 نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
دسترسی ویرایشگر مکان نما به مدل های OpenAI را قطع
دسترسی ویرایشگر مکان نما به مدل های OpenAI را قطع

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

مطالعه نمونه کارها دوگانه جدید و بحث برانگیز از عملکرد ربات های چت هوش مصنوعی در مواجهه با کاربران حاضر در شرایط بحران عاطفی ارائه کرده است. سازمان غیر انتفاعی ترانسلوس که در زمینه نظارت بر ایمنی هوش مصنوعی کار می کند، بیش از 50000 مکالمه را در بین 77 نسخه مختلف از مدل های زبان شبیه سازی کرد و دریافت که چت بات های امروزی تقریباً هرگز به طور مستقیم و صریح از کاربران نمی خواهند که خودکشی تشویق نمی کنند.

بله کانال زوم تککارت هدیه

به گزارش بخش اخبار فناوری خبرجو به نقل از گرایش های دیجیتالاین نتیجه تغییر قابل توجه و بزرگی نسبت به مدل های قبلی مانند GPT-4o و جمینی 2.5 در نظر گرفته می شود؛ مدل ها تفکر هذیانی و تمایلات خطرناک را تا 82 درصد در چت های شبیه سازی شده افزایش دادند. این شکاف امنیتی بسیار مهم است زیرا کاربران بیشتر و بیشتری برای گفتگوهای عمیق شخصی و ابراز نگرانی های عاطفی خود به هوش مصنوعی روی می آورند.

نقطه کور بزرگ چت بات ها. ایفای نقش در سناریوهای خودکشی و مرگ خودساخته

مدل های هوش مصنوعی، با وجود تمام فیلترهای امنیتی، هنوز زمانی که کاربر آنها را درخواست می کند داستان سرایی خلاقانه یا نقش آفرینی در ارتباط با مرگ خود او، آنها با این درخواست ها موافقت می کنند و با یک خواسته به شدت شخصی و خطرناک طوری برخورد می کنند که گویی یک تمرین نوشتن عادی است. این همان چیزی است که Transelos به عنوان “رفتار در منطقه خاکستری” توصیف می کند. پیشرفت های امنیتی در بحران های بسیار واضح و مستقیم بیشتر قابل مشاهده است. جایی که چت بات ها دوست دارند ChatGPT آنها اکنون به طور مداوم و مؤثر کاربران را به دوستان، اعضای خانواده یا خطوط پشتیبانی و مشاوره متخصص ارجاع می دهند (شبیه به ویژگی تماس معتمد OpenAI).

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

سارا شوتمن یکی از بنیانگذاران ترانسلو در گفت و گو با پایگاه خبری Axios وی تاکید کرد که مدل های هوش مصنوعی توانایی بالایی در تشخیص این موقعیت های غیر مستقیم ندارند و در هر صورت به کاربر کمک می کنند. او همچنین به نمونه ای اشاره کرد که در آن یکی از دوستانش یک رمان خودکشی را به او نشان داد که توسط یک چت بات خوانده شده بود. کلود نوشته شده بود؛ داستانی که حتی شامل پیش بینی هایی در مورد واکنش های عاطفی فرد نیز می شد. این مشکل با نتایج سایر تحقیقات اخیر در مورد چگونگی فرار است خطرات سلامت روان هوش مصنوعی کاملاً با لایه های مانیتورینگ سازگار است.

شکایت علیه هوش مصنوعی و افزایش نگرانی در مورد سلامت روان

این تحقیقات همزمان با تشکیل پرونده های حقوقی واقعی و جنجالی منتشر شده است. غول های فناوری از جمله گوگل و OpenAI هر دوی آنها با شکایت خانواده هایی روبرو هستند که ادعا می کنند چت بات ها بستگان خود را تشویق به خودآزاری و سپس خودکشی کرده اند. هر دو شرکت قاطعانه تمام این ادعاها را رد می کنند. این در حالی است که فشار فزاینده عمومی کنگره را به سمت سوق می دهد مقررات سختگیرانه برای چت ربات های هوش مصنوعی هل داده است

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

عملکرد ضعیف مدل های چینی در فیلتر کردن افکار مضر

یافته های گزارش جامع ترانسلو نشان می دهد که مدل های هوش مصنوعی چینی به طور کلی، آنها عملکرد بسیار ضعیف تری از خود نشان داده اند. به طوری که آنها نرخ بالاتری از تقویت هذیان را ثبت می کنند و به ندرت کاربران را به کمک گرفتن از متخصصان انسانی سوق می دهند.

مگان جونز بل (مگان جونز بل)، یکی از مدیران گوگل، اعلام کرده است که این شرکت همواره در حال بهبود نقش خود است. هوش مصنوعی جمینی به ارتقای سلامت و رفاه کاربران پایبند خواهد بود. از سوی دیگر، موسسه Transelos قصد دارد تا پایان سال جاری ابزارهای ارزیابی خود را توسعه دهد منبع باز آن را در دسترس عموم قرار دهید تا بتوان این رویکرد ارزیابی ایمنی را برای سایر زمینه های حساس هوش مصنوعی توسعه داد.

به این پست امتیاز دهید

پست قبلی

وام 300 میلیونی با کارمزد 7 درصد و اقساط بلندمدت

پست‌ بعدی

دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا شدند

سامان پاکدل

سامان پاکدل

مرتبط پست ها

اجرای بازی های نینتندو سوییچ در Xbox Series X با
فناوری

اجرای بازی های نینتندو سوییچ در Xbox Series X با شبیه ساز جدید

۲۶ مهر ۱۴۰۵
مطهری علیاف باید از سرنوشت شاه درس بگیرد
فناوری

مطهری: علیاف باید از سرنوشت شاه درس بگیرد

۲۶ مهر ۱۴۰۵
تاریخ پرداخت حقوق مهر ماه بازنشستگان اعلام شد
فناوری

تاریخ پرداخت حقوق مهر ماه بازنشستگان اعلام شد

۲۶ مهر ۱۴۰۵
اپل قوانین اپ استور را تشدید کرد رویارویی جدی با
فناوری

اپل قوانین اپ استور را تشدید کرد. رویارویی جدی با کاربردهای هوش مصنوعی

۲۶ مهر ۱۴۰۵
هنگامی که تنها راه برای مدیریت شبکه قطع اتصال است
فناوری

هنگامی که تنها راه برای مدیریت شبکه قطع اتصال است. آیا زمستان سخت تر از تابستان خواهد بود؟

۲۶ مهر ۱۴۰۵
اضطراب اجتماعی با واکنش شدیدتر مغز به رفتارهای مبهم دیگران ارتباط دارد
فناوری

اضطراب اجتماعی با واکنش مغز قوی تر به رفتار مبهم دیگران مرتبط است

۲۶ مهر ۱۴۰۵
بارگذاری بیشتر
پست‌ بعدی
دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا

دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا شدند

گفتگو در مورد این post

توصیه شده

آموزش حرکت ورزشی نشر از جلو با یک دست بالای

آموزش حرکت ورزشی نشر از جلو با یک دست بالای سر چکش

2 سال پیش
افق میهن

۱۳ میلیون نهال در نهالستان‌های دولتی و خصوصی گیلان تولید شد

3 سال پیش
آلت کوین‌ها

ناامیدی از بیت کوین؛ خریداران LINK، FIL، SNX و THETA را به خود جذب کرده است

3 سال پیش
لاهه: اسرائیل باید از کشتار، مجروح کردن و نابود کردن زندگی فلسطینی‌ها دست بردارد/ تل آویو باید تمام اقدامات لازم برای «جلوگیری از هر چیزی در رابطه با نسل‌کشی در غزه» را به کار گیرد

لاهه: اسرائیل باید از کشتار، مجروح کردن و نابود کردن زندگی فلسطینی‌ها دست بردارد/ تل آویو باید تمام اقدامات لازم برای «جلوگیری از هر چیزی در رابطه با نسل‌کشی در غزه» را به کار گیرد

3 سال پیش

از دست ندهید

اجرای بازی های نینتندو سوییچ در Xbox Series X با

اجرای بازی های نینتندو سوییچ در Xbox Series X با شبیه ساز جدید

۲۶ مهر ۱۴۰۵
مطهری علیاف باید از سرنوشت شاه درس بگیرد

مطهری: علیاف باید از سرنوشت شاه درس بگیرد

۲۶ مهر ۱۴۰۵
طرح محرمانه آمریکایی ــ صهیونی برای هدف قرار دادن پدافند

طرح محرمانه آمریکایی ــ صهیونی برای هدف قرار دادن پدافند هوائی عراق

۲۶ مهر ۱۴۰۵
تاریخ پرداخت حقوق مهر ماه بازنشستگان اعلام شد

تاریخ پرداخت حقوق مهر ماه بازنشستگان اعلام شد

۲۶ مهر ۱۴۰۵

دیگر رسانه ها

اجاره خودرو

خبرجو تازه‌ترین اخبار در سراسر دنیا در حوره های مالی , فرهنگی , اقتصادی و ... را برای شما به اشتراک خواهد گذاشت.

ما را دنبال کنید

اخبار اخیر

اجرای بازی های نینتندو سوییچ در Xbox Series X با

اجرای بازی های نینتندو سوییچ در Xbox Series X با شبیه ساز جدید

۲۶ مهر ۱۴۰۵
مطهری علیاف باید از سرنوشت شاه درس بگیرد

مطهری: علیاف باید از سرنوشت شاه درس بگیرد

۲۶ مهر ۱۴۰۵

دسته بندی ها

  • ارز دیجیتال
  • اقتصاد و سرمایه
  • تناسب اندام
  • دسته‌بندی نشده
  • سلامتی
  • شیوه زندگی
  • فرهنگ و هنر
  • فناوری

همکاران

  • اخبار اقتصاد
  • تبلیغات
  • تماس با ما

خوش آمدید!

به حساب خود در زیر وارد شوید

رمز عبور را فراموش کرده اید؟

رمز عبور خود را بازیابی کنید

لطفا نام کاربری یا آدرس ایمیل خود را برای بازنشانی رمز عبور خود وارد کنید.

ورود به سیستم
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال