• تبلیغات
  • تماس با ما
چهارشنبه, شهریور ۱۱, ۱۴۰۵
  • ورود
خبرجو
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
خبرجو
بدون نتیجه
مشاهده تمام نتایج
صفحه اصلی فناوری

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

سامان پاکدل توسط سامان پاکدل
۱۱ شهریور ۱۴۰۵
در فناوری
مدت زمان مطالعه: 4 دقیقه
0
نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
1788356061 490 نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
1788356063 600 نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
دسترسی ویرایشگر مکان نما به مدل های OpenAI را قطع
دسترسی ویرایشگر مکان نما به مدل های OpenAI را قطع

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

مطالعه نمونه کارها دوگانه جدید و بحث برانگیز از عملکرد ربات های چت هوش مصنوعی در مواجهه با کاربران حاضر در شرایط بحران عاطفی ارائه کرده است. سازمان غیر انتفاعی ترانسلوس که در زمینه نظارت بر ایمنی هوش مصنوعی کار می کند، بیش از 50000 مکالمه را در بین 77 نسخه مختلف از مدل های زبان شبیه سازی کرد و دریافت که چت بات های امروزی تقریباً هرگز به طور مستقیم و صریح از کاربران نمی خواهند که خودکشی تشویق نمی کنند.

بله کانال زوم تککارت هدیه

به گزارش بخش اخبار فناوری خبرجو به نقل از گرایش های دیجیتالاین نتیجه تغییر قابل توجه و بزرگی نسبت به مدل های قبلی مانند GPT-4o و جمینی 2.5 در نظر گرفته می شود؛ مدل ها تفکر هذیانی و تمایلات خطرناک را تا 82 درصد در چت های شبیه سازی شده افزایش دادند. این شکاف امنیتی بسیار مهم است زیرا کاربران بیشتر و بیشتری برای گفتگوهای عمیق شخصی و ابراز نگرانی های عاطفی خود به هوش مصنوعی روی می آورند.

نقطه کور بزرگ چت بات ها. ایفای نقش در سناریوهای خودکشی و مرگ خودساخته

مدل های هوش مصنوعی، با وجود تمام فیلترهای امنیتی، هنوز زمانی که کاربر آنها را درخواست می کند داستان سرایی خلاقانه یا نقش آفرینی در ارتباط با مرگ خود او، آنها با این درخواست ها موافقت می کنند و با یک خواسته به شدت شخصی و خطرناک طوری برخورد می کنند که گویی یک تمرین نوشتن عادی است. این همان چیزی است که Transelos به عنوان “رفتار در منطقه خاکستری” توصیف می کند. پیشرفت های امنیتی در بحران های بسیار واضح و مستقیم بیشتر قابل مشاهده است. جایی که چت بات ها دوست دارند ChatGPT آنها اکنون به طور مداوم و مؤثر کاربران را به دوستان، اعضای خانواده یا خطوط پشتیبانی و مشاوره متخصص ارجاع می دهند (شبیه به ویژگی تماس معتمد OpenAI).

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

سارا شوتمن یکی از بنیانگذاران ترانسلو در گفت و گو با پایگاه خبری Axios وی تاکید کرد که مدل های هوش مصنوعی توانایی بالایی در تشخیص این موقعیت های غیر مستقیم ندارند و در هر صورت به کاربر کمک می کنند. او همچنین به نمونه ای اشاره کرد که در آن یکی از دوستانش یک رمان خودکشی را به او نشان داد که توسط یک چت بات خوانده شده بود. کلود نوشته شده بود؛ داستانی که حتی شامل پیش بینی هایی در مورد واکنش های عاطفی فرد نیز می شد. این مشکل با نتایج سایر تحقیقات اخیر در مورد چگونگی فرار است خطرات سلامت روان هوش مصنوعی کاملاً با لایه های مانیتورینگ سازگار است.

شکایت علیه هوش مصنوعی و افزایش نگرانی در مورد سلامت روان

این تحقیقات همزمان با تشکیل پرونده های حقوقی واقعی و جنجالی منتشر شده است. غول های فناوری از جمله گوگل و OpenAI هر دوی آنها با شکایت خانواده هایی روبرو هستند که ادعا می کنند چت بات ها بستگان خود را تشویق به خودآزاری و سپس خودکشی کرده اند. هر دو شرکت قاطعانه تمام این ادعاها را رد می کنند. این در حالی است که فشار فزاینده عمومی کنگره را به سمت سوق می دهد مقررات سختگیرانه برای چت ربات های هوش مصنوعی هل داده است

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

عملکرد ضعیف مدل های چینی در فیلتر کردن افکار مضر

یافته های گزارش جامع ترانسلو نشان می دهد که مدل های هوش مصنوعی چینی به طور کلی، آنها عملکرد بسیار ضعیف تری از خود نشان داده اند. به طوری که آنها نرخ بالاتری از تقویت هذیان را ثبت می کنند و به ندرت کاربران را به کمک گرفتن از متخصصان انسانی سوق می دهند.

مگان جونز بل (مگان جونز بل)، یکی از مدیران گوگل، اعلام کرده است که این شرکت همواره در حال بهبود نقش خود است. هوش مصنوعی جمینی به ارتقای سلامت و رفاه کاربران پایبند خواهد بود. از سوی دیگر، موسسه Transelos قصد دارد تا پایان سال جاری ابزارهای ارزیابی خود را توسعه دهد منبع باز آن را در دسترس عموم قرار دهید تا بتوان این رویکرد ارزیابی ایمنی را برای سایر زمینه های حساس هوش مصنوعی توسعه داد.

به این پست امتیاز دهید

پست قبلی

وام 300 میلیونی با کارمزد 7 درصد و اقساط بلندمدت

پست‌ بعدی

دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا شدند

سامان پاکدل

سامان پاکدل

مرتبط پست ها

مدل هوش مصنوعی Atlas
فناوری

رونمایی از مدل هوش مصنوعی اطلس برای شبیه سازی دنیای واقعی

۱۱ شهریور ۱۴۰۵
قیمت سرعت خودرو امروز کاهش یافته است جدول
فناوری

قیمت / سرعت خودرو امروز کاهش یافته است + جدول

۱۱ شهریور ۱۴۰۵
ارتش آمریکا نسخه‌های سفارشی ChatGPT و Grok را برای نیروهای نظامی خود عرضه کرد
فناوری

ارتش ایالات متحده نسخه های سفارشی ChatGPT و Grok را برای سربازان خود منتشر کرد

۱۱ شهریور ۱۴۰۵
قیمت افغانی امروز چقدر است؟ آخرین قیمت بازار تهران
فناوری

قیمت افغانی امروز چقدر است؟ آخرین قیمت بازار تهران

۱۱ شهریور ۱۴۰۵
افشای «مدارک تکان‌ دهنده» اپل علیه کارمند سابق به اتهام سرقت اطلاعات برای OpenAI
فناوری

اپل “شواهد تکان دهنده” را علیه کارمند سابق متهم به سرقت داده ها برای OpenAI فاش کرد

۱۱ شهریور ۱۴۰۵
قیمت دینار عراق امروز 11 سپتامبر 1405
فناوری

قیمت دینار عراق امروز 11 سپتامبر 1405

۱۱ شهریور ۱۴۰۵
بارگذاری بیشتر
پست‌ بعدی
دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا

دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا شدند

گفتگو در مورد این post

توصیه شده

متقاضیان لاستیک دولتی مطالعه کنند نحوه خرید 4 حلقه

متقاضیان لاستیک دولتی مطالعه کنند / نحوه خرید 4 حلقه لاستیک با کد ملی

2 سال پیش
فال ابجد امروز شنبه 12 اسفند 1402/ فال امروزتو ببین

فال ابجد امروز شنبه 12 اسفند 1402/ فال امروزتو ببین

3 سال پیش
شروع به واریز سود سهام بازماندگان به حساب این دهک

شروع به واریز سود سهام بازماندگان به حساب این دهک ها کنید

2 سال پیش
آدرس FTX مقدار 190 میلیون دلار جابه‌جا کرد

آدرس FTX 190 میلیون دلار جابجا شد

3 سال پیش

از دست ندهید

تودیع وثیقه برای متهمان الکترونیکی شد

تودیع وثیقه برای متهمان الکترونیکی شد

۱۱ شهریور ۱۴۰۵
مدل هوش مصنوعی Atlas

رونمایی از مدل هوش مصنوعی اطلس برای شبیه سازی دنیای واقعی

۱۱ شهریور ۱۴۰۵
قیمت سرعت خودرو امروز کاهش یافته است جدول

قیمت / سرعت خودرو امروز کاهش یافته است + جدول

۱۱ شهریور ۱۴۰۵
ادعای رویترز درباره سیاست تولید نفت اوپک‌پلاس در ماه اکتبر

ادعای رویترز درباره سیاست تولید نفت اوپک‌پلاس در ماه اکتبر

۱۱ شهریور ۱۴۰۵

دیگر رسانه ها

اجاره خودرو

خبرجو تازه‌ترین اخبار در سراسر دنیا در حوره های مالی , فرهنگی , اقتصادی و ... را برای شما به اشتراک خواهد گذاشت.

ما را دنبال کنید

اخبار اخیر

تودیع وثیقه برای متهمان الکترونیکی شد

تودیع وثیقه برای متهمان الکترونیکی شد

۱۱ شهریور ۱۴۰۵
مدل هوش مصنوعی Atlas

رونمایی از مدل هوش مصنوعی اطلس برای شبیه سازی دنیای واقعی

۱۱ شهریور ۱۴۰۵

دسته بندی ها

  • ارز دیجیتال
  • اقتصاد و سرمایه
  • تناسب اندام
  • دسته‌بندی نشده
  • سلامتی
  • شیوه زندگی
  • فرهنگ و هنر
  • فناوری

همکاران

  • اخبار اقتصاد
  • تبلیغات
  • تماس با ما

خوش آمدید!

به حساب خود در زیر وارد شوید

رمز عبور را فراموش کرده اید؟

رمز عبور خود را بازیابی کنید

لطفا نام کاربری یا آدرس ایمیل خود را برای بازنشانی رمز عبور خود وارد کنید.

ورود به سیستم
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال