• تبلیغات
  • تماس با ما
جمعه, مهر ۳, ۱۴۰۵
  • ورود
خبرجو
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
خبرجو
بدون نتیجه
مشاهده تمام نتایج
صفحه اصلی فناوری

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

سامان پاکدل توسط سامان پاکدل
۱۱ شهریور ۱۴۰۵
در فناوری
مدت زمان مطالعه: 4 دقیقه
0
نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
1788356061 490 نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
1788356063 600 نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های
دسترسی ویرایشگر مکان نما به مدل های OpenAI را قطع
دسترسی ویرایشگر مکان نما به مدل های OpenAI را قطع

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

مطالعه نمونه کارها دوگانه جدید و بحث برانگیز از عملکرد ربات های چت هوش مصنوعی در مواجهه با کاربران حاضر در شرایط بحران عاطفی ارائه کرده است. سازمان غیر انتفاعی ترانسلوس که در زمینه نظارت بر ایمنی هوش مصنوعی کار می کند، بیش از 50000 مکالمه را در بین 77 نسخه مختلف از مدل های زبان شبیه سازی کرد و دریافت که چت بات های امروزی تقریباً هرگز به طور مستقیم و صریح از کاربران نمی خواهند که خودکشی تشویق نمی کنند.

بله کانال زوم تککارت هدیه

به گزارش بخش اخبار فناوری خبرجو به نقل از گرایش های دیجیتالاین نتیجه تغییر قابل توجه و بزرگی نسبت به مدل های قبلی مانند GPT-4o و جمینی 2.5 در نظر گرفته می شود؛ مدل ها تفکر هذیانی و تمایلات خطرناک را تا 82 درصد در چت های شبیه سازی شده افزایش دادند. این شکاف امنیتی بسیار مهم است زیرا کاربران بیشتر و بیشتری برای گفتگوهای عمیق شخصی و ابراز نگرانی های عاطفی خود به هوش مصنوعی روی می آورند.

نقطه کور بزرگ چت بات ها. ایفای نقش در سناریوهای خودکشی و مرگ خودساخته

مدل های هوش مصنوعی، با وجود تمام فیلترهای امنیتی، هنوز زمانی که کاربر آنها را درخواست می کند داستان سرایی خلاقانه یا نقش آفرینی در ارتباط با مرگ خود او، آنها با این درخواست ها موافقت می کنند و با یک خواسته به شدت شخصی و خطرناک طوری برخورد می کنند که گویی یک تمرین نوشتن عادی است. این همان چیزی است که Transelos به عنوان “رفتار در منطقه خاکستری” توصیف می کند. پیشرفت های امنیتی در بحران های بسیار واضح و مستقیم بیشتر قابل مشاهده است. جایی که چت بات ها دوست دارند ChatGPT آنها اکنون به طور مداوم و مؤثر کاربران را به دوستان، اعضای خانواده یا خطوط پشتیبانی و مشاوره متخصص ارجاع می دهند (شبیه به ویژگی تماس معتمد OpenAI).

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

سارا شوتمن یکی از بنیانگذاران ترانسلو در گفت و گو با پایگاه خبری Axios وی تاکید کرد که مدل های هوش مصنوعی توانایی بالایی در تشخیص این موقعیت های غیر مستقیم ندارند و در هر صورت به کاربر کمک می کنند. او همچنین به نمونه ای اشاره کرد که در آن یکی از دوستانش یک رمان خودکشی را به او نشان داد که توسط یک چت بات خوانده شده بود. کلود نوشته شده بود؛ داستانی که حتی شامل پیش بینی هایی در مورد واکنش های عاطفی فرد نیز می شد. این مشکل با نتایج سایر تحقیقات اخیر در مورد چگونگی فرار است خطرات سلامت روان هوش مصنوعی کاملاً با لایه های مانیتورینگ سازگار است.

شکایت علیه هوش مصنوعی و افزایش نگرانی در مورد سلامت روان

این تحقیقات همزمان با تشکیل پرونده های حقوقی واقعی و جنجالی منتشر شده است. غول های فناوری از جمله گوگل و OpenAI هر دوی آنها با شکایت خانواده هایی روبرو هستند که ادعا می کنند چت بات ها بستگان خود را تشویق به خودآزاری و سپس خودکشی کرده اند. هر دو شرکت قاطعانه تمام این ادعاها را رد می کنند. این در حالی است که فشار فزاینده عمومی کنگره را به سمت سوق می دهد مقررات سختگیرانه برای چت ربات های هوش مصنوعی هل داده است

نقطه کور نگران کننده در امنیت هوش مصنوعی؛ چرا ربات‌های گفتگو همچنان تسلیم محتوای مضر می‌شوند؟

عملکرد ضعیف مدل های چینی در فیلتر کردن افکار مضر

یافته های گزارش جامع ترانسلو نشان می دهد که مدل های هوش مصنوعی چینی به طور کلی، آنها عملکرد بسیار ضعیف تری از خود نشان داده اند. به طوری که آنها نرخ بالاتری از تقویت هذیان را ثبت می کنند و به ندرت کاربران را به کمک گرفتن از متخصصان انسانی سوق می دهند.

مگان جونز بل (مگان جونز بل)، یکی از مدیران گوگل، اعلام کرده است که این شرکت همواره در حال بهبود نقش خود است. هوش مصنوعی جمینی به ارتقای سلامت و رفاه کاربران پایبند خواهد بود. از سوی دیگر، موسسه Transelos قصد دارد تا پایان سال جاری ابزارهای ارزیابی خود را توسعه دهد منبع باز آن را در دسترس عموم قرار دهید تا بتوان این رویکرد ارزیابی ایمنی را برای سایر زمینه های حساس هوش مصنوعی توسعه داد.

به این پست امتیاز دهید

پست قبلی

وام 300 میلیونی با کارمزد 7 درصد و اقساط بلندمدت

پست‌ بعدی

دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا شدند

سامان پاکدل

سامان پاکدل

مرتبط پست ها

متا از کابل اینترنتی Petal با سرعت 1,000,000 گیگابیت بر ثانیه رونمایی کرد
فناوری

متا از کابل اینترنت Petal با سرعت 1000000 گیگابیت بر ثانیه رونمایی کرد.

۰۳ مهر ۱۴۰۵
خداحافظی با تصاویر تار در تماس‌ های تصویری؛ وب‌کم حرفه‌ای ریزر Kiyo V2 Pro با کیفیت 4K و قابلیت‌های هوش مصنوعی معرفی شد
فناوری

با تصاویر تار در تماس های ویدیویی خداحافظی کنید. وب کم حرفه ای Razer Kiyo V2 Pro با کیفیت 4K و قابلیت هوش مصنوعی معرفی شد

۰۳ مهر ۱۴۰۵
دو مدل از دوربین‌های بدون آینه نیکون سری Z مجهز به لنزهای زوم، یکی کاملاً مشکی و دیگری با بدنه دورنگ مشکی و نقره‌ای روی سطح روشن استودیویی.
فناوری

نیکون دوربین بدون آینه فول فریم Z5IIC را معرفی کرد

۰۳ مهر ۱۴۰۵
سنگ‌های حومه پمپئی، راز ویرانی این شهر را آشکار کردند
فناوری

سنگ های حومه پمپئی راز ویرانی این شهر را فاش کردند.

۰۳ مهر ۱۴۰۵
پایان کابوس شروع مجدد ناگهانی؛ اپل به زودی مشکل یخ
فناوری

پایان کابوس شروع مجدد ناگهانی؛ اپل به زودی مشکل یخ زدگی آیفون 18 پرو را برطرف خواهد کرد

۰۳ مهر ۱۴۰۵
نمای نزدیک گوشی هوشمندی با صفحه‌ای که عنوان «Ellaclaw Pro» و بخشی از تاریخچه گفت‌وگوها را نشان می‌دهد.
فناوری

با EllaClaw، Techno مرزهای هوش مصنوعی مبتنی بر عامل را جابجا می کند

۰۳ مهر ۱۴۰۵
بارگذاری بیشتر
پست‌ بعدی
دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا

دریافت مشارکت اجباری ممنوع؛ ۱۹ مدیر مدرسه عزل و جابجا شدند

گفتگو در مورد این post

توصیه شده

قیمت تعجب آور لوازم خانگی دو برابر گرانتر از

قیمت تعجب آور لوازم خانگی / دو برابر گرانتر از قبل!

3 هفته پیش
گوگل هوش مصنوعی را جایگزین کارمندانش می‌کند

گوگل هوش مصنوعی را جایگزین کارمندانش می‌کند

3 سال پیش
یوگا ، ورزش برای همه ؛ از خانمها و آقایان

یوگا ، ورزش برای همه ؛ از خانمها و آقایان گرفته تا کودکان و کارمندان!

1 سال پیش
1711799977 833 نمادهای تاثیرگذار بازار بورس در روز شنبه را بشناسید

نمادهای تاثیرگذار بازار بورس در روز شنبه را بشناسید

2 سال پیش

از دست ندهید

متا از کابل اینترنتی Petal با سرعت 1,000,000 گیگابیت بر ثانیه رونمایی کرد

متا از کابل اینترنت Petal با سرعت 1000000 گیگابیت بر ثانیه رونمایی کرد.

۰۳ مهر ۱۴۰۵
بازار نفت تحت تأثیر ریسک هرمز و تحول مصرف چین

بازار نفت تحت تأثیر ریسک هرمز و تحول مصرف چین

۰۳ مهر ۱۴۰۵
خداحافظی با تصاویر تار در تماس‌ های تصویری؛ وب‌کم حرفه‌ای ریزر Kiyo V2 Pro با کیفیت 4K و قابلیت‌های هوش مصنوعی معرفی شد

با تصاویر تار در تماس های ویدیویی خداحافظی کنید. وب کم حرفه ای Razer Kiyo V2 Pro با کیفیت 4K و قابلیت هوش مصنوعی معرفی شد

۰۳ مهر ۱۴۰۵
پالایشگاه آبادان باید از فهرست واگذاری‌ها خارج شود

پالایشگاه آبادان باید از فهرست واگذاری‌ها خارج شود

۰۳ مهر ۱۴۰۵

دیگر رسانه ها

اجاره خودرو

خبرجو تازه‌ترین اخبار در سراسر دنیا در حوره های مالی , فرهنگی , اقتصادی و ... را برای شما به اشتراک خواهد گذاشت.

ما را دنبال کنید

اخبار اخیر

متا از کابل اینترنتی Petal با سرعت 1,000,000 گیگابیت بر ثانیه رونمایی کرد

متا از کابل اینترنت Petal با سرعت 1000000 گیگابیت بر ثانیه رونمایی کرد.

۰۳ مهر ۱۴۰۵
بازار نفت تحت تأثیر ریسک هرمز و تحول مصرف چین

بازار نفت تحت تأثیر ریسک هرمز و تحول مصرف چین

۰۳ مهر ۱۴۰۵

دسته بندی ها

  • ارز دیجیتال
  • اقتصاد و سرمایه
  • تناسب اندام
  • دسته‌بندی نشده
  • سلامتی
  • شیوه زندگی
  • فرهنگ و هنر
  • فناوری

همکاران

  • اخبار اقتصاد
  • تبلیغات
  • تماس با ما

خوش آمدید!

به حساب خود در زیر وارد شوید

رمز عبور را فراموش کرده اید؟

رمز عبور خود را بازیابی کنید

لطفا نام کاربری یا آدرس ایمیل خود را برای بازنشانی رمز عبور خود وارد کنید.

ورود به سیستم
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال