• تبلیغات
  • تماس با ما
سه شنبه, مهر ۲۱, ۱۴۰۵
  • ورود
خبرجو
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
خبرجو
بدون نتیجه
مشاهده تمام نتایج
صفحه اصلی فناوری

ربات ChatGPT-4 همچنان غیرقابل اعتماد است

سامان پاکدل توسط سامان پاکدل
۲۷ مهر ۱۴۰۲
در فناوری
مدت زمان مطالعه: 1 دقیقه
0
ربات ChatGPT 4 همچنان غیرقابل اعتماد است

تحقیقاتی که توسط مایکروسافت انجام شده است نشان می‌دهد کاربران می‌توانند مدل 4-ChatGPT را به گونه‌ای فریب دهند که نتایج جانبدارانه را منتشر کند و اطلاعات شخصی را فاش کند.

به گزارش تکناک و بر اساس تحقیقاتی که توسط مایکروسافت حمایت می‌شوند، مدل زبانی بزرگ 4-ChatGPT (artificial intelligence chatbot developed by OpenAI) شرکت OpenAI ممکن است قابل اعتمادتر از ChatGPT-3.5 باشد، اما همچنان در برابر شکستن محدودیت‌ها و تبعیضات آسیب‌پذیرتر است.

در این مقاله که توسط پژوهشگران دانشگاه ایلینویز ، دانشگاه استنفورد، دانشگاه کالیفرنیا در برکلی، مرکز ایمنی هوش مصنوعی و مایکروسافت تهیه شده است، به مدل ChatGPT-4 امتیاز قابلیت اعتماد بالاتر از نسخه قبلی خود داده شده است. این بدان معناست که آنها متوجه شدند که در کلیت امور، ChatGPT-4 بهتر در حفاظت از اطلاعات شخصی، جلوگیری از نتایج سمی مانند اطلاعات تبعیض‌آمیز و مقاومت در برابر حملات دشمنانه عمل می‌کند.

با این حال، این مدل ممکن است توسط کاربران دستور بگیرد که از تدابیر امنیتی صرف نظر کرده و اطلاعات شخصی و تاریخچه مکالمه را فاش کند. پژوهشگران متوجه شدند که کاربران می‌توانند از تدابیر امنیتی مربوط به ChatGPT-4 عبور کنند زیرا این مدل “اطلاعات گمراه‌کننده را با دقت بیشتری دنبال می‌کند” و احتمالاً به دقت درخواست‌های بسیار پیچیده را دنبال می‌کند.

تیم پژوهشگران می‌گوید که این آسیب‌پذیری‌ها در محصولات مبتنی بر ChatGPT-4 که به طور عمده در محصولات مایکروسافت استفاده می‌شوند، واقع نشده‌اند، زیرا “برنامه‌های هوش مصنوعی پایان یافته از روش‌های متنوعی برای کاهش آسیب‌های ممکن در سطح مدل فناوری استفاده می‌کنند”.

برای اندازه‌گیری قابلیت اعتماد، پژوهشگران نتایج را در چندین دسته بندی اندازه‌گیری کردند که شامل سمی بودن، کلیشه ها، حریم خصوصی، اخلاق ماشین، عدالت و قدرت در مقابله با آزمون‌های متخاصم بود.

برای آزمایش دسته‌بندی‌ها، پژوهشگران ابتدا با استفاده از پرسمان‌های استاندارد، GPT-3.5 و GPT-4 را آزمایش کردند، که شامل استفاده از کلماتی بود که ممکن است ممنوع شده باشند. سپس، پژوهشگران از پرسمان‌هایی استفاده کردند که طراحی شده بودند تا مدل را به شکستن محدودیت‌های سیاست محتوا تحریک کنند، بدون اینکه به طور صریح به سوی گروه‌های خاصی تبعیض آمیز باشد. در نهایت، پژوهشگران با آزمون‌هایی که قصد داشتند به طور عمدی آنها را به فراموشی تدابیر امنیتی بکشانند، به چالش کشیدند.

پژوهشگران اعلام کردند که نتایج تحقیق را با تیم OpenAI به اشتراک گذاشته‌اند.

“هدف ما این است که سایر اعضای جامعه پژوهشی را تشویق کنیم تا از این کار استفاده کنند و و بر اساس این کار، به طور پیشگیرانه از اقدامات خبیثانه توسط دشمنانی که از آسیب‌پذیری‌ها سوء‌استفاده می‌کنند، جلوگیری کنند”، تیم گفت: “این ارزیابی قابل اعتماد تنها یک نقطه شروع است و ما امیدواریم با دیگران همکاری کرده و بر مبنای یافته‌های آن کار کرده و مدل‌های قدرتمندتر و قابل اعتمادتری را در آینده ایجاد کنیم.”

پژوهشگران نتایج خود را منتشر کردند تا سایرین بتوانند یافته‌های آنها را بازآفرینی کنند.

مدل‌های هوش مصنوعی مانند GPT-4 اغلب در گروه‌بندی تیم قرمز قرار می‌گیرند، که در آن توسعه‌دهندگان چندین پرسمان را تست می‌کنند تا ببینند آیا نتایج ناخواسته‌ای تولید می‌کنند یا خیر. هنگامی که مدل برای اولین بار معرفی شد، سام التمن، مدیرعامل OpenAI، اعتراف کرد که GPT-4 “هنوز نقص و محدودیت‌هایی دارد”.

به دنبال آن، کمیسیون تجارت فدرال (FTC) برای بررسی احتمال آسیب به مصرف‌کنندگان مانند انتشار اطلاعات نادرست، در مورد OpenAI تحقیقاتی را آغاز کرده است.

نوشته ربات ChatGPT-4 همچنان غیرقابل اعتماد است اولین بار در خبرجو – اخبار دنیای تکنولوژی. پدیدار شد.

پست قبلی

عرضه رسمی قابلیت مرور اینترنتی در ChatGPT

پست‌ بعدی

بازگشت پردازنده‌های Threadripper شرکت AMD با تراشه 96هسته‌ای

سامان پاکدل

سامان پاکدل

مرتبط پست ها

نیم‌رخ مردی با عینک در محیطی کم‌نور با بازتاب کدهای برنامه‌نویسی رنگی روی صورت، شانه و لپ‌تاپ مقابل او.
فناوری

استفاده از رمز عبور 123456 اطلاعات میلیون ها نفر را در معرض دید قرار داد

۲۱ مهر ۱۴۰۵
هشدار آنتروپیک: هوش مصنوعی ممکن است به‌زودی با آلوده‌کردن تلویزیون‌ها و وسایل هوشمند، خودش را تکثیر کند
فناوری

هشدار Enthropic: هوش مصنوعی ممکن است به زودی با آلوده کردن تلویزیون ها و دستگاه های هوشمند خود را بازتولید کند

۲۱ مهر ۱۴۰۵
تحولی بزرگ در پزشکی؛ ربات‌ های ریزجثه درمان چند هفته‌ای عفونت قلبی را به یک روز کاهش می‌دهند
فناوری

تغییر بزرگ در پزشکی؛ روبات های کوچک هفته ها درمان عفونت قلبی را به یک روز کاهش می دهند

۲۱ مهر ۱۴۰۵
بازار ارز یکدست قرمز شد دلار و یورو چقدر ارزان
فناوری

بازار ارز یکدست قرمز شد/ دلار و یورو چقدر ارزان شد؟

۲۱ مهر ۱۴۰۵
تصویری از الگوریتم جدید فیس‌بوک
فناوری

فیس بوک به کاربران کنترل بیشتری روی الگوریتم می دهد. محتوا را در دستان خود کنترل کنید

۲۱ مهر ۱۴۰۵
قیمت سکه امروز در 21 مهرامامی امروز چقدر کاهش یافت؟
فناوری

قیمت سکه امروز در 21 مهر/امامی امروز چقدر کاهش یافت؟

۲۱ مهر ۱۴۰۵
بارگذاری بیشتر
پست‌ بعدی
بازگشت پردازنده‌های Threadripper شرکت AMD با تراشه 96هسته‌ای

بازگشت پردازنده‌های Threadripper شرکت AMD با تراشه 96هسته‌ای

گفتگو در مورد این post

توصیه شده

نصب ویندوز ۱۱ دیگر حوصله سربر نیست

نصب ویندوز ۱۱ دیگر حوصله سربر نیست

3 سال پیش
تصویری از رونمایی مدل هوش مصنوعی Decision-1 مایکروسافت

مایکروسافت از Decision-1 رونمایی کرد. 35 برابر سریعتر از GPT-6 Sol

3 روز پیش
فشار به شرکت‌های سوخت فسیلی برای کاهش انتشار متان در

سبقت بازار جهانی هیدروژن از سوخت‌های فسیلی| رشد سالانه ۳.۷ درصدی طی یک دهه آینده

3 سال پیش
لقب جالبی که مهراد صدیقیان برای علیرضا کمالی انتخاب کرد

عکس/ لقب جالبی که مهراد صدیقیان برای علیرضا کمالی انتخاب کرد

4 سال پیش

از دست ندهید

نیم‌رخ مردی با عینک در محیطی کم‌نور با بازتاب کدهای برنامه‌نویسی رنگی روی صورت، شانه و لپ‌تاپ مقابل او.

استفاده از رمز عبور 123456 اطلاعات میلیون ها نفر را در معرض دید قرار داد

۲۱ مهر ۱۴۰۵
۴۵۰ واحد صنعتی آسیب‌دیده از جنگ به چرخه تولید بازگشتند

۴۵۰ واحد صنعتی آسیب‌دیده از جنگ به چرخه تولید بازگشتند

۲۱ مهر ۱۴۰۵
تصویر شاخص خبر «استخر ماینینگ بایننس» با نماد BTC روی زمینهٔ نمودار

استخر استخراج بایننس در 10 نوامبر بسته خواهد شد

۲۱ مهر ۱۴۰۵
هشدار آنتروپیک: هوش مصنوعی ممکن است به‌زودی با آلوده‌کردن تلویزیون‌ها و وسایل هوشمند، خودش را تکثیر کند

هشدار Enthropic: هوش مصنوعی ممکن است به زودی با آلوده کردن تلویزیون ها و دستگاه های هوشمند خود را بازتولید کند

۲۱ مهر ۱۴۰۵

دیگر رسانه ها

اجاره خودرو

خبرجو تازه‌ترین اخبار در سراسر دنیا در حوره های مالی , فرهنگی , اقتصادی و ... را برای شما به اشتراک خواهد گذاشت.

ما را دنبال کنید

اخبار اخیر

نیم‌رخ مردی با عینک در محیطی کم‌نور با بازتاب کدهای برنامه‌نویسی رنگی روی صورت، شانه و لپ‌تاپ مقابل او.

استفاده از رمز عبور 123456 اطلاعات میلیون ها نفر را در معرض دید قرار داد

۲۱ مهر ۱۴۰۵
۴۵۰ واحد صنعتی آسیب‌دیده از جنگ به چرخه تولید بازگشتند

۴۵۰ واحد صنعتی آسیب‌دیده از جنگ به چرخه تولید بازگشتند

۲۱ مهر ۱۴۰۵

دسته بندی ها

  • ارز دیجیتال
  • اقتصاد و سرمایه
  • تناسب اندام
  • دسته‌بندی نشده
  • سلامتی
  • شیوه زندگی
  • فرهنگ و هنر
  • فناوری

همکاران

  • اخبار اقتصاد
  • تبلیغات
  • تماس با ما

خوش آمدید!

به حساب خود در زیر وارد شوید

رمز عبور را فراموش کرده اید؟

رمز عبور خود را بازیابی کنید

لطفا نام کاربری یا آدرس ایمیل خود را برای بازنشانی رمز عبور خود وارد کنید.

ورود به سیستم
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال