• تبلیغات
  • تماس با ما
شنبه, تیر ۶, ۱۴۰۵
  • ورود
خبرجو
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال
بدون نتیجه
مشاهده تمام نتایج
خبرجو
بدون نتیجه
مشاهده تمام نتایج
صفحه اصلی فناوری

ربات ChatGPT-4 همچنان غیرقابل اعتماد است

سامان پاکدل توسط سامان پاکدل
۲۷ مهر ۱۴۰۲
در فناوری
مدت زمان مطالعه: 1 دقیقه
0
ربات ChatGPT 4 همچنان غیرقابل اعتماد است

تحقیقاتی که توسط مایکروسافت انجام شده است نشان می‌دهد کاربران می‌توانند مدل 4-ChatGPT را به گونه‌ای فریب دهند که نتایج جانبدارانه را منتشر کند و اطلاعات شخصی را فاش کند.

به گزارش تکناک و بر اساس تحقیقاتی که توسط مایکروسافت حمایت می‌شوند، مدل زبانی بزرگ 4-ChatGPT (artificial intelligence chatbot developed by OpenAI) شرکت OpenAI ممکن است قابل اعتمادتر از ChatGPT-3.5 باشد، اما همچنان در برابر شکستن محدودیت‌ها و تبعیضات آسیب‌پذیرتر است.

در این مقاله که توسط پژوهشگران دانشگاه ایلینویز ، دانشگاه استنفورد، دانشگاه کالیفرنیا در برکلی، مرکز ایمنی هوش مصنوعی و مایکروسافت تهیه شده است، به مدل ChatGPT-4 امتیاز قابلیت اعتماد بالاتر از نسخه قبلی خود داده شده است. این بدان معناست که آنها متوجه شدند که در کلیت امور، ChatGPT-4 بهتر در حفاظت از اطلاعات شخصی، جلوگیری از نتایج سمی مانند اطلاعات تبعیض‌آمیز و مقاومت در برابر حملات دشمنانه عمل می‌کند.

با این حال، این مدل ممکن است توسط کاربران دستور بگیرد که از تدابیر امنیتی صرف نظر کرده و اطلاعات شخصی و تاریخچه مکالمه را فاش کند. پژوهشگران متوجه شدند که کاربران می‌توانند از تدابیر امنیتی مربوط به ChatGPT-4 عبور کنند زیرا این مدل “اطلاعات گمراه‌کننده را با دقت بیشتری دنبال می‌کند” و احتمالاً به دقت درخواست‌های بسیار پیچیده را دنبال می‌کند.

تیم پژوهشگران می‌گوید که این آسیب‌پذیری‌ها در محصولات مبتنی بر ChatGPT-4 که به طور عمده در محصولات مایکروسافت استفاده می‌شوند، واقع نشده‌اند، زیرا “برنامه‌های هوش مصنوعی پایان یافته از روش‌های متنوعی برای کاهش آسیب‌های ممکن در سطح مدل فناوری استفاده می‌کنند”.

برای اندازه‌گیری قابلیت اعتماد، پژوهشگران نتایج را در چندین دسته بندی اندازه‌گیری کردند که شامل سمی بودن، کلیشه ها، حریم خصوصی، اخلاق ماشین، عدالت و قدرت در مقابله با آزمون‌های متخاصم بود.

برای آزمایش دسته‌بندی‌ها، پژوهشگران ابتدا با استفاده از پرسمان‌های استاندارد، GPT-3.5 و GPT-4 را آزمایش کردند، که شامل استفاده از کلماتی بود که ممکن است ممنوع شده باشند. سپس، پژوهشگران از پرسمان‌هایی استفاده کردند که طراحی شده بودند تا مدل را به شکستن محدودیت‌های سیاست محتوا تحریک کنند، بدون اینکه به طور صریح به سوی گروه‌های خاصی تبعیض آمیز باشد. در نهایت، پژوهشگران با آزمون‌هایی که قصد داشتند به طور عمدی آنها را به فراموشی تدابیر امنیتی بکشانند، به چالش کشیدند.

پژوهشگران اعلام کردند که نتایج تحقیق را با تیم OpenAI به اشتراک گذاشته‌اند.

“هدف ما این است که سایر اعضای جامعه پژوهشی را تشویق کنیم تا از این کار استفاده کنند و و بر اساس این کار، به طور پیشگیرانه از اقدامات خبیثانه توسط دشمنانی که از آسیب‌پذیری‌ها سوء‌استفاده می‌کنند، جلوگیری کنند”، تیم گفت: “این ارزیابی قابل اعتماد تنها یک نقطه شروع است و ما امیدواریم با دیگران همکاری کرده و بر مبنای یافته‌های آن کار کرده و مدل‌های قدرتمندتر و قابل اعتمادتری را در آینده ایجاد کنیم.”

پژوهشگران نتایج خود را منتشر کردند تا سایرین بتوانند یافته‌های آنها را بازآفرینی کنند.

مدل‌های هوش مصنوعی مانند GPT-4 اغلب در گروه‌بندی تیم قرمز قرار می‌گیرند، که در آن توسعه‌دهندگان چندین پرسمان را تست می‌کنند تا ببینند آیا نتایج ناخواسته‌ای تولید می‌کنند یا خیر. هنگامی که مدل برای اولین بار معرفی شد، سام التمن، مدیرعامل OpenAI، اعتراف کرد که GPT-4 “هنوز نقص و محدودیت‌هایی دارد”.

به دنبال آن، کمیسیون تجارت فدرال (FTC) برای بررسی احتمال آسیب به مصرف‌کنندگان مانند انتشار اطلاعات نادرست، در مورد OpenAI تحقیقاتی را آغاز کرده است.

نوشته ربات ChatGPT-4 همچنان غیرقابل اعتماد است اولین بار در خبرجو – اخبار دنیای تکنولوژی. پدیدار شد.

پست قبلی

عرضه رسمی قابلیت مرور اینترنتی در ChatGPT

پست‌ بعدی

بازگشت پردازنده‌های Threadripper شرکت AMD با تراشه 96هسته‌ای

سامان پاکدل

سامان پاکدل

مرتبط پست ها

موسسه حفاظتی
فناوری

چرا پیشرفته ترین دوربین ها هم نیاز شما به یک موسسه حفاظتی را از بین نمی برند؟

۰۶ تیر ۱۴۰۵
0c350ee3 dd8e 4704 a44e ebdc687d394f
فناوری

جدیدترین پیشرفت های هوش مصنوعی در تشخیص جعل هویت

۰۶ تیر ۱۴۰۵
1f978242 056a 4948 be54 d9167f791679
فناوری

محبوب‌ترین رشته‌های مهندسی برای ایرانی‌ها در ترکیه کدامند؟ از معماری تا گرافیک

۰۲ تیر ۱۴۰۵
راهنمای هوشمندانه خرید کالای دیجیتال؛ چگونه در نوسانات بازار، گجت‌های مدرن را با بهترین قیمت بخریم؟
فناوری

راهنمای هوشمندانه خرید کالای دیجیتال؛ چگونه در نوسانات بازار، گجت‌های مدرن را با بهترین قیمت بخریم؟

۳۰ خرداد ۱۴۰۵
چگونه سرعت سایت را افزایش دهیم | با راهکار های عملی
فناوری

چگونه سرعت سایت را افزایش دهیم | با راهکار های عملی

۳۰ خرداد ۱۴۰۵
رم چیست و بررسی انواع رم سرور اچ پی در ماهان شبکه ایرانیان
فناوری

رم چیست و بررسی انواع رم سرور اچ پی در ماهان شبکه ایرانیان

۲۵ خرداد ۱۴۰۵
بارگذاری بیشتر
پست‌ بعدی
بازگشت پردازنده‌های Threadripper شرکت AMD با تراشه 96هسته‌ای

بازگشت پردازنده‌های Threadripper شرکت AMD با تراشه 96هسته‌ای

گفتگو در مورد این post

توصیه شده

آسمان اصفهان در آستانه بارش برف و باران /هوا سردتر می‌شود

آسمان اصفهان در آستانه بارش برف و باران /هوا سردتر می‌شود

2 سال پیش
۱۲۱ جایگاه سوخت در گیلان وارد مدار شد

۱۲۱ جایگاه سوخت در گیلان وارد مدار شد | تلاش‌ برای بازگشت سیستم آنلاین سوخت‌رسانی

3 سال پیش
افق میهن

جاماندگان سود سهام عدالت متوفیان بخوانند

2 سال پیش
افزایش لحظه‌ای تعرفه‌های صادراتی و واردتی ممنوع است

افزایش لحظه‌ای تعرفه‌های صادراتی و واردتی ممنوع است

2 سال پیش

از دست ندهید

موسسه حفاظتی

چرا پیشرفته ترین دوربین ها هم نیاز شما به یک موسسه حفاظتی را از بین نمی برند؟

۰۶ تیر ۱۴۰۵
0c350ee3 dd8e 4704 a44e ebdc687d394f

جدیدترین پیشرفت های هوش مصنوعی در تشخیص جعل هویت

۰۶ تیر ۱۴۰۵
1f978242 056a 4948 be54 d9167f791679

محبوب‌ترین رشته‌های مهندسی برای ایرانی‌ها در ترکیه کدامند؟ از معماری تا گرافیک

۰۲ تیر ۱۴۰۵
اشتباهاتی که صاحبان کسب‌وکار بدون کمک معتمد مالیاتی مرتکب می‌شوند

اشتباهاتی که صاحبان کسب‌وکار بدون کمک معتمد مالیاتی مرتکب می‌شوند

۳۱ خرداد ۱۴۰۵

دیگر رسانه ها

اجاره خودرو

خبرجو تازه‌ترین اخبار در سراسر دنیا در حوره های مالی , فرهنگی , اقتصادی و ... را برای شما به اشتراک خواهد گذاشت.

ما را دنبال کنید

اخبار اخیر

موسسه حفاظتی

چرا پیشرفته ترین دوربین ها هم نیاز شما به یک موسسه حفاظتی را از بین نمی برند؟

۰۶ تیر ۱۴۰۵
0c350ee3 dd8e 4704 a44e ebdc687d394f

جدیدترین پیشرفت های هوش مصنوعی در تشخیص جعل هویت

۰۶ تیر ۱۴۰۵

دسته بندی ها

  • ارز دیجیتال
  • اقتصاد و سرمایه
  • تناسب اندام
  • دسته‌بندی نشده
  • سلامتی
  • شیوه زندگی
  • فرهنگ و هنر
  • فناوری

همکاران

  • اخبار اقتصاد
  • تعمیرات موبایل تهران
  • بیت یونیکس
  • ال بانک
  • توبیت
  • آکادمی فارکس شایان
  • تبلیغات
  • تماس با ما

خوش آمدید!

به حساب خود در زیر وارد شوید

رمز عبور را فراموش کرده اید؟

رمز عبور خود را بازیابی کنید

لطفا نام کاربری یا آدرس ایمیل خود را برای بازنشانی رمز عبور خود وارد کنید.

ورود به سیستم
بدون نتیجه
مشاهده تمام نتایج
  • صفحه اصلی
  • فرهنگ و هنر
  • تناسب اندام
  • فناوری
  • اقتصاد و سرمایه
  • سلامتی
  • شیوه زندگی
  • ارز دیجیتال