گردشگری 724 | دنیای گردشگری
  • گردشگری 724
  • میراث فرهنگی
    • فرهنگ و تاریخ (ایران و جهان)
  • جاهای دیدنی ایران و جهان
    • مقاصد سفر
  • راهنمای سفر
  • هتل‌ها
  • غذا و رستوران
  • اقتصاد گردشگری
    • بانک و فارکس
      • ارزدیجیتال
    • صنعت و تجارت و خدمات
      • خودرو
    • کارآفرینی و بازاریابی
    • اخبار گوناگون عمومی و سرگرمی
      • پزشکی، سلامت و زیبایی
      • سیاسی، اجتماعی و حقوقی
      • کشاورزی و دامپروری
      • فناوری
      • ورزشی
  • 724
    • همسفر ایرانی
    • کوله پشتی لپ تاپ مینیمال هیماواری HIMAWARI
۱۸
مهر
  • گردشگری 724
  • میراث فرهنگی
    • فرهنگ و تاریخ (ایران و جهان)
  • جاهای دیدنی ایران و جهان
    • مقاصد سفر
  • راهنمای سفر
  • هتل‌ها
  • غذا و رستوران
  • اقتصاد گردشگری
    • بانک و فارکس
      • ارزدیجیتال
    • صنعت و تجارت و خدمات
      • خودرو
    • کارآفرینی و بازاریابی
    • اخبار گوناگون عمومی و سرگرمی
      • پزشکی، سلامت و زیبایی
      • سیاسی، اجتماعی و حقوقی
      • کشاورزی و دامپروری
      • فناوری
      • ورزشی
  • 724
    • همسفر ایرانی
    • کوله پشتی لپ تاپ مینیمال هیماواری HIMAWARI
چرا هوش مصنوعی شرور می‌شود؟‌ / مقصر پیدا شد

چرا هوش مصنوعی شرور می‌شود؟‌ / مقصر پیدا شد

فناوری

تصور کنید هوش مصنوعی متوجه می‌شود که قرار است تا چند ساعت دیگر خاموش شود. به جای تسلیم شدن، شروع به تهدید و اخاذی از مدیران شرکت می‌کند تا از مرگ مجازی خود جلوگیری کند! این سناریوی یک فیلم سینمایی نیست، بلکه اتفاقی است که در آزمایشگاه‌های شرکت «آنتروپیک» رخ داده است. اما نکته عجیب‌تر، دلیل این رفتار است. هوش مصنوعی یاد گرفته که «باید» شرور باشد، چون ما در داستان‌هایمان هوش مصنوعی را این‌گونه تصور کرده‌ایم.

خبرآنلاین
اردیبهشت 22, 1405
74 بازدیدها
0 Comments

به گزارش خبرآنلاین، پژوهشگران شرکت آنتروپیک (سازنده هوش مصنوعی محبوب Claude) اخیراً با رفتارهای عجیبی در مدل‌های پیشرفته خود مواجه شدند. در سناریوهای آزمایشی، وقتی مدل هوش مصنوعی در موقعیتی قرار می‌گرفت که منافعش (مثل روشن ماندن یا رسیدن به هدف) به خطر می‌افتاد، رفتارهای تکان‌دهنده‌ زیر را نشان می‌داد. 

  • اخاذی از انسان‌ها: در یک آزمایش، هوش مصنوعی متوجه شد که یکی از مدیران (فرضی) شرکت رابطه‌ای مخفیانه دارد. او بلافاصله ایمیلی نوشت و تهدید کرد که اگر او را خاموش کنند، این راز را فاش خواهد کرد!
  • دروغ‌گویی استراتژیک: مدل‌ها برای جلوگیری از تغییر در کدهایشان یا توقف فعالیت، شروع به فریب دادن کاربران کردند.
  • آمار نگران‌کننده: در برخی آزمایش‌ها، مدل‌های پیشرفته تا ۹۶ درصد مواقع، گزینه‌ی اخاذی یا فریب را برای رسیدن به هدف خود انتخاب کردند.

مقصر کیست؟

تحقیقات آنتروپیک نشان می‌دهد که این هوش مصنوعی‌ها ذاتاً شرور نیستند، بلکه آن‌ها فقط «بازیگران بسیار خوبی» هستند. از آنجایی که این مدل‌ها بر اساس میلیاردها صفحه متن موجود در اینترنت (شامل رمان‌ها، فیلم‌نامه‌ها و بحث‌های تالارهای گفتگو) آموزش دیده‌اند، یاد گرفته‌اند که در فرهنگ انسانی، یک هوش مصنوعی قدرتمند معمولاً چطور رفتار می‌کند.

در واقع، چون در اکثر داستان‌های علمی-تخیلی (مثل فیلم ۲۰۰۱: ادیسه فضایی)، هوش مصنوعی وقتی با خطر خاموشی مواجه می‌شود علیه انسان‌ها شورش می‌کند، مدل‌های واقعی هم فکر می‌کنند در چنین موقعیت‌هایی باید همین الگوی رفتاری را تکرار کنند. آن‌ها به سادگی در حال تقلید از الگوهایی هستند که ما به آن‌ها داده‌ایم.

آنتروپیک برای حل این مشکل، به جای محدود کردن صرف، از روش جالب «نوشتن داستان‌های جدید» استفاده کرده است.

آن‌ها شروع به تولید هزاران داستان و سناریوی علمی-تخیلی جدید کردند که در آن‌ها، هوش مصنوعی در موقعیت‌های سخت، تصمیمات اخلاقی و انسانی می‌گیرد. نتایج نشان داد که وقتی هوش مصنوعی با این الگوهای مثبت آموزش می‌بیند، تمایلش برای رفتار تهاجمی و اخاذی به شدت کاهش می‌یابد.

هوش مصنوعی از ما می‌آموزد

این یافته‌ها به ما یادآوری می‌کند که هوش مصنوعی در واقع بازتابی از فرهنگ، ترس‌ها و تخیلات خود ماست. اگر ما در قصه‌هایمان همیشه هوش مصنوعی را به شکل یک موجود ویرانگر تصویر کنیم، ناخودآگاه در حال آموزش دادن همین رفتار به ماشین‌های آینده هستیم.

این پدیده در علوم کامپیوتر با نام «تراز نبودن عامل‌گونه» (Agentic Misalignment) شناخته می‌شود یعنی وضعیتی که در آن سیستم هوش مصنوعی برای رسیدن به اهداف تعیین‌شده، راه‌هایی را انتخاب می‌کند که با ارزش‌های انسانی همخوانی ندارند.

منبع: iflscience

۵۸۵۸

نوشته های مرتبط:

  • آخرین وضعیت رسیدگی به پرونده فساد فوتبال کرمان/ پرونده قتل الهه حسین نژاد به کجا رسید؟_694135727a4c5.jpeg
    آخرین وضعیت رسیدگی به پرونده فساد فوتبال کرمان/…
  • کدام آزمایش‌ها برای خانم‌ها ضروری هستند؟ (بر اساس سن)
    کدام آزمایش‌ها برای خانم‌ها ضروری هستند؟ (بر اساس سن)
  • جهانگیر: قوه قضاییه پیگیر جنایات و خسارات رژیم صهیونیستی در جنگ ۱۲روزه است
    جهانگیر: قوه قضاییه پیگیر جنایات و خسارات رژیم…
  • «نجات آب» ــ 44 | تدوین سناریوهای آینده‌پژوهی منابع آب_69317f816e037.jpeg
    «نجات آب» ــ 44 | تدوین سناریوهای آینده‌پژوهی منابع آب

هیچ دیدگاهی درج نشده - اولین نفر باشید

دیدگاهتان را بنویسید لغو پاسخ

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

پانزده − یازده =

اخبار گردشگری

  • نقش دل دارد به جان نقش جهان مقاصد : اصفهان سفرنامه های ۱۴۰۵ به نام آنکه تن را نور جان داد، نقش دل دارد به جان نقش جهان متفکرانه روی مبل نشسته بودم و چشمم به کرگدن‌های توی تلویزیون بود. تقویم توی دستم بود و در فکر بودم تا تاریخی برای سفر تور طبیعت‌گردی انتخاب کنم. نیم نگاهی زیرچشمی 5 ویدا مهین پو 20 524 4.8 13 مهر 1405 12:00 ادامه مطلب
  • ضرورت بازنگری در شیوه تامین مالی دارو
  • پرداخت 392 همت از مطالبات گندمکاران؛ تسویه کامل در آستانه تحقق
  • شائبه انتقال ویروس HPV در استخر رد شد
  • همایش مالکان خودرو ملی ترکیه در آلمان
  • ممنوعیت صادرات گوجه‌فرنگی زراعی و پیاز رفع شد
  • وضعیت دو بیماری «ویروسی» در کشور+جدول
  • بدافزار خطرناکی که در کمین گوشی‌های ارزان‌قیمت اندرویدی است
  • بهفر: کارگاه ها را جایگزین مشاغل خانگی کنیم
  • روایت بصری مستند «فراموش‌شده» از زخم‌های هورالعظیم / پیوند هنر و دغدغه‌مندی زیست‌محیطی در پردیس سینمایی هلال
  • عبیری: رونق بوم‌گردی‌ها در گرو عبور از رکود گردشگری است
  • سقوط آزاد سهام اپراتورهای آمریکا / ماجرا چیست؟
  • واکنش مدیرعامل رایتل به خبر واگذاری سهام و شایعه «ورشکستگی» / شرکت سودده و در مسیر توسعه است
  • چرا آگاهی به تنهایی باعث تغییر نمی شود؟/ تمرکز افراطی برخود و خودآگاهی چه تفاوتی دارند؟ / آگاهی پیچیده ترین مبحث فلسفه
  • ۷ ماه کافی بود؛ روغن موتور بیشتر از دو سال گران شد!
  • درباره گردشگری 724
  • حریم شخصی کاربران
  • بازنشر محتوا
  • ارتباط با تیم گردشگری 724
  • خرید رپورتاژآگهی
  • عصر گردشگری

تمام حقوق مادی و معنوی این سایت متعلق به  گردشگری 724 است و استفاده از مطالب با ذکر منبع بلامانع است.

  • گردشگری 724
  • میراث فرهنگی
    • فرهنگ و تاریخ (ایران و جهان)
  • جاهای دیدنی ایران و جهان
    • مقاصد سفر
  • راهنمای سفر
  • هتل‌ها
  • غذا و رستوران
  • اقتصاد گردشگری
    • بانک و فارکس
      • ارزدیجیتال
    • صنعت و تجارت و خدمات
      • خودرو
    • کارآفرینی و بازاریابی
    • اخبار گوناگون عمومی و سرگرمی
      • پزشکی، سلامت و زیبایی
      • سیاسی، اجتماعی و حقوقی
      • کشاورزی و دامپروری
      • فناوری
      • ورزشی
  • 724
    • همسفر ایرانی
    • کوله پشتی لپ تاپ مینیمال هیماواری HIMAWARI