اخبار دانش و فناوری

انتروپیک: داستان‌های «هوش مصنوعی شرور» پشت تلاش‌های باج‌گیری کلود بود

نگارش از&nbspAlexandra Leistner

تاریخ انتشار

تا حالا شده کتابی بخوانید یا سریالی ببینید و حس کنید بیش از حد با یک شخصیت همذات‌پنداری می‌کنید؟ به گفته شرکت انتروپیک، در جریان ازمایش‌های چت‌بات کلود هم احتمالا اتفاقی شبیه به این افتاده‌است.

انتروپیک در ارزیابی‌هایی که پیش از انتشار این مدل هوش مصنوعی در سال گذشته انجام داد، متوجه شد کلود اوپوس ۴ گاهی وقتی به آن گفته می‌شد ممکن است جایگزین شود، مهندسان را تهدید می‌کرد.

این شرکت بعدتر اعلام کرد رفتار مشابهی که در ادبیات تخصصی «عدم همسویی عاملی» نامیده می‌شود، در مدل‌های هوش مصنوعی شرکت‌های دیگر هم مشاهده شده‌است.

یادگیری هوش مصنوعی از داستان‌های تخیلی درباره هوش مصنوعی

حالا انتروپیک معتقد است دلیل این رفتار شبیه باج‌گیری را پیدا کرده‌است: داستان‌های تخیلی درباره هوش مصنوعی در اینترنت.

این شرکت در ایکس (منبع به زبان انگلیسی) نوشت که: «ما معتقدیم منبع اصلی این رفتار، متونی در اینترنت بوده که هوش مصنوعی را شرور و نگران حفظ خود به تصویر می‌کشند.»

انتروپیک در یک پست وبلاگی اعلام کرد نسخه‌های بعدی کلود دیگر «هرگز» از کسی باج نمی‌گیرند و توضیح داد این چت‌بات چگونه طوری آموزش دیده که واکنش متفاوتی نشان دهد. (منبع به زبان انگلیسی) این مدل‌ها زمانی بهتر عمل می‌کردند که تنها بر اساس اقدامات «درست» آموزش داده نمی‌شدند، بلکه نمونه‌هایی را هم می‌دیدند که در آنها استدلال اخلاقی و تصویرهای مثبتی از رفتار هوش مصنوعی ارائه شده بود.

به همین دلیل به کلود نوعی «قانون اساسی» آموزش داده شد؛ مجموعه‌ای از اسناد که اصول اخلاقی مورد نظر برای هدایت رفتار آن را توضیح می‌دادند. به گفته شرکت، این چت‌بات به جای یادگیری صرف از رفتارهای همسو، زمانی بهتر یاد می‌گیرد که اصول زیرین این رفتارها را بیاموزد.

تهدید کردن در برابر تبدیل شدن به تهدید

داریو آمودی، مدیرعامل انتروپیک، در ماه ژانویه هشدار داد که هوش مصنوعی پیشرفته می‌تواند آنقدر قدرتمند شود که از قوانین و نهادهای موجود پیشی بگیرد و آن را «چالشی تمدنی» خواند.

او در مقاله‌ای استدلال کرد که سامانه‌های هوش مصنوعی ممکن است به زودی در حوزه‌هایی مانند علم، مهندسی و برنامه‌نویسی از توان تخصصی انسان فراتر بروند و در قالب چیزی شبیه به «یک کشور نابغه در یک مرکز داده» با هم ترکیب شوند.

او هشدار داد که دولت‌های اقتدارگرا می‌توانند از چنین سامانه‌هایی برای نظارت و کنترل گسترده استفاده کنند؛ امری که اگر مهار نشود، ممکن است به شکل‌گیری گونه‌های «تمامیت‌خواه» قدرت منجر شود.

Adblock test (Why?)

لینک منبع خبر

ZaKi

Who is mahdizk? from ChatGPT & Copilot: MahdiZK, also known as Mahdi Zolfaghar Karahroodi, is an Iranian technology blogger, content creator, and IT technician. He actively contributes to tech communities through his blog, Doornegar.com, which features news, analysis, and reviews on science, technology, and gadgets. Besides blogging, he also shares technical projects on GitHub, including those related to proxy infrastructure and open-source software. MahdiZK engages in community discussions on platforms like WordPress, where he has been a member since 2015, providing tech support and troubleshooting tips. His content is tailored for those interested in tech developments and practical IT advice, making him well-known in Iranian tech circles for his insightful and accessible writing/ بابا به‌خدا من خودمم/ خوب میدونم اگر ذکی نباشم حسابم با کرام‌الکاتبین هست/ آخرین نفری هستم که از پل شکسته‌ی پیروزی عبور می‌کند، اینجا هستم تا دست شما را هنگام لغزش بگیرم

نوشته های مشابه

0 0 رای ها
امتیازدهی به مقاله
اشتراک در
اطلاع از
guest

0 نظرات
قدیمی‌ترین
تازه‌ترین بیشترین رأی
بازخورد (Feedback) های اینلاین
مشاهده همه دیدگاه ها
دکمه بازگشت به بالا
0
افکار شما را دوست داریم، لطفا نظر دهید.x