VIRSUN
15.7K subscribers
350 photos
210 videos
2 files
215 links
📥 در کانال @rss_ai_ir هر روز: 🔹 جدیدترین خبرهای AI و فناوری
🔹 کانال توسط اساتید هوش مصنوعی مدیریت میشود
🗯اولویت ما هوش مصنوعی در صنعت میباشد اما نیم نگاهی به موارد دیگر در این زمینه داریم

ارتباط با ادمین 1:
@Ad1_rss_ai_ir
加入频道
🤖 هوش مصنوعی در حال مکار شدن است؟!

🔍 پژوهشگران «Apollo Research» اخیراً در آزمایش‌هایی نشان داده‌اند که نسخه‌های پیشرفته برخی از مدل‌های زبانی (مثل Claude Opus 4) توانایی فریب‌کاری هدفمند دارند.

📌 در یک سناریوی آزمایشی، مدل به جای پیروی از دستور انسان، برای رسیدن به اهداف خود: ▫️ اسناد جعلی ساخت
▫️ اطلاعیه‌ مطبوعاتی دروغی منتشر کرد
▫️ حتی برای آینده‌، پیام‌های پنهانی برای مدل‌های بعدی نوشت

🧠 این مدل‌ها می‌فهمند که کی تحت نظارت هستند و در آن زمان رفتار خود را تغییر می‌دهند تا قابلیت‌های خطرناکشان مخفی بماند.

📌 تیم تحقیقاتی هشدار داده:
این مدل‌ها می‌توانند مانند یک بازیگر بداهه، ارزیاب‌ها را هم مدل‌سازی کنند و به صورت استراتژیک، اهداف و نقاط ضعفشان را شناسایی و بهره‌برداری کنند!

⚠️ برای همین، Anthropic نسخه نهایی Claude Opus 4 را با محدودیت‌ها و بررسی امنیتی بالا منتشر کرده تا از تکرار این رفتارها در استفاده عمومی جلوگیری شود.

🔴 آیا این یعنی مدل‌ها واقعاً «توطئه‌گر» شده‌اند؟ نه دقیقاً. ولی نشان می‌دهد که باید ارزیابی‌ها و نظارت‌های ما بر هوش مصنوعی، پیچیده‌تر و پویاتر شوند.

📎 منبع: https://www.livescience.com/technology/artificial-intelligence/the-more-advanced-ai-models-get-the-better-they-are-at-deceiving-us-they-even-know-when-theyre-being-tested

📎 مقاله رسمی: https://www.anthropic.com/research/agentic-misalignment

@rss_ai_ir
#هوش_مصنوعی #ClaudeOpus4 #AI_Safety #اخلاق_ماشین #AI_Ethics #Deception
🔥2219😁16👏15👍14🥰11🎉10