خبر فوریامروز

تحول بنیادین در هوش مصنوعی عامل‌محور؛ رونمایی انتروپیک از قابلیت کنترل کامپیوتر (Computer Use) در مدل ارتقایافته Claude 3.5 Sonnet

کالبدشکافی فنی قابلیت Computer Use در مدل جدید Claude 3.5 Sonnet؛ چگونگی کنترل ماوس و کیبورد توسط هوش مصنوعی، بنچمارک OSWorld و تدابیر امنیتی در ماگ بیت.

انقلاب انتروپیک با قابلیت Computer Use در مدل Claude 3.5 Sonnet
تحول بنیادین در هوش مصنوعی عامل‌محور — عکس: آرشیو ماگ بیت
خلاصه در یک نگاه
  • شرکت انتروپیک (Anthropic) با انتشار نسخه ارتقایافته Claude 3.5 Sonnet و رونمایی از قابلیت پیشگامانه «کنترل کامپیوتر» (Computer Use)، مرزهای هوش مصنوعی عامل‌محور را بازتعریف کرد. این نوآوری به مدل هوش مصنوعی اجازه می‌دهد درست مانند یک اپراتور انسانی به صفحه مانیتور نگاه کند، مکان‌نمای ماوس را در محیط سیستم‌عامل جابه‌جا نماید، کلیک کند، فرم‌ها را پر کند و چندین نرم‌افزار دسکتاپ را به صورت خودمختار هدایت نماید؛ قابلیتی که با ثبت امتیاز تاریخی در بنچمارک OSWorld و جهش در SWE-bench، اتوماسیون نرم‌افزاری را وارد عصری بی‌سابقه کرده است.
  • بررسی جامع ابعاد فنی و کاربردی توسط تحریریه ماگ بیت.
  • پیش‌بینی اثرات کوتاه‌مدت و بلندمدت بر اکوسیستم فناوری.

عبور از چت‌بات‌های متنی به عامل‌های تعاملی دسکتاپ؛ رخداد تاریخی انتروپیک

صنعت هوش مصنوعی از زمان ظهور چت‌بات‌های اولیه همواره در جستجوی راهکاری بود تا هوش ماشینی را از حصار پنجره‌های گفتگو رها ساخته و آن را به مجری مستقیم کارهای واقعی در کامپیوتر بدل کند. شرکت انتروپیک (Anthropic) با انتشار نسخه ارتقایافته مدل پرچمدار Claude 3.5 Sonnet گامی تاریخ‌ساز در این مسیر برداشت: معرفی رسمی قابلیت «کنترل کامپیوتر» (Computer Use) در فاز بتای عمومی برای توسعه‌دهندگان API.

پیش از این، تعامل هوش مصنوعی با برنامه‌ها نیازمند رابط‌های برنامه‌نویسی اختصاصی (API) یا پلاگین‌های سفارشی بود که توسعه آن‌ها ماه‌ها زمان می‌برد و برای نرم‌افزارهای قدیمی سازمانی عملاً غیرممکن بود. اما رویکرد انقلابی انتروپیک متفاوت است: کلود به جای تلاش برای هماهنگی با کدهای پشت صحنه، صفحه دسکتاپ را از دید یک کاربر انسانی می‌نگرد، دکمه‌ها و پنجره‌ها را تشخیص می‌دهد، ماوس را جابه‌جا می‌کند، کلیک می‌نماید و متن تایپ می‌کند. این جهش خیره‌کننده، تکمیل‌کننده مسیری است که در تحلیل راهنمای جامع هوش مصنوعی عامل‌محور (Agentic AI) و خودمختاری نرم‌افزاری به عنوان افق آینده سیستم‌های پردازشی پیش‌بینی شده بود.

کالبدشکافی معماری فنی؛ چرخه بازخورد اسکرین‌شات و هدایت مکان‌نما

قابلیت Computer Use از طریق یک ابزار ویژه سیستمی در API انتروپیک فعال می‌شود. در این معماری، فرآیند اجرای وظیفه در قالب یک چرخه بسته (Closed Loop) از تعاملات پیوسته به شرح زیر اجرا می‌گردد:

نخست، مدل اسکرین‌شاتی با وضوح بالا از وضعیت فعلی سیستم‌عامل دریافت می‌کند. سپس با اتکا به قابلیت‌های درک بصری عمیق چندوجهی (Multimodal Vision)، مختصات پیکسلی دقیق (X, Y) المان‌های رابط کاربری شامل دکمه‌ها، فیلدهای ورودی، منوهای کشویی و تب‌های مرورگر را روی یک شبکه مختصات فرضی نقشه‌برداری می‌کند.

در گام بعدی، مدل مجموعه‌ای از فرامین حرکتی و ورودی استاندارد را صادر می‌کند؛ اقداماتی نظیر حرکت دادن ماوس (mouse_move)، کلیک چپ، راست یا دوبار کلیک (click)، کشیدن و رها کردن (drag_and_drop)، اسکرول صفحه (scroll) و فشردن کلیدهای میانبر کیبورد (key_press). پس از اجرای فرمان، اسکرین‌شات جدیدی بلافاصله ثبت و به مدل بازگردانده می‌شود تا مدل ارزیابی کند آیا کلیک با موفقیت انجام شده و پنجره مورد انتظار باز گردیده است یا خیر.

این چرخه پویای نظارت و اصلاح خطا سبب می‌شود کلود حتی در صورت مواجهه با بارگذاری‌های کند شبکه یا پنجره‌های غیرمنتظره پاپ‌آپ، مسیر خود را برای دستیابی به هدف اصلی تصحیح نماید.

نمودار معماری چرخه تعاملی و سندباکس قابلیت کنترل کامپیوتر انتروپیک با پایش اسکرین‌شات و صدور مختصات ماوس و کیبورد
معماری قابلیت Computer Use در کلود ۳.۵ سونت بر چرخه مداوم خوانش اسکرین‌شات، محاسبه مختصات پیکسلی عناصر گرافیکی، حرکت مکان‌نما و کلیک مجازی درون یک سندباکس ایزوله استوار است.

ثبت رکوردهای درخشان در بنچمارک‌های جهانی؛ از OSWorld تا SWE-bench

سنجش میزان توانمندی یک مدل در اجرای وظایف دسکتاپ، توسط بنچمارک مرجع OSWorld اندازه‌گیری می‌شود. این بنچمارک عملکرد عامل‌های هوش مصنوعی را در محیط‌های واقعی کامپیوتری شامل نرم‌افزارهای آفیس، صفحات گسترده، مرورگر وب، پخش‌کننده‌های مدیا و ابزارهای خط فرمان تست می‌کند.

مدل جدید Claude 3.5 Sonnet در بنچمارک OSWorld موفق به کسب امتیاز تاریخی ۱۴.۹ درصد شد. اگرچه این رقم در مقایسه با میانگین ۷۰ تا ۷۵ درصدی کاربران انسانی نشان می‌دهد که هنوز در ابتدای مسیر توسعه قرار داریم، اما مقایسه آن با نزدیک‌ترین رقبای قبلی که به سختی به امتیاز ۷.۷ درصد دست می‌یافتند، نشان‌دهنده یک جهش دو برابری و کسب جایگاه بلامنازع پیشتازی در جهان است.

همچنین در حوزه مهندسی نرم‌افزار و برنامه‌نویسی خودکار، نسخه جدید کلود ۳.۵ سونت امتیاز خود در بنچمارک SWE-bench Verified را از ۳۳.۴ درصد به عدد خیره‌کننده ۴۹.۰ درصد ارتقا داد؛ رکوردی که برتری محسوسی نسبت به سایر پلتفرم‌ها ایجاد کرده و طبق ارزیابی تخصصی ما در مقایسه جامع دستیاران کدنویسی خودکار و بنچمارک‌های مهندسی نرم‌افزار، انتروپیک را در صدر اکوسیستم برنامه‌نویسی هوشمند تثبیت نموده است.

جدول ارزیابی و مقایسه عملکرد مدل‌های شاخص در تعامل با سیستم‌عامل و کدنویسی

جدول مقایسه‌ای زیر پیشرفت‌های نسخه ارتقایافته Claude 3.5 Sonnet را در برابر نسخه اولیه و رقبا در معیارهای کلیدی به تصویر می‌کشد:

پارامتر ارزیابیClaude 3.5 Sonnet (نسخه جدید)Claude 3.5 Sonnet (نسخه اولیه)GPT-4o با ابزارهای استانداردپیشتازان قبلی هوش مصنوعی
**امتیاز بنچمارک OSWorld (دسکتاپ)****۱۴.۹ درصد** (رتبه اول جهان)فاقد قابلیت بومی دسکتاپحدود ۷.۷ درصد۷.۲ الی ۷.۸ درصد
**بنچمارک مهندسی کد SWE-bench****۴۹.۰ درصد** (رکورد رسمی)۳۳.۴ درصد۳۸.۸ درصدکمتر از ۳۰ درصد
**شیوه تعامل با سیستم‌عامل**درک مستقیم پیکسلی + ماوس و کیبوردمتنی و کدهای محصورمتکی بر ابزارهای خارجیمتکی بر توابع متنی
**آزمون TAU-bench (خرده‌فروشی)**۶۹.۲ درصد۶۲.۶ درصد۶۰.۳ درصد۵۵.۰ درصد
**تعامل با نرم‌افزارهای فاقد API**بومی (مشابه انسان)ناممکنناممکن بدون ابزار ویژهناممکن
**پشتیبانی از سندباکس ایزوله**الزامی بر پایه Dockerنامربوطنامربوطنامربوط

این داده‌ها آشکار می‌سازند که ارتقای اخیر فراتر از بهینه‌سازی پارامترهای پردازش زبان طبیعی بوده و تمرکز اصلی انتروپیک بر توانمندسازی عامل‌های اجرایی در دنیای واقعی متمرکز شده است.

کاربردهای تحول‌آفرین سازمانی و بازخوردهای میدانی اولیه

قابلیت کنترل کامپیوتر در حال حاضر توسط شرکت‌های نامداری همچون Asana، Canva، Replit و DoorDash در مراحل ارزیابی پیشرفته سازمانی قرار دارد. عمده‌ترین حوزه‌هایی که این فناوری بلافاصله در آن‌ها ارزش‌آفرینی خلق می‌کند عبارتند از:

۱. **اتوماسیون سامانه‌های موروثی و سازمانی (Legacy Systems):** در بسیاری از بانک‌ها، نهادهای بیمه و زنجیره‌های تأمین، نرم‌افزارهای دهه‌های گذشته همچنان مشغول به کارند که فاقد هرگونه API مدرن هستند. کلود ۳.۵ سونت می‌تواند به راحتی این نرم‌افزارها را باز کرده، داده‌های فاکتور را از ایمیل کپی کند و در فیلدهای مربوطه درج نماید.

۲. **تست خودکار واسط‌های کاربری (End-to-End QA Testing):** مهندسان توسعه وب و نرم‌افزار اکنون می‌توانند سناریوهای پیچیده کاربر مانند ثبت‌نام، پر کردن سبد خرید، پرداخت آزمایشی و تست واکنش‌گرایی صفحات را به کلود بسپارند تا خطاها و باگ‌های بصری را مستقیماً شکار کند.

۳. **پژوهش و داده‌کاوی چندبرنامه‌ای:** ترکیب بررسی اسناد PDF، استخراج اعداد به اکسل و مقایسه آن با جستجوهای آنلاین شبیه به آنچه در تحول ادغام موتور جستجوی هوشمند در ChatGPT Search رخ داد، اکنون با توانایی جابه‌جایی در میان پنجره‌های ویندوز و لینوکس صدها ساعت کار اداری تکراری را خودکار می‌سازد.

چالش‌های امنیتی و تمهیدات سندباکس؛ مهار تهدیدات Prompt Injection

دادن دسترسی کنترل مستقیم ماوس و کیبورد به یک هوش مصنوعی، نگرانی‌های امنیتی عمیقی را به همراه دارد. انتروپیک به صراحت اعلام کرده است که اجرای این ابزار باید صرفاً در محیط‌های قرنطینه و سندباکس‌های امنیتی (نظیر کانتینرهای Docker و ماشین‌های مجازی ایزوله) انجام گیرد تا دسترسی به فایل‌های حیاتی سیستم میزبان ناممکن باشد.

خطر اصلی در این حوزه «تزریق پرامپت غیرمستقیم» (Indirect Prompt Injection) است؛ سناریویی که در آن هوش مصنوعی هنگام خواندن یک صفحه وب یا بررسی یک فایل متنی آلوده، با دستوری پنهان از سوی مهاجم مواجه می‌شود که از مدل می‌خواهد عملی مخرب (مانند پاک کردن فایل‌ها یا ارسال کوکی‌های مرورگر) انجام دهد.

برای خنثی‌سازی این تهدیدات، انتروپیک لایه‌های دفاعی طبقه‌بندی هوشمندی را به کار گرفته که در صورت مواجهه با اعمال حساسی چون خرید مالی، موافقت‌نامه‌های امنیتی یا تغییر تنظیمات شبکه، فرآیند را متوقف ساخته و تایید صریح اپراتور انسانی (Human-in-the-Loop) را الزامی می‌کند.

تحلیل تحریریه ماگ بیت؛ آغاز عصر همزیستی انسان با همکاران دیجیتال خودمختار

معرفی قابلیت Computer Use توسط انتروپیک نقطه‌عطفی است که تاریخ فناوری هوش مصنوعی را به دو دوره «پیش و پس از کنترل بصری دسکتاپ» تقسیم می‌کند. دیگر روزگاری که هوش مصنوعی صرفاً مشاور متنی یا تولیدکننده کد بود به پایان رسیده و اکنون شاهد تولد همکاران دیجیتالی هستیم که صندلی مجازی پشت میز کار را در اختیار گرفته‌اند.

اگرچه نسخه بتای فعلی هنوز گاهی در تشخیص نوتیفیکیشن‌های سریع، کلیک روی آیکون‌های بسیار ریز یا اسکرول‌های ممتد دچار لغزش می‌شود، اما سرعت حیرت‌انگیز تکامل این مدل‌ها نشان می‌دهد که طی سال‌های ۲۰۲۶ و ۲۰۲۷، کنترل کامپیوتری توسط هوش مصنوعی به یک استاندارد روزمره بدل خواهد شد. شرکت‌ها و متخصصانی که شیوه ادغام این عامل‌های مستقل را فرا گیرند، برندگان بی‌چون‌وچرای بهره‌وری در موج نوین تحول دیجیتال خواهند بود.

این مطلب را با دوستانتان به اشتراک بگذارید
د
نوشته‌ی
دکتر نیما ارجمند

روزنامه‌نگار حوزه‌ی هوش مصنوعی؛ علاقه‌مند به روایت آدم‌ها و تغییراتی که فناوری در زندگی روزمره ایجاد می‌کند.

همه‌ی مطالب
مطالب پیشنهادی ماگ بیت

بیشتر از هوش مصنوعی

مشاهده همه