مایکروسافت به‌تازگی از قابلیت جدیدی در ویندوز 11 رونمایی کرده که به کمک هوش مصنوعی، امکان توصیف تصاویر روی صفحه‌نمایش را بدون نیاز به اینترنت فراهم می‌کند.
براساس گزارش‌ها، این قابلیت با عنوان «Describe Image» بخشی از ویژگی Click To Do در ویندوز 11 است و فعلاً به‌صورت انحصاری برای رایانه‌های کوپایلوت پلاس در دسترس خواهد بود.
کاربران می‌توانند با نگه‌داشتن کلید ویندوز و کلیک ماوس، این ابزار را فعال کنند. به‌محض انتخاب گزینه توصیف تصویر، پنجره‌ای باز می‌شود که توضیحی از محتوای بصری روی صفحه ارائه می‌دهد. این پنجره همچنین گزینه‌هایی برای خلق توصیف جدید، ثبت نظر مثبت یا منفی برای توضیح ارائه‌شده، و کپی مستقیم متن به کلیپ‌بورد فراهم می‌کند. نکته قابل توجه این است که این قابلیت با هر برنامه‌ای که درحال اجرا روی صفحه باشد کار می‌کند.
مایکروسافت اعلام کرده که تمامی پردازش‌ها به‌صورت محلی و بدون نیاز به اتصال اینترنت انجام می‌شود. این موضوع، علاوه‌بر افزایش سرعت، باعث حفظ امنیت و حریم خصوصی کاربران نیز می‌شود. طبق گفته مایکروسافت، وقتی برای اولین‌بار از این قابلیت استفاده می‌شود، مدل‌های موردنیاز روی دستگاه تنظیم و سپس توصیف‌ها به‌صورت آفلاین تولید می‌شوند. این اتفاق تضمین می‌کند که هیچ تصویری برای تحلیل به سرورهای مایکروسافت ارسال نمی‌شود.
قابلیت توصیف تصویر در ویندوز 11 بخشی از مجموعه بزرگ‌تری از ابزارهای هوش مصنوعی در Click To Do است. این ابزار، مشابه قابلیت Circle To Search گوگل در اندروید طراحی شده، اما مایکروسافت تلاش دارد آن را فراتر ببرد. Click To Do همچنین توانایی تحلیل متن، خلاصه‌سازی محتوا، ایجاد فهرست، بازنویسی متن، شناسایی تصویر، حذف یا محو پس‌زمینه تصویر و جستجوی آنلاین براساس تصویر را نیز دارد.
بسیاری از عملکردهای Click To Do قابل شخصی‌سازی هستند و کاربر می‌تواند موارد غیرضروری را غیرفعال کند. قابلیت توصیف تصویر هم‌اکنون برای کاربران Windows Insider در کانال‌های Beta و Dev منتشر شده و درحال‌حاضر تنها برای دستگاه‌های کوپایلوت پلاس با پردازنده اسنپدراگون فعال است. نسخه‌های دارای پردازنده اینتل و AMD نیز به‌زودی به این قابلیت دسترسی خواهند یافت. مایکروسافت قصد دارد این قابلیت را در اواخر 2025 در دسترس همه کاربران قرار دهد.
