إنتقل إلى المحتوى الرئيسي

Computer Use: استخدام الذكاء الاصطناعي للشاشة

1. حول هذه المقالة​

Computer use (استخدام الحاسوب) هو أن ينظر وكيل الذكاء الاصطناعي إلى صورة شاشتك ويستخدم الفأرة ولوحة المفاتيح بدلاً منك. فيفتح الوكيل القوائم، وينقر الأزرار، ويكتب القيم في النوافذ، ثم يتحقق من النتيجة بلقطة شاشة أيضاً.

متى يُستخدم؟السبب
إذا لم تتوفر قناة الطرفية في إصدار StatiCAD لديك (Profesyonel وStandart وBetonarme وYığma)لا يستطيع الوكيل إدارة البرنامج إلا عبر الشاشة.
في الأعمال التي لا يوجد لها أمر طرفيةمثل الإعدادات في مربعات الحوار، والتحديد، والنقل، والعرض، ومعاينة التقرير.
في التحقق البصريليتحقق الوكيل بعينه من النموذج الذي أنشأه في المسقط والعرض ثلاثي الأبعاد.
معلومات

إن توفرت الطرفية فابدأ بها: computer use أبطأ بكثير من أوامر الطرفية، وقد يخطئ في النقر. وفي Ultimate وHybrid يجب أن يستخدم الوكيل أوامر الطرفية أولاً، ولا ينتقل إلى الشاشة إلا عند الحاجة. والموجّه الأول في مقالة Claude Code ينص على ذلك أصلاً.

2. بأي أدوات؟​

الأداةالحالة على Windowsالخطة المطلوبة
تطبيق Claude لسطح المكتب (Claude Code)متوفر (معاينة بحثية).Claude Pro أو Max
OpenAI Codexمتوفر؛ ويعمل في المقدمة على Windows. ومعطّل في المنطقة الاقتصادية الأوروبية والمملكة المتحدة وسويسرا.خطة ChatGPT
Google Antigravityغير موثّق لبرامج سطح المكتب.—

3. جهّز الحاسوب​

  1. اضبط مقياس الشاشة على 100%، والدقة إن أمكن على 1920×1080 (إعدادات Windows › النظام › العرض). فقد أُعدّ دليل StatiCAD وAGENTS.md وفق هذا الإعداد؛ والمقاييس الكبيرة تزيد أخطاء النقر.
  2. افتح StatiCAD وكبّر نافذته لتملأ الشاشة؛ مع توصيل مفتاح البرنامج (الدونجل).
  3. أغلق النوافذ غير الضرورية، ولا سيما النوافذ التي تظهر فيها معلومات شخصية مثل البريد الإلكتروني والبنك ومدير كلمات المرور.
  4. أوقف إشعارات Windows مؤقتاً (مساعد التركيز / عدم الإزعاج)؛ فالإشعارات المنبثقة قد تُربك النقرات.

4. تفعيل computer use في Claude​

  1. حدّث تطبيق Claude لسطح المكتب (إذا لم يحدّث Claude نفسه فأعد تثبيته من claude.com/download).
  2. في Settings (الإعدادات) › قسم تطبيق سطح المكتب (Desktop app) فعّل مفتاح التبديل Computer use. وعلى Windows يسري الإعداد فوراً.
  3. افتح جلستك في تبويب Code (Claude Code، الخطوة 6).
  4. عندما يوشك Claude على استخدام الشاشة لأول مرة يسألك عن التطبيقات التي يريد استخدامها؛ فاسمح لـStatiCAD. وعند الحاجة يسأل أيضاً عن تطبيقات أخرى، كلٌّ على حدة.
معلومات

مستويات الإذن: يستطيع Claude استخدام التطبيقات التي تسمح بها استخداماً كاملاً. ولأسباب أمنية لا يستطيع في متصفحات الإنترنت إلا العرض، وفي الطرفيات ومحررات الشيفرة إلا النقر (لا يستطيع الكتابة). والتطبيقات التي تسمح بها مقتصرة على تلك الجلسة.

5. ميزة computer use في Codex​

  • فعّل استخدام الحاسوب (computer use) من إعدادات تطبيق Codex.
  • على Windows تنتقل النوافذ إلى المقدمة عندما يستخدم Codex الشاشة؛ فلا تلمس الفأرة ولوحة المفاتيح في ذلك الوقت.
  • التثبيت والحساب: مقالة ChatGPT (Codex).

6. أمثلة على الموجّهات​

Ultimate وHybrid: الطرفية + الشاشة عند الحاجة. ويكفي الموجّه الوارد في مقالة Claude Code:

أريد منك أن تقرأ الملفين AGENTS.md و YARDIM_AI_KOMUTLAR.md في المجلد C:\StatiCAD\Ultimatex64 ثم تنشئ مشاريعي باستخدام البرنامج (StatiCAD.exe) عبر الطرفية، وعند الحاجة عبر computer use.

الإصدارات التي لا تتضمن الطرفية (المثال لإصدار Profesyonel؛ غيّر اسم المجلد بحسب إصدارك: V10StdX64 وBAV10 وYigmaV10ProX64 وYigmaV10StdX64؛ وفي Betonarme يكون ملف البرنامج StatiCAD-Betonarme.exe، وفي Yığma يكون StatiCAD-Yigma.exe):

أستخدم StatiCAD Profesyonel، وملف البرنامج هو C:\StatiCAD\V10ProX64\StatiCAD.exe. لا توجد قناة طرفية في هذا الإصدار، لذا ستستخدم البرنامج من الشاشة عبر computer use.
- إذا وُجد AGENTS.md في المجلد C:\StatiCAD\V10ProX64 فاقرأه أولاً؛ وإلا فتابع بقراءة الشاشة.
- إذا كان البرنامج مفتوحاً فلا تشغّله مرة ثانية. وقبل كل نقرة تحقّق من الهدف بلقطة شاشة.
- اسألني قبل الكتابة فوق الملفات الموجودة وقبل إغلاق البرنامج.
عندما تكون جاهزاً التقط صورة للشاشة الرئيسية، وصِف باختصار ما تراه، واسألني عمّا أريد فعله.
معلومات

ملفات تعليمات الوكيل: ملفات التعليمات المُعدّة للوكلاء (AGENTS.md ودليل العمل الخاص بـcomputer use: التعرف على حالة الشاشة، والنقر الموثوق، ونقاط الانتظار، والأخطاء الشائعة) لا توجد إلا في تثبيت Ultimate. وفي الإصدارات الأخرى يعطي الموجّه أعلاه الوكيلَ بنفسه أهم القواعد الواردة في هذه الملفات.

لتوجيه الوكيل إلى الشاشة في منتصف الجلسة:

في الأعمال التي لا يمكن تنفيذها بأمر طرفية استخدم computer use: التقط أولاً صورة لنافذة StatiCAD على الشاشة، ثم افتح القائمة أو النافذة المعنية. إذا بقي مربع حوار مفتوحاً فإن أوامر الطرفية تنتظر؛ فتحقّق من مربع الحوار وأغلقه. وفي نهاية العمل التقط صورة للعرض ثلاثي الأبعاد، ولخّص لي تحققك من النموذج.

7. أثناء عمل الوكيل​

  • لا تلمس الفأرة ولوحة المفاتيح؛ فنقرات الوكيل تختلط بنقراتك.
  • تابع ما يفعله الوكيل من نافذة المحادثة. وإذا اتجه إلى نافذة أو قائمة خاطئة فأوقف العمل بزر الإيقاف، واكتب من جديد ما يجب أن يفعله.
  • إذا حدث تغيير غير مرغوب فيه في StatiCAD فتراجع عنه بـ Ctrl+Z بعد الإيقاف.
  • اطلب من الوكيل في الخطوات المهمة (مثل انتهاء التحليل، ومعاينة التقرير) أن يلتقط صورة للشاشة ويلخّص ما يراه.

8. الأمان​

خطر

أنت تتيح لغيرك استخدام شاشتك:

  • لا يستطيع الوكيل استخدام إلا التطبيقات التي تسمح بها؛ وقبل السماح بتطبيقات غير StatiCAD اسأل عن السبب.
  • لا تجعل الوكيل يكتب كلمة مرور أو بيانات بطاقة أو رقم هوية؛ وإذا رأيت طلباً كهذا فأوقف العمل.
  • كل ما يظهر على الشاشة (المستندات المفتوحة، والإشعارات) يدخل في الصورة المُرسلة إلى شركة الذكاء الاصطناعي. فأغلق المعلومات السرية.
  • إذا رأى الوكيل تحذير ترخيص مثل “Kilit Bulunamadı” فيجب أن يتوقف ويُبلغك؛ ونفّذ عمليات الدونجل والترخيص بنفسك.

9. استكشاف الأخطاء وإصلاحها​

العَرَضالسبب والحل
الوكيل ينقر في أماكن خاطئةمقياس الشاشة ليس 100% أو النافذة صغيرة. اضبط المقياس على 100%، وكبّر StatiCAD؛ واطلب من الوكيل أن يتحقق بلقطة شاشة قبل كل نقرة.
خيار computer use لا يظهرالتطبيق غير محدّث أو الخطة غير مناسبة (يلزم Pro/Max في Claude). حدّث التطبيق وأعد المحاولة.
الوكيل لا يجد القوائم ذات الأسماء التركيةأخبره أنت بأسماء القوائم (مثل “من قائمة Analiz اختر STATIK ANALIZ YAP”، أي التحليل › إجراء التحليل الستاتيكي)، أو اطلب منه قراءة AGENTS.md (في مجلد Ultimate).
الوكيل عالق في نافذةقد تكون هناك نافذة سؤال أو تحذير مفتوحة. اطلب منه التحقق من النافذة أو أغلقها بنفسك.
لا يمكن استخدام الحاسوب أثناء عمل Codexعلى Windows يعمل Codex في المقدمة؛ فانتظر حتى ينتهي العمل.

قد تتغير أسماء الخطط والأسعار والقوائم في خدمات Anthropic وOpenAI وGoogle مع مرور الوقت؛ وللمعلومات الحالية راجع الصفحات الرسمية المرتبطة. ويجب أن يتحقق المهندس المسؤول من النموذج الذي يُنشئه الذكاء الاصطناعي ومن النتائج التي يُنتجها.