يستطيع ChatGPT الآن قراءة بعض تطبيقات سطح المكتب لجهاز Mac

بدأ ChatGPT الخاص بـ OpenAI في العمل مع التطبيقات الأخرى على جهاز الكمبيوتر الخاص بك.

أعلنت الشركة الناشئة يوم الخميس أن تطبيق ChatGPT لسطح المكتب لنظام التشغيل MacOS يمكنه الآن قراءة التعليمات البرمجية في عدد قليل من تطبيقات البرمجة التي تركز على المطورين، مثل VS Code وXcode وTextEdit وTerminal وiTerm2.

وهذا يعني أن المطورين لن يضطروا بعد الآن إلى نسخ ولصق التعليمات البرمجية الخاصة بهم في ChatGPT، والتي أصبحت طريقة شائعة لاستخدام chatbot. الآن، عندما يتم تمكين الميزة، سيرسل OpenAI تلقائيًا قسم التعليمات البرمجية الذي تعمل عليه من خلال برنامج الدردشة الآلي الخاص به كسياق، جنبًا إلى جنب مع المطالبة الخاصة بك.

ومع ذلك، على عكس أدوات ترميز الذكاء الاصطناعي الشائعة مثل Cursor أو GitHub Copilot، فإن ChatGPT غير قادر حاليًا على كتابة التعليمات البرمجية مباشرةً في تطبيقات المطورين نيابةً عنك.

الميزة، التي تسمى “العمل مع التطبيقات”، بعيدة كل البعد عن كونها وكيلًا للذكاء الاصطناعي، لكن OpenAI تقول إن جعل ChatGPT يفهم التطبيقات الأخرى هو “لبنة أساسية” نحو بناء أنظمة وكيلة. أحد أكبر التحديات التي تواجه عملاء الذكاء الاصطناعي اليوم هو جعلهم يفهمون بقية شاشة الكمبيوتر لديك، بدلاً من المطالبات أو استجاباتهم الخاصة.

تقول OpenAI إنها تركز هذه الميزة على تطبيقات البرمجة للبدء؛ من المحتمل أن يكون هذا بسبب أن مساعدي ترميز الذكاء الاصطناعي قد أصبحوا إحدى حالات الاستخدام الأكثر شيوعًا لطلاب LLM. الميزة متاحة لمستخدمي Plus وTeams اليوم، وسيتم طرحها إلى Enterprise وEdu في الأسابيع القليلة المقبلة. يقول OpenAI إن ChatGPT سيكون قادرًا على العمل مع أنواع أخرى من التطبيقات للمضي قدمًا، على وجه التحديد، التطبيقات المستندة إلى النصوص التي يمكن استخدامها لمهام الكتابة.

في عرض توضيحي باستخدام TechCrunch، فتح أحد موظفي OpenAI تطبيق ChatGPT وبيئة Xcode التي تحتوي على مشروع بسيط لنمذجة النظام الشمسي – على الرغم من أنه كان يفتقد الأرض. اختار الموظف علامة تبويب Xcode داخل ChatGPT، والتي تخبر روبوت الدردشة المدعم بالذكاء الاصطناعي أن ينظر إلى التطبيق، ويطلب من برنامج الدردشة الآلي “إضافة الكواكب المفقودة”. كان برنامج الدردشة الآلي قادرًا على إكمال المهمة، وكتابة سطر من التعليمات البرمجية لتمثيل الأرض التي تطابق بقية تنسيق المشروع. ومع ذلك، لا يزال يتعين عليهم لصق إجابة ChatGPT مرة أخرى في بيئتهم.

من أجل قراءة تطبيقات مختلفة، تعتمد OpenAI في الغالب على واجهة برمجة التطبيقات لإمكانية الوصول إلى MacOS لقراءة النص وترجمته إلى ChatGPT، وفقًا لرئيس منتج OpenAI لسطح المكتب Alexander Embiricos. إن قارئ الشاشة الخاص بنظام التشغيل MacOS، والذي يساعد ميزة VoiceOver من Apple على العمل، موجود منذ ما يقرب من عقدين من الزمن. يعتبر بشكل عام موثوقًا جدًا لمعظم التطبيقات الشائعة، ولكن ليس كل شيء.

بالنسبة لبعض التطبيقات، مثل VS Code من Microsoft، يتطلب العمل مع التطبيقات من المستخدمين تثبيت ملحق خاص للاستعلام عن المحتوى. وكما يوحي الاسم، يستطيع قارئ الشاشة الخاص بشركة Apple قراءة النص فقط، لذلك لا يمكنه مساعدة ChatGPT على فهم العناصر المرئية – مثل الصور أو اتجاه الكائنات أو مقاطع الفيديو.

تعامل مع التطبيقات من خلال إرسال آخر 200 سطر من التعليمات البرمجية عبر ChatGPT جنبًا إلى جنب مع كل مطالبة لتطبيقات معينة. بالنسبة للآخرين، سيتم استخدام جميع التعليمات البرمجية الموجودة في النافذة الرئيسية كمدخل لبرنامج الدردشة الآلية. يمكنك تمييز أقسام من التعليمات البرمجية أو النص لمساعدة ChatGPT في التركيز على الجزء الأيمن من المشروع، ولكن ChatGPT سيتضمن أيضًا النص المحيط به. كل هذا يبدو أنه سيستخدم الكثير من رموز الإدخال.

ومن غير الواضح كيف تخطط OpenAI لتقسيم هذه الميزة إلى تطبيقات أخرى غير متوافقة مع قارئ الشاشة من Apple. أصدرت شركة Anthropic، أحد منافسي OpenAI، نظامًا للذكاء الاصطناعي يقوم بتحليل لقطات شاشة سطح مكتب المستخدم لفهم واستخدام التطبيقات الأخرى. لأكون صريحًا، فإن النهج الأنثروبي يترك الكثير مما هو مرغوب فيه في حالته الحالية: فهو بطيء ويرتكب الكثير من الأخطاء. ومع ذلك، فهو إصدار أكثر عمومية من وكيل الذكاء الاصطناعي الذي لا يعتمد على واجهات برمجة التطبيقات، ويمكنه القيام بأكثر من مجرد قراءة النص في نافذة أخرى.

قال ألكسندر إمبيريكوس، رئيس منتج سطح المكتب في OpenAI، في مؤتمر صحفي مع TechCrunch: “ليس المقصود من هذا أن تكون وكيلاً، بل هي طريقة للتعاون مع أدوات البرمجة للبدء، وسيكون هناك المزيد من الأدوات قريبًا”. “من ناحية الوكلاء، أعتقد أن هذا يمثل لبنة أساسية حقًا. هذه الفكرة هي أن ChatGPT يفهم أو يمكنه العمل مع كل المحتوى الموجود لديك حتى يتمكن من المساعدة فيه.

تعتبر هذه الخطوة تجاه الوكلاء ملحوظة بشكل خاص نظرًا للتقارير الأخيرة التي تفيد بأن OpenAI تقترب من إطلاق وكيل ذكاء اصطناعي للأغراض العامة، يحمل الاسم الرمزي “Operator”، وفقًا لبلومبرج. ومن المتوقع أن تصل الأداة في أوائل عام 2025، وسوف تنافس المحاولات المبكرة الأخرى لوكلاء الذكاء الاصطناعي للأغراض العامة، مثل استخدام الكمبيوتر من Anthropic أو وكيل “Jarvis” من Google.

تطلق OpenAI هذه الميزات لأول مرة على نظام MacOS، قبل وقت قصير من إطلاق Apple للتكامل مع ChatGPT في ديسمبر. ليس من الواضح متى سيأتي العمل مع التطبيقات إلى نظام التشغيل Windows، وهو نظام التشغيل الذي أنشأته شركة Microsoft، أكبر داعم لـ OpenAI.