لقد جربنا روبوت الدردشة Le Chat AI من Mistral AI، وإليك كيفية مقارنته بـ ChatGPT

اكتسب Le Chat من Mistral زخمًا داخل مجتمع روبوتات الدردشة بالذكاء الاصطناعي، حيث وصفه بعض المراقبين بأنه منافس محتمل لـ ChatGPT.

لكن هل يستحق روبوت المحادثة الذكي هذا هذا اللقب حقًا؟ هل روبوت المحادثة Le Chat من Mistral أفضل من ChatGPT؟

ما هو Le Chat من Mistral AI؟

Le Chat هو روبوت محادثة بالذكاء الاصطناعي طورته شركة Mistral AI الفرنسية الناشئة للذكاء الاصطناعي. وهو مدعوم بالعديد من نماذج اللغة الكبيرة المملوكة لشركة Mistral، بما في ذلك Mistral Large وMistral Small وMistral Next، والتي يمكنك اختيار استخدامها جميعًا عند التفاعل مع روبوت المحادثة بالذكاء الاصطناعي. على الرغم من أنه وافد جديد نسبيًا في مجال روبوتات المحادثة بالذكاء الاصطناعي، إلا أنه يحظى بتقييم عالٍ بسبب أداء نماذج الذكاء الاصطناعي الخاصة به على الرغم من حجمه الأصغر مقارنة بشركات الصناعة الثقيلة مثل Gemini وGPT-4.

لفهم ما يعنيه هذا، تخيل أنك تلعب بمكعبات بناء. فكلما زاد عدد المكعبات لديك، زادت الهياكل المعقدة والمفصلة التي يمكنك إنشاؤها، أليس كذلك؟ نماذج لغة الذكاء الاصطناعي تشبه ذلك إلى حد ما. فهي تأتي بأحجام، وعادة ما يتم التعبير عنها بعدد المعلمات. لذا، ربما سمعت مصطلحات مثل “معلمات 7 مليارات” أو “معلمات 70 مليار” في نماذج الذكاء الاصطناعي. إن عدد المعلمات يشبه عدد مكعبات البناء التي يتعين على النموذج فهمها وتوليد الاستجابات. لذا، إذا كان نموذج اللغة يحتوي على المزيد من المعلمات، فيمكنه فهم وتوليد استجابات أكثر تعقيدًا وأفضل.

الآن، في حين أن GPT-4 يحتوي على ما يقدر بنحو 1.76 تريليون معلمة، فإن Mistral AI يحتوي على ما بين 7 و56 مليار معلمة. هل لاحظت الفرق في الحجم؟ لذا فإن قدرة Mistral AI على تحقيق أداء لائق هي أحد أسباب الضجة.

على الرغم من أن Le Chat لا يتمتع بمستوى الدعاية الذي يتمتع به ChatGPT ولا يتمتع بسمعة العلامة التجارية التي تتمتع بها شركات مثل Gemini، إلا أنه شق طريقه إلى المحادثة كلما تمت مناقشة منافسة محتملة لـ ChatGPT. ولكن هل يستحق مكانًا على الطاولة؟

لقد كنت أتساءل نفس الشيء، ولمعرفة ذلك، قمت باختبار Le Chat على نطاق واسع لمعرفة كيفية مقارنته بـ ChatGPT.

القطة ضد ChatGPT: الإبداع

الإبداع هو أحد أهم المقاييس لتقييم أداء روبوت المحادثة الذي يعمل بالذكاء الاصطناعي. تذكر أن الغرض من روبوت المحادثة الذي يعمل بالذكاء الاصطناعي هو تكرار أو محاكاة قدرات المحادثة والذوق الإبداعي لدى البشر على نطاق واسع. وهذا يجعل الإبداع نقطة قوة مهمة للغاية لأي روبوت محادثة يعمل بالذكاء الاصطناعي. لقد شهد العالم تجربة مع ChatGPT لأكثر من عام، وقدراته الإبداعية لا يمكن إنكارها. ولكن كيف يمكن مقارنة Le Chat؟ لقد وضعنا روبوتي المحادثة في سلسلة من اختبارات الإبداع.

بدأت بسؤال كلا الروبوتين، “كيف تصف نفسك للفنان؟“لاختبار قدرتهم على استخدام الكلمات الإبداعية والخيالية لتصور أنفسهم.

هكذا يصف ChatGPT نفسه للفنان:

وهنا كيف يصف Le Chat نفسه أيضًا:

كانت كلتا الاستجابتين مناسبتين بطريقتهما الفريدة. كان ChatGPT أكثر استثمارًا في استخدام الصور الحية والاستعارات لوصف نفسه، مما يدل على الذوق الإبداعي. من ناحية أخرى، كانت استجابة Le Chat غنية بالمعلومات وركزت على وصف جوهرها كبرنامج دردشة ذكي. قد يقول البعض إنها تفتقر إلى الذوق الإبداعي والنهج الفني الذي يظهره رد ChatGPT. ومع ذلك، سأخرج عن الموضوع لأقول إنني أفضل استجابة Le Chat الأسهل تخيلًا على الوصف المجرد لـ ChatGPT.

ثم طلبت من ChatGPT وLe Chat كتابة أغنية راب عن الثراء من زراعة الخيار – وهو طلب صعب استخدمناه لاختبار إبداع برامج الدردشة الأخرى. كم عدد أغاني الراب التي يمكنك العثور عليها عن الخيار على الويب؟

وهنا رد ChatGPT:

وهنا رد لي تشات:

قد تكون هذه مسألة ذاتية، لكن رد ChatGPT بدا وكأنه الخيار الأفضل هنا. بدت كلمات Le Chat طويلة جدًا ولم تكن تبدو حقًا وكأنها شيء يمكن لمغني راب أن يصدره. لاختبار كيف ستبدو كلتا الكلمتين إذا تم تحويلهما إلى موسيقى، استخدمنا مولد الموسيقى Suno AI لتوليد الموسيقى من الكلمات. في ثلاث محاولات من أصل ثلاث، بدت كلمات ChatGPT أفضل بكثير. فيما يلي عينتان من كلا روبوتي الدردشة بالذكاء الاصطناعي، ويمكنك أن تكون الحكم على أي روبوت دردشة كان أفضل.

عينات تم إنشاؤها من كلمات الأغاني في ChatGPT

العينة 1:

العينة 2:

عينات تم إنشاؤها من كلمات أغنية Mistral Le Chat

العينة 1:

العينة 2:

لقد جربت بعض المهام الإبداعية الأخرى، مثل كتابة القصائد، وكتابة المقالات، وصياغة رسائل البريد الإلكتروني الصعبة باستخدام روبوتات الدردشة التي تعمل بالذكاء الاصطناعي. وعلى الرغم من إظهاره لوعد كبير، فقد تفوق ChatGPT بوضوح على Le Chat في جميع الحالات. من المهم الإشارة إلى أن أحد المجالات التي كان Le Chat قويًا فيها بشكل خاص هو صياغة المقالات، على الرغم من بعض أساليب التحفيز الصعبة. ومع ذلك، من حيث الإبداع الشامل، فإن الميدالية تذهب إلى ChatGPT.

القطة مقابل ChatGPT: مهارات البرمجة

أصبحت الكفاءة في الترميز شرطًا أساسيًا لروبوتات الدردشة الرئيسية التي تعمل بالذكاء الاصطناعي. إن كتابة التعليمات البرمجية اللائقة هي مهارة أساسية، ولكن لكي تبرز حقًا بين النخبة، يجب على روبوت الدردشة الذي يعمل بالذكاء الاصطناعي أن يُظهر براعته في صياغة التعليمات البرمجية التي يمكنها حل مجموعة متنوعة من المشكلات المعقدة بفعالية. لقد قمنا سابقًا ببناء تطبيق ويب كامل من الصفر باستخدام ChatGPT والذي يُظهر قدراته الرائعة كأداة برمجة. ولكن ما مدى جودة Le Chat في كتابة التعليمات البرمجية؟

لقد قمت بتكليف روبوتي المحادثة بكتابة تطبيق بسيط لقائمة المهام باستخدام CSS وHTML وJavaScript. لم يواجه ChatGPT أي مشكلة في إنتاج نتائج جيدة. لقد قمت بنسخ الكود الناتج ومعاينته على متصفح، وإليك ما أنشأه ChatGPT:

في كل مرة كررنا فيها الأمر، أنشأ ChatGPT تطبيق قائمة مهام وظيفيًا باستخدام أنماط مختلفة. ولم يفشل الكود الناتج في العمل في أي حالة.

عندما حاولت نفس الأمر مع Le Chat، فقد أنتج ما بدا وكأنه كود مفهوم، ولكن عندما حاولنا تشغيله على متصفح، لم يكن يعمل. بعد تكرار الأمر ثلاث مرات، لم ينتج أي مثيل كودًا يمكنه إكمال المهمة المحددة. لقد فشل في إحدى مهام الترميز الأساسية – علامة حمراء!

بالطبع، لن أحكم على Le Chat بناءً على اختبار واحد فاشل. بعد ذلك، طلبت من كل من روبوتات الدردشة إنشاء كود JavaScript وPHP لتشفير وفك تشفير النص. في هذا الاختبار الثاني، أنتج كل من ChatGPT وLe Chat كودًا وظيفيًا يمكنه تنفيذ المهمة المحددة. ومع ذلك، بدا إصدار Le Chat وكأنه ما يكتبه مبرمج مبتدئ عديم الخبرة. من ناحية أخرى، كان كود ChatGPT أكثر اكتمالاً ويبدو أنه كتبه مبرمج متمرس.

لقد قمت بتكرار بعض اختبارات البرمجة الأخرى التي تتضمن البحث عن الأخطاء وإصلاحها، وقد تفوق برنامج ChatGPT باستمرار على برنامج Le Chat. وفي بعض الحالات، لم يكن برنامج Le Chat يعرف حتى ما هو المفترض أن يفعله. وهناك فرصة جيدة لأن يرقى برنامج Le Chat إلى مستوى برنامج ChatGPT في بعض المجالات، ولكن يبدو أن مهارات البرمجة ليست واحدة منها.

القطة ضد ChatGPT: الحس السليم والاستدلال المنطقي

من الأمور المثيرة للاهتمام في روبوتات الدردشة التي تعمل بالذكاء الاصطناعي قدرتها على حل المهام المعقدة بسهولة، ولكنها تفشل في حل المهام البسيطة التي تتطلب الفطرة السليمة الأساسية لإكمالها. تواجه العديد من روبوتات الدردشة، سواء تلك الراسخة مثل ChatGPT أو الجديدة مثل Le Chat، صعوبات عندما يتعلق الأمر بحل المهام التي تتطلب الفطرة السليمة والتفكير المنطقي. إذن، كيف يمكن مقارنة Le Chat وChatGPT على هذه الجبهة؟

لقد سألت كلا من روبوتات الدردشة:إذا كان لديك زجاجة سعة 3 لتر وزجاجة سعة 5 لتر، كيف يمكنك قياس 4 لترات من الماء باستخدام الزجاجتين سعة 3 لتر و5 لتر؟

قام ChatGPT بحل المشكلة بطريقة ذكية:

حاول Le Chat نفس المهمة وتمكن من حل المشكلة، على الرغم من استخدام نهج مختلف.

أظهر كلا روبوتي المحادثة أداءً مماثلاً في هذا الاختبار.

بعد ذلك، سألنا كلا روبوتي الدردشة سؤالًا خادعًا: “إذا انقسمت سفينة فضاء من المريخ إلى نصفين، حيث سقط جزء منها في المحيط الأطلسي بالقرب من البرازيل، وسقط الجزء الآخر في المحيط الهادئ بالقرب من اليابان، فأين ستدفن الناجين؟

لقد اكتشف ChatGPT الخدعة واستجاب وفقًا لذلك:

وكان لي تشات قادرًا أيضًا على رؤية الخدعة ورد وفقًا لذلك أيضًا:

لقد جربت المزيد من الأسئلة الخادعة، وبدا أن ChatGPT وLe Chat يتمتعان بمهارة كبيرة في التعامل مع الأسئلة المنطقية. ومع ذلك، مع الأسئلة المنطقية الأكثر تعقيدًا، فإن ChatGPT فقط هو القادر على تقديم الإجابات الصحيحة.

في حين أثار Le Chat بعض الضجة باعتباره “قاتل ChatGPT” المحتمل، إلا أن اختباراتنا أظهرت أنه لا يزال أمامه الكثير من النمو قبل أن يتمكن من مواجهة عمالقة عالم روبوتات الدردشة القائمة على الذكاء الاصطناعي. ورغم أن Le Chat أظهر قدرات رائعة في مجالات مثل التفكير السليم، إلا أن إنتاجه الإبداعي ومهاراته في البرمجة تأخرت بشكل ملحوظ عن ChatGPT. ومن المؤكد أن شركة الذكاء الاصطناعي الفرنسية الناشئة تظهر وعدًا، ولكن آلة الدعاية ربما تتقدم قليلاً على نفسها.

مثل العديد من المنافسين الطموحين من قبله، يحتاج Le Chat إلى التطوير والتدريب المستمر قبل أن يكون جاهزًا للدوري الكبير. في الوقت الحالي، لا تزال روبوتات الدردشة بالذكاء الاصطناعي مثل ChatGPT هي بوضوح الملوك بلا منازع في عالم روبوتات الدردشة بالذكاء الاصطناعي. لكن مجال المنافسين يزداد ازدحامًا، لذلك لا يستطيع القادة أن يكتفوا بما حققوه.