Open Assistant هو مشروع يهدف إلى منح الجميع إمكانية الوصول إلى نموذج لغة كبير يعتمد على الدردشة.
في الآونة الأخيرة مجتمع لايون (شبكة مفتوحة للذكاء الاصطناعي واسعة النطاق) تم الكشف عنها من خلال إعلان الإصدار الأول من مشروع «OpenAssistant»، التي تقوم بتطوير روبوت محادثة ذكاء اصطناعي قادر على فهم الأسئلة والإجابة عليها بلغة طبيعية ، والتفاعل مع أنظمة الجهات الخارجية واستخراج المعلومات الضرورية بشكل ديناميكي.
بالنسبة لأولئك الذين ليسوا على دراية بـ LAION ، يجب أن تعلم أنها تطور أدوات ونماذج ومجموعات بيانات لإنشاء أنظمة تعلم آلي مجانية (على سبيل المثال ، تُستخدم مجموعة LAION لتدريب نماذج من نظام تجميع الصور الثابت الانتشار).
بالإضافة إلى رمز لتدريب وتنظيم العمل للروبوت على جهاز الكمبيوتر الخاص بك ، يقترح استخدام مجموعة من النماذج الجاهزة لاستخدام نموذج تم تدريبه بالفعل ولغويًا ، تم تدريبه على أساس 600 ألف مثال من الحوارات في شكل استجابة طلب (تعليمات تنفيذ) ، تم إعدادها ومراجعتها بمشاركة مجتمع من المتحمسين.
كما تم إطلاق خدمة عبر الإنترنت لتقييم جودة chatbot ، باستخدام نموذج المعرفة OA_SFT_Llama_30B_6 ، والذي يغطي 30 مليار معلمة.
لقد عمل فريقنا بلا كلل على مدار الأشهر العديدة الماضية في جمع كميات هائلة من المعلومات والتعليقات المستندة إلى النصوص لإنشاء مجموعة بيانات فريدة ومتنوعة بشكل لا يصدق مصممة خصيصًا لتدريب النماذج اللغوية أو تطبيقات الذكاء الاصطناعي الأخرى.
مع وجود أكثر من 600 نقطة بيانات أنشأها الإنسان تغطي مجموعة واسعة من الموضوعات وأنماط الكتابة ، ستثبت مجموعة البيانات الخاصة بنا أنها أداة لا تقدر بثمن لأي مطور يتطلع إلى إنشاء نماذج تعليمية من الجيل التالي.
لزيادة الكفاءة للنظام وتجنب الحاجة إلى ذلك تخزين كميات كبيرة من المعلمات المحددة مسبقًا، يتنبأ المشروع بإمكانية استخدام قاعدة معرفية محدثة ديناميكيًا يمكنها استرداد المعلومات المطلوبة من خلال محركات البحث أو الخدمات الخارجية.
على سبيل المثال ، عند إنشاء الردود ، يمكن للبوت الوصول إلى واجهات برمجة التطبيقات الخارجية للحصول على بيانات إضافية. من بين الميزات المتقدمة ، يتم أيضًا تمييز دعم التخصيص ، أي القدرة على التكيف مع مستخدم معين بناءً على العبارات السابقة.
للراغبين في تثبيت OpenAssistant ، يجب أن تعلم أنه يمكنك تثبيته محليًا ، وأن نماذج Pythia SFT المرشحة متاحة من HuggingFace ويمكن تحميلها عبر مكتبة HuggingFace Transformers. على هذا النحو ، من الممكن أن يتم استخدامها مع أجهزة كافية. توجد أيضًا مسافات على HF يمكن استخدامها للدردشة مع مرشح OA بدون أجهزتك الخاصة. ومع ذلك ، فإن هذه النماذج ليست نهائية وقد تؤدي إلى نتائج سيئة أو غير مرغوب فيها.
لا يمكن إصدار نماذج LLaMa SFT مباشرة بسبب ترخيص Meta ، ولكن سيتم إصدار أوزان XOR قريبًا.
من المهم الإشارة إلى أن النموذج الأصغر الحالي (Pythia) يحتوي على معلمات 12B ويصعب تشغيله على أجهزة المستهلك ، ولكن يمكن تشغيله على وحدة معالجة رسومات احترافية واحدة. قد تكون هناك نماذج أصغر في المستقبل ، ونأمل في تطوير طرق مثل تكميم الأعداد الصحيحة التي يمكن أن تساعد في تشغيل النموذج على أجهزة أصغر.
لا يخطط المشروع للتوقف عند تكرار إمكانيات ChatGPT. من المتوقع أن يحفز Open-Assistant تطوير التطوير المفتوح في مجال إنشاء المحتوى ومعالجة الاستعلام باللغات الطبيعية ، تمامًا كما حفز مشروع المصدر المفتوح Stable Diffusion على تطوير أدوات إنشاء الصور.
تمت كتابة كود المشروع بلغة Python ويتم توزيعه بموجب ترخيص Apache 2.0. يمكن استخدام تطويرات OpenAssistant لإنشاء مساعدين أذكياء وأنظمة حوار غير مرتبطة بواجهات برمجة التطبيقات والخدمات الخارجية. الأجهزة الاستهلاكية التقليدية كافية للعمل ، على سبيل المثال ، من الممكن العمل على هاتف ذكي. يتم إصدار بيانات Open Assistant بموجب ترخيص Creative Commons الذي يسمح بمجموعة واسعة من الاستخدامات ، بما في ذلك الاستخدام التجاري.
أخيرًا ، إذا كنت مهتمًا بالقدرة على معرفة المزيد عنها بالإضافة إلى القدرة على الرجوع إلى الكود المصدري ، فيمكنك الرجوع إلى التفاصيل في الرابط التالي.