بالم (ذكاء اصطناعي)

بالم (بالانجليزية: PaLM) هو نموذج لغة كبير قائم على المحولات يحتوي على 540 مليار معامل، طُوِّر بواسطة جوجل إي أي.[1] قام الباحثون أيضًا بتدريب إصدارات أصغر من بالم، نماذج تحتوي على 8 و62 مليار معلمة، لاختبار تأثيرات حجم النموذج.[2]

بالم (ذكاء اصطناعي)
الشعار
معلومات عامة
نوع
متوفر بلغات
إنجليزية
المطورون
موقع الويب

بالم قادر على مجموعة واسعة من المهام، بما في ذلك التفكير المنطقي، والتفكير الحسابي، وتفسير الدعابة، وإنشاء الرموز البرمجية، والترجمة.[3][4][5][6] عند دمجه مع تقنية الهندسة الفورية، حقق بالم أداءً أفضل بشكل ملحوظ في مجموعات البيانات التي تتطلب التفكير في خطوات متعددة، مثل المسائل الرياضية والأسئلة المستندة إلى المنطق.[2][7]

أُعْلِنّ عن النموذج لأول مرة في أبريل 2022 وظل خاصا حتى مارس 2023، بعدما أطلقت شركة جوجل واجهة برمجة تطبيقات لـبالم والعديد من التقنيات الأخرى.[8] بحيث ستكون واجهة برمجة التطبيقات متاحة بشكل أولي فقط لعدد محدود من المطورين الذين انضموا إلى قائمة الانتظار قبل أن يتم بعد ذلك فتحها للعامة.[9]

طورت شركة جوجل ديب مايند نسخة من بالم ب540 معامل تسمى ميد-بالم تم صقلها على البيانات الطبية بحيث تفوقت على سابقتها من النماذج في إجابتها على الأسئلة الطبية.[10] ميد-بالم كان أول من نجح في تخطي اختبار الترخيص الطبي في الولايات المتحدة، بإجابته على كل من أسئلة الاختيارات المتعددة والأسئلة المفتوحة بدقة. ويتوفر أيضًا على منطق بحيث أنه قادر على تقييم ردوده الخاصة.[11]

جوجل أيضا وسعت بالم بإستخدام محولات الرؤية لإنشاء بالم-إي، عبارة عن نموذج الرؤية واللغة الحديث، الذي يمكن إستعمالة من أجل المنابلة الآلية.[12][13] ويمكن للنموذج أيضا أداء مهام في مجال الروبوتات بشكل تنافسي دون الحاجة إلى إعادة التدريب أو الصقل.[14]

التدريب عدل

دُرِّب بالم مسبقاً على أصول نصية عالية الجودة تتكون من 780 مليار رمز والتي تشمل عدة مهام وحالات إستخدام لمعالجة اللغات الطبيعية. تتضمن مجموعة البيانات هذه صفحات ويب تمت تصفيتها وكتب ومقالات ويكيبيديا ومقالات الأخبار ورموز مصدرية جُلِبَت من المستودعات المفتوحة المصدر على غيت هاب، وكذلك المحادثات الموجودة على مواقع التواصل الإجتماعي.[1][2] مجموعة البيانات هذه هي المستعملة في تدريب نموذج لامدا المملوك لشركة جوجل.[2] الجزء الخاص ببيانات محادثات وسائل التواصل الإجتماعي هو الاكبر بحيث يكون 50 في المئة من الاصول النصية، مما يمكن النموذج من قدراته الخطابية.[2]

انظر أيضًا عدل

مراجع عدل

  1. ^ أ ب Narang, Sharan; Chowdhery, Aakanksha. "Pathways Language Model (PaLM): Scaling to 540 Billion Parameters for Breakthrough Performance". ai.googleblog.com (بالإنجليزية). Archived from the original on 2023-01-16. Retrieved 2023-03-17.
  2. ^ أ ب ت ث ج A bot will complete this citation soon. Click here to jump the queue أرخايف:[1].
  3. ^ Chowdhery. "PaLM: Scaling Language Modeling with Pathways". {{استشهاد بأرخايف}}: الوسيط |arxiv= مطلوب (مساعدة)
  4. ^ Anadiotis، George (12 أبريل 2022). "Google sets the bar for AI language models with PaLM". VentureBeat. مؤرشف من الأصل في 2023-03-17. اطلع عليه بتاريخ 2023-03-17.
  5. ^ Bastian، Matthias (5 أبريل 2022). "Google PaLM: Giant language AI can explain jokes". THE DECODER. مؤرشف من الأصل في 2023-03-17. اطلع عليه بتاريخ 2023-03-17.
  6. ^ "Google: Why Is No One Talking About PaLM (NASDAQ:GOOG) | Seeking Alpha". seekingalpha.com (بالإنجليزية). 12 Dec 2022. Archived from the original on 2023-04-23. Retrieved 2023-03-17.
  7. ^ Narang, Sharan; Chowdhery, Aakanksha. "Pathways Language Model (PaLM): Scaling to 540 Billion Parameters for Breakthrough Performance". ai.googleblog.com (بالإنجليزية). Archived from the original on 2023-01-16. Retrieved 2023-03-17.
  8. ^ Vincent، James (14 مارس 2023). "Google opens up its AI language model PaLM to challenge OpenAI and GPT-3". The Verge. مؤرشف من الأصل في 2023-05-11. اطلع عليه بتاريخ 2023-03-17.
  9. ^ Huffman, Scott; Woodward, Josh. "PaLM API & MakerSuite: an approachable way to start prototyping and building generative AI applications" (بالإنجليزية). Archived from the original on 2023-05-06. Retrieved 2023-03-17.
  10. ^ "MedPaLM: New Chatbots Will Soon Be Better Than Waiting For A Doctor". The Medical Futurist. 17 يناير 2023. مؤرشف من الأصل في 2023-04-30. اطلع عليه بتاريخ 2023-03-17.
  11. ^ Matias, Yossi; Corrado, Greg (14 Mar 2023). "Our latest health AI research updates". Google (بالإنجليزية الأمريكية). Archived from the original on 2023-04-30. Retrieved 2023-03-17.
  12. ^ A bot will complete this citation soon. Click here to jump the queue أرخايف:2303.03378.
  13. ^ Driess, Danny; Florence, Pete. "PaLM-E: An embodied multimodal language model". ai.googleblog.com (بالإنجليزية). Archived from the original on 2023-05-19. Retrieved 2023-03-17.
  14. ^ Edwards, Benj (7 Mar 2023). "Google's PaLM-E is a generalist robot brain that takes commands". Ars Technica (بالإنجليزية الأمريكية). Archived from the original on 2023-05-28. Retrieved 2023-03-17.