بيرت نموذج لغوي حاسوبي طورته جوجل لمعالجة اللغة الطبيعية بالاعتماد على بنية المحولات والتعلم ثنائي الاتجاه من سياق الكلمات. أحدث تأثيراً كبيراً في مهام مثل فهم الأسئلة والتصنيف واستخراج المعاني، لأنه يقرأ الكلمة من سياقها السابق واللاحق معاً. يمثل بيرت مرحلة مهمة في تطور نماذج اللغة العميقة قبل النماذج التوليدية الأوسع.
المصدر: موسوعة المعرفة
تم نسخ الرابط
من الموسوعــة