awslabs/mlm-scoring
این یک کتابخانهٔ پایتونی برای امتیازدهی مدل‌های زبانی ماسک‌شده (MLM) است که توسط آمازون توسعه داده شده.
کاربرد:
این ابزار به شما کمک می‌کنه تا با استفاده از مدل‌هایی مثل BERT، احتمال وقوع یک کلمه در جای خالی (ماسک‌شده) رو محاسبه کنید و بر اساس این اطلاعات، جملات یا پیش‌بینی‌ها رو امتیازدهی کنید.
در چه شرایطی بهتره استفاده شود؟
وقتی نیاز دارید که کیفیت جملات تولیدشده توسط مدل‌های زبانی رو ارزیابی کنید، مثلاً در کارهای بازیابی اطلاعات، تشخیص جملهٔ طبیعی، یا رتبه‌بندی پاسخ‌ها در سیستم‌های چت.
چند مثال از موارد استفاده:
امتیازدهی به جملات تولیدشده توسط مدل‌های متنی برای تشخیص طبیعی بودن آن‌ها
استفاده در سیستم‌های پرسش و پاسخ برای انتخاب بهترین پاسخ از بین چند گزینه
بهبود مدل‌های ترجمه یا خلاصه‌سازی با ارزیابی احتمال وقوع کلمات
- ##MLM
- ##NLP
- ##BERT
- ##LanguageModeling
- ##TextGeneration
- ##AWS
- ##Python
- ##ACL2020
- ##MachineLearning
- ##DeepLearning