‏🤖 آموزش ساخت مدل‌های زبانی بزرگ از صفر

‏فرانسوا شوله (خالق Keras) مسیر کاربردی جالبی را برای یادگیری مدل‌های زبانی بزرگ (LLM) پیشنهاد کرده است. به گفته او، کافی است فصل‌های ۱۵ و ۱۶ از ویرایش سوم کتاب Deep Learning with Python را بخوانید که هم‌اکنون به صورت رایگان در دسترس است.

‏فصل ۱۵ مفاهیم پایه‌ای از Attention تا معماری Transformer را آموزش می‌دهد. در فصل ۱۶، شما یک مدل mini-GPT با ۴۱ میلیون پارامتر را از مرحله توکنایزر تا آموزش و تولید متن می‌سازید. کل این فرآیند روی نسخه رایگان Google Colab و پردازنده گرافیکی T4 قابل اجراست.

📚 مطالعه با جزئیات بیشتر

📊 Data➕Science 🇮🇷 - هوش مصنوعی و علم داده به فارسی
📩 ارتباط با ما

#Transformer #mini_GPT