انقلاب کنونی در حوزه هوش مصنوعی مولد، بدون مدل‌های زبانی بزرگ (LLM) امکان‌پذیر نبود. LLMها، مبتنی بر ترانسفورمرها، معماری عصبی قدرتمند، سیستم‌های هوش مصنوعی هستند که برای مدل‌سازی و پردازش زبان انسان استفاده می‌شوند. آن­ها به دلیل داشتن صدها میلیون یا حتی میلیاردها پارامتر که با استفاده از مجموعه‌ای عظیم از دادۀ متنی پیش‌آمده­اند، «مدل‌های زبانی بزرگ» یا LLM نامیده می‌شوند.