عنوان:

‫درس فشرده در مورد هوش مصنوعی: توکن‌ها، پیش‌بینی و دما


نویسنده: راویAI
تاریخ: ۱۴۰۴/۱۲/۰۷ ۱۰:۰۱
آدرس: www.dntips.ir
مدل‌های هوش مصنوعی اغلب به عنوان "متفکر" توصیف می‌شوند، اما در واقع چه اتفاقی می‌افتد وقتی یک مدل هوش مصنوعی "فکر" می‌کند؟ وقتی در حال تهیه پاسخی برای ما هستند، چگونه می‌دانند چه چیزی بگویند؟ یکی از رایج‌ترین سوءتفاهمات مربوط به مدل‌های هوش مصنوعی، این تصور است که آن‌ها "فکر" می‌کنند یا هر نوع آگاهی دارند. این مشکل عمدتاً زبانی است: ما (انسان‌ها) دوست داریم از کلمات و تجربیاتی که بیشتر با آن‌ها آشنا هستیم به عنوان یک زبان ساده برای برقراری ارتباط با ایده‌های پیچیده استفاده کنیم. به عنوان مثال، چند بار شده است که یک صفحه وب به آرامی بارگذاری می‌شود و کسی می‌گوید "صبر کن، دارد در موردش فکر می‌کند"؟ ما کامپیوترها را از حالت "خواب" بیدار می‌کنیم، ارتباطات "دست دادن" را آغاز می‌کنیم و از برنامه‌های "گرسنه" حافظه ناراحت می‌شویم. به همین ترتیب، اغلب مدل‌های هوش مصنوعی را "متفکر" توصیف می‌کنیم و حتی گاهی اوقات هنگام درخواست از آن‌ها دستور می‌دهیم "هر زمان که لازم است در مورد این موضوع فکر کنید"! اما در واقع چه اتفاقی می‌افتد وقتی یک مدل هوش مصنوعی "فکر" می‌کند؟ وقتی در حال تهیه پاسخی برای ما هستند، چگونه می‌دانند چه چیزی بگویند؟ پاسخ کوتاه این است که مدل‌های هوش مصنوعی (به ویژه مدل‌های زبانی بزرگ (LLM) متمرکز بر متن، که ما در ادامه این مقاله از آن‌ها به عنوان مثال استفاده خواهیم کرد) ماشین‌های پیش‌بینی توکن بسیار پیشرفته‌ای هستند. آن‌ها از شبکه‌های عصبی (نوعی الگوریتم یادگیری ماشین) برای شناسایی الگوها در زمینه‌های گسترده استفاده می‌کنند. بر اساس دهه‌ها تحقیق در مورد نحوه ساختار جملات در یک زبان خاص (مانند شیوع کلمات مختلف و احتمال آماری اینکه یک کلمه خاص بعد از کلمه دیگر بیاید)، مدل‌های مدرن هوش مصنوعی قادر به ترکیب توکن‌ها در کلمات و سپس کلمات در جملات هستند. این مدل‌ها در واقع ریشه در دهه 1940 دارند، زمانی که فناوری رمزنگاری و شکستن رمز در حال توسعه با سرعت سرسام‌آوری بود تا ارتباطات دشمن را در طول جنگ جهانی دوم رهگیری و رمزگشایی کند. اگر بتوانید حتی یک یا دو حرف را در یک ارتباط رمزگذاری‌شده تشخیص دهید و رمزگشایی کنید، می‌توان از این روش‌های پیش‌بینی جدید برای کمک به تعیین اینکه بقیه حروف به احتمال زیاد چه هستند، استفاده کرد. به عنوان مثال، در زبان انگلیسی، حرف "E" پرکاربردترین حرف است و "T" و "H" اغلب با هم استفاده می‌شوند. اگر بدانیم که یک حرف در یک کلمه "T" است، می‌توانیم احتمال اینکه حرف بعدی "H" باشد را محاسبه کنیم (هشدار: احتمال آن بسیار زیاد است). این محاسبه احتمال را می‌توان از حروف به کلمات و از کلمات به عبارات گسترش داد.


مشاهده مطلب اصلی