نقش Dota ۲ در پیشرفت هوش مصنوعی و ChatGPT

این پروژه که با نام OpenAI Five شناخته می‌شد، تنها تلاشی برای ساخت یک بازیکن قدرتمند در Dota 2 نبود. پژوهشگران OpenAI از این بازی به‌عنوان بستری برای بررسی توانایی هوش مصنوعی در تصمیم‌گیری‌های پیچیده، همکاری گروهی و یادگیری از طریق تجربه استفاده کردند؛ مسائلی که بعدها در مسیر توسعه مدل‌های هوش مصنوعی، از جمله فناوری‌های زیربنایی ChatGPT، اهمیت زیادی پیدا کردند.

بازیکنان حرفه‌ای تار و مار شدند

در سال ۲۰۱۸، پروژه OpenAI Five توانست در چند مسابقه نمایشی مقابل بازیکنان حرفه‌ای Dota 2 پیروز شود. این دستاورد از آن جهت اهمیت داشت که Dota 2 برخلاف شطرنج، محیطی با اطلاعات ناقص به شمار می‌رود. بازیکنان همیشه از موقعیت حریف اطلاع ندارند، نیمی از نقشه تاریک است و باید در کنار مدیریت منابع، پیش‌بینی رفتار رقبا و اجرای تاکتیک‌های پیچیده، با چهار هم‌تیمی خود نیز هماهنگ شوند.

OpenAI Five برای رسیدن به این سطح از توانایی، از روش بازخوردی استفاده می‌کرد که در آن یک عامل هوش مصنوعی با انجام دادن اقدامات مختلف و دریافت بازخورد از نتایج آن‌ها، به‌تدریج رفتارهای مؤثرتری را یاد می‌گیرد. این سیستم با حجم عظیمی از بازی‌های شبیه‌سازی‌شده آموزش دید و توانست بدون اتکا به مجموعه‌ای از دستورالعمل‌های ازپیش‌نوشته‌شده برای هر موقعیت، راهبردهای پیچیده‌ای را یاد بگیرد.

نقطه اوج این پروژه در سال ۲۰۱۹ رقم خورد؛ زمانی که OpenAI Five در مسابقات نمایشی خود مقابل OG، قهرمان دو دوره پیاپی The International، قرار گرفت. این تیم هوش مصنوعی توانست در دو بازی متوالی مقابل OG پیروز شود. این نتیجه باورنکردنی نشان داد یادگیری ماشینی می‌تواند فراتر از محیط‌های محدود و قابل پیش‌بینی، در بازی‌هایی با تصمیم‌گیری‌های هم‌زمان و همکاری گروهی نیز عملکرد چشمگیری داشته باشد.

OpenAI Five نشان داد که یک سیستم هوش مصنوعی می‌تواند از طریق تمرین گسترده، هماهنگی گروهی و ارزیابی مداوم تصمیم‌های خود، به راهبردهایی دست پیدا کند که لزوماً از پیش به‌صورت مستقیم به آن آموزش داده نشده‌اند.

میراثی فراتر از یک بازی

با وجود تمام این موفقیت‌ها، ارتباط پروژه OpenAI Five با ChatGPT نیازمند یک توضیح مهم است. این دو فناوری از یک روش واحد برای یادگیری استفاده نمی‌کنند و نمی‌توان OpenAI Five را نسخه اولیه یا مستقیماً سازنده ChatGPT دانست. اولی برای یادگیری بازی و انتخاب اقدامات بهینه آموزش دیده بود، درحالی‌که ChatGPT بر پایه مدل‌های زبانی بزرگ توسعه یافته است که برای پردازش زبان آموزش می‌بیند.

با این وجود، پروژه Dota 2 بخشی از مسیر پژوهشی گسترده‌تری بود که OpenAI برای توسعه سیستم‌های هوش مصنوعی قدرتمندتر طی کرد. این پروژه نشان داد که ترکیب شبکه‌های عصبی، یادگیری تقویتی، محاسبات گسترده و تجربه حاصل از تمرین مداوم می‌تواند به نتایجی چشمگیر منجر شود. پژوهشگران در جریان این آزمایش، علاوه بر توسعه روش‌های آموزش در مقیاس بزرگ، با چالش‌هایی مانند انتقال آموخته‌ها به شرایط جدید و امکان همکاری هوش مصنوعی با انسان نیز مواجه شدند.

یکی از نکات جالب این پروژه، حجم تمرین مورد نیاز بود. OpenAI Five در نسخه نهایی خود حدود ۴۵ هزار سال تجربه شبیه‌سازی‌شده از بازی Dota 2 به دست آورد که در حدود ۱۰ ماه آموزش واقعی حاصل شد. این سیستم از طریق بازی کردن مداوم با نسخه‌های دیگر، بازی را یاد می‌گرفت و هر روز معادل صدها سال بازی را در محیط شبیه‌سازی تجربه می‌کرد. چنین رویکردی نشان داد که مقیاس آموزش و قدرت محاسباتی می‌توانند نقش تعیین‌کننده‌ای در پیشرفت سیستم‌های یادگیری داشته باشند.

البته نباید از این دستاورد نتیجه گرفت که روش‌های به‌کاررفته در Dota 2 مستقیماً به مدل‌های زبانی امروزی منتقل شده‌اند. اهمیت تاریخی این پروژه بیشتر در نشان دادن ظرفیت یادگیری ماشین برای حل مسائل دشوار و ایجاد تجربه پژوهشی در زمینه آموزش سیستم‌های پیچیده بود.

بازی‌های ویدیویی: آزمایشگاه هوش مصنوعی

داستان OpenAI Five یادآور این نکته است که بازی‌های ویدیویی صرفاً ابزار سرگرمی نیستند و می‌توانند محیط‌هایی ارزشمند برای آزمایش فناوری‌های پیشرفته باشند. بازی‌هایی مانند Dota 2، با ترکیب تصمیم‌گیری‌های لحظه‌ای، اطلاعات ناقص، همکاری تیمی و راهبردهای چندلایه، فرصت مناسبی برای بررسی محدودیت‌ها و قابلیت‌های هوش مصنوعی فراهم می‌آورند.

شکست دادن OG در سال ۲۰۱۹، نقطه اوج پروژه‌ای بود که یک سال قبل‌تر در مسابقات The International مقابل بازیکنان حرفه‌ای شکست خورد. این پیشرفت نشان داد که با آموزش بیشتر و افزایش منابع محاسباتی، یک سیستم هوش مصنوعی می‌تواند در مدت نسبتاً کوتاهی توانایی‌های خود را به شکل چشمگیری ارتقا دهد.

حتی پیش از آن، در سال ۲۰۱۷، یک نسخه ساده‌تر از هوش مصنوعی OpenAI توانسته بود Dendi، بازیکن مشهور و عضو سابق تیم Natus Vincere، را در یک مسابقه تک‌به‌تک Dota 2 شکست دهد. این رقابت با پروژه OpenAI Five تفاوت داشت، اما نخستین نشانه‌های جدی توانایی این فناوری در رقابت با بازیکنان حرفه‌ای را به نمایش گذاشت.

امروز که هوش مصنوعی به ابزارهایی مانند ChatGPT رسیده و در حوزه‌های مختلف زندگی روزمره حضور پیدا کرده است، شاید به‌آسانی فراموش کنیم که بخشی از تاریخ توسعه این فناوری در محیط‌هایی مانند بازی‌های ویدیویی شکل گرفته است. OpenAI Five به‌تنهایی ChatGPT را به وجود نیاورد، اما نشان داد که بازی‌ها می‌توانند فراتر از سرگرمی، بستری برای آزمودن ایده‌هایی باشند که در مسیر ساخت سیستم‌های هوشمندتر اهمیت پیدا می‌کنند.

اهمیت Dota 2 در این داستان تنها به پیروزی یک تیم از هوش مصنوعی مقابل قهرمانان جهان محدود نمی‌شود. این بازی به پژوهشگران اجازه داد تا توانایی ماشین‌ها در یادگیری، تصمیم‌گیری و همکاری را در محیطی پیچیده و پویا آزمایش کنند. شاید روزی که بازیکنان در حال تماشای شکست OG مقابل پنج شبکه عصبی بودند، کمتر کسی تصور می‌کرد که همین نوع آزمایش‌ها به یکی از فصل‌های جالب تاریخ هوش مصنوعی تبدیل شود.