דף הבית של Joindota

Openai Five מנצחת את אלופי העולם של DOTA 2

Openai Five הוא ה- AI הראשון שניצח את אלופת העולם במשחק Esports, לאחר שניצח שני משחקי גב אל גב מול אלופת העולם Dota 2, OG, בגמר בסוף השבוע. גם Openai Five וגם אלפסטאר של Deepmind ניצחו בעבר מקצוענים טובים באופן פרטי, אך הפסידו את משחקי ה- Live Pro שלהם, מה שהפך את זה גם לפעם הראשונה ש- AI ניצח את המקצוענים של Esports ב- Livestream.

ב- Openai Five גמר, חלקנו גם שתי הפתעות:

1. Openai Five גילתה יכולת רודמנטרית להיות חבר צוות עם בני אדם, למרות שתהליך ההדרכה שלנו מתמקד אך ורק בהכאת בוטים אחרים. הקלות שבה הפכנו AI תחרותי לאחד שיתופי גורם לנו לקוות שמערכות AI עתידיות יכולות להועיל מאוד לבני אדם בהינתן מאמץ פיתוח פעיל.
2. . המבחן הסופי הזה יאפשר לנו לענות על שאלת מחקר חשובה-באיזו מידה פתוח חמש ניתן לנצל או שניתן יהיה להכות אותו באופן אמין-ולהיות פוטנציאל הפריסה הגדולה ביותר אי פעם של סוכן למידה חיזוק עמוק מאוד, שאנשים יכולים לקיים איתו ביודעין ביודעין.

בסך הכל, הגרסה הנוכחית של Openai Five צרכה 800 Petaflop/S Days וחוותה כ- 45,000 שנה של משחק עצמי של DOTA במשך 10 חודשים בזמן אמת (לעומת כ -10,000 שנה מעל 1.5 חודשים בזמן אמת נכון לבינלאומי), בממוצע 250 שנות ניסיון מדומה ביום. בגרסת הגמר של Openai Five יש 99.9% מנצנון לעומת גרסת ה- TI. [^Footenote-Wintrate]

העברת לימוד

הגרסה הנוכחית של Openai Five מתאמנת ברציפות מאז יוני 2018, למרות שינויים בגודל הדגם ובכללי המשחק (כולל כמה עדכוני תיקון משחק גדולים למדי ותכונות שהושמו לאחרונה). בכל מקרה, הצלחנו להעביר את הדגם ולהמשיך באימונים – משהו שזה אתגר פתוח עבור RL בתחומים אחרים. למיטב ידיעתנו, זו הפעם הראשונה שסוכן RL הוכשר באמצעות ריצת אימונים כה ארוכת שנים.

כדי לבצע את העבודה הזו, המשכנו לבטל את כלי הניתוח שלנו כדי שנוכל להתחיל מפרמטרים מאומנים אפילו על פני שינויים משמעותיים בארכיטקטורה.

יותר גיבורים

ראינו מעט מאוד האטה באימונים עוברת בין 5 ל -18 גיבורים. שיערנו את אותו הדבר יהיה נכון עוד יותר לגיבורים, ואחרי הבינלאומי, השקנו מאמץ רב בשילוב חדשים.

בילינו כמה שבועות אימונים עם בריכות גיבורים עד 25 גיבורים, והבאנו את אותם גיבורים לכ- 5K MMR (בערך 95 אחוזון של שחקני DOTA). למרות שהם עדיין השתפרו, הם לא למדו מספיק מהר כדי להגיע לרמת המקצוענים לפני הגמר. עדיין לא הספקנו לחקור מדוע, אך ההשערות שלנו נעות בין יכולת מודל לא מספקת ועד להזדקק לשידוכים טובים יותר עבור מאגר הגיבורים המורחב כדי לדרוש זמן אימונים נוסף לגיבורים חדשים להדביק גיבורים ישנים. תאר לעצמך כמה קשה לאדם ללמוד גיבור חדש כשכולם שולטים שלהם!

אנו מאמינים כי נושאים אלה ניתנים לפתרון מהותי, ופתרוןם יכול להיות מעניין בפני עצמו. גרסת הגמר משחקת עם 17 גיבורים – הסרנו את ליץ ‘מכיוון שהיכולות שלו השתנו באופן משמעותי בגרסת DOTA 7.20.

מצב שיתופי

זה ממש הרגיש נחמד; הצפע שלי נתן לי את חייו בשלב מסוים. הוא ניסה לעזור לי, לחשוב “אני בטוח שהיא יודעת מה היא עושה” ואז ברור שלא עשיתי זאת. אבל, אתה יודע, הוא האמין בי. אני לא מבין את זה הרבה עם חברי הצוות [אנושיים]. –Sheever

היכולת של Openai Five לשחק עם בני אדם מציגה חזון משכנע לעתיד האינטראקציה בין אנוש-איי, כזה שבה מערכות AI משתפות פעולה ומשפרות את החוויה האנושית. הבוחנים שלנו דיווחו על כך שהרגישו נתמכים על ידי חברי הצוות שלהם, שהם למדו ממשחק לצד מערכות מתקדמות אלה, וכי בדרך כלל זו הייתה חוויה מהנה בסך הכל.

דף הבית של Joindota

לאחר שהייתה בשידור חי יותר מעשור מאז ההשקה ג’וינדוטה תסגור את דלתותיה ב -31 במרץ, 2022.

גיבורי DOTA 2 שיהפכו את הנוקמים המושלמים עבור ה- MCU

הוקיי, אלמנה שחורה, קפטן אמריקה, האלק, איש הברזל ות’ור – שישה גיבורי מארוול שניתן היה להחליף אותם על ידי גיבורי DOTA 2

אנימה, הנס Ti ועוד – מה שקרה בשנת 2021?

אנו מסתכלים אחורה על 2021. הרבה קרה במהלך השנה הזו – אבל זה לא קשור להדגשים בלבד! היו לנו גם כמה רגעים מחוספסים.

רגעי הפאנל הטובים ביותר בשנת 2021

מה תהיה DOTA 2 בלי כל הגלגלים, המארחים והאנליסטים המפוארים? מבדיחות מטומטמות לצלייה כבדה, הנה כמה מהרגעים הטובים ביותר מחברי הפאנל האהוב שלנו בשנת 2021.

עבד, שום דבר טוסיי ועוד – מיהו נגן ה- DOTA 2 הטוב ביותר בשנת 2021?

Yatoro, שום דבר טוסיי, נישה, עבד, זבוב, רדת לילה – לא קל למצוא את השחקנים הטובים ביותר בדוטה 2. . את מי היית מוסיף?