Новый ИИ OpenAI научился играть в Майнкрафт

По сравнению с рядом других алгоритмов Minecraft, которые действуют в упрощенных версиях этой видеоигры, новый ИИ выступает наравне с людьми, вводя стандартные команды с клавиатуры и мыши. Посмотрев 70 000 часов игрового видео на YouTube, алгоритм овладел базовыми навыками: рубить деревья, изготавливать доски и строить верстаки.

Также он научился плавать, охотиться, готовить пищу и прыгать, https://singularityhub.com/2022/06/26/openais-new-ai-learned... Singularity Hub.

После тонкой настройки – обучения модели на более специализированном наборе данных – разработчики обнаружили, что алгоритм стал выполнять все эти задачи более эффективно, а также совершенствовал свои технологические навыки, изготавливая деревянные и каменные орудия и строя убежища, исследуя деревни и обыскивая сундуки.

В итоге он смог изготовить алмазную кирку – человеку на это требуется примерно 20 минут и примерно 24 000 действий.

Для игры с открытым миром это хороший результат. ИИ уже https://hightech.plus/2019/07/12/ii-vpervie-obigral-srazu-py... шахматами и го, где есть четкие цели и измеряемый прогресс, но Minecraft сложнее, поскольку он менее линейный. Успех OpenAI строится, как и в случае GPT-3 или DALLE-2, на больших массивах данных для обучения, созданных людьми. Но не только. Просто видео процесса игры не так эффективно в обучении, поскольку не помогает понять, каким образом достигается та или иная цель. Поэтому OpenAI заплатила подрядчикам за 2000 часов размеченного видео, в котором базовые навыки Minecraft соотносятся с командами.

С помощью этих данных был создан второй алгоритм, который уже сам разметил 70 000 часов видео из YouTube.

Разработанный Fаcebook и исследователями из США https://hightech.plus/2019/11/21/ii-deepmind-sam-razobralsya... дал в 2019 году бой 12 профессионалам покера, впервые обыграв людей за столом с шестью игроками, а не один на один. ИИ зарабатывал по $1000 в час.