Лента новостей
"‎Екзотичний гібрид"‎: затонула китайська субмарина виявилась дуже незвичайною Росія продовжує отримувати західні деталі для своїх ракет: Bloomberg розкрив схему Лікар визнав провину у смерті зірки "Друзів" Меттью Перрі, який помер від передозування Росія захопила Вугледар, оголивши критичну вразливість України, - CNN Україна платить за вторгнення в Курську область своїми найкращими танками, - Forbes Росіяни поліпшили тактику і захоплюють території на сході України небаченими темпами, - WP Наймолодшій жертві 9 років: ще 120 людей звинуватили репера P. Diddy у сексуальному насиллі Захоплення Вугледара дає російським військам стратегічну перевагу, - Bloomberg Почему тренировки пресса не дают результатов: тренер дал ответ "Байден занадто обережний": в AP дізналися, коли США можуть зняти обмеження на удари по РФ Відомий ведучий відреагував на участь Klavdia Petrivna в Нацвідборі Польский министр назвал страну, которая способна остановить Россию Діти Путіна можуть битись за владу, коли вийдуть із золотої клітки, - The Atlantic "Нова пошта" вийшла на ринок Австрії: скільки коштує доставка Дії Росії в Чорному морі загрожують повномасштабною війною з НАТО, - експерт The Telegraph Кордон між Італією та Швейцарією змінять: названо причину Мобілізаційний вік в Україні має бути з 20 років, - нардеп Нардеп розповів про долю економічного бронювання в Україні На могилі Чапкіса через три роки після смерті встановили пам'ятник, але є нюанс ЄС може припинити існування, - Макрон На вихідних дощів в Україні побільшає: де поллє Старі та ненадійні снаряди з КНДР утримують Росію в бою, - Foreign Policy "Я туди піду обов'язково": відомий співак розповів про свої політичні амбіції На Одещині відчули землетрус: що сталося Експерт розповів, як часто власникам домашніх тварин потрібно прати постільну білизну

Стартап Google Deep Mind продемонстрировал новые возможности искусственного интеллекта. Его система Deep-Q-Network смогла превзойти человека в 49 классических аркадных играх 1980-х, не имея доступа к исходному коду игр и без изучения практики игроков-людей. Об алгоритме работы системы рассказывается в журнале Nature, а коротко о новой технологии сообщил Science News.

Лондонскую фирму DeepMind, специализирующуюся в области искусственного интеллекта, в 2014 году приобрел Google. По данным СМИ сумма сделки составила около 400 миллионов фунтов стерлингов. После вхождения в состав американской корпорации один из основателей стартапа Демис Хассабис (Demis Hassabis) заставил компьютер самостоятельно обучаться опыту игры — и даже открывать эффективные ходы и стратегии, о которых не знали даже люди.

Система компьютерного самообучения получила название Deep-Q-Network (DQN). В ней используются две различные стратегии обучения. Во-первых, это глубинная нейронная сеть — система восприятия, принцип работы которой напоминает зрение животных: она делает ходы и замечает, как меняются пиксели на экране. «Q» в названии означает Q-learning: математический аналог обучения с подкреплением (или поощрением), благодаря которому люди и животные осваивают новые навыки: каждое новое эффективное действие вознаграждается. В случае DQN наградой являются очки в игре: пробуя различные действия, система запоминает те комбинации, которые приносят максимум очков.

Исследователи дали DQN порезвиться с 49 классическими аркадными играми на платформе Atari 2600. Эти игры, по мнению Хассабиса, представляют собой золотую середину с точки зрения сложности игрового процесса. DQN были предоставлены крайне ограниченные ресурсы: две недели на каждую игру и вычислительные мощности одного-единственного персонального компьютера.

Эффективность системы была далеко не очевидна: искусственный интеллект раньше всегда проигрывал человеку в играх наподобие Breakout или Space Invaders, где для получения рекордного счета необходимо искать сложные стратегии. Однако в итоге DQN обыграла живых экспертов в 60 процентах игр: она набрала на 20-30 процентов больше очков в Space Invaders и Pong, а в Breakout и Video Pinball — в 200 раз больше. Следующим этапом, по словам Хассабиса, станет трансфер знаний: перенос навыков из одной игры в другую (например, во вторую игру с летающими шариками система сможет играть быстрее, чем в первую).

По мнению экспертов, система DQN имеет все шансы найти применение в рекламной стратегии Google. Пиксели аркадных игр являются аналогом многочисленных данных, которые поисковик собирает об отдельных пользователях, а очки — аналогом прибыли от рекламы. Обучение с подкреплением пригодится для улучшения качества объявлений: чем чаще на них кликают, тем больше очков получает система. Тот факт, что DQN обучается, наблюдая за происходящим на экране, а не обрабатывая исходный код, говорит о том, что Google она нужна для анализа изображений и видео.