kaipa: (Default)
[personal profile] kaipa
Некоторое время назад [livejournal.com profile] plakhov рассказал о любопытном эксперименте. Суть его в том, что программа с нейронной сетью, собранная на коленке, научилась играть в шахматы, даже не зная правил, а только обучившись на довольно большом количестве партий (100 миллионов). Единственное, что "знала" программа -- это функцию оценки позиции (довольно примитивную), и метод отсечения ветвей для уменьшения перебора. Это, конечно, круто. Очень круто и напоминает фантастику. Но гораздо круче, когда AI начинает сам взаимодействовать со средой, чтобы научиться. Это то, что в общем случае называется обучение с подкреплением или reinforcеment learning.

Оказывается, и здесь есть значительные успехи в последнее время. Гугл во всех смыслах недаром купил небольшую компанию DeepMind. Они занимаются разработкой искусственного интеллекта, который учится играть в компьютерные игры, те самые из домашних ПК 80х. От этого уже совсем недалеко до обучения взаимодействия со средой в общем случае.

Любопытно, что Илон Маск, основатель SpaceX и Tesla, инвестировал и в DeepMind и был хорошо знаком с тем, что они делают. Несколько недель назад он оставил комментарий к статье The Myth Of AI", который был довольно быстро удален, но сохранились копии. Маск предупреждает, что полноценный AI будет создан в ближайшие 5-10 лет.

Я посмотрел, что сейчас делает Джефф Хоукинс и его компания Numenta (Хоукинс -- автор On Intelligence). То же самое! Вот недавняя статья в их блоге "Learning Through Active Exploration". Естественно, они используют идею HTM, но движутся в том же направлении, что и DeepMind.

В общем, похоже, что появление дешевых вычислительных мощностей стимулировало новый всплеск интереса к этой области, и он в конце концов дает результат. "ОК Google" уже никого не удивляет, хотя лет 10 назад это бы казалось фантастикой. То ли еще будет.

Я бы сам с энтузиазмом занялся бы исследованиями и разработкой в этой области, но боюсь, что мой поезд уже ушел, и порог входа сейчас высок. Разве что рядом постоять :)

А кто-нибудь из френдов (кроме Плахова, про которого я знаю) причастен? Чем занимаетесь?

Profile

kaipa: (Default)
kaipa

April 2017

S M T W T F S
       1
2345678
9101112131415
16171819202122
23242526272829
30      

Style Credit

Expand Cut Tags

No cut tags
Page generated Mar. 24th, 2026 09:04 am
Powered by Dreamwidth Studios