Сперва изданный в 1995 (Психотерапевтический преподобный, 102 (3):419-57), теория показывает, что изучение – продукт двух дополнительных совокупностей изучения. Первая совокупность неспешно получает навыки и знание от действия до событий и вторые магазины определенные события так, дабы они могли быть переиграны, дабы разрешить их действенную интеграцию в первую совокупность. Бумага основывалась на более ранней теории влиятельного английского вычислительного нейробиолога Дэвида Марра и на тогдашних недавних открытиях в способах изучения нейронной сети.«Доказательства кажутся востребованными, что у мозга имеется эти два вида изучения совокупностей, и дополнительная теория изучения совокупностей растолковывает, как они дополняют друг друга, дабы дать сильное ответ главной неприятности изучения, которая стоит перед мозгом», говорят доктор наук Стэнфорда Psychology James McClelland, ведущий создатель статьи 1995 года и ведущий создатель текущего Обзора.
Первая совокупность в предложенной теории, помещенной в кору головного мозга мозга, была вдохновлена предшественниками сегодняшних глубоких нейронных сетей. Как с сегодняшними глубокими сетями, эти совокупности содержат пара слоев нейронов между выходом и входом, и знание в этих сетях находится в их связях. Помимо этого, их связи неспешно программируются опытом, давая начало их способности признать объекты, ощущать обращение, осознать и произвести язык, а также выбрать оптимальные действия в других параметрах и ведении игры настройки, где интеллектуальное воздействие зависит от приобретенного знания.
Такие совокупности стоят перед задачей, в то время, когда новая информация должна быть изучена: В случае если большой хватает изменений внесено в связи, дабы принудить новое знание к связям скоро, оно радикально исказит все второе знание, уже сохраненное в связях.«Это – то, где дополнительная совокупность изучения входит», говорит Макклеллэнд. В других млекопитающих и людях, эта вторая совокупность находится в структуре, названной гиппокампом. «Первоначально храня данные о новом опыте в гиппокампе, мы делаем его дешёвым для яркого применения, и мы кроме этого имеем в наличии его так, дабы это могло быть переиграно назад к коре, чередовав его с длящимся опытом и хранившей информацией на базе вторых соответствующих событий».
Эта установка с двумя совокупностями исходя из этого разрешает и яркое изучение и кроме этого постепенную интеграцию в структурированное представление знаний в коре головного мозга.«Компоненты архитектуры нейронной сети, которая преуспела в том, дабы достигнуть работы людской уровня во множестве компьютерных игр как Space Invaders и Резкое изменение цен на бумаги, были вдохновлены дополнительной теорией изучения совокупностей,» заявляет DeepMind познавательный нейробиолог Дхэршен Кумаран, первый создатель Обзора. «Как в теории, эти нейронные сети эксплуатируют буфер памяти, сродни гиппокампу, что хранит недавние эпизоды игры игры и переигрывает их чередованным методом.
Это существенно усиливает применение фактического опыта игры игры и избегает тенденции для конкретного местного пробега опыта господствовать над изучением в совокупности».Kumaran сотрудничал и с Макклеллэндом и с учредителем DeepMind Демисом Хассабисом (кроме этого соавтор на Обзоре) в работе, которая расширила роль гиппокампа, потому, что это предполагалось в версии 1995 года дополнительной теории изучения совокупностей.
«По моему точке зрения», говорит Хассабис, «расширенная версия дополнительной теории изучения совокупностей, возможно, продолжит являться основой для будущего изучения, не только в нейробиологии, вместе с тем и в отыскивании, дабы развивать Неестественные Неспециализированные Сведения, отечественную цель в Гугл DeepMind».