Дарвин
<<  Бизнес проект по разведению карпа в искусственном водоеме Теория возникновения человека Чарльза Дарвина  >>
Модели автономных когнитивных агентов – бионический задел развития
Модели автономных когнитивных агентов – бионический задел развития
План доклада
План доклада
Исследования автономных агентов
Исследования автономных агентов
Адаптивное поведение
Адаптивное поведение
Искусственная жизнь
Искусственная жизнь
Когнитивные архитектуры
Когнитивные архитектуры
Автономные агенты
Автономные агенты
Примеры моделей автономных агентов
Примеры моделей автономных агентов
Модель взаимодействия между обучением и эволюцией в популяции
Модель взаимодействия между обучением и эволюцией в популяции
Модель эволюции и обучения
Модель эволюции и обучения
Модель эволюции и обучения
Модель эволюции и обучения
Модель эволюции и обучения
Модель эволюции и обучения
Эволюция с обучением и эволюция без обучения
Эволюция с обучением и эволюция без обучения
Механизм влияния обучения
Механизм влияния обучения
Роль эффекта нагрузки на обучение
Роль эффекта нагрузки на обучение
Механизм эффекта нагрузки на обучение
Механизм эффекта нагрузки на обучение
Выводы по модели эволюции и обучения
Выводы по модели эволюции и обучения
Модель честной конкурентной экономики
Модель честной конкурентной экономики
Вымирание генов агрессивности в эволюционирующей популяции
Вымирание генов агрессивности в эволюционирующей популяции
Модель взаимодействующих агентов (М
Модель взаимодействующих агентов (М
Структура нейронной сети агента
Структура нейронной сети агента
Зависимость численности популяции от времени
Зависимость численности популяции от времени
От агрессивной конкуренции к конструктивной
От агрессивной конкуренции к конструктивной
Заключение
Заключение
Спасибо за внимание
Спасибо за внимание

Презентация: «Модели автономных когнитивных агентов – бионический задел развития искусственного интеллекта». Автор: . Файл: «Модели автономных когнитивных агентов – бионический задел развития искусственного интеллекта.ppt». Размер zip-архива: 324 КБ.

Модели автономных когнитивных агентов – бионический задел развития искусственного интеллекта

содержание презентации «Модели автономных когнитивных агентов – бионический задел развития искусственного интеллекта.ppt»
СлайдТекст
1 Модели автономных когнитивных агентов – бионический задел развития

Модели автономных когнитивных агентов – бионический задел развития

искусственного интеллекта

НИИ системных исследований РАН Редько Владимир Георгиевич vgredko@gmail.com

2 План доклада

План доклада

Направления, в которых ведутся исследования автономных когнитивных агентов Примеры моделей автономных агентов 2.1. Модель взаимодействия между обучением и эволюцией 2.2. Схема многоагентной модели честной конкурентной экономики 2.3. Идея проекта на Нобелевскую премию мира Заключение

3 Исследования автономных агентов

Исследования автономных агентов

4 Адаптивное поведение

Адаптивное поведение

Первая конференция: Париж, 1990 г. (Ж.-А. Мейер, С. Вильсон) Основной подход – конструирование и исследование искусственных (в виде компьютерной программы или робота) «организмов» (аниматов, агентов), способных приспосабливаться к внешней среде ANIMAL + ROBOT = ANIMAT Программа-минимум – исследовать архитектуры и принципы функционирования, которые позволяют животным или роботам жить и действовать в переменной внешней среде Программа-максимум – попытаться проанализировать эволюцию когнитивных (познавательных) способностей животных и эволюционное происхождение человеческого интеллекта Предшественники: М.Л. Цетлин, М.М. Бонгард. Гаазе-Рапопорт М.Г., Поспелов Д.А. От амебы до робота: модели поведения. М.: Наука, 1987. М.: УРСС, 2004, 2011.

5 Искусственная жизнь

Искусственная жизнь

Направление исследований «Искусственная жизнь» сформировалось в конце 1980-х годов. Основной мотивацией исследований искусственной жизни служит желание понять и промоделировать формальные принципы организации биологической жизни. Сторонники направления «Искусственная жизнь» часто считают, что они исследуют более общие формы жизни, чем те, которые существуют на Земле. Т.е. изучается жизнь, какой она могла бы в принципе быть (“life-as-it-could-be”), а не обязательно та жизнь, какой мы ее знаем (“life-as-we-know-it”).

6 Когнитивные архитектуры

Когнитивные архитектуры

Под когнитивными архитектурами понимаются структуры и принципы функционирования познающих систем, которые можно использовать в искусственном интеллекте. Langley P., Laird J.E., Rogers S. Cognitive architectures: Research issues and challenges // Cognitive Systems Research. 2009. V.10. No. 2. PP. 141-160. Laird L.E. The Soar Cognitive Architecture. Cambridge et al.: The MIT Press, 2012. Самсонович А.В. Biologically inspired cognitive architectures – проведение международных конференций 2010, 2011 гг. Конференции BICA: Палермо (2012), Киев (2013).

7 Автономные агенты

Автономные агенты

Автономные агенты имеют свою собственную систему управления. Автономные агенты вполне могут рассматриваться как объединяющее понятие для отмеченных направлений. Работы по автономным агентам ведутся как со стороны биологических наук, так со стороны вычислительных наук. Vernon D., Metta G., Sandini G. A survey of artificial cognitive systems: Implications for the autonomous development of mental capabilities in computational agents // IEEE Transactions on Evolutionary Computation, special issue on Autonomous Mental Development, 2007. V. 11. No. 2. PP. 151-180.

8 Примеры моделей автономных агентов

Примеры моделей автономных агентов

9 Модель взаимодействия между обучением и эволюцией в популяции

Модель взаимодействия между обучением и эволюцией в популяции

автономных агентов

10 Модель эволюции и обучения

Модель эволюции и обучения

После появления дарвиновской теории эволюции возник вопрос: могут ли за счет случайного мутационного поиска возникать весьма нетривиальные полезные навыки живых организмов? Появились концепции: обучение может существенно способствовать эволюционному процессу (эффект Болдуина). Baldwin J.M. A new factor in evolution. American Naturalist. 1896. V. 30. P. 441-451. Morgan C.L. On modification and variation. Science. 1896. V. 4. P. 733-740. Osborn H.F. Ontogenetic and phylogenetic variation. Science. 1896. V. 4. P. 786-789. Модель анализирует основные механизмы взаимодействия между обучением и эволюцией.

11 Модель эволюции и обучения

Модель эволюции и обучения

Эволюционирующая популяция состоит из n особей. Особь имеет генотип и фенотип SFk, которые закодированы одинаковыми по форме цепочками символов длины N. Символы цепочек SGk и SFk равны 0 либо 1. Имеется случайная оптимальная цепочка SM той же формы, которая ищется в процессе обучения и эволюции. Генотип особи SGk в течение поколения не меняется. Фенотип SFk модифицируется путем обучения методом проб и ошибок. Каждое поколение длится Т тактов времени. При рождении SFk (t = 1) = SGk . Отбор определяется SFTk = SFk (t = T).

12 Модель эволюции и обучения

Модель эволюции и обучения

Приспособленность особи определяется расстоянием по Хеммингу ? = ?(SFTk,SM) между оптимумом SM и фенотипом SFk в конце поколения: f(Sk) = exp[-?(SFTk,SM)] + ? , (1) где SFTk = SFk (t = T), 0 < ? << 1. Т – длительность поколения. Слагаемое ? характеризует влияние случайных факторов окружающей среды на приспособленность особей. Отбор осуществляется с вероятностями, пропорциональными приспособленностям особей. Потомки наследуют геномы SGk отбираемых особей, отбор осуществляется в соответствии с фенотипами SFk .

13 Эволюция с обучением и эволюция без обучения

Эволюция с обучением и эволюция без обучения

<?>

G

Зависимость среднего по популяции расстояния генома до оптимума <?> = <?(SGk,SM)> от номера поколения G

Эволюция без обучения

Эволюция с обучением

Параметры расчетов: N = 100, n = 100, pmutation = 0.01, ? = 10-6 .

14 Механизм влияния обучения

Механизм влияния обучения

Распределение особей n(?) по величинам ? в первом поколении эволюции

Фенотипы SFk

Геномы SGk

3. После отбора

n(?)

2. Перед отбором

1. В начале поколения

4. После отбора

?

Геномы отобранных особей (4) достаточно близки к фенотипам этих особей (3)

15 Роль эффекта нагрузки на обучение

Роль эффекта нагрузки на обучение

<?>

G

Зависимость среднего по популяции расстояния генома до оптимума <?> = <?(SGk,SM)> от номера поколения G. Приспособленность особи равна: f(Sk) = exp{-?[SFk(t = 0), SFk(t = T)]} {exp[-?(SFTk,SM)] + ?} (2)

Оптимум находится. Поиск происходит примерно в 10 быстрее, чем без учета эффекта нагрузки

16 Механизм эффекта нагрузки на обучение

Механизм эффекта нагрузки на обучение

Распределение особей n(?) по величинам ? в первом поколении эволюции

Фенотипы SFk

Геномы SGk

n(?)

?

Распределения (3) и (4) резко сближаются. Это приводит к эффективному ускорению поиска

3. После отбора

4. После отбора

1. В начале поколения

2. Перед отбором

17 Выводы по модели эволюции и обучения

Выводы по модели эволюции и обучения

Показано, что обучение может радикально ускорять эволюционный поиск Выяснены механизмы этого ускорения Приобретаемые путем индивидуального обучения навыки в течение ряда поколений могут перекодироваться в геноме, становиться наследуемыми, хотя эволюция носит дарвиновский характер

18 Модель честной конкурентной экономики

Модель честной конкурентной экономики

Имеется сообщество инвесторов и производителей. Инвесторы могут генерировать легких агентов (аналогов муравьев): агентов-разведчиков и агентов намерений. Имеется период T, характеризующий циклы работы сообщества. В начале периода инвесторы вкладывают капитал в производителей, а конце периода – получают свою долю прибыли. Перед окончанием периода T инвесторы рассылают агентов-разведчиков и предварительно оценивают, в каких производителей стоит делать вклад в следующий период. После первой оценки они рассылают агентов намерений и указывают свои вклады производителям. Такая рассылка делается итеративно. В конце итераций делается окончательный выбор вложений капитала инвесторами. Статья: http://www.niisi.ru/iont/ni/Journal/V6/N1/Redko.pdf

19 Вымирание генов агрессивности в эволюционирующей популяции

Вымирание генов агрессивности в эволюционирующей популяции

конкурирующих агентов или идея проекта на Нобелевскую премию мира

20 Модель взаимодействующих агентов (М

Модель взаимодействующих агентов (М

С. Бурцев, 2002)

Действия агента: двигаться вперед, поворачиваться направо или налево, питаться, размножаться, бороться с другими агентами Система управления агента – однослойная нейронная сеть При питании агент увеличивает свой ресурс, при действиях (особенно при борьбе) – расходует. При борьбе агенты отнимают ресурс друг у друга Популяция агентов эволюционирует, есть отбор и мутации

Стрелка показывает направление вперед, кружки – поле зрения агента

21 Структура нейронной сети агента

Структура нейронной сети агента

При мутациях меняются веса связей (веса синапсов нейронов) и может происходить удаление или добавление рецепторов или эффекторов При отборе выживают агенты, имеющие наибольший ресурс

22 Зависимость численности популяции от времени

Зависимость численности популяции от времени

Внизу – полная модель, вверху – эффекторы борьбы удалены

23 От агрессивной конкуренции к конструктивной

От агрессивной конкуренции к конструктивной

Если попытаться развить этот подход для социально-экономических систем, то можно ожидать, что устранение агрессивной конкуренции (между людьми, фирмами, регионами, государствами) может увеличить благосостояние общества в 2 раза. Можно даже предложить идею проекта на Нобелевскую премию мира «Разработка научных основ всемирного разоружения». Пока есть только идея и затравочная модель…

24 Заключение

Заключение

Имеется ряд направлений, в которых ведутся исследования автономных когнитивных агентов Исследуются как компьютерные методы (например, эволюционная оптимизация), так и когнитивные, интеллектуальные свойства агентов Имеется ряд перспективных направлений применения автономных когнитивных агентов Результаты этих исследований целесообразно использовать в искусственном интеллекте

25 Спасибо за внимание

Спасибо за внимание

«Модели автономных когнитивных агентов – бионический задел развития искусственного интеллекта»
http://900igr.net/prezentacija/biologija/modeli-avtonomnykh-kognitivnykh-agentov-bionicheskij-zadel-razvitija-iskusstvennogo-intellekta-131145.html
cсылка на страницу

Дарвин

13 презентаций о Дарвине
Урок

Биология

136 тем
Слайды
900igr.net > Презентации по биологии > Дарвин > Модели автономных когнитивных агентов – бионический задел развития искусственного интеллекта