Механизмы сознания
Иногда животное повторяет ситуацию своими действиями, например, охотится.
При повторении ситуации существо пытается подобрать более выгодное поведение.
В результате, в такой ситуации оно ведёт себя довольно успешно.
Ключевое различие между обучением и самообучением состоит в способе выработки поведения. При обучении учитель показывает или прямо стимулирует правильное поведение. Он ставит оценку за элементы поведения, то есть за промежуточные этапы работы. Обучая детей, роботов и нейронные сети мы применяем промежуточные оценки за каждый успех или неудачу. При этом только учитель способен оценить эффективность каждого этапа обучения.
При самообучении существо само изобретает правильное поведение, получая положительную оценку (удовольствие, избежание опасности) только за правильный конечный результат. Между поведением и оценкой имеется логическая причинная связь, которая обычно далеко не очевидна. Решение проблемы "За что именно получена оценка" - одна из основных задач механизма сознания.
Я определяю качество моих "разумных" алгоритмов по скорости их самообучения в некоторых стандартных задачах. Интересно сравнить разные алгоритмы с животными в похожих тестах. Где сейчас находится мой алгоритм самообучения? Между гидрой и улиткой, или между муравьём и бабочкой?
Самообучающаяся бабочка
Сейчас у меня есть простейшая демонстрация адаптирующегося искусственного интеллекта, которая способна впечатлить пока только тех, кто понимает. Это программа tmpbrain.zip для Windows.
Программа показывает маленький мир, в котором живут бабочка и цветок. Бабочка специально сделана настолько простой, как только я смог себе представить. Она имеет чувства (органы чувств), моторную систему (органы действий) и мозг.
Органы бабочки
Чувство цветка, или желание. Wish=0 означает, что желание удовлетворено. Бабочка ощущает это при помощи специального органа, когда она касается цветка. Wish=1 означает, что бабочка имеет желание.
Зрение определяет, с какой из четырёх сторон света находится цветок. При помощи зрения бабочка чувствует одно из четырёх качеств, которые позже ассоциируются у неё с направлениями к цветку. Номера направлений используются мозгом как четыре не связанных друг с другом качества, которые первоначально не имеют смысла.
Движение. Моторная система интерпретирует выработанный мозгом сигнал, как команду двигаться в одном из четырёх направлений. Только моторная система "знает", что это за направления, и как нужно двигаться.
Мозг получает сигналы от органов чувств (сенсоров) и подаёт сигналы моторной системе. Единственный сигнал, имеющий смысл для мозга, это "желание". Мозг пытается выработать такой выходной сигнал, чтобы удовлетворить желание.
Движение бабочки довольно медленное и хаотичное. Но правильная ориентация в пространстве развивается у неё достаточно быстро. Постепенно она начинает двигаеться менее случайно, и почти в правильном направлении. Она принимает решение об этом направлении ассоциативно, на основании своего предшествующего опыта.
Я догадываюсь, судя по отзывам на мою статью "Основы натуральной философии", что поначалу очень трудно оценить высокую степень абстракции используемого алгоритма. Но и живой мозг, и живые органы чувств, по-моему, тоже гораздо более абстрактны (то есть, более универсальны), чем многие думают, и готовы от рождения к жизни в любом мире. Именно это усиливает сознание организма. Никакие цели, желания и стремления не присущи мозгу изначально. Это машина, способная только на творчество, то есть на поиск и проработку "поведения".
Немного больше о технологиях >>>
Новая концепция электромобиля
Электромобиль
– транспортное средство, ведущие колеса которого приводятся от электромотора
питаемого электробатареей, появился впервые в 1838 году в Англии. Электромобиль
существенно старше автомобиля с двигателем внутреннего сгорания. Поначалу он
опережал автомобиль по скорост ...
В поисках инерцоида
Многие
века люди относились к массивным телам как своеобразным складам движения –
сколько в них вложишь, столько и вернешь. Но вот родилась дерзкая надежда
превратить склады в источники: нельзя ли так пошевелить грузами на тележке,
чтобы та поехала сама собой, за счет внутренни ...
