|
Сообщения участника "cortl" | |
| |
create
|
16:09 13.05.2021 |
|
16:29 13.05.2021 |
|
№1064 |
Во-первых: я не о том. Шум может давать неисправный сенсор или сенсор, для которого в данный момент не созданы условия, а условия создадутся в будущем, поэтому он должен работать, чтобы не пропустить полезную информацию в будущем.
Во-вторых: внешний шум среды он и есть сигнал на сенсоре. У нас нет двух источников (как по вашей ссылке): отдельно шум и отдельно сигнал + часть шума. Поэтому адаптивная фильтрация неприменима.
Вернее, её нет смысла применять потому, что полезного сигнала может не быть в принципе.
|
| |
create
|
Prosolver и kondrat, можете продемонстрировать что такое модель на примере перцептрона?
kondrat, если говорите о подкреплении скажите откуда оно исходит применительно к AGI.
|
| |
create
|
04:39 15.05.2021 |
|
05:31 15.05.2021 |
|
№1076 |
Kek:cortl: ... а что делать с третьими? Они определённо мешают и катастрофически оттягивают на себя одеяло производительности и памяти.
Вопрос правильный. И здесь речь не только о звуке. Летающая постоянно муха, которая мешает читать, это шум зрительный. В теории новизны, которую я исследую есть та же проблема. Любой сигнал сравнивается с имеющимся в памяти. Если его в памяти нет, то это новизна, если сигнал есть, то отмечается счетчик повторений этого сигнала. Если порог чувствительности системы таков, что новый сигнал возникает очень часто, то есть опасность забить память. Это правда.
Для решения этой проблемы я использовал следующий алгоритм: по настоящему новый сигнал тот, который повториться N раз. Только после этого ему присваивается статус новизны. Тем не менее мусор, не достигший порога повторений, тоже записывается в память, которая через какое-то время все-таки забивается. Заполнение памяти является критерием включения процедуры очистки памяти. Критерий прост: все сигналы не достигшие порога новизны удаляются и память освобождается.
Да, я именно об этом.
С одной поправкой. Память ограничена и неизбежно наступает момент, когда удаления сигналов недостигших порогов новизны (говоря вашим языком) недостаточно и приходится удалять сигналы достигшие порог новизны. А точнее сигналы достигшие порог новизны могут быть удалены и ранее, но с меньшей вероятностью для реализации механизма забывания.
Из-за шума в памяти накапливается подавляющее количество мусора, а количество полезной информации становится исчезающе малым.
|
| |
create
|
23:49 17.05.2021 |
|
23:53 17.05.2021 |
|
№1084 |
Prosolver:cortl: внешний шум среды он и есть сигнал на сенсоре Kek: Летающая постоянно муха, которая мешает читать, это шум зрительный. Мне кажется тут какая-то путаница в контекстах. Если в комнате летает муха, то это никакой не шум, а чётко опознанный полноценный объект, который отвлекает на себя внимание, создаёт помехи, раздражает. Он имеет свою индивидуальную историю и должен быть записан в жизненный опыт на общих основаниях. Чтобы ликвидировать этот раздражитель муху надо просто прихлопнуть или выгнать из комнаты.
cortl же, насколько я понимаю, говорит о другого рода шумах - физических, типа теплового шума матрицы фотоаппарата, которые должны, по идее, препятствовать правильному опознаванию объектов и даже создавать паразитные псевдо-объекты. Но если судить по нашему опыту, то такие физические шумы фактически не доходят до сознания (и, следовательно, до запоминания), поскольку мозг показывает сознанию идеально нарисованный мультик уже после того, как физические шумы были отфильтрованы. И поэтому нет нужды с ними как-то специально бороться, для сознания их просто нет.
Пример с мухой и мне не понравился, но я это не сформулировал.
"мозг показывает сознанию идеально нарисованный мультик" - как ему это удаётся?
Мне думается - это не просто какие-то алгоритмы шумоподавления.
"И поэтому нет нужды с ними как-то специально бороться, для сознания их просто нет." Здорово! Но никто не пройдёт за нас этот путь.
|
| |
create
|
Хорошо, модель, так модель. Спасает от шума, ок. Откуда она берётся в AGI?
|
| |
create
|
kondrat:cortl: Хорошо, модель, так модель. Спасает от шума, ок. Откуда она берётся в AGI?
От шума спасает только снижение энергии шума и повышение энергетики сигнала в канале. Есть разные способы: согласованная фильтрация, разрабатываемая на основе априорных знаний о сигнале, например. Но всё сводится к одному - интегрированию.
Нет априорных знаний о сигнале. Что может знать слепой котёнок брошенный в ведро с водой? А не сдохнуть-то как-то надо.
|
| |
create
|
kondrat:cortl:kondrat:cortl: Хорошо, модель, так модель. Спасает от шума, ок. Откуда она берётся в AGI?
От шума спасает только снижение энергии шума и повышение энергетики сигнала в канале. Есть разные способы: согласованная фильтрация, разрабатываемая на основе априорных знаний о сигнале, например. Но всё сводится к одному - интегрированию.
Нет априорных знаний о сигнале. Что может знать слепой котёнок брошенный в ведро с водой? А не сдохнуть-то как-то надо.
Во! Но на самом деле, она формируется в цикле действие-подкрепление и используется потом для формирования реакций на стимулы.
Гладко было на бумаге... Только шума столько, что память забивается очень быстро и мусором, а не моделью.
О размере памяти:
То что могу себе позволить - это 2^16 нейронов в bnn.
Бинарный нейрон несоизмеримо меньше среднего нейрона человека, а у человека вон их сколько! Отсюда вывод - надо пытаться бороться с шумом.
|
| |
create
|
Egg: Не забывайте, что нейрон - это отдельное, вполне себе самостоятельное животное.
Резонно.
Egg: У него нет incoming/outgoing
Здрасьте, приехали...
Egg: у него есть просто процессы жизнедеятельности, тихие и неторопливые
Резонно.
Egg: без всякого шума... )))
Всяко может быть. Он может заболел.
Но в bnn нейрон сам по себе шуметь не может.
|
| |
create
|
Egg: Там же не только дендриды и аксон, там самое главное - химия нейромедиаторов, именно они играют роль фильтров.
Как выяснили здесь сигналы имеют два логических уровня (нет импульса - 0, есть импульс - 1) и могут быть выражены через значение типа bool. Интенсивность сигнала задаётся не уровнем импульсов, а интервалами между ними. Получается химия управляет не порогом отсечки по уровню, а пропусканием некоторого количества импульсов "мимо ушей".
Что управляет химией?
|
| |
create
|
16:38 23.05.2021 |
|
16:39 23.05.2021 |
|
№1143 |
kondrat: В нашем случае не важно, как представлены сигналы, а шум - это любая ложная информация об окружающем мире.
С одной стороны интеллект мне представляется как дешифратор, который дешифрует данные согласно известному ключу и подбирает эти ключи. Если ключ неизвестен, то данные представляются ему шумом. Таким образом, шум не всегда является ложной информацией об окружающем мире. Кроме того, ложная информация есть информация с каким-то смыслом, а если из шума ничего не получается извлечь - это просто мусор для того кто пытается это сделать.
Напротив любой шум - это истина об окружающем мире! Только о мире более низкого уровня. С одной стороны пытаться избавиться от шума значит потенциально пропустить полезную информацию, с другой - не избавиться от него значит погрязнуть в малосущественных деталях.
|
| |
create
|
Prosolver: До сих пор не очень понятно, что именно Вы понимаете под "шумом". Всегда очень полезно дать вначале хотя бы общее определение или пояснить на примерах. Потому что понимание терминов может быть сильно разным.
Шум (в данном случае) - то, что мешает ухватить суть, чтобы построить хотябы миномальную модель, которая поможет "волшебным" образом отфильтровывать этот же шум. Курица и яйцо получается.
|
| |
create
|
От восприятия к мышлению. |
00:53 05.06.2021 |
|
01:18 05.06.2021 |
|
№1190 |
Egg:Вот Ильгизар неплохо сформулировал на AGI-ru:
Ilgizar Talipov: Младенец имеет только потенцию, способность к овладению интеллектом, содержание которого находится в социуме. Все эвристики, нормы, сущности, имена и т.п. живут, проявляются и поддерживаются коллективной деятельностью членов социума. От того в какую систему деятельностей попадет младенец зависит то какая базовая интеллектуальность в нем родится. После физического рождения младенца начинается этап ментального вынашивания формирования и рождения.
Каждый из нас мог родиться в другое время, в другой цивилизации. Родившись в первобытном обществе никто из нас не смог бы стать тем кем является сейчас. По той простой причине, что в том социуме не было интеллектуального содержания, и неоткуда ему было бы возникнуть в нас. Но первобытный человек родившись в наше время смог бы превзойти себя, стать другим, более цивилизованным.
Интеллект в AGI не может самозарождаться и саморазвиваться в отрыве от того социального интеллекта. Причина интеллекта не в структуре связей и моделях нейронных сетей индивида или агента AGI, а в исторически сложившихся и устоявшихся взаимодействиях, нормах, шаблонах, процессах.
Мы не причина интеллекта, а только временные его носители, переносчики, среда, ниша его развития.
Социум, худо, бедно, у нас есть, есть куда поместить носителя интеллекта, а "агента AGI" - нет.
Поэтому размазываться на создание социума не надо, а агент AGI начинается какраз с нейронных сетей, нейронов и битов.
"По той простой причине, что в том социуме не было интеллектуального содержания"
Интересно, по каким таким критериям определено, что сейчас оно есть, а тогда его не было?
|
| |
create
|
От восприятия к мышлению. |
Egg:cortl: а агент AGI начинается какраз с нейронных сетей, нейронов и битов.
Из костылей, о которых вы написали в лучшем случае получится функция. А вот для того, чтобы получился субъект ("реальный" агент) нужны минимум три модели: модель себя, модель объекта/актора, с которым координируешься и модель мира, то есть среды, в которой эта координация происходит. Когда найдете это всё в ANN или битах - продолжим нашу беседу. )))
Как минимум с одного костыля (бит) начинается всё. Абсолютно всё! На чём вы собираетесь строить модели, если не на перечисленных костылях?
|
| |
create
|
От восприятия к мышлению. |
Не вижу противоречий и ответов на поставленные вопросы.
|
| |
create
|
От восприятия к мышлению. |
Egg:cortl: Не вижу противоречий и ответов на поставленные вопросы.
Где здесь дом? ))
Дом может быть построен из кирпичей. Я сожалею, что ввязался в беседу с вами. Вода водой.
|
| |
create
|
От восприятия к мышлению. |
Egg:cortl: Дом может быть построен из кирпичей.
Дурак знает, что может. Дурак не знает как это сделать. ))) Вопрос именно в этом. А не в кирпичах.
Признаю своё поражение.
|
| |
create
|
От восприятия к мышлению. |
Egg:cortl: Признаю своё поражение.
Я ведь сразу предлагал продолжить позже, когда вы разберетесь. Ибо искать интеллект в сетях может только тот, кто не понимает ни сетей, ни интеллекта.
Большое спасибо, сэнсэй, вы не оставляете заблудших в их заблуждениях!
|
| |
create
|
От восприятия к мышлению. |
Последняя попытка. Я задавал вопросы:
1.
Egg:Вот Ильгизар неплохо сформулировал на AGI-ru:
Ilgizar Talipov: ... По той простой причине, что в том социуме не было интеллектуального содержания...
cortl: Интересно, по каким таким критериям определено, что сейчас оно есть, а тогда его не было?
2.
cortl: На чём вы собираетесь строить модели, если не на перечисленных костылях?
Напомню костыли это: НС, нейроны биты.
|
| |
create
|
От восприятия к мышлению. |
Linner: ... как там с долговременной памятью? Разобрались? А то от жизни отстал. Спасибо.
У меня не так много времени, чтобы быстро продвигаться в своей разработке. Временами я не вспоминаю о ней по полгода и более. Обычно после такого приходит идея. Пока идей нет.
|
| |
create
|
Сегодня говорил с человеком, который учился по медицине. Изучал две дисциплины: нейрофтзиологию и психологию. Его ощущения от первой - точная наука всё ясно, понятно - одно вытекает из другого. От второй - гуманитарная непоследовательная путаница.
Печально видеть как от каких-то простых понятных вещей люди углубляются в непролазные дебри, надеясь сократить путь, но фактически строят здание СИИ с крыши, в надежде подвести когда-нибудь под неё фундамент. Мне видится необходимум построить фундамент, а крыша приложится.
Prosolver, интеллект либо есть, либо нет. Сверхсильный отличается от человеческого только количественно, ИМХО.
|
|
|