Что такое обучение? - страница 6

 
Maxim Dmitrievsky #:
И тем и тем. Обучение нужно чтобы просто собрать готовую модель, которая предсказывает. Иначе что будет предсказывать?
То есть обучение ее тупым действиям купить/продать. 
Ок. Ты наверное хотел сказать обучение "когда" производить действие, при каких условиях. Само действие модель вроде как безусловно «умеет»



А как вы объясняете следующее:


1) Вот тебе 100 примеров с ответами. Чтобы все ответы знал. 

2) Вот тебе 3 примера. Если дам тебе 4-ый - ты должен решить его. 

Это обучения? Или обучение с датамайнингом?
 
Ivan Butko #:
Ок. Ты наверное хотел сказать обучение "когда" производить безусловное действие, при каких условиях. 



А как вы объясняете следующее:


1) Вот тебе 100 примеров с ответами. Чтобы все ответы знал. 

2) Вот тебе 3 примера. Если дам тебе 4-ый - ты должен решить его. 

Это обучения? Или обучение с датамайнингом?
Если ты знаешь, что он решается на основе переданных знаний, то обучение. Если не знаешь, то проверка через обучение (на новых данных). Типа сам не знаю чему учу, но обучу и позырю что будет. Нормальный подход, когда ничего не понятно :)
 
Maxim Dmitrievsky #:
Типа сам не знаю чему учу, но обучу и позырю что будет. Нормальный подход, когда ничего не понятно :)

Мой подход, так то он респектовый


Maxim Dmitrievsky #:
Если ты знаешь, что он решается на основе переданных знаний, то обучение. Если не знаешь, то проверка через обучение (на новых данных). 


1) Способность выучить примеры и безошибочно их транслировать
2) Способность выучить правило, исходя из малого количества примеров и безошибочно их транслировать

Чат сказал, что надо добавить «костыль», чтобы НС могла умножать 11 на 11.

МО содержит какую-то иерархию архитектур? по типу:

1) Эта может сложить дважды два и ничего более
2) Эта может умножить от 1 до 9 и ничего более
3) Эта может умножить от 1 до 9 и более
4) Эта может найти степень любого числа
5) Эта - полностью повторяет калькулятор
6) А эта вообще может эмулировать PS5

Если да, то как вы охарактеризовываете «степень», «уровень» интеллектуальности модели (объём её качественных способностей). То есть, как одна модель переходит в другую, что дл яэтого нужно: ведь количество нейронов не делает НС интеллектуальней, как оказалось. 

 
Andrey Dik #:

Не совсем так. Важно первоначальное базовое форматирование мозга, чтобы оно могло в последствии быть способным к обучению. Обычно роль форматирования, подготовки мозга, играет роль устная речь, но в случае, когда ребенок имеет недостатки в органах восприятия, то применяют иные методики обучения, специально для слепо-глухо-немых. Но в обоих случаях мозг необходимо подготовить к обучению. Эта подготовка необходимая часть обучения вообще.

Поэтому, даже если имеется "среда", но обучение прошло абы как, то результата не будет, интеллектуальность не возникнет сама по себе только лишь потому, что это "мозг!".

Поправь, если я ошибаюсь:

Если 300 000 лет назад у пещерного человека забрать ребёнка и воспитывать его в 21 веке - он сможет адаптироваться?

 
Ivan Butko #:

Мой подход, так то он респектовый



1) Способность выучить примеры и безошибочно их транслировать
2) Способность выучить правило, исходя из малого количества примеров и безошибочно их транслировать

Чат сказал, что надо добавить «костыль», чтобы НС могла умножать 11 на 11.

МО содержит какую-то иерархию архитектур? по типу:

1) Эта может сложить дважды два и ничего более
2) Эта может умножить от 1 до 9 и ничего более
3) Эта может умножить от 1 до 9 и более
4) Эта может найти степень любого числа
5) Эта - полностью повторяет калькулятор
6) А эта вообще может эмулировать PS5

Если да, то как вы охарактеризовываете «степень», «уровень» интеллектуальности модели (объём её качественных способностей). То есть, как одна модель переходит в другую, что дл яэтого нужно: ведь количество нейронов не делает НС интеллектуальней, как оказалось. 

Способность обучиться без излишеств. Не переусложнить и не переупростить. Чтобы выдавать то, что от нее требуется, при известных ответах.

Это как раз описывается в теории обучения, баланс между запоминанием и обобщением. Это не касается вообще абсолютно новых ситуаций, а касается только обучающих данных.
 
Ivan Butko #:

Поправь, если я ошибаюсь:

Если 300 000 лет назад у пещерного человека забрать ребёнка и воспитывать его в 21 веке - он сможет адаптироваться?


Да, мозг с тех пор никак не изменился, но изменились способы обучения и развилась устная речь - ключевой элемент в процессе обучения. Если перенести во времени грудного ребёнка пещерного человека и погрузить в современное общество, то вполне может вырасти из него новый Ньютон или Эйнштейн.
 
Aleksey Vyazmikin #:

Есть наблюдения, говорящие о том, что мозг получаемую новую информацию кладёт в ближайшие свободные ячейки памяти (формируются синоптические связи), и это приводит к воспоминаниям, сопутствующим основному процессу. Т.е. если напрячься немного, то вспомните как учили таблицу умножения, как рассказывали её родителю и не понимали смысл этого действия - не стих же и не в ритму, там же найдёте воспоминания о времени года, а может и детали всплывут быта и лица одноклассников. Такой механизм организации памяти способствует работе абстракции, когда в мозг приходят данные с рецепторов и ищется на них реакция через интерпретацию - подымаются те же задачи, которые уже решались и новые связи там же наращиваются (образно), усиливая вариативность и абстракцию.

Получается, что кроме механизма группировки информации, требуется ещё правильное обучение (череда последовательных событий)

....

Тут дело в том, что понять может никто и не может - есть некоторые вероятности, которые запоминает мозг, но он более пластичен и проще перестраивается, а методы МО обычно усредняют примеры все за время обучения и так и используются на новых данных. В то же время, я считаю, что надо помогать и самому генерировать предикторы, которые будут акцентировать внимание на те или иные моменты.

В целом методы МО не работают стабильно из-за дрейфа данных, т.е. меняются вероятностные распределения для генерируемых внутри НС предикторов или самостоятельно созданных. А меняются по двум причинам - либо это ложные закономерности, либо изменился рынок (к примеру, больше трейдеров (в финансовом исчислении) вдруг стало использовать иные похожие стратегии, чем до этого). Пока у меня такие мысли на этот счёт. Надо уделять больше внимания дрейфу и мониторингу отдельных закономерностей.

...

Прикольно

 
Andrey Dik #:

Да, мозг с тех пор никак не изменился, но изменились способы обучения и развилась устная речь - ключевой элемент в процессе обучения. Если перенести во времени грудного ребёнка пещерного человека и погрузить в современное общество, то вполне может вырасти из него новый Ньютон или Эйнштейн.

Жесть, люди сидели в пещерах, а могли уже тогда индустриализацию замутить

Всего-лишь нужно было обучение))

 
Ivan Butko #:

Жесть, люди сидели в пещерах, а могли уже тогда индустриализацию замутить

Всего-лишь нужно было обучение))

Не могли, другая нервная система, другие механизмы адаптации. Такой человек не выжил бы в современной среде, сошел с ума.

Это происходит в настоящий момент. Архаизмы самоуничтожаются или уничтожаются. Искусственный отбор. Отбираются те, кто приспособлен под реалии.

Напомню, что по конструкции мозга люди отличаются больше, чем разные виды животных.
 
Maxim Dmitrievsky #:
Не могли, другая нервная система, другие механизмы адаптации. Такой человек не выжил бы в современной среде, сошел с ума.

Это происходит в настоящий момент. Архаизмы самоуничтожаются или уничтожаются. Искусственный отбор. Отбираются те, кто приспособлен под реалии.

Напомню, что по конструкции мозга люди отличаются больше, чем разные виды животных.

Ща погоди, Чат хочет ответить

...

— Вывод

Если ребенка из прошлого воспитать в современном обществе, он будет ничем не отличаться от современных детей с точки зрения интеллекта, способности к обучению и социальной адаптации. Вся разница заключается в том, какая культура и среда формируют его развитие.

...


Можешь прокомментировать контаргумент одного учёного-биолога-антрополога-короче крайне уверенного человека, он сказал следующее: "Не могли, другая нервная система, другие механизмы адаптации. Такой человек не выжил бы в современной среде, сошел с ума. Это происходит в настоящий момент. Архаизмы самоуничтожаются или уничтожаются. Искусственный отбор. Отбираются те, кто приспособлен под реалии."

...

— Вывод

Тезисы этого ученого имеют излишне драматичный тон и недостаточно опираются на современные знания о пластичности мозга, биологии и эволюции. Если воспитать ребенка из прошлого в современной среде, он стал бы обычным человеком, адаптированным к своему времени, поскольку воспитание и обучение играют решающую роль в человеческом развитии.