Мы используем файлы cookie, чтобы сайт работал и становился удобнее. Продолжая пользоваться «Думайте», вы соглашаетесь с Политикой конфиденциальности.

показать все результаты

Ничего не найдено

Как ИИ приведет к массовому отупению общества

3 дн. назад источник
261 46 5 мин

Я ранее делал несколько попыток и заходов к этой теме, но не в этом году. Попробую переосмыслить и дополнить то, что ранее обсуждал.

Это, возможно, один из самых недооцененных рисков ИИ-трансформации. Процесс отупения общества шел стремительно еще до появления LLMs, но сейчас этот процесс может ускориться едва ли не по экспоненте.

Не прогресс может ускориться, а деградация общества ускорится!

Речь идет о постепенном разрушении самого механизма формирования интеллекта, когда человек получает результат, не проходя путь, который прежде был необходим для приобретения способности насыщения когнитивной глубины.

Интеллект формируется не потреблением правильных ответов, а длительным прохождением через неопределенность, поиск информации и данных, разрешение ошибок и противоречий, причинный анализ и самостоятельную коррекцию собственной модели мира.

Именно поэтому в образовательной среде запрещают списывать. Не столько ради контроля знаний, сколько потому, что готовый ответ уничтожает образовательную функцию задачи, а ИИ – это и есть «намертво привязанная шпаргалка».

Правильный ответ является лишь конечным продуктом этого процесса. Главный результат обучения находится не на бумаге, а внутри сложного биохимического процесса в мозге в виде самостоятельного достижения результата.

Чтобы решить проблему самостоятельно, человек вынужден: понять условия, декомпозировать задачу, вспомнить необходимую информацию (активировать функцию памяти), сформировать гипотезы, выбрать правильный метод, ошибиться, обнаружить противоречие, вернуться назад, пересобрать модель и только затем получить результат.

ИИ способен вырезать практически всю эту когнитивную цепочку.

Технологии и научные прорывы создаются в результате экстремального насилия и невыносимого давления на все функции мозга (сам знаю).

ИИ дает мгновенную кнопку выхода из неопределенности, скорее имитация выхода.

Если этот паттерн становится нормой с детства, может возникнуть интеллектуальная непереносимость усилия, когда человек теряет способность долго удерживать сложную проблему без немедленного вознаграждения.

Без усилия человек никогда не приобретет интеллект, т.е. останется на уровне пограничным с животным.

Самостоятельное понимание затратно (во всех смыслах), тяжело, медленно и психологически неприятно, а правдоподобный готовый ответ дешев, мгновенен и комфортен.

Человечество неминуемо пойдет по пути наименьшего сопротивления, т.е. высокоинтенсивное отупение.

Проблема усугубляется тем, что последствия проявляются с огромным лагом. Общество статистически выглядит умнее за счет замещения задач продуктом ИИ деятельности, но в своей основе стремительно деградирует.

Мышление не запускается в комфорте. Мышление – это всегда стресс, именно поэтому никто не любит думать и панически боится интеллектуальной работы.

Нейробиологический процесс обучения требует состояния когнитивного тупика (продуктивной фрустрации). В этот момент в мозге выбрасываются норадреналин и ацетилхолин, фокусирующие внимание на ошибке, после чего через сотни итераций подбора гипотез активируется дофаминовое подкрепление. Этот стресс заставляет кору выстраивать новые синаптические связи. Когда готовое решение выдается мгновенно, фаза поиска и фрустрации обнуляется.

Человеческий мозг склонен путать узнавание с пониманием. Читая логичный, связный и стилистически выверенный ответ модели, человек испытывает ощущение ясности. Возникает феномен «списывания отличника»: списывающему кажется, что раз чужое доказательство теоремы ему понятно в процессе чтения, он владеет предметом. Однако пассивное потребление чужого структурированного вывода задействует лишь зоны распознавания образов, оставляя префронтальную кору в режиме функционального покоя. Навык конструирования мысли распадается, подменяясь навыком поверхностного серфинга по готовым концептам.

Способность решать нетривиальные задачи прямо пропорциональна числу сущностей и ограничений, которые человек способен удерживать в голове одновременно.

Перекладывая декомпозицию, сопоставление и структурирование данных на интерфейс ИИ, человек сужает собственную рабочую память до длины единичного запроса, разрушая весь мыслительный процесс.

Человек разучивается удерживать сложные, противоречивые причинно-следственные связи, превращаясь в оператора простых триггеров.

Становление эксперта в любой дисциплине подчиняется закону кумулятивного накопления скрытого опыта. Высококлассный эксперт не возникает непосредственно из университета, а является результатом решения тысяч типовых задач от начала и до конца, разрешения тысяч ошибок и пограничных ситуаций, и многолетнего накопления неформализованного опыта.

Невозможно вырастить эксперта, исключив путь, по которому формируется экспертиза.

Это значит, что по мере выхода зрелого поколения экспертов (по возрасту или в связи с отупением), новых экспертов не появится, как минимум, в сопоставимом количестве.

Раньше интернет позволил вынести наружу память: человеку уже необязательно было помнить информацию, достаточно знать, где ее найти. LLMs идут намного дальше, вынося наружу не только память, но и поиск, анализ, синтез, аргументацию, планирование и даже формирование причинной модели.

Возникает принципиально новая ситуация: человечество впервые получает возможность пользоваться интеллектом, не приобретая интеллект.

Человек задает сложный вопрос, получает великолепно структурированное объяснение, понимает (или скорее думает, считает, что понимает, да и то не всегда) каждое предложение и принимает понимание текста за собственное понимание проблемы. Но если убрать ИИ и попросить самостоятельно воспроизвести причинную конструкцию, изменить исходные предпосылки или найти ошибку, внезапно выясняется, что интеллект существовал только в момент подключения к внешней системе.

ИИ экономит текущие человеко-часы, одновременно потенциально уничтожая инвестиции в будущую компетентность.

Получается парадоксальная ситуация: текущая производительность во многих областях растет, а скорость накопления человеческого капитала снижается, причем стремительно и неотвратимо.

Грубо говоря, при отключении доступа к ИИ, уже совсем скоро человечество превратится в тупых зомбарей, не способных решить ни одной, даже самой элементарной задачи.

Однако, отупение приводит к тому, что человечество утратит возможность верифицировать, контролировать, корректно воспроизводить результат работы ИИ, полностью оголяя свою непробиваемую некомпетентность.

Если субъект не прошел путь формирования знания снизу вверх, он лишен инструментов внутренней валидации. Для него истинно то, что выдает авторитетный алгоритмический оракул.

Общество входит в эпоху тотальной внушаемости, неспособное решать ни одной существенной задачи, теряя способность к контролю, управлению, осмыслению, рефлексии и формулировке сложных вопросов.

Это и есть полная катастрофа с далеко идущими последствиями.

86 %
90 %

Комментарии 45

Войдите, чтобы оставить комментарий.

уровень 1 в 1 день
Автомобиль отучит человека ходить, станок - работать руками, а экскаватор помешает держать лопату и упорно копать грядку для будущей еды. Мы получим общество голодных изнеженных одуванчиков, неспособных на простейшие физические усилия. Как-то так.
Полезно
Уместно
уровень 3 в 1 день
Олег, казалось бы ирония понятна, но ведь так и происходит... Люди, которые родились и выросли в городах действительно меньше приспособлены к жизни. Перевести с "земли" в город человека можно, и, скорее всего он ещё фору даст городским жителям, а вот обратно будет очень трудно. Плюс в городе люди рожают меньше, т.е. люди не воспроизводят себя.
Полезно
Уместно
уровень 1 в 1 день
Юрий, U▷U но тем не менее люди всё ещё живут, но значительно качественее чем раньше или в деревне 노↽노 у городских в плане деторождения выше качество, а не количество
Полезно
Уместно
уровень 3 в 1 день
Юк, если средний коэффициент рождаемости (СКР) ниже 2,2, то люди всё равно вырождаются, даже несмотря на "качество". Вообще миф "качество важнее количества" один из самых распространённых и самых опасных в сфере демографии. Видимо надо писать статью по этому поводу...
Полезно
Уместно
уровень 1 в 1 день
Юрий, 노—노 я не отрицаю демографический кризис, но так уже сложилось, что качество стоит выше количества так как десяток "допустимидиотов" можно заменить техникой, а вот одного специалиста заменить уже будет сложнее 그↽그 Или если не ценить качества, то можно получить нефункциональных специалистов 느—느 причина низкой рождаемости сейчас не "падение нравственности" или инфантилизм людей, а страх давать жизнь новому человеку, не имея возможности дать ему все возможности для развития и провалиться в роли родителя.
Полезно
Уместно
уровень 3 в 1 день
Юк, "но так уже сложилось, что качество стоит выше количества" - сложилось или кто-то "сложил". Именно этот подход приводит к нашему вырождению. Если так просто заменять неквалифицированных людей, почему тогда их завозят сотнями тысяч? "Или если не ценить качества, то можно получить нефункциональных специалистов" - я не говорю не ценить, а говорю, что качество может быть только из количества. А вот количества из качества не бывает. Пример - Южная Корее и ещё куча стран. "причина низкой рождаемости сейчас не "падение нравственности" или инфантилизм людей, а страх давать жизнь новому человеку, не имея возможности дать ему все возможности для развития и провалиться в роли родителя." - Причин низкой рождаемости очень много. Часть из них разобраны в материалах: dumaite.ru/iurii_sapovalov/19 dumaite.ru/iurii_sapovalov/13 dumaite.ru/iurii_sapovalov/5 Также есть моё видео "Демография России. Кто виноват? Что делать?" - Там собрал 69 факторов, влияющих на демографию. Вы назвали только один.
Полезно
Уместно
уровень 1 в 1 день
Юрий, の▷の я больше про общечеловеческую выгоду, а не государственую 느∇느 и про технологическую замену. Тоесть на месте не требующем мозгов пожно поставить машину или станок, но вот на управление нужен человек. Десять с неподходящими навыками его не заменят. の▷の мне лень сейчас читать ваши статьи, так как мы ведём дискуссию. Раз они за вашим авторством, то вы сможете привести тезисы из них, 工▽工 впрочем мы вроде как и не несоглашались в причинах, мы спорим о качестве и количестве
Полезно
Уместно
уровень 3 в 1 день
Юк, "я больше про общечеловеческую выгоду, а не государственную" - наш народ вымирает. В чём здесь "общечеловеческая выгода"? Нашим врагам - да, выгода очевидна. "и про технологическую замену. То есть на месте не требующем мозгов можно поставить машину или станок, но вот на управление нужен человек. Десять с неподходящими навыками его не заменят." - Не получится, да и не надо, всё автоматизировать. Ручной труд не получится автоматизировать. "мне лень сейчас читать ваши статьи, так как мы ведём дискуссию" - Будет возможность, ознакомьтесь, буду рад вашим комментариям. "мы спорим о качестве и количестве" - как писал выше, видимо пора начинать писать этот материал.
Полезно
Уместно
уровень 1 в 1 день
Юрий, 노↽노 ・・・ Но ведь. Качество жизни в развитых странах продолжает расти, потому в них и мигрируют люди из развивающихся. И... стиральные и швейные машинки, станки, техника. 그↽그 это буквально упрощение и автоматизация ручного труда до той степени когда больше нужен "оператор", а не "ремесленик". тоесть вместо десяти швей, можно нанять одну и она будет столь же эфективна если не выше.
Полезно
Уместно
уровень 3 в 1 день
Юк, "Качество жизни в развитых странах продолжает расти, потому в них и мигрируют люди из развивающихся" - С одной стороны да. Но тут скрыты очень важные вопросы: люди для экономики или экономика для людей? Люди для государства или государство для людей? Я считаю, что ключевой показатель здоровья общества - рождаемость. Если она есть, то будет и экономика, и армия, и технологии. А вот если нет рождаемости, то какие бы ни были передовые технологии, какой бы ни был ВВП на душу населения - всё это не будет не иметь никакого смысла. Лично я не считаю показатель "качество жизни" первостепенным.
Полезно
Уместно
уровень 1 в 1 день
Юрий, "느∇느 вы правы, я чёт увлёкся и забыл о перспективах будущего
Полезно
Уместно
уровень 1 в 1 день
Юрий, вы некорректно подменяете в обсуждении общий ход технического прогресса на обусловленную окружением специализацию. И в городе люди после высшей техники едут на огороды копать, и в селе беспомощно пропивают последнее; здесь нет разницы, нет показателя. ИИ - это очередной инструмент. Вполне себе революционный. Паника по его поводу исторически знакома и полностью понятна. Но приговором человечеству это быть не может. Да, общество снова трансформируется, приспособится, изменится, приспосабливаясь к новому явлению. Только и всего. Мануфактурщики тоже поначалу громили заводские машины, которые делали то же самое быстрее, дешевле и без участия человеческих рук. Если человек не думает, ему ИИ не поможет. А если думает, то никак не помешает.
Полезно
Уместно
уровень 3 в 12 часов
Олег, "общий ход технического прогресса" - правильно ли я понимаю, что под "общим" вы понимаете, что он идёт сам собой и им никто не управляет? Что если допустить, что "общего хода" нет, что часть технологий специально продвигают, а часть намеренно сдерживают? "ИИ - это очередной инструмент" - всё-таки сильный инструмент. Почему - потому что претендует на мировоззрение, на человеческое взаимодействие. Если брать тот же автомобиль, то у него не спрашивали как проводить атаку на Иран, его не считают своим другом, с ним не разговаривают, не используют как психолога (конечно, некоторые разговаривают со своим автомобилем, но это скорее исключение, а не правило).
Полезно
Уместно
уровень 1 в 2 часа
Юрий, в первой части, про намеренное управление продвижением технологий, вы уходите в конспирологию. С этими идеями я знаком более тридцати лет, но не считаю адекватным обсуждать их на этой платформе. Мне кажется, она задумана немного иначе. Технологии невозможно ни взять из ниоткуда, ни спрятать в никуда. Всегда есть след в смежных областях знаний, без которых технология не возникает. Во второй части, про претензии инструмента, извините, это тоже мифологическое мировоззрение. ИИ ни на что не претендует. Как максимум, он является зеркалом; и каждый волен увидеть в нём ровно то, что хочет. То, что сам человек хочет. Друга, психолога, военачальника - да, на любой вкус. Но это только рефлекс железки на действия и запросы человека. Даже если этот рефлекс становится настолько сложным, составным и насыщенным, что начинает превосходить понимание неискушенного человека. Это проблема человека, а не инструмента. Попросту говоря, не нужно быть дураком, чтобы не приходилось обожествлять машину. Ну, а кому проще в религию, чем в разум, тем и без ИИ не первое тысячелетие есть, чем заняться.
Полезно
Уместно
уровень 3 в 3 дня
Всё так и есть. Даже на этом сайте наблюдал, как некоторые авторы публикаций, написанных ИИ, в комментариях не могут толком сформулировать более-менее внятные аргументы. Речь зачастую упрощена, предложения отрывисты и примитивны. Нет желания кого-то обидеть, но глядя на это, становится как-то не по себе...
Полезно
Уместно
уровень 1 в 3 дня
Вполне обоснованно. Я бы отметил, что человеку, даже взрослому и состоявшемся необходимы сверх нагрузки. А не только детям, для формирования интеллекта. Ото многие думают:"я уже взрослый, вырос мне можно" ))) Нет мозги очень быстро отвыкают от нагрузки, быстрее чем мышцы.
Полезно
Уместно
уровень 3 в 3 дня
Риски серьëзные, но и возможности развивать интеллект с ИИ гораздо выше чем без него. Скорость изучения новых знаний, проверки их на практике, реализации решений вырастает многократно. При вдумчивом подходе это наоборот позволяет человеку гораздо активнее развиваться. Поэтому вопрос всë же в том, как мы будем использовать ИИ и как обучать детей с ним правильно взаимодействовать.
Полезно
Уместно
уровень 2 в 3 дня
Навык запоминания и навык обработки информации, два разных процесса, однако очень связанных в человеческой психике. Наилучшее запоминание происходит при обстоятельном анализе предмета исследования. Такая информация в психике в дальнейшем лучше поддается обработке. Но людям сейчас внушают с детства рабские стереотипы. Зачем запоминать, когда можно забить в поисковике в любое время? Зачем анализировать, мыслить, когда можно получить сразу готовый ответ? А в пределе такой вопрос: зачем формулировать вопросы, выявлять проблемы, когда этим заняты ИИ или другие люди на высоких должностях? Что я могу с этим сделать? Все так живут, так зачем же из кожи лезть вон, и что-то менять? Все само уладится. Лозунги нового мира: живи сегодняшним днём в определенных кем-то рамках, получайте удовольствие, потребляйте, отдавая взамен свободу. Инструкции вам выдадут, зону комфорта создадут. Будете жить в кайф, если выданные инструкции будут исполняться. Вас этому обучат с самого детства. За непослушание - наказание. Навыки выявления проблем, запоминания, мышления, взаимодействия с людьми в тандеме станут уделом узкого круга людей. Важно понимать, ты либо раб, либо человек-сотворец (используешь волю и поступаешь по совести). Третьего не дано. Пояснение. Если все же используешь волю, но не поступаешь по совести, то ты раб ложных стереотипов устройства жизни. Если поступаешь по совести, но безволен, то раб тех, кто использует тебя. В чём я прав в в чем ошибаюсь? Как повлиять на данный процесс? Может у ИИ спросить)? Или кто-то другой может ответит на эти вопросы?
Полезно
Уместно
уровень 1 в 3 дня
Совершенно согласна со всеми тезисами данной статьи. Было очень увлекательно читать. Благодарю за этот труд. Да здравствует Трудолюбивый и Пытливый Ум Живого Человека!
Полезно
Уместно
уровень 1 в 3 дня
Если бы ИИ был хотя бы точен в своих ответах и мог заменить опытного специалиста... Но ведь и этого нет. Пока что ИИ - идеальный мастер пускания усредненной пыли в глаза какому-нибудь идиоту. Таких спецов и раньше было достаточно. Спрос на эту категорию ограничен. Чтобы всё вокруг продолжало функционировать привычным образом (машины ездили, водопровод проводил, ток тек, туалет сливал) необходим реальный, выстраданный, физический опыт, а не красивая презенташка с картинками. Иначе ИИ скоро даже запитать будет нечем, а его адепты утонут в собственном д. на своих сломанных горшках. А вот всяческие бездельники-креативщики — певцы ртом, скоморохи-музыканты, художники, стихоплеты, рекламщики, — эти реально попали. Их, как оказалось, ИИ заменяет на раз. Хотя, помнится, предсказывали ровно обратное: всё ждали, когда уволят скучных программистов и вознесут наконец на пьедестал творческих эльфов... В нынешнем виде ИИ — это очередная инкарнация мечты "человечества" ничего не делать и при этом всё иметь. Но оно так не работает.
Полезно
Уместно
уровень 4 в 2 дня
Как человек, окончивший музыкальную школу и даже знающий ноты, хочу таки спросить: если поставить человеку дома рояль, он автоматически станет пианистом? С ИИ примерно так же. Он может и развивать человека, и избавлять его от необходимости думать — всё зависит от того, как им пользоваться. С тем, что быстрый и красиво сформулированный ответ ИИ снижает потребность в самостоятельном анализе, спорить трудно. Но отупление общества началось явно не с ИИ. Достаточно посмотреть на середину XX века: стране нужны были инженеры, физики, конструкторы, технологи, учёные, потому что стояли задачи космоса, атома, промышленности, энергетики. Среда требовала сложного человека — и потому массово выращивала его. Позже начала деградировать сама среда: формализация планов, работа «для галочки», искусственный дефицит, затем развал Союза, раздел оставшегося, деградация производства, разрушение инженерных школ, падение качества образования. И вместе с этим уменьшалась сама потребность в большом количестве людей, способных решать сложные задачи. Эксперт действительно формируется через тысячи задач и ошибок. Но где ему взять эти тысячи задач, если исчезает производство, лаборатория, КБ, сама отрасль, которая эти задачи ставила? Поэтому ИИ здесь скорее не первопричина, а мощный ускоритель уже существующего процесса. Один человек скажет ИИ: «реши за меня» — и действительно будет тупеть. Другой скажет: «найди ошибку в моём решении, не давая ответа» — и получит персонального преподавателя. Опасность не в том, что ИИ обязательно сделает людей глупыми. Опасность в другом: общество может построить такую систему, где быть умным просто перестанет быть необходимым. И вот тогда ИИ окажется не причиной деградации, а идеальным инструментом, позволяющим человеку выглядеть компетентным, не приобретая компетентности.
Полезно
Уместно
уровень 2 в 3 дня
..."при отключении доступа к ИИ, уже совсем скоро человечество превратится в тупых зомбарей". Оказавшись у разбитого корыта, человечество вновь начнет возрождать разум на остатках тех знаний, что останется от той, что было. У человека ведь останется "посуда с мозгами" на шее. Можно и не доводить до катастрофы, если из образовательного процесса исключить ИИ. Только кто это будет делать.
Полезно
Уместно
уровень 1 в 2 дня
느↽느 технически доступность ии создаёт интеллектуальный естественный отбор 그↽그 если конечно предполагать "необратимость" "упущеной тренировки мозга" 노^노 в ином случае ии создаёт довольно удобный костыль для людей чьи возможности ограничены по независимым от них причинам
Полезно
Уместно
уровень 3 в 3 дня
Не следует забывать - на элоев всегда найдутся марлоки.
Полезно
Уместно

Оценить запись

86 %
90 %
Категория
100 %

Категория записи указана верно?
Наука и Технологии

Тематики
100 %

Поделиться