Gnoseology and Epistemology: One Object - Different Points of View
Hyperborea: Listen, I've stumbled over two words - gnoseology and epistemology. In Russian texts they are often written as if they were...
17 концептов будущего искусственного суперинтеллекта ASI
Хроника пикирующей в ASI нейросети компании OpenAI
🟣Июнь 2018 — выходит декодерная модель GPT, Generative Pre-trained Transformer 1. К ней выходит статья (https://cdn.openai.com/research-covers/language-unsupervised/language_understanding_paper.pdf), и все даже под открытой лицензией MIT).
Ее и сейчас можно загрузить из HuggingFace (https://huggingface.co/openai-community/openai-gpt)
🟣Ноябрь 2019 — выходит GPT-2! Улучшенная версия, у которой обнаруживаются способности к in-context learning: few-shot, zero-shot ("промптов еще тогда не было" — буду так это внукам рассказывать). И статья (https://cdn.openai.com/better-language-models/language_models_are_unsupervised_multitask_learners.pdf) к ней. Веса выложили (https://github.com/openai/gpt-2) в опенсорс только через полгода после анонса, лицензия — modified MIT, можно жить!
🟣Июнь 2020 — выходит GPT-3, масштабированная GPT-2. Статья выходит, веса — нет. Становится понятно, что все задачи, в общем-то, можно решать в генеративном сетапе. До SFT остается один шаг.
🌸Акт второй. Безопасность
🟣Декабрь 2020 — бунт на корабле! команда Safety и несколько ключевых людей из GPT-3 уходят и основывают Anthropic (https://aibusiness.com/verticals/eleven-openai-employees-break-off-to-establish-anthropic-raise-124m)
🟣Январь 2021 — Dalle, генерация text2image, кресло в форме авокадо
🟣Январь 2022 — Dalle 2
🟣Ноябрь 2022 — ChatGPT! сами все знаете. Месяц, когда работа NLP-шника стала уважаемой, люди стали здороваться, обнимать на улице, брататься.
🟣Март 2023 — GPT-4! И затем — мультимодальность, удешевление GPT-4 дистиллированными версиями
🟣Сентябрь 2023 — Dalle 3, автоматическая аугментация промптов за пользователя
🌸Акт третий. Масштабирование отменяется. Нас всех тошнит
🟣Октябрь 2023 — опять бунт на корабле! Сэма Альтмана увольняет борда с связи с недоверием. Параллельно начинаются проблемы с инфраструктурой, у нас в снэптаче падает прод на какое-то время.
🟣Ноябрь 2023 — Где Илья (https://analyticsindiamag.com/ai-origins-evolution/where-is-ilya/)? Суцкевер перестаёт показываться публично
🟣Январь 2024 — анонсирована SORA, революционнвя модель text2video
🟣Январь 2024— OpenAI убирает военные применения (https://www.google.com/amp/s/www.cnbc.com/amp/2024/01/16/openai-quietly-removes-ban-on-military-use-of-its-ai-tools.html) из исключений в своем кодексе
🟣Март 2024 — исход команд (https://t.me/rybolos_channel/1143)ы safety и Superalignment. Официально уходит Илья Суцкевер, апологет скейлинга. Увидим ли мы что-то действительно масштабное теперь? Не ясно.
🟣Май 2024 — выходят модели поменьше — GPT4o
🟣Июль 2024 — выходит модель еще меньше — GPT4o mini
🟣Июнь 2024 — в совете директоров появляется ЦРУ (https://openai.com/index/openai-appoints-retired-us-army-general/)
🟣Июнь 2024 — Leopold Aschenbrenner, интерн, суммарно проработавший в OpenAI полгода, выпускает Situational awareness (https://situational-awareness.ai/): 160-страничную туалетную бумагу политагитку со спекуляциями и призывами срочно обогнать плохой-плохой Китай. И некоторыми интересными внутренними оценками OpenAI относительно пути к AGI. Сей опус магнум потом запостит у себя в Твиттере Иванка Трамп. Труд нашёл свою аудиторию.
🟣Июль 2024 — Майкрософт выходит (https://www.forbes.com/sites/roberthart/2024/07/10/microsoft-quits-openai-board-as-regulators-crack-down-on-big-techs-ai-dealmaking/) из борды совета директоров OpenAI.
🟣Август 2024 — в бессрочный отпуск выходит Greg Brockman, сооснователь компании. Ещё один сооснователь, John Schulman, уходит (https://www.spiceworks.com/tech/artificial-intelligence/news/openai-undergoes-leadership-shakeup/) в Anthropic.
🟣Сентябрь 2024 — увольняется (https://techcrunch.com/2024/10/03/a-co-lead-on-sora-openais-video-generator-has-left-for-google/) основной автор SORA, Tim Brooks. SORA не выходит.
🟣Сентябрь 2024 — Выходят модели О1, O1mini. Проект, отдельный от GPT, по слухам, занявший 1.5 года.
🟣Сентябрь 2024 — Уходит (https://apnews.com/article/openai-mira-murati-quits-df75217584696b442935dbccc9b0347d) CTO Мира Мурати, в также Chief Research Officer и VP Research
🟣Сентябрь 2024 — OpenAI мeняет структуру (https://www.theguardian.com/technology/2024/sep/26/why-is-openai-planning-to-become-a-for-profit-business-and-does-it-matter) и готовится стать For profit company
🟣Октябрь 2024 — Уходит (https://t.me/rybolos_channel/1288) глава AGI Readiness.
🟣Октябрь 2024 — между OpenAI и Microsoft нарастает (https://www.nytimes.com/2024/10/17/technology/microsoft-openai-partnership-deal.html?unlocked_article_code=1.TE4.Ta8s.ThIHWUiyP9ex&smid=nytcore-ios-share&referringSource=articleShare) напряжение, Сулейман кричит на сотрудников на митингах, выч мощностей не хватает. По контракту, если OAI сделает AGI, Microsoft теряет доступ к технологиям. Но при этом Microsoft сейчас контролирует объем получаемых мощностей компании.
Вычислительное функциональное сознание (Memoria Framework) - рецензия
В статье "Вычислительное функциональное сознание (Memoria Framework)" - оригинальное название "Computational Functional Consciousness (with Memoria Framework)" рассматривается проблема наблюдателя в контексте искусственного интеллекта (ИИ) и сознания. Автор, Виктор Смирнов, утверждает, что для создания подлинно сознательного ИИ необходимо учитывать субъективный опыт и способность к самонаблюдению. Он предлагает концепцию "вычислительного функционального сознания" с использованием структуры Memoria, которая объединяет идеи из психологии, нейробиологии, философии сознания и информатики.
Основная идея заключается в том, что сознание можно моделировать как процесс, включающий самонаблюдение и рефлексию, что требует разработки теории опыта. Автор подчеркивает, что такие понятия, как "красота" и "интерес", являются переживаниями, а не просто поведением, и поэтому их необходимо учитывать при создании сознательного ИИ.
В статье также обсуждаются различные подходы к проблеме сознания, включая теорию интегрированной информации и глобальную рабочую теорию, и предлагается, что объединение этих идей может привести к созданию ИИ с функциональным сознанием. Виктор Смирнов предлагает междисциплинарный подход к решению проблемы наблюдателя в ИИ, объединяя различные теории и концепции для разработки модели вычислительного сознания.
Минусы статьи
Недостаток конкретики:
Концепция Memoria и её применение остаются теоретическими, без технических подробностей или примеров реализации. Это делает статью больше философской, чем практически применимой.Неоднозначность термина "наблюдатель":
Автор использует понятие "наблюдатель" в широком смысле, не всегда уточняя, идёт ли речь о когнитивной структуре, агенте или субъективном "я". Это может запутать читателя.Отсутствие эмпирической базы:
Упоминаются нейробиологические и психологические аспекты, но конкретные эксперименты или данные, подтверждающие теории автора, отсутствуют. Это снижает убедительность выводов.Сложность восприятия текста:
Язык статьи может быть слишком академичным или философским для технической аудитории, что затрудняет понимание практических выводов.Игнорирование альтернативных подходов:
Статья сосредоточена на западных теориях сознания и вычислительной функциональности. Восточные философские идеи о природе сознания (например, буддизм или веданта) могли бы обогатить обсуждение.Оптимизм без критики:
Автор предполагает, что объединение различных теорий приведёт к успеху, но не анализирует, почему предыдущие попытки интеграции этих подходов были ограниченными.
Плюсы статьи
Интеграция дисциплин:
Автор объединяет философию, нейробиологию, психологию и информатику, чтобы создать целостный взгляд на проблему сознания и ИИ. Это способствует междисциплинарному обсуждению и расширяет аудиторию статьи.Фокус на субъективном опыте:
Статья затрагивает центральный вопрос философии сознания — природу субъективного опыта (qualia) и его моделирование. Это важная и недооценённая область в разработке ИИ.Принципиальность проблемы наблюдателя:
Указание на необходимость учитывать "наблюдателя" в контексте ИИ подчёркивает важность самоосознания и рефлексии для создания настоящего сознания, а не просто моделирования поведения.Введение концепции Memoria:
Попытка предложить новую концептуальную структуру, которая может быть применена для моделирования сознания, добавляет практическую ценность статье.Разбор современных теорий сознания:
Обзор таких подходов, как теория интегрированной информации и глобальная рабочая теория, помогает структурировать проблему и рассмотреть её с разных точек зрения.
Итог
Статья выделяется междисциплинарным подходом и глубокой проработкой философских аспектов проблемы сознания, но ей не хватает конкретики и эмпирической опоры. Она может служить хорошей основой для дальнейшего обсуждения, но требует доработки, чтобы быть практически применимой для разработки ИИ.
Искуственный интеллект в американской модели ближайшего будущего
Как и во время Первой промышленной революции, влияние ИИ на занятость и доход будет распределено капризно, часто появляясь без предупреждения. Общая траектория валового национального продукта может выглядеть замечательно позитивной и гладкой, но под этой чистой кривой будет много боли и беспокойства для значительного числа людей на каждом уровне общества, наряду с новыми возможностями для многих и огромными состояниями для некоторых.
В настоящее время ИИ больше всего подходит для автоматизации очень сложных, но и высокоструктурированных видов деятельности: навигации по улицам, классификации изображений, игры в шахматы, использования языков (как человеческих, так и компьютерных). Но фактическое влияние ИИ на определенную человеческую деятельность зависит от трех переменных: скорости и степени автоматизации; уровня человеческих навыков, связанных с видами деятельности, которые могут (и не могут) быть автоматизированы; и, что особенно важно, насколько большой дополнительный спрос будет создан доступностью недорогой автоматизации ИИ. В то время, когда демократия находится под угрозой, существует острая необходимость в остром, информированном анализе проблем и вопросов, движущих новостями, — именно то, что PS всегда предоставлял.
То, что это означает на практике, может быть довольно удивительным. Рассмотрим несколько примеров, начиная с языкового перевода. Недавно я общался с двумя выдающимися экспертами в области ИИ, один за другим. Первый утверждал, что ИИ вскоре полностью устранит переводчиков-людей, потому что перевод ИИ станет по сути идеальным в течение пяти лет. Но второй эксперт утверждал, что нам понадобится больше переводчиков, чем когда-либо. Поскольку ИИ обеспечивает быстрый и недорогой перевод абсолютно чего угодно , произойдет взрывной рост переведенного материала, при этом потребуется человеческий надзор для обучения и улучшения систем ИИ, а также для проверки и исправления наиболее важных материалов.
После дальнейшего исследования я пришел к выводу, что вторая точка зрения более точна. Будет огромный взрыв в том, что будет переведено (на самом деле, он уже есть); и для некоторых вещей мы все еще будем хотеть человеческого контроля. Перевод нужен не только для прогнозов погоды и меню; он также нужен ФБР, ЦРУ, химическим компаниям, производителям медицинских приборов, врачам неотложной помощи, мировым лидерам, хирургам, пилотам самолетов, коммандос и горячим линиям по предотвращению самоубийств. Хотя роль переводчиков-людей сместится в сторону обучения, мониторинга и исправления систем ИИ, нам, вероятно, еще долго будут нужны переводчики.
Похожие вопросы возникают и в других областях. Многие считают, что дни инженеров-программистов сочтены, потому что ИИ действительно хорошо справляется с тем, что они делают, используя только нетехнические человеческие инструкции. Но другие утверждают, что эта тенденция приведет к огромному увеличению количества и сложности производимого программного обеспечения, требуя многих специалистов-людей для концептуализации, организации, проверки и мониторинга этого огромного объема кода. Здесь пока нет единого мнения о чистом трудовом эффекте ИИ.
Для юристов будущее выглядит сложнее. Пока еще рано, но у меня уже было множество разговоров, которые проходили примерно так: нам нужно было соглашение о трудоустройстве/инвестициях/партнерстве/приобретении, но наш юрист тянул вечность, поэтому мы попросили Perplexity (службу искусственного интеллекта) сделать это вместо нас, и это сработало . Мы попросили юриста проверить это, и все было в порядке, поэтому нам больше не нужны юристы, разве что для проверки материалов.
И, в отличие от перевода языков, кажется маловероятным, что ИИ приведет к тысячекратному взрыву в юридической работе. Поэтому я ожидаю, что адвокатура действительно окажется под давлением, поскольку люди будут заниматься только сложными делами, требующими высококвалифицированных экспертов. И наоборот, в некоторых других профессиях — часто упоминаемых бухгалтерском учете и аудите — ИИ смягчит острую нехватку обученных специалистов.
Теперь рассмотрим вождение. Текущее (и вполне оправданное) внимание к автономным транспортным средствам заслонило кое-что еще: ИИ уже деквалифицировал вождение как профессию. Двадцать лет назад городской таксист должен был быть умным, внимательным и иметь превосходную память. Но теперь легендарное мастерство лондонских таксистов в « Знании » больше не нужно. Наличие пошаговых инструкций, управляемых ИИ, на каждом телефоне превратило профессиональное вождение в бессмысленную подработку для платформ по вызову такси. И когда автономное вождение станет достаточно хорошим (а это почти так ), эти профессии полностью исчезнут.
Далее рассмотрим робототехнику (автономные транспортные средства, по сути, являются лишь одним из примеров). С генеративным ИИ мы становимся свидетелями революции, которая в конечном итоге затронет всю физическую активность, от ручного труда до работы по дому и ведения войны. Венчурные инвестиции в робототехнику резко возросли до миллиардов долларов в этом году, что говорит о том, что индустрия венчурного капитала делает огромные ставки на то, что роботы начнут заменять людей в массовом масштабе в течение следующих пяти лет. Первые виды деятельности, которые будут полностью автоматизированы, будут в высокоструктурированных, контролируемых средах — складах, центрах выполнения заказов, супермаркетах, производственных линиях. Автоматизация займет больше времени для неструктурированных видов деятельности рядом с людьми (например, у вас дома или в дороге), но и там прогресс наблюдается .
НОВЫЕ ЛУНАТИКИ
Другая область, где ИИ достиг ужасающе быстрого прогресса, — это вооружение. Здесь уместной аналогией является не промышленная революция, а Первая мировая война. В 1914 году многие с обеих сторон думали, что война будет относительно безболезненной; вместо этого новые технологии — пулеметы, взрывчатка, артиллерия и химическое оружие — принесли ужасающую массовую бойню.
И я боюсь, что в настоящее время лишь немногие политические или военные лидеры понимают, насколько смертоносной может быть война, управляемая ИИ. ИИ уберет людей со многих боевых ролей, но это также будет означать, что любые люди, которые находятся в бою, будут убиты с чрезвычайной эффективностью. Приведет ли это к санированным войнам без человеческих бойцов или к беспрецедентной бойне? Первые свидетельства не обнадёживают.
Недорогие системы, управляемые ИИ, также дестабилизируют источники национальной военной мощи, делая дорогие системы, управляемые человеком, такие как бронетехника, корабли и самолеты, чрезвычайно уязвимыми для недорогого оружия, управляемого ИИ. Хуже того, это происходит в начале новой холодной войны и в период повышенной внутренней политической нестабильности на Западе. И что будет означать ИИ для контроля над оружием? Будет ли Вторая поправка к Конституции США интерпретироваться как защита управляемого ИИ оружия, которое можно разместить в окне гостиничного номера и запрограммировать на то, чтобы нацелиться на всех, кто находится внизу, или на конкретного человека неделю спустя?
Последняя проблема — дезинформация. Хотя ИИ уже способен производить довольно реалистичные подделки в тексте, изображениях, коротких видео и аудио, многие наблюдатели находят утешение в, по-видимому, незначительной роли, которую подделки ИИ играли до сих пор на выборах и в новостных СМИ. Но объявлять победу было бы опасно преждевременно. На данный момент авторитетным новостным организациям, крупным интернет-платформам и национальным разведывательным службам достаточно легко определить, что реально, а что фейково. Но технология ИИ все еще находится в зачаточном состоянии. Что произойдет через десятилетие (или, возможно, раньше), когда никто не сможет с уверенностью сказать, что реально?
Эти проблемы будут проявляться во многих областях. Одним из очевидных выводов является то, что странам необходимо переосмыслить и укрепить свои системы социальной защиты и образования, чтобы ориентироваться в мире, в котором навыки и целые профессии будут появляться и исчезать быстро и часто. Гнев, который мы видим среди людей, оставшихся позади за последние 30 лет глобализации, вероятно, покажется умеренным по сравнению с тем, что может дать ИИ, если мы не подготовимся к нему. Аналогичным образом нам необходимо крайне строгое регулирование дипфейков, включая требования к маркировке и жесткие уголовные наказания за производство или распространение немаркированных.
«Блог Рунета 2024» — выбери победителя! СМИ, как блоги
Клуб любителей КВН «Скворечник»
Показать описаниеDivaxo.ru - блог о стартапах
Показать описаниеPrint Version
Показать описаниеДальше действовать будем мы!
Показать описаниеБлог Ники Какобян
Показать описаниеБиблиоПчелка
Показать описаниелитературно-публицистический критический журнал "Клаузура"
Показать описаниеE-pepper.ru
Показать описаниеБлоггер51
Показать описаниеНеинтересно об интересном
Показать описаниеAppleinsider.ru
Показать описаниеApolloDays - Мир не так прост как кажется.
Показать описаниеНашРок - виртуальный клуб
Показать описаниеKeddr.com
Показать описание"Новостная лента увлеченных делом"
Показать описаниеВодолаз-Радио
Показать описаниеКризис-копилка
Показать описаниеГородская интернет-газета "Nn-today"
Показать описаниеNetCat CMS
Показать описаниеФорест: Город онлайн
Показать описаниеЖитейские истории, написанные фломастерами
Показать описаниеЖизнь в стиле Top Gear
Показать описаниеАлтайский сарафан
Показать описаниеДиванный теоретик
Показать описание«ВКурсе. Ресурс социальной активности»
Показать описаниеСамогонка
Показать описаниеЧеловек-журнал
Показать описаниеПозитайм.ru
Показать описаниеНовости Hi-Tech и IT
Показать описаниеНовости в стиле Web 2.0
Показать описаниеУфимские легенды
Показать описаниеФэнтези портал
Показать описаниеiPhoneRoot.com
Показать описаниеИскитимсити
Показать описаниеОн-лайн летопись. Открытый блог фотописателей
Показать описаниеcityspb.ru
Показать описаниеИнтернет-журнал «Вестник военного и морского духовенства»
Показать описаниеБлог Дениса Морозова
Показать описаниеКомпьютеру ДА!
Показать описаниеТвитер Турубара
Показать описаниеМикроблог ReAlrus
Показать описаниеДифференцируя по времени
Показать описаниеИнформационно - новостной сайт Новороссийска
Показать описаниеКонсультант директора
Показать описаниеnewСМИкер проектирует реальность
Показать описаниеБлог "Среда обитания"
Показать описаниеКвартирные заметки
Показать описаниеНиколай Кофырин
Показать описаниеBigpicture.ru - Новости в фотографиях
Показать описаниеЗаписки злобного мизантропа
Показать описаниеЮрий Михалыч фото-всея интернет.
Показать описаниеЖизнь, полная впечатлений
Показать описаниеБлоги Волгограда
Показать описаниеОдинцово - ИНФО
Показать описаниеUL-PEOPLE.ru
Показать описаниеФоловлю за еду
Показать описаниеBooknik.ru (блог)
Показать описаниеHot-digital.ru




