Наверное, не только я, но и многие заинтересовались ИИ в последнее время. Но когда и знаний, и денег мало, времени — не густо… А глаза разбегаются в новой сфере — всё очень страшно и ничего не понятно.
Поэтому я сформировал для себя (с помощью ИИ конечно) и выкладываю для любого интересующегося эту краткую методичку. Вдруг она будет полезна кому-то ещё, кроме меня.
Что внутри:
— Карта мира ИИ-моделей: кто есть кто среди гигантов (OpenAI, Anthropic, Meta, Alibaba, DeepSeek) и чем они отличаются
— Открытые vs закрытые решения — что можно скачать и запустить у себя, а что живёт только в облаке
— Российский контур (Яндекс, Сбер) — их реальное место в общей картине
— Графические модели (FLUX, Stable Diffusion, Midjourney), 3D-генерация, музыкальный ИИ
— Агенты и оркестраторы — как ИИ превращается из «болталки» в «сотрудника»
— Агрегаторы и сервисы-надстройки — где они нужны, а где можно заменить локальным запуском
— Честные слабые стороны каждой технологии — без розовых очков.
Актуальность — на июнь 2026, Москва. Устаревают данные в мире ИИ быстро так что.. пользуйтесь прямо сейчас). Далее полный текст, в виде файла прикреплю на моей странице ВК.
PS: если что-то плохо отрендерилось — извините, я только учусь, качайте файл на вк.
🌍 Архитектура мира ИИ: методичка (Июнь 2026, v4.0 Final)
Этот документ разделён на логические слои: от глобальных корпоративных левиафанов до локальных энтузиастов, графических моделей, 3D-генерации, музыки и — главное — агентов, которые превращают модели в действующих субъектов. Понимание этой иерархии даёт главное: ты перестаёшь гадать «какую модель выбрать» и начинаешь точно знать, какой инструмент под какую задачу брать.
🗺️ 1. Большая четвёрка Open-Weights (Гиганты)
Это «рабочие лошадки» открытого мира. Веса этих моделей можно скачать, квантовать и запустить у себя. Но за каждым стоит своя геополитическая и бизнес-философия.
| Игрок и Флагман | Философия и Стратегия | В чём сила (Плюсы) | В чём слаба (Минусы) |
|---|---|---|---|
| Meta (LLaMA 3/4) | «Мы задаём стандарт, все под нас подстраиваются» | Экосистема (под неё пишут 90% софта), MoE-архитектуры, идеальный английский. | Тяжёлая. Лицензия не Apache 2.0 (запрещено использовать для обучения ИИ-конкурентов). Слабее Qwen в русском и азиатских языках. |
| Alibaba (Qwen) | «Дадим мощь каждому, лишь бы сидели на нашем облаке» | Русский/китайский, код, математика. Честная Apache 2.0. Отличные MoE-версии. | Иногда «слишком угодлива» (sycophancy). Может галлюцинировать в узких российских реалиях. Китайский след в идеологии. |
| DeepSeek | «Китайский прорыв: дёшево, зло, умно» | Reasoning (R1 — убийца o1), код, математика. Феноменальная эффективность обучения. | R1 иногда уходит в «бесконечные размышления» (overthinking). Китайская цензура в базе (лечится файн-тюном). Слабая мультимодальность. |
| Mistral (ЕС) | «Европейский суверенитет + лёгкость» | Европейский комплаенс (GDPR), лёгкость, отличные MoE-модели (Mixtral). | Экосистема меньше, чем у LLaMA. Иногда «плывёт» в сложном русском синтаксисе. Строгая лицензия для крупных компаний. |
🏛️ 2. Закрытые Левиафаны (Cloud AI)
Это «тяжёлая артиллерия». Ты не можешь их скачать. Ты платишь за доступ к их API или веб-интерфейсу. Они задают планку качества (и цензуры), к которой тянутся все открытые модели.
| Левиафан | Флагман | Философия и Сила | Слабые стороны и Минусы |
|---|---|---|---|
| OpenAI | GPT-4o, o-series | «Мы создали ИИ и задаём правила». Самый сбалансированный генералист. o-series — короли математики и логики. | Безумно дороги. API может отключить за нарушение размытых правил. Сильнейшая «woke»-цензура. Часто «тупят» в простых задачах из-за перестраховки. |
| Anthropic | Claude 3.5/4 | «Безопасный, но умный помощник». Лучший кодер и аналитик. Огромный контекст. Идеально понимает сложные системные промты. | Тоже цензурирован (отказывается писать художественное насилие). Иногда многословен и «зануден». Нет нативной генерации картинок. |
| Gemini 1.5/2.0 | «У нас данных больше всех». Огромный контекст (до 2 млн токенов). Родная мультимодальность (видео, аудио). | Нестабильны. Могут выдать глупую ошибку там, где GPT-4 не ошибается. Путаница в тарифах и API. | |
| xAI | Grok 3 | «ИИ с доступом к Twitter в реальном времени». Менее цензурирован. Понимает текущие мемы и новости. | Сильно галлюцинирует в фактах. Зависит от капризов Илона Маска. Интеграция работает кривовато. |
🇷🇺 3. Российский контур (Региональные чемпионы)
В России открытого ИИ (в мировом понимании) нет. Причины: санкции на железо (H100/A100), уход облаков, коммерческая тайна. Они не соревнуются с GPT-4 в бенчмарках, они решают задачи внутреннего рынка.
| Игрок | Место в мире и Философия | В чём сила | В чём слаба |
|---|---|---|---|
| Яндекс (YandexGPT / Алиса) | «Народный ИИ». Глубочайшая интеграция в сервисы. | Лучший русский язык (сленг, контекст, ирония). Идеальный голос. Отлично знает российские реалии. Алиса отлично ищет по российским магазинам (Маркет, Озон, Wildberries — понимает контекст «найди такой же, но дешевле»). Шедеврум хорошо генерирует изображения по описанию (особенно художественные, в стиле «арта»), но не даёт возможности точечной редактуры имеющегося изображения — только генерация с нуля или простые маски. Адаптирована к управлению умным домом. | Полностью закрыт. Сильная корпоративная цензура. Отстаёт в чистом коде и сложной математике на 2-3 года. Проблемы с военно-патриотической тематикой. |
| Сбер (GigaChat) | «Корпоративный ИИ». Заточен под экосистему Сбера, банкинг, B2B. | Хорош в официальных документах, законах, бизнес-планах. GigaChat Max весьма крепок. Лично я использую GigaChat как лучший бесплатный ИИ-редактор изображений (inpainting, замена фона, дорисовка, стилизация — функционал шире, чем у Шедеврума, не срывается на неожиданное изменение фигуры человека как Qwen). | Агрессивная цензура (отказывается писать безобидные вещи). Тяжеловесен, галлюцинирует в узкой технике. Дорогой API. Проблемы с военно-патриотической тематикой. |
Вердикт по РФ: Для жизни и быта — Яндекс. Для бизнеса и документов — Сбер. Но для инженерных задач и локального запуска они бесполезны — ты не сможешь скачать их веса.
⭐ 4. Специалисты и «скрытые жемчужины»
Эти модели часто остаются в тени гигантов, но именно они двигают индустрию в нишах.
- Microsoft Phi (3/4): Сила — работает на калькуляторе, умнее своего веса (обучена на синтетике). Слабость — узкий кругозор, плоха в креативе и редких знаниях.
- Google Gemma (3): Сила — мультимодальность, оптимизация под Android/Edge. Слабость — лицензия Google (не совсем Open Source), уступает Qwen в глубоком тексте.
- IBM Granite: Сила — идеальна для корпоративного RAG (поиска по базам знаний). Слабость — скучная, не для чатов, плоха в рассуждениях.
- AI2 OLMo: Сила — 100% открытая наука (веса + данные). Слабость — объективно глупее коммерческих аналогов, это инструмент для учёных.
- NVIDIA Nemotron: Сила — летает на видеокартах RTX. Слабость — это просто оптимизированная LLaMA, никаких архитектурных прорывов.
- Falcon (TII, ОАЭ): Сила — историческое наследие, хорошие attention-механизмы. Слабость — потеряла гонку вооружений, комьюнити её бросило.
🧬 5. Альтернативные архитектуры (За пределами трансформеров)
Все модели выше — это трансформеры (архитектура 2017 года от Google). Их главная проблема: квадратичная сложность внимания — если текст длиннее в 2 раза, вычислений нужно в 4 раза больше. Это убивает производительность на длинных контекстах. Наука ищет выход, и вот основные направления:
🔹 SSM (State Space Models) — «бегущая строка»
- Mamba / Mamba-2 (Albert Gu & Tri Dao, 2023–2024). Главная звезда альтернативной сцены. Использует селективное состояние: модель сама решает, какую информацию запомнить, а какую забыть. Линейная сложность O(n) вместо O(n²). Контекст на миллион токенов — без тормозов. На коротких текстах чуть уступает трансформерам, на длинных — рвёт всех.
- Hyena / H3 (Stanford, 2023). Предшественник Mamba. Использует длинные свёртки вместо внимания. Был прорывом, но сейчас поглощён Mamba.
- Falcon-Mamba (TII, 2024). Адаптация архитектуры Mamba под кодовую базу Falcon. Первая крупная «чистая» SSM-модель от большого игрока.
🔹 Гибриды (SSM + Трансформер)
Идея: использовать SSM для длинного контекста, а трансформер — для точных «вспышек» внимания.
- Jamba (AI21 Labs, 2024). Первичный гибрид: 8 блоков Mamba + 1 блок трансформера. Сохраняет скорость SSM, но не теряет качество на сложных задачах.
- Zamba (Zyphra, 2024). Компактный гибрид (3B/7B), оптимизированный под edge-устройства.
- Bamba (AI21, 2024). Улучшенная версия Jamba с более умным чередованием слоёв.
🔹 Линейное внимание и RNN-ренессанс
- RWKV (Bo Peng, 2023–2025). Гениальный гибрид: обучается как трансформер (параллельно), работает как RNN (последовательно, с постоянным потреблением памяти). Уже 6-е поколение (RWKV-6 Eagle). Популярен в Азии.
- xLSTM (Sepp Hochreiter, 2024). Сенсация. Отец оригинального LSTM (1997) выпустил «новую версию» с экспоненциальными воротами и новой памятью. Конкурирует с трансформерами на равных.
- RetNet (Microsoft, 2023). Retentive Network. Три режима обучения (параллельный, рекуррентный, chunk-wise). Позиционировался как «убийца трансформеров», но не взлетел — слишком сложен в тюнинге.
- Griffin / Hawk (Google DeepMind, 2024). Гибрид gated linear attention + линейной RNN. Используется внутри Gemini, но открыт частично.
- RecurrentGemma (Google, 2024). «RNN-версия» Gemma. Очень эффективна на мобильных устройствах.
- DeltaNet (2024–2025). Свежая архитектура с дельта-правилом обновления памяти. Показывает странные результаты: быстрее трансформера, но менее стабильна.
🔹 Экзотика и будущее
- Liquid Neural Networks (LNN, MIT). Динамические сети, чьи веса меняются во время работы в зависимости от входных данных. Изначально для роботов и автономных систем. Очень мало параметров, но высокая адаптивность. Пока ниша — робототехника и edge-AI.
- HyperNetworks. «Сеть, порождающая сеть». Одна маленькая модель генерирует веса для большой. Концептуально красиво, но на практике пока нестабильно.
- Ring Attention. Не архитектура, а метод распределения внимания по кругу между GPU. Позволяет обрабатывать контекст в десятки миллионов токенов на кластере. Используется в исследовательских проектах.
- Native Sparse Attention (Google DeepMind, 2025). Попытка сделать «разреженное» внимание нативным — модель сама учится смотреть только на важные токены. Может стать эволюцией трансформера.
🔹 В чём слабость всех альтернативных архитектур:
- Экосистема почти отсутствует. Нет удобных интерфейсов (LM Studio, Ollama поддерживают их плохо или не поддерживают вовсе).
- Квантование работает криво. GGUF/AWQ оптимизированы под трансформеры, под SSM/RNN квантователи часто дают деградацию качества.
- Мало файн-тюнов. Сообщество Hugging Face делает 95% файн-тюнов под LLaMA/Qwen. Под Mamba/RWKV — единицы.
- «Провалы памяти». На очень длинных текстах SSM иногда «забывают» самое начало (проблема сжатия состояния).
- Это пока лабораторные прототипы, а не рабочий инструмент для инженера. Но через 3–5 лет они могут перевернуть рынок, особенно в Edge AI и робототехнике.
🎨 6. Легендарные файн-тюнеры (Те, кто делает «конфетки»)
База (Qwen, LLaMA) — это полуфабрикат. Настоящий характер создаётся файн-тюнерами — небольшими командами и энтузиастами на Hugging Face.
- Nous Research (Hermes): Сила — идеальный баланс и управляемость. Слабость — иногда теряют «глубину» базы при дообучении.
- Cognitive Computations (Dolphin): Сила — абсолютная свобода, нет морализаторства. Слабость — из-за «выжигания» цензуры (метод abliteration) модель может стать чуть глупее в базовой логике.
- Ролевые (Undi, Pippin, Lucytill): Сила — потрясающее отыгрывание персонажей. Слабость — они плохие ассистенты. Попросишь посчитать сопромат — напишут стихи.
- Квантовщики (Bartowski, MaziyarPanahi, LoneStriker): Это не команды, а мастера. Они делают GGUF-версии (формат для локального запуска) любых новых моделей в первый же день релиза.
- davidau: Известен кастомными файн-тюнами Qwen и DeepSeek с упором на ролевые сценарии, uncensored-контент и специфические датасеты (включая «взрослые» темы). Его модели часто имеют характерный «литературный» стиль — он тщательно работает над прозой и диалогами. Сила — глубокая проработка характера персонажа, отсутствие корпоративной морали. Слабость — узкая специализация: как универсальный ассистент его модели уступают Hermes.
- TheDrummer: Автор легендарных ролевых моделей Rocinante и Bigstral (на базе LLaMA и Mixtral). Считается одним из лучших «писателей» в сообществе — его модели выдают художественный текст уровня крепкого жанрового автора. Сила — проза, диалоги, отыгрыш. Слабость — в математике и коде они слабее базы.
- NeverSleep: Команда за проектом Lumimaid. Специализация — ролевые модели с упором на «тёмные» и сложные нарративы (хоррор, драма, психологические сценарии). Сила — глубокая проработка эмоциональных состояний. Слабость — очень узкая ниша.
- Sao10k: Мастер файн-тюнов Qwen. Его L3.1 Euryale — одна из самых сбалансированных «свободных» версий Qwen. Сила — сохраняет интеллект базы, но убирает часть цензуры. Хорош как универсал.
- Magpie: Команда, делающая аккуратные файн-тюны Qwen под конкретные задачи (код, инструкции, ролевые). Сила — стабильное качество. Слабость — не самые яркие личности.
- TheBloke (историческая фигура): Легендарный квантовщик, который в 2023–2024 годах сделал тысячи GGUF-версий всех новых моделей. Фактически создал стандарт качества квантования. Сейчас отошёл от дел, но его имя на модели — знак качества.
- KoboldAI / AI Horde: Не совсем файн-тюнеры, а экосистема. KoboldAI делает софт для ролевых игр, AI Horde — распределённую сеть, где энтузиасты делятся мощностями для инференса.
🖼️ 7. Графические модели (Мир визуального ИИ)
Отдельная вселенная. Если текстовые модели — это «мозг», то графические — это «глаза и руки». Здесь своя иерархия, свои гиганты и свои революции.
🔹 Open-Source короли (можно скачать и запустить локально)
- Stable Diffusion 1.5 (Stability AI, 2022). Легенда. Несмотря на возраст, до сих пор самая популярная модель в мире благодаря тысячам файн-тюнов (Realistic Vision, DreamShaper, Deliberate и сотни других). Работает даже на 4–6 ГБ VRAM.
- SDXL (Stability AI, 2023). Эволюция: выше разрешение (1024×1024), лучше композиция, понимает сложные промты. Требует 8+ ГБ VRAM.
- Stable Diffusion 3 / 3.5 (2024). Новая архитектура (MMDiT — мультимодальный диффузионный трансформер). Отлично рисует текст на картинках, лучше понимает промты. Но: лицензия спорная, многие в сообществе её бойкотируют.
- FLUX.1 (Black Forest Labs, 2024). Текущий король open-source. Создан командой, которая изначально сделала Stable Diffusion (ушли из Stability AI). Три версии: Schnell (быстрая, Apache 2.0), Dev (качественная, некоммерческая), Pro (закрытая). Качество — на уровне Midjourney. Требует 12+ ГБ VRAM (твоя карта как раз).
- PixArt-α / PixArt-Σ (Huawei, 2024). Сверхэффективные модели: рисуют качество SDXL, но в 4–8 раз быстрее. Идеальны для слабых карт.
- Playground v2.5 (Playground AI, 2024). Один из лучших open-source файн-тюнов SDXL. Особенно силён в эстетике и художественных стилях.
- Kolors (Kwai, Китай, 2024). Китайский open-source, отлично понимает азиатскую эстетику и китайский текст на картинках.
- HunyuanDiT (Tencent, 2024). Ещё один китайский гигант. Сила — двуязычность (китайский/английский) и отличная работа со сложными композициями.
- HiDream-I1 (2025). Свежий open-source игрок, показывает странное: качество FLUX при меньших требованиях. Наблюдать.
- Lumina-Next (2024). Исследовательская модель с архитектурой Next-DiT. Интересна академически, но пока сыровата.
- AuraFlow (Fal.ai, 2024). Полностью open-source (веса + код + данные). Идеологический ответ закрытым моделям.
- Кандисский / Kandinsky (Сбер, 2023–2024). Российская open-source модель. Сила — хорошо понимает русский промт, знает российские реалии. Слабость — уступает FLUX в качестве.
🔹 Закрытые Левиафаны (облачные)
- Midjourney (2023–2026). Эталон художественного качества. Ни одна open-source модель до сих пор не достигла его уровня в «магии» композиции и стиля. Работает только через Discord/веб. Закрыт полностью.
- DALL-E 3 (OpenAI). Сила — идеально понимает промты (лучше всех следует инструкциям), интегрирован в ChatGPT. Слабость — «пластиковая» эстетика, сильная цензура.
- Ideogram (2024–2025). Король текста на картинках. Если нужно нарисовать вывеску, логотип, плакат с буквами — ему нет равных.
- Adobe Firefly. Сила — юридически чистый (обучен на стоке Adobe). Для коммерции — единственный безопасный выбор. Слабость — скучная эстетика.
- Recraft V3. Сила — векторная графика и иконография. Первый ИИ, который реально рисует SVG-качество.
🔹 Видео-генерация (следующий фронт)
- Sora (OpenAI, 2024). Шокировал мир, но на выходе оказался сильно урезан. Цензура, короткие ролики, медленная генерация.
- Runway Gen-3 / Gen-4. Лидер рынка для профессионалов. Дорого, но качественно.
- Kling (Kuaishou, Китай). Текущий король видео. Качество на уровне Sora, но доступен всем. Китайский след в цензуре.
- Wan2.1 (Alibaba, 2025). Open-source король видео. Модели 1.3B и 14B. Можно запустить локально (14B — только на топовых картах). Качество — близко к Kling.
- LTX-Video (Lightricks, 2024–2025). Open-source, быстрый, оптимизирован под реалтайм.
- HunyuanVideo (Tencent, 2024). Open-source, качественный, но тяжёлый.
- Pika, Haiper, Luma Dream Machine. Нишевые игроки, каждый со своей фишкой (Pika — эффекты, Luma — физика).
🔹 Экосистема и инструменты
- ComfyUI. Нодовый интерфейс для SD/FLUX. Стандарт для профессионалов. Сложный, но даёт абсолютный контроль.
- Automatic1111 / Forge. Классические веб-интерфейсы для SD. Forge — оптимизированная версия для слабых карт.
- Civitai. Хаб всего. Модели, LoRA, файн-тюны, примеры. Главный ресурс сообщества.
- ControlNet, IP-Adapter, InstantID. Технологии точного контроля: позы, лица, стиля. Без них современная генерация немыслима.
🧊 8. 3D-генерация (Мир объёмного ИИ)
Следующий рубеж после картинок и видео. ИИ учится создавать полноценные трёхмерные объекты из текста или одного снимка. Для тебя, Шеф, как для 3D-печатника, это особенно интересно — но с важными инженерными оговорками.
🔹 Open-Source лидеры (локальный запуск)
- Hunyuan3D 2.0 (Tencent, 2025). Текущий король open-source 3D. Принимает текст или картинку, выдаёт готовый меш с текстурами в форматах .glb/.obj. Архитектура: двухстадийный пайплайн (сначала генерит multiview-картинки через диффузионную модель, потом через Large Reconstruction Model собирает их в 3D). Качество — на уровне коммерческих сервисов 2024 года. Требует 12+ ГБ VRAM.
- TRELLIS (Microsoft Research, 2024). State-of-the-art от Microsoft. Использует 3D Radial Gaussian Splatting как промежуточное представление. Даёт очень чистую топологию (что редкость для ИИ-3D). Open-source, но тяжёл в установке.
- Stable Fast 3D (Stability AI, 2024). Быстрая генерация 3D-объекта из одной картинки за секунды. Качество ниже Hunyuan3D, но скорость — космос. Идеально для прототипирования.
- TripoSR (Stability AI + Tripo, 2024). Совместная разработка. Быстрый, лёгкий (работает даже на CPU), но геометрия часто «мыльная». Хорош для игровой низкополигональной графики.
- CRM (Convolutional Reconstruction Model, 2024). Академическая модель с упором на качество текстур. Медленная, но даёт детализированные PBR-материалы.
- LRM / LRM-large (Hex et al., 2024). Large Reconstruction Model — «трансформер для 3D». Обучается на синтетических данных, выдаёт NeRF-представление, конвертируемое в меш.
- InstantMesh (Tencent, 2024). Упор на мгновенную генерацию мешей. Топология часто кривая, но для референсов — отлично.
- Wonder3D / Wonder3D v2 (2024). Генерирует multiview-изображения с сохранением консистентности, потом реконструирует 3D. Сильна в сложных объектах.
- Era3D / SyncDreamer (2024). Исследовательские модели для синхронизированной генерации нескольких ракурсов. Важны академически.
- OpenAI Shap-E (2023). Первая серьёзная попытка OpenAI в 3D. Генерирует неявные представления (NeRF и облака точек). Сейчас устарела, но исторически важна.
- Point-E (OpenAI, 2022). Предшественник Shap-E, генерировал облака точек. Очень низкое качество по современным меркам.
🔹 Закрытые коммерческие сервисы
- Meshy.ai. Один из лидеров рынка. Текст/картинка → 3D с PBR-текстурами, ретопологией, UV-развёрткой. Есть бесплатный тариф. Сила — качество, скорость, экспорт во все форматы (.glb, .fbx, .obj, .usdz). Слабость — платно для высокого качества.
- Rodin (Deemos / Hyper3D). Высочайшее качество геометрии. Специализируется на персонажах и органике. Используется в геймдеве и кино. Дорогой.
- CSM (Common Sense Machines). Платформа Cube. Текст/видео/картинка → 3D. Амбициозный проект, но пока нестабильный.
- Luma AI (Genie). Генератор 3D от создателей NeRF. Быстрый, удобный, но качество среднее.
- Tripo AI. Облачная версия TripoSR + собственные улучшения. Хороший баланс цены и качества.
- Spline AI. 3D-редактор с ИИ-функциями. Для дизайнеров, не для инженеров.
- Masterpiece X. Фокус на игровые ассеты.
🔹 Нейро-рендеринг и NeRF/Gaussian Splatting
Это не совсем генерация, а реконструкция 3D из фотографий/видео:
- NeRF (Neural Radiance Fields, Google 2020). Революция. По набору фото восстанавливает фотореалистичную 3D-сцену. Медленный, но красивый.
- 3D Gaussian Splatting (2023). Замена NeRF. В 100–1000 раз быстрее, рендерится в реальном времени. Сейчас стандарт для digital twins и архивации объектов.
- Luma AI, Polycam, Kiri Engine. Мобильные приложения для съёмки объектов и создания Gaussian Splatting-моделей. Для тебя, Шеф, — способ оцифровать любую деталь для референса.
🔹 Применение в твоих задачах (3D-печать)
- Что работает: Генерация концептов, быстрых прототипов, художественных моделей (статуэтки, декор), референсов для ручной доработки.
- Что НЕ работает без постобработки: Топология. ИИ-меши почти всегда имеют «грязную» сетку — треугольники разного размера, невыровненные нормали, не-манхэттенскую геометрию. Для 3D-печати это критично: слайсер (Cura, PrusaSlicer) может сойти с ума.
- Обязательная цепочка: ИИ-меш → Blender (авто-ретопология через Remesh или Quad Remesher) → проверка на manifold → печать.
- Слабость всех 3D-ИИ: Понимание физики и механики — нулевое. Модель не знает, что такое допуск, стенка, поддержка. Она делает картинку в 3D, а не инженерную деталь.
🎵 9. ИИ для музыки и звука
Ещё одна вселенная, которая за 2023–2025 годы прошла путь от «мычащих экспериментов» до полноценных песен с вокалом, которые не отличишь от человеческих. Здесь есть свои короли, свои open-source герои и свои скелеты в шкафу (авторское право).
🔹 Генераторы песен (текст + вокал + музыка)
- Suno (v3.5 / v4, 2024–2025). Безоговорочный король. Вводишь промт в стиле «80-е синтвейв о космических дальнобойщиках» — получаешь полноценную песню с куплетами, припевами, соло, вокалом (мужским или женским), бэк-вокалом. Качество — уровень демо-записи на студии. Работает через веб. Есть бесплатный тариф (5 песен/день). Слабость — закрыт, платно для коммерции, голос «узнаваемо-ИИшный» при внимательном прослушивании.
- Udio (2024–2025). Главный конкурент Suno. Основан бывшими инженерами Google DeepMind. Сила — качество аудио выше, чем у Suno (чище микс, богаче тембры). Лучше работает с нишевыми жанрами (джаз, классика, этника). Слабость — интерфейс менее удобный, бесплатных лимитов меньше, тоже закрыт.
- Riffusion. Генерирует музыку через спектрограммы (картинки звука, которые потом превращаются в аудио). Open-source, можно запустить локально. Качество — ниже Suno/Udio, но это честный open-source.
🔹 Инструментальная и фоновая музыка
- MusicGen (Meta, AudioCraft, 2023–2024). Open-source король инструменталки. Принимает текст или даже мелодию-референс и генерирует музыку. Есть версии от 300M до 3.3B параметров. Можно запустить локально на 8+ ГБ VRAM. Качество — очень достойное для фона, саундтреков, игровых OST.
- Stable Audio (Stability AI, 2024). Open-source генератор от создателей SD. Фокус на короткие музыкальные фрагменты и звуковые эффекты. Есть версия 2.0 с длительностью до 3 минут.
- AudioGen (Meta). Брат MusicGen, но для звуковых эффектов (шаги, выстрелы, шум леса, городской гул). Must have для геймдева и видео.
- AIVA. Один из старейших игроков (с 2016). Специализация — классическая, оркестровая, кинематографическая музыка. Используется в рекламе и кино. Есть бесплатный тариф.
- Soundraw. Генератор фоновой музыки с тонкой настройкой: темп, настроение, инструменты, длительность. Популярен у видеоблогеров.
- Boomy. Ориентирован на битмейкеров и хип-хоп. Простой интерфейс, быстрый результат.
- Mubert. Генеративная музыка в реальном времени. Есть API для интеграции. Популярен в стриминговых приложениях.
- Google MusicFX / MusicLM. Исследовательские модели от Google. MusicLM (2023) был прорывом в качестве, но Google не выложил его открыто из-за опасений по авторским правам. MusicFX — облачный интерфейс для экспериментов.
🔹 Клонирование голоса и вокальный ИИ
- RVC (Retrieval-based Voice Conversion). Революция в вокале. Open-source модель, которая берёт твоё пение (даже кривое) и заменяет тембр на любой другой (хоть Фредди Меркьюри, хоть Билли Айлиш). Нужно всего 10 минут записи целевого голоса для обучения. Работает локально. Взрыв популярности в 2023 — именно так появились тысячи «AI cover» на YouTube.
- So-VITS-SVC. Альтернатива RVC на базе VITS. Чуть лучше в качестве, но сложнее в обучении.
- Diff-SVC. Диффузионная модель для преобразования голоса. Высокое качество, но медленная.
- ElevenLabs (Music & Speech). Король клонирования речи. Их модель клонирует голос по 30-секундной записи с пугающей точностью. Недавно добавили музыкальные функции. Платно, но качественно.
- Kits.ai / Voicify.ai. Облачные сервисы для AI-каверов. Много готовых голосов (лицензированных и не очень).
🔹 Разделение треков (stem separation)
Отдельная важная категория — «разобрать готовую песню на вокал, барабаны, бас, остальное»:
- Demucs (Meta, HTDemucs v4). Золотой стандарт. Open-source, работает локально. Разделяет на 4–6 дорожек с хирургической точностью.
- UVR (Ultimate Vocal Remover). Не модель, а агрегатор всех моделей разделения (Demucs, MDX-Net, VR Arch). Must have для ремиксеров и каверщиков.
- Lalal.ai. Облачный сервис. Качество на уровне Demucs, но платно.
- Fadr. Облачный сервис с дополнительными функциями (определение тональности, темпа, генерация MIDI).
🔹 MIDI и композиция
- Magenta (Google). Исследовательский проект. Модели для генерации MIDI, продолжения мелодий, перкуссии. Open-source, но нишевый.
- Ableton Note / Logic Pro с ИИ. Встроенные ИИ-функции в DAW. Не генерируют с нуля, но помогают с аранжировкой.
- Orb Producer Suite. Набор ИИ-плагинов для генерации мелодий, басовых линий, аккордовых прогрессий в MIDI.
🔹 Слабости всего музыкального ИИ:
- Авторское право — минное поле. Все модели обучены на музыке без разрешения авторов. Иски от Universal, Sony, Warner уже летят в суды. Через 2–3 года регулирование может полностью перевернуть рынок.
- «Мыльный» звук. При внимательном прослушивании на хорошей аппаратуре слышны артефакты: «плавающие» высокие частоты, неестественные атаки, странные реверберации.
- Структурные проблемы. Длинные треки (5+ минут) часто разваливаются: модель теряет тему, начинает повторяться или уходить в импровизацию.
- Вокал — главное слабое место. Даже Suno/Udio на сложных мелизмах, речитативе, хоровых партиях дают сбои.
- Для коммерции — осторожно. Используй только модели с явной коммерческой лицензией (MusicGen, Stable Audio) или генери сам через RVC на своём голосе.
🌐 10. Сервисы-агрегаторы и интерфейсы (Слои над моделями)
Ты абсолютно прав в своей догадке: Perplexity, Leonardo и им подобные — это не модели, а интерфейсы и оркестраторы. Они берут готовые модели (часто открытые, иногда закрытые по API), оборачивают их в удобный UX и добавляют свою логику (поиск, постобработку, библиотеки стилей). Это отдельный слой экосистемы — «слой доступа».
🔹 Поисковые и исследовательские ИИ
- Perplexity. Король AI-поиска. Не генерирует «из головы», а ищет в интернете, цитирует источники, синтезирует ответ. Использует разные модели под капотом (GPT-4o, Claude, их собственные sonar-модели). Сила — фактология, ссылки. Слабость — платный Pro нужен для топовых моделей.
- You.com. Аналог Perplexity с упором на приватность. Несколько режимов (AI, обычный поиск, код).
- Phind. Специализация — поиск для разработчиков. Ищет по StackOverflow, GitHub, документации. Лучше Perplexity в коде.
- Exa. Поисковый API для ИИ-агентов. Не для людей, а для машин.
🔹 Генераторы изображений (облачные интерфейсы)
- Leonardo.ai. Один из лучших агрегаторов графических моделей. Внутри — десятки своих файн-тюнов + возможность грузить свои модели. Отличный UX, есть inpainting, canvas, анимация. Сила — баланс качества и контроля. Слабость — бесплатные лимиты, платно дорого.
- Playground AI. Редактор-агрегатор. Сила — удобный canvas, можно редактировать сгенерированное.
- SeaArt.ai / Tensor.art. Агрегаторы моделей с Civitai. Позволяют запускать тысячи моделей с Civitai в облаке без мощной карты. Сила — доступ ко всей экосистеме SD/FLUX. Слабость — интерфейс перегружен.
- NightCafe. Агрегатор с геймификацией (кредиты, соревнования). Популярен у художников.
- Mage.space. Простой агрегатор SD/FLUX. Сила — нецензурированный режим.
🔹 Мульти-модельные чат-платформы
- Poe (Quora). Главный агрегатор чат-моделей. В одном интерфейсе: GPT-4, Claude, Gemini, LLaMA, Qwen, Perplexity и сотни ботов от пользователей. Сила — можно сравнить ответы разных моделей на один запрос. Слабость — платно для топовых.
- HuggingChat. Бесплатный доступ к open-source моделям (Qwen, LLaMA, Mistral, Gemma) от Hugging Face. Сила — бесплатно, без регистрации. Слабость — нет топовых закрытых моделей.
- OpenRouter. API-агрегатор. Единый API-ключ ко всем моделям (открытым и закрытым). Для разработчиков — must have.
- Together AI / Groq / Replicate. Облачные платформы для инференса open-source моделей. Groq — сверхбыстрый (их LPU-чипы летают). Together — большой выбор. Replicate — запуск любой модели по API в один клик.
- JanitorAI / Chai / Character.ai. Агрегаторы ролевых ботов. Character.ai — самый популярный, но с цензурой. JanitorAI — без цензуры, работает на открытых моделях. Chai — мобильный, с монетизацией для создателей ботов.
🔹 Специализированные агрегаторы
- Photoroom / Remove.bg. Агрегаторы узких моделей для работы с фоном, товарами, портретами.
- Suno / Udio. Агрегаторы для генерации музыки (не тексты и не картинки, но часть экосистемы).
- ElevenLabs. Король генерации голоса. Использует свои модели + клонирование.
- HeyGen / Synthesia. Агрегаторы для видео-аватаров.
🔹 Ключевой принцип этого слоя
Все эти сервисы — надстройка. Их бизнес-модель:
- Взять модели (открытые — бесплатно, закрытые — по API за деньги).
- Добавить удобный UX, поиск, библиотеки, социальные функции.
- Зарабатывать на подписке или рекламе.
Для тебя как инженера важно: если сервис делает то, что ты можешь сделать локально (например, Leonardo генерирует FLUX — а ты можешь запустить FLUX у себя на 12 ГБ VRAM) — локальный запуск почти всегда выгоднее. Нет лимитов, нет цензуры, нет подписки, полная приватность. Облачные агрегаторы имеют смысл, когда:
- Нужна закрытая модель (Midjourney, GPT-4o).
- Нет своего железа.
- Нужен специфический UX (поиск с цитатами, как у Perplexity).
- Нужна скорость (Groq быстрее локалки в 10 раз).
🤖 11. Агенты и оркестраторы (Следующий эволюционный шаг)
Это ключевой раздел для понимания будущего ИИ. Если модель — это «мозг», то агент — это «мозг + руки + план + память». Агент не просто генерирует текст, он действует: вызывает API, запускает код, читает файлы, сёрфит в интернете, ставит задачи другим агентам. Это переход от «ИИ-болталки» к «ИИ-сотруднику».
🔹 11.1 Что такое агент (определение)
Агент — это программная система, в которой LLM выступает «мозгом», принимающим решения. Классическая формулировка от Stanford и Lilian Weng (2023): $$\text{Агент} = \text{LLM} + \text{Память} + \text{Планирование} + \text{Инструменты}$$
- LLM — принимает решения, рассуждает.
- Память — кратковременная (контекст чата) и долговременная (векторные БД: Chroma, Qdrant, Milvus, pgvector).
- Планирование — разбиение большой задачи на шаги (ReAct, Plan-and-Solve, Tree of Thoughts, Reflexion).
- Инструменты (Tools) — функции, которые агент может вызвать: поиск в интернете, выполнение Python-кода, чтение файлов, вызов API, отправка email.
Оркестратор — это фреймворк, который управляет одним или несколькими агентами. Он даёт им «жизненное пространство»: как общаться, как делить задачи, как обмениваться памятью.
Ключевое отличие от обычной модели: модель отвечает на вопрос. Агент решает задачу — часто за десятки шагов, с ошибками, самопроверкой и использованием внешних сервисов.
🔹 11.2 Фреймворки для создания агентов (инструментарий инженера)
Это «строительные блоки». На них ты (или твой разработчик) собираете собственных агентов под свои задачи. Здесь — хорошая новость для инженера с локальным железом: почти все ключевые фреймворки open-source. Платишь только за токены (или не платишь, если модель локальная).
🟢 Open-Source фреймворки (скачал — и собирай агента)
| Фреймворк | Автор / Год | Лицензия | Сила | Слабость |
|---|---|---|---|---|
| LangChain / LangGraph | Harrison Chase, 2022–2026 | MIT | Экосистема №1, поддержка всех моделей, LangSmith для отладки. Графовые агенты с циклами и ветвлением. | Избыточно сложен, абстракции ради абстракций, медленный. Для простых задач — overkill. |
| CrewAI | João Moura, 2023–2026 | MIT | Король мульти-агентности. Роли, цели, бэкстори — читается как питоновский псевдокод. Идеален для бизнес-задач. | Под капотом LangChain, меньше низкоуровневого контроля. |
| AutoGen | Microsoft, 2023–2025 | MIT | Мульти-агентные диалоги, AutoGen Studio (визуальный конструктор), интеграция с Azure. | Документация хаотична, API ломался между версиями (0.2 → 0.4). |
| LlamaIndex | Jerry Liu, 2022–2026 | MIT | Король RAG-агентов. 160+ коннекторов к данным (PDF, Notion, Slack, SQL, Jira). | Для задач без данных избыточен. |
| Haystack | deepset, 2022–2026 | Apache 2.0 | Production-ready, нодовая архитектура, стабилен, enterprise-класс. | Менее гибкий, чем LangGraph. |
| Agno (ex-Phidata) | 2024–2026 | MIT | Свежий, быстрый, мультимодальный, «когнитивные архитектуры». Минимализм. | Молодая экосистема. |
| PydanticAI | Создатели Pydantic, 2024–2025 | MIT | Типобезопасность, валидация через Pydantic-модели. Для тех, кто ненавидит «сырой JSON». | Узкая специализация. |
| Smolagents | Hugging Face, 2025 | Apache 2.0 | Минимализм, работает с любой open-source моделью, даже маленькой (10B). | Базовый функционал. |
| Mastra | 2025 | MIT | TypeScript-фреймворк, интеграция с лог-сервисами. | Не для Python-мира. |
| Flowise / LangFlow | сообщество, 2023–2025 | Apache 2.0 | Визуальные конструкторы агентов (no-code/low-code). Drag-and-drop. | Ограничены сложностью визуальных схем. |
| n8n AI / Activepieces | 2023–2025 | Fair-code / MIT | Автоматизации + ИИ. Связывают тысячи сервисов через ИИ-логику. | Больше про автоматизацию, чем про агентов. |
| ControlFlow / AgentStack | 2024 | MIT | Минималистичные альтернативы CrewAI для простых мульти-агентных задач. | Менее зрелые. |
🔴 Коммерческие / Корпоративные фреймворки (знаем, что есть)
| Фреймворк | Автор | Модель доступа | Сила | Слабость |
|---|---|---|---|---|
| Semantic Kernel | Microsoft | Open-source (MIT), но ориентирован на Azure | Родная поддержка .NET, Python, Java. Идеален для корпоративного стека Microsoft. | Экосистема меньше, чем у LangChain. |
| OpenAI Agents SDK | OpenAI, 2025 | Open-source (MIT), но привязан к OpenAI API | Простота, нативная интеграция с GPT-4o, их инструментами. | Привязка к OpenAI-экосистеме. Платишь за токены. |
| Amazon Bedrock Agents | AWS | Закрытый, pay-per-use | Глубокая интеграция с AWS, enterprise-безопасность. | Только в экосистеме AWS. Дорого. |
| Vertex AI Agent Builder | Закрытый, pay-per-use | Интеграция с Gemini, Google Cloud. | Только в GCP. | |
| Salesforce AgentForce | Salesforce | Закрытый, enterprise-лицензия | Для CRM-агентов, встроен в Salesforce. | Очень дорого, только для клиентов Salesforce. |
| ServiceNow AI Agents | ServiceNow | Закрытый, enterprise | Для ITSM, HR, корпоративных процессов. | Только в экосистеме ServiceNow. |
🔹 11.3 Готовые мульти-агентные системы (когда не хочешь писать сам)
Это не фреймворки, а готовые продукты — ты ставишь задачу, они сами организуют «команду» агентов. Здесь разделение особенно важно: есть open-source проекты, которые можно запустить у себя, и есть облачные сервисы с подпиской.
🟢 Open-Source (можно запустить локально)
| Система | Автор / Год | Лицензия | Сила | Слабость |
|---|---|---|---|---|
| OpenHands (ex-OpenDevin) | сообщество, 2024–2026 | MIT | Open-source ответ Devin. ИИ-инженер: пишет код, тестирует, деплоит. Работает с любыми моделями. | Качество ниже Devin, требует настройки. |
| MetaGPT | OpenBMB, 2023–2025 | MIT | Имитирует софтверную компанию: PM, Architect, Engineer, QA. Выдаёт ТЗ, архитектуру, код. | Медленный, дорогой по токенам. |
| ChatDev | OpenBMB, 2023 | MIT | Аналог MetaGPT. Хорошо документирует процесс. | Менее гибок. |
| AutoGPT | Significant Gravitas, 2023 | MIT | Историческая фигура. Первый вирусный автономный агент. | Практически мёртв, нестабилен, зацикливается. |
| BabyAGI | Yohei Nakajima, 2023 | MIT | 140 строк кода, породившие направление. | Музейный экспонат. |
| SuperAGI | трансформатор, 2023–2025 | MIT | Визуальный конструктор агентов, рынок инструментов. | Менее стабилен, чем CrewAI. |
| AgentGPT | reworkd, 2023 | MIT | Веб-интерфейс для автономных агентов. | Ограниченный функционал. |
| GPT-Researcher | Assaf Elovic, 2023–2025 | MIT | Open-source аналог Deep Research. Агрегирует 20+ источников, пишет отчёты. | Требует мощной модели для качества. |
| STORM | Stanford, 2024 | MIT | Генерирует вики-статьи с исследованием и цитатами. | Узкая специализация. |
| SWE-agent | Princeton, 2024 | MIT | Агент для решения GitHub issue. Автоматически находит баг и чинит. | Работает только с репозиториями. |
| Aider | Paul Gauthier, 2023–2025 | Apache 2.0 | Кодинг-агент в терминале. Работает с любой моделью. | Требует настройки. |
| TagUI / AI Singapore | AI Singapore, 2022–2025 | Apache 2.0 | RPA + ИИ. Автоматизация UI. | Устаревший UX. |
🔴 Закрытые / Платные (знаем, что есть)
| Система | Автор | Цена | Сила | Слабость |
|---|---|---|---|---|
| Devin | Cognition Labs, 2024–2026 | $500/мес | Первый «ИИ-инженер». Сам пишет код, тестирует, деплоит. Решает задачи junior-разработчика. | Очень дорогой, часто зацикливается, не тянет senior-уровень. |
| Manus | Monica.im (Китай), 2025 | Кредиты (платно) | Универсальный агент-виртуоз. Стал вирусным в 2025. От авиабилетов до анализа 100 статей. | Закрыт, китайская юрисдикция, дорогие кредиты. |
| Replit Agent | Replit, 2024–2025 | $25/мес (Core) | Генерирует целые веб-приложения из промта, деплоит на Replit. | Только в экосистеме Replit. |
| GitHub Copilot Workspace | GitHub/Microsoft | $19/мес | Эволюция автодополнения — агент предлагает план правок по issue. | Только GitHub. |
🔹 11.4 Специализированные агенты (по задачам)
Агенты заточены под конкретные классы задач. Это самый быстрорастущий сегмент. В каждой категории — свои open-source герои и свои закрытые короли.
📝 11.4.1 Кодинг и разработка
🟢 Open-Source:
- Aider. Агент в терминале, работает с любой моделью. Стандарт для локального кодинга. Бесплатно.
- OpenHands (ex-OpenDevin). Полноценная среда разработки с агентом. Бесплатно.
- SWE-agent (Princeton). Решает GitHub issue автоматически. Бесплатно.
- Agentless. Академический агент от UIUC, показывающий, что без агентов (простым LLM-пайплайном) можно чинить баги не хуже. Бесплатно.
- Mint (OSU). Бенчмарк + агент для интерактивного кодинга. Бесплатно.
- Continue.dev. Open-source автодополнение + агент в VS Code/JetBrains. Работает с любой моделью. Бесплатно.
- Tabby / Codeium (open часть). Альтернативы Copilot с локальным запуском.
🔴 Закрытые / Платные:
- Cursor (Composer). IDE с встроенным агентом. Стандарт для разработчиков 2025–2026. $20/мес. Сила — глубокая интеграция с кодовой базой.
- Windsurf (Cascade). Аналог Cursor от Codeium. $15/мес.
- GitHub Copilot (Agent Mode). $19/мес. Глубокая интеграция с GitHub.
- Devin. $500/мес. Автономный инженер.
- Factory AI / Codegen. Закрытые стартапы, ориентированные на enterprise. Дорого.
- Bolt.new / Lovable / v0 (Vercel). Агенты для генерации целых веб-приложений. Freemium, платно за продакшн.
🔬 11.4.2 Исследование и анализ (Deep Research)
🟢 Open-Source:
- GPT-Researcher. Локальный аналог Deep Research. Агрегирует 20+ источников, пишет отчёты. Бесплатно (платишь только за токены/свой API).
- STORM (Stanford). Генерирует вики-статьи с исследованием. Бесплатно.
- STORM-lite. Облегчённая версия.
- Perplexica. Open-source аналог Perplexity. Локальный AI-поиск с цитатами. Бесплатно.
- SearXNG + LLM-агент. Комбинация мета-поисковика и агента для исследования. Бесплатно.
🔴 Закрытые / Платные:
- OpenAI Deep Research (o3-pro). Агент, который часами сёрфит интернет, пишет отчёт на 10–20 страниц. Включён в ChatGPT Pro ($200/мес). Сила — качество уровня аналитика. Слабость — очень дорогой, медленный (5–30 минут на запрос).
- Perplexity Pro Research. Аналог от Perplexity. $20/мес. Дешевле, быстрее, но уступает o3 в глубине.
- Gemini Deep Research. Включён в Gemini Advanced ($20/мес). Использует огромный контекст Gemini.
- Genspark AI Sparkpages. Генерирует целые «вики-страницы» по запросу. Freemium.
- Exa Research. API для исследовательских агентов. Платно по API.
- Elicit / Consensus / Scite. Академические исследовательские агенты. Платно для полного функционала.
🌐 11.4.3 Браузерные агенты (Web Agents)
🟢 Open-Source:
- Browser Use. Фреймворк для агентов, управляющих браузером (через Playwright). Можно автоматизировать любые веб-действия. Бесплатно.
- Playwright MCP / Puppeteer MCP. Официальные инструменты для подключения браузеров к агентам через MCP. Бесплатно.
- Agent-E. Академический браузерный агент. Бесплатно.
- WebVoyager. Исследовательский проект. Бесплатно.
- LaVague. Open-source, фокус на веб-автоматизацию. Бесплатно.
- Skyvern. Open-source агент для автоматизации веб-процессов. Бесплатно.
- OmniParser (Microsoft). Open-source парсер UI для агентов. Бесплатно.
🔴 Закрытые / Платные:
- Operator (OpenAI). Закрытый браузерный агент от OpenAI. Включён в ChatGPT Pro ($200/мес).
- Stagehand (Browserbase). Высокоуровневый API для браузерных агентов. Платно по использованию.
- HyperWrite Personal Assistant. Браузерный агент-ассистент. $20/мес.
📊 11.4.4 Данные и аналитика
🟢 Open-Source:
- PandasAI. «Разговор» с pandas-DataFrame на естественном языке. Бесплатно.
- OpenBB Terminal. Open-source аналитический терминал с ИИ. Бесплатно.
- MindsDB. SQL-интерфейс к ИИ-моделям. Open-source. Бесплатно.
🔴 Закрытые / Платные:
- Julius AI. Агент для анализа данных: загружаешь CSV — он строит графики, делает статистику. Freemium, $20/мес.
- ChatBI / ThoughtSpot Sage. BI-агенты для корпоративных данных. Enterprise-цены.
- Tableau AI / Power BI Copilot. Встроенные ИИ-агенты в BI-платформы. Платно.
📧 11.4.5 Персональные и офисные ассистенты
🟢 Open-Source:
- Open Interpreter. «Python-интерпретатор с ИИ». Агент, выполняющий код на твоём компьютере. Бесплатно.
- LocalGPT / PrivateGPT. Локальные ассистенты с RAG по твоим файлам. Бесплатно.
- Mem0 / Zep. Open-source память для агентов. Бесплатно.
- Home Assistant + LLM. Умный дом с ИИ-агентом. Бесплатно.
🔴 Закрытые / Платные:
- Rabbit R1 / Humane AI Pin. Провальные аппаратные агенты. Идея была хорошая (персональный ИИ-гаджет), реализация — ужасная. Урок рынку: железо без сильной модели — мусор.
- Notion AI / Mem / Capacities. ИИ-агенты внутри нотетейкинга. $10–20/мес.
- Zapier Central / Make AI. Агенты для автоматизации. Платно по использованию.
- Rewind AI / Windows Copilot. Персональные ассистенты с доступом ко всему, что ты делал на экране. Платно.
- Apple Intelligence. Встроен в iOS/macOS. Бесплатно, но закрыто в экосистеме Apple.
🔹 11.5 Протоколы взаимодействия (стандарты, которые меняют игру)
Это самое важное, что произошло в 2024–2025. Раньше каждый агент был «островом» — чтобы подключить его к новому инструменту, нужно было писать кастомный код. Теперь появились универсальные протоколы, как USB для ИИ.
Все протоколы ниже — открытые стандарты. Это хорошая новость: они бесплатны и доступны всем.
- MCP — Model Context Protocol (Anthropic, ноябрь 2024).Революция. Открытый стандарт, который позволяет агенту подключаться к любым внешним источникам и инструментам через единый интерфейс. Представь: один протокол — и твой агент работает с GitHub, Slack, PostgreSQL, Google Drive, локальной файловой системой, любым API. Поддержан OpenAI, Google, Microsoft, Cursor, Zed, Cline. К июню 2026 — фактический стандарт индустрии.
- Как работает: есть «MCP-серверы» (обёртки над инструментами) и «MCP-клиенты» (агенты). Они общаются через JSON-RPC.
- Для тебя, Шеф: теперь ты можешь подключить свою локальную Qwen к своим CAD-файлам, базе ГОСТов, 1С — через готовые MCP-серверы. Без кастомного кода.
- A2A — Agent-to-Agent Protocol (Google, апрель 2025). Ответ на MCP, но для общения агентов между собой. Если MCP — это «как агент подключается к инструментам», то A2A — «как агент-А находит агента-Б и ставит ему задачу». Поддержан Salesforce, SAP, Atlassian, Intuit.
- Концепция: у каждого агента есть «Agent Card» (визитка с описанием возможностей). Агенты находят друг друга через реестр и общаются через структурированные сообщения.
- Важно: MCP и A2A — не конкуренты, а комплементы. MCP — «руки» агента, A2A — «коллеги».
- ACP — Agent Communication Protocol (IBM + Cisco, 2025). Корпоративный конкурент A2A с упором на безопасность и enterprise-среду.
- OpenAI Responses API / Tool Use standard. Фактический стандарт от OpenAI для описания инструментов. Многие фреймворки взяли его за основу.
🔹 11.6 Слабости и проблемы агентов (без розовых очков)
Агенты — это не магия. Вот где они реально ломаются:
- Нестабильность. Агент — это LLM в цикле. Если модель на одном шаге ошиблась, ошибка накапливается. Длинные задачи (20+ шагов) часто разваливаются.
- Бесконечные циклы. Классическая болезнь: агент застревает в ReAct-петле и жжёт токены впустую. Нужны лимиты и «сторожевые псы».
- Стоимость. Один запрос к агенту может сожрать 100k–1M токенов. На GPT-4o или Claude — это $0.5–5 за задачу. На локальной Qwen — бесплатно, но медленнее.
- Безопасность — минное поле. Агент с доступом к файловой системе, API, email — это потенциальная дыра. Prompt injection через документ или email может заставить агента сделать что угодно.
- Слабая модель = слабый агент. На локальной 7B модели агент работает плохо. Для серьёзных задач нужно 32B+ или закрытые модели.
- Отсутствие «здравого смысла». Агент выполнит задачу буквально, даже если это глупо. Нужен human-in-the-loop для критических решений.
- Сложность отладки. Когда агент делает 30 шагов, понять, где он ошибся — нетривиальная задача. LangSmith, Arize Phoenix, Langfuse помогают, но не спасают полностью.
🔹 11.7 Применение в задачах инженера
Вот где агенты реально полезны:
- RAG по ГОСТам и ТУ. Локальная Qwen + LlamaIndex + векторная БД с твоими PDF-документами. Задаёшь вопрос «какие требования к изоляции для напряжения X в среде Y» — агент находит точную ссылку на пункт.
- Автоматизация рутины. Агент, который читает почту, выдёргивает ТЗ, структурирует их, кладёт в Notion/Obsidian. На MCP — легко собирается.
- Кодинг-ассистент. Локальный Aider или OpenHands с Qwen-32B (в квантовании) — помогает писать скрипты для расчётов, парсинга, автоматизации CAD.
- Мульти-агентная система. В экосистеме агенты могут быть «специалистами»: агент-конструктор, агент-юрист, агент-сметчик. CrewAI или LangGraph — идеальная обвязка.
- Исследовательский агент. Локальный аналог Deep Research: агент сёрфит по сайтам поставщиков, собирает цены на кабель/металл/комплектующие, сводит в таблицу. Browser Use + Qwen.
🔹 11.8 Итоговая архитектура агентной экосистемы
LangChain
LangGraphCrewAI
(мульти-агенты)AutoGen
(Microsoft)LlamaIndex
(RAG)OpenHands
(кодинг)MetaGPT
(команда)GPT-Researcher
(аналитика)SWE-agent
(bug-fix)Devin
$500/месManus
(универсал)Cursor
$20/месOpenAI Deep Res.
$200/месAider
(кодинг)Browser Use
(веб)Open Interpreter
(локальный)PandasAI
(данные)MCP
(инструменты)A2A
(агент-агент)ACP
(enterprise)OpenAI
Tool Use
💡 Ключевой вывод по разделу 11
Open-Source экосистема агентов — зрелая и мощная. Ты можешь построить полноценную агентную систему локально, не платя ни копейки корпорациям:
- Фреймворк: LangGraph или CrewAI (MIT)
- Модель: Qwen-32B в GGUF (Apache 2.0)
- Кодинг-агент: Aider или OpenHands
- Исследовательский агент: GPT-Researcher или Perplexica
- Браузерный агент: Browser Use
- Инструменты: через MCP-серверы (их тысячи, все open)
- Память: ChromaDB или Qdrant (локально)
Платить стоит только в трёх случаях:
- Нужна максимальная точность (тогда — Claude 3.5 / GPT-4o / o3).
- Нужна скорость (Groq, облачные инференс-сервисы).
- Нужен готовый продукт без настройки (Cursor, Devin, Perplexity Pro).
Для 95% инженерных задач — локальный open-source стек закрывает всё. И это главная революция 2025–2026 годов: агентный ИИ стал доступен не только корпорациям с бюджетами в миллионы, но и инженеру с одной RTX на 12 ГБ.
📜 12. Исторический контекст (Эволюция Open-Source)
Чтобы понимать, откуда ноги растут, нужно видеть три фазы развития:
- Академическая песочница (до 2022): ИИ был уделом лабораторий. Модели выкладывались на GitHub, но они были маленькими и не умели связно генерировать текст. Артефакт: BLOOM (первый большой мультиязычный ИИ от волонтёров).
- Шок-терапия (2022–2023): Выход ChatGPT. Meta выпускает LLaMA. Сообщество осознаёт: если у нас есть веса, мы можем их скрещивать. Артефакты: Alpaca и Vicuna (доказали, что студенты могут сделать ChatGPT за $500).
- Эпоха паритета и Edge AI (2024–2026): Открытые модели догоняют закрытые. Фокус смещается на локальный запуск. Артефакт: Stable Diffusion (доказал, что open-source может побить закрытые решения в картинках), FLUX (подтвердил это в 2024).
- Агентная эра (2025–2026): Модели стали достаточно умными, чтобы действовать. Появляются MCP, A2A, Devin, Deep Research. ИИ переходит от «отвечать на вопросы» к «решать задачи». Артефакт: MCP (стал USB-стандартом для ИИ за 6 месяцев).
🔭 13. Радар трендов (На что смотреть прямо сейчас)
- DeepSeek-R1 и клоны: Reasoning-модели (которые «думают» перед ответом). R1 открыл эту категорию для всех.
- Kimi (Moonshot AI): Короли длинного контекста. Глотают книги целиком.
- Reka AI: Закрытый игрок, обходит GPT-4 на некоторых задачах, используя меньше данных. Загадка индустрии.
- Apple OpenELM: Apple тихо делает модели для своих устройств. Тёмная лошадка Edge AI.
- FLUX-экосистема: Взрывной рост файн-тюнов и LoRA под FLUX. Через год это будет новый стандарт.
- Видео-генерация: Wan2.1 от Alibaba делает видео open-source. Через 2 года домашнее видео будет на уровне голливудского 2010-х.
- Агентные фреймворки: Не модели, а «оркестраторы» (LangGraph, AutoGen, CrewAI). ИИ, который сам вызывает другие ИИ и инструменты.
- MCP-экосистема: Тысячи MCP-серверов под любой инструмент. Агенты становятся по-настоящему универсальными.
- Локальные агенты: Связка Ollama + Open WebUI + MCP + Aider превращает твой домашний ПК в полноценную агентную рабочую станцию.
🌐 Итоговая карта мира ИИ (Глобальная архитектура)
OpenAI
GPT / o-seriesAnthropic
ClaudeGoogle
GeminixAI
Grok (Cloud)Meta
LLaMAAlibaba
QwenDeepSeek
V3/R1Mistral
(ЕС)FLUX
(BFL)Stable Diffusion
(SAI)Midjourney
(Закрыт)Wan2.1
(Видео)Hunyuan3D
TRELLISNeRF / Splatting
3D-реконструкцияSuno / Udio
ПесниMusicGen / RVC
Open-sourceLangChain
CrewAIDevin
OpenHandsMCP / A2A
ПротоколыDeep Research
Browser UseЯндекс
Алиса / ШедеврумСбер
GigaChatVK / Т-Банк
(Внутренние)Прочие РФ
(Нишевые)Mamba-2
SSMRWKV-6
EaglexLSTM
ХохрайтерLiquid NN
MITNous
HermesCognitive
DolphinTheDrummer
Rocinantedavidau
RP/QwenPerplexity
ПоискPoe
Мульти-чатLeonardo
КартинкиGroq
СкоростьMS Phi / IBM
СпециалистыБез цензуры
DolphinКвантовщики
BartowskiComfyUI
Ноды
💡 Резюме для твоей инженерной картины мира:
- Закрытые (OpenAI, Anthropic) — это «тяжёлая артиллерия». Нужны, когда нужна максимальная точность в нестандартной задаче, и ты готов платить.
- Открытые (Qwen, DeepSeek) — это «рабочие лошадки». Бесплатны, быстры, закрывают 95% задач инженера. Идеальны для твоего сетапа (12 ГБ VRAM).
- Графические (FLUX, SD) — это «визуальный цех». FLUX на твоей карте — уровень Midjourney локально и бесплатно.
- 3D-ИИ (Hunyuan3D, TRELLIS) — это «быстрый концептинг». Для 3D-печати — только как источник референсов с обязательной ретопологией в Blender. Инженерные детали ИИ пока не делает.
- Музыкальный ИИ (Suno, Udio, MusicGen, RVC) — это «студия в кармане». Для демо, фона, каверов — отлично. Для серьёзного коммерческого релиза — пока рано (и юридически опасно).
- Агенты и оркестраторы (LangGraph, CrewAI, MCP, Devin) — это «цифровые сотрудники». Переход от «ИИ-болталки» к «ИИ-действию». Для тебя как инженера — ключ к автоматизации рутины, RAG по ГОСТам, мульти-агентным системам в проекте САЙ. Протоколы MCP и A2A — это «USB и TCP/IP» для мира ИИ, их знание обязательно.
- Российские (Яндекс, Сбер) — это «локальные адаптеры». Идеальны для взаимодействия с государством, русским языком в быту, поиском по российским магазинам. Беспомощны в мире «железа».
- Альтернативы (Mamba, Phi) — это «НИОКР». Сегодня это игрушки для гиков, завтра — стандарт для встраиваемых систем.
- Агрегаторы (Perplexity, Leonardo, Poe) — это «слой доступа». Удобны, но чаще всего ты можешь заменить их локальным запуском. Имеют смысл, когда нужна закрытая модель, нет своего железа или нужен специфический UX (поиск с цитатами).