Pinchflat

Маленькие языковые модели | Open source, локальный ИИ, SLM | Podlodka Podcast #468

Media Tasks
Actions

Raw Attributes

Source: Подлодка
  • updated_at: 2026-03-21T09:06:30Z
  • media_redownloaded_at:
  • tasks:
  • media_size_bytes: 99377249
  • description: Что делать, чтобы рынок ИИ не захватили монополисты, и мы все не стали радикально зависимы от OpenAI, Anthropic и других корпораций? Научиться работать с локальным ИИ! Чтобы разобраться в теме мы позвали Ивана Ямщикова из Pleias, и поговорили про то, как устроены маленькие языковые модели. Занятный факт: пока мы писали выпуск, вышла новость о том, что Nvidia в партнерстве с Pleias выпустила открытый датасет в рамках проекта Nvidia Nemotron. Почему открытые датасеты важны для маленьких моделей – тоже обсудили в выпуске! Полезные ссылки: — Telegram-канал Ивана https://t.me/progulka — YouTube-канал Ивана https://www.youtube.com/@kroniker — Статьи про различные аспекты маленьких языковых моделей https://arxiv.org/pdf/2409.06857 https://github.com/UbiquitousLearning/SLM_Survey https://arxiv.org/pdf/2411.03350 https://arxiv.org/pdf/2402.13116 https://research.nvidia.com/labs/lpr/slm-agents/ — Книга “от 0 к 1” https://www.goodreads.com/book/show/18050143-zero-to-one — Новость про mRNA вакцину для собаки https://www.theaustralian.com.au/business/technology/tech-boss-uses-ai-and-chatgpt-to-create-cancer-vaccine-for-his-dying-dog/news-story/ — Про Qwen https://arxiv.org/abs/2601.11061 — Анонс коллаборации Pleias и Nvidia https://huggingface.co/datasets/nvidia/Nemotron-Personas-France https://investor.nvidia.com/news/press-release-details/2026/NVIDIA-Expands-Open-Model-Families-to-Power-the-Next-Wave-of-Agentic-Physical-and-Healthcare-AI/default.aspx ❓ Хочешь обсудить выпуск или задать вопрос эксперту? Вступай в наш Telegram-чат: https://t.me/podlodka 📰 Не любишь чаты, но хочешь оставаться в курсе дел и прокачивать свой IT кругозор? Подписывайся на наш Telegram-канал: там публикуются анонсы новых выпусков, а в комментах идут ценные и горячие обсуждения! 7 тысяч опытных IT-специалистов уже с нами: https://t.me/podlodkanews 👉Предложить себя в подкаст https://a37921.webask.io/211d3eec0 Тайм-коды: 00:00 О чём выпуск? 07:03 Преимущества маленьких моделей 11:21 Классификация моделей 19:21 Мотивация использования маленьких моделей 27:49 Минусы независимых моделей ИИ 55:46 Как создаются маленькие модели? 01:06:15 Дистиляция знаний 01:14:19 Прунинг в нейронных сетях 01:19:22 Common Corpus 01:26:26 Выбор между дистиляцией и обучением с нуля 01:35:02 С чего начать работу с языковыми моделями? 01:39:14 Заключение
  • id: 17555
  • uuid: c133f405-0127-486e-b4be-39cfa87e1c11
  • livestream: false
  • media_downloaded_at: 2026-03-21T09:06:26Z
  • short_form_content: false
  • metadata_filepath:
  • title: Маленькие языковые модели | Open source, локальный ИИ, SLM | Podlodka Podcast #468
  • original_url: https://www.youtube.com/watch?v=x-zjqz1NKic
  • last_error:
  • subtitle_filepaths:
  • culled_at:
  • media_id: x-zjqz1NKic
  • uploaded_at: 2026-03-19T11:13:20Z
  • nfo_filepath: /downloads/youtube/Podlodka/2026-03-19_Маленькие языковые модели ｜ Open source, локальный ИИ, SLM ｜ Podlodka Podcast #468.nfo
  • prevent_download: false
  • inserted_at: 2026-03-21T09:05:50Z
  • duration_seconds: 6132
  • upload_date_index: 0
  • media_filepath: /downloads/youtube/Podlodka/2026-03-19_Маленькие языковые модели ｜ Open source, локальный ИИ, SLM ｜ Podlodka Podcast #468.m4a
  • playlist_index: 1
  • matching_search_term:
  • thumbnail_filepath: /downloads/youtube/Podlodka/2026-03-19_Маленькие языковые модели ｜ Open source, локальный ИИ, SLM ｜ Podlodka Podcast #468-thumb.jpg
  • prevent_culling: false
  • predicted_media_filepath: /downloads/youtube/Podlodka/2026-03-19_Маленькие языковые модели ｜ Open source, локальный ИИ, SLM ｜ Podlodka Podcast #468.m4a
  • source_id: 7

Nothing Here!