Популярное

Музыка Кино и Анимация Автомобили Животные Спорт Путешествия Игры Юмор

Интересные видео

2025 Сериалы Трейлеры Новости Как сделать Видеоуроки Diy своими руками

Топ запросов

смотреть а4 schoolboy runaway турецкий сериал смотреть мультфильмы эдисон
dTub
Скачать

ЛУЧШИЙ способ разбить текст на фрагменты для RAG

Автор: Adam Lucek

Загружено: 2024-12-09

Просмотров: 45448

Описание:

Чтобы бесплатно попробовать все возможности Brilliant в течение 30 дней, посетите https://brilliant.org/AdamLucek/. Вы также получите скидку 20% на годовую премиум-подписку!

Ресурсы:
Блокнот по фрагментации: https://github.com/ALucek/chunking-st...
Технический отчёт ChromaDB: https://research.trychroma.com/evalua...
Репозиторий отчётов ChromaDB: https://github.com/brandonstarxel/chu...
Визуализатор токенов OpenAI: https://platform.openai.com/tokenizer
Грег Камрадт, 5 уровней разбиения текста: https://github.com/FullStackRetrieval...
Указатель Жаккара: https://en.wikipedia.org/wiki/Jaccard...

Главы:
00:00 — История фрагментации текста
02:28 — Великолепно!

03:47 - Разделение текста по символам
06:28 - Разделение текста по токенам
10:26 - Рекурсивное разделение по символам/токенам
16:07 - Камрадт и модифицированное семантическое фрагментирование
20:43 - Кластерное семантическое фрагментирование
24:46 - Семантическое фрагментирование LLM
27:56 - Метрики и сравнение фрагментирования
30:00 - Общие выводы

#ai #programming #datascience

Это видео спонсируется Brilliant

ЛУЧШИЙ способ разбить текст на фрагменты для RAG

Поделиться в:

Доступные форматы для скачивания:

Скачать видео mp4

  • Информация по загрузке:

Скачать аудио mp3

Похожие видео

Улучшает ли тонкая настройка встраиваемых моделей RAG?

Улучшает ли тонкая настройка встраиваемых моделей RAG?

Don't learn AI Agents without Learning these Fundamentals

Don't learn AI Agents without Learning these Fundamentals

ME3255 - Winter 26

ME3255 - Winter 26

The 5 Levels Of Text Splitting For Retrieval

The 5 Levels Of Text Splitting For Retrieval

LangChain для начинающих: простое введение

LangChain для начинающих: простое введение

Knowledge Graph or Vector Database… Which is Better?

Knowledge Graph or Vector Database… Which is Better?

Do Reranking Models Actually Improve RAG?

Do Reranking Models Actually Improve RAG?

RAG Evaluation Metrics Explained: Context Precision, Recall, Relevancy & Faithfulness

RAG Evaluation Metrics Explained: Context Precision, Recall, Relevancy & Faithfulness

Управление поведением LLM без тонкой настройки

Управление поведением LLM без тонкой настройки

Why Your RAG Gives Wrong Answers (And 4 Chunking Strategies to Fix It) | LangChain Text Splitters

Why Your RAG Gives Wrong Answers (And 4 Chunking Strategies to Fix It) | LangChain Text Splitters

Find the BEST RAG Strategy with Domain Specific Evals

Find the BEST RAG Strategy with Domain Specific Evals

Как инженеры ИИ улучшают агентные продукты

Как инженеры ИИ улучшают агентные продукты

ИИ-агент работает за тебя ВЕЧНО – Ralph Loop

ИИ-агент работает за тебя ВЕЧНО – Ralph Loop

GraphRAG: союз графов знаний и RAG: Эмиль Эйфрем

GraphRAG: союз графов знаний и RAG: Эмиль Эйфрем

Программирование на ассемблере без операционной системы

Программирование на ассемблере без операционной системы

Лучший на сегодняшний день метод RAG? Объяснение контекстного поиска Anthropic!

Лучший на сегодняшний день метод RAG? Объяснение контекстного поиска Anthropic!

Самая сложная модель из тех, что мы реально понимаем

Самая сложная модель из тех, что мы реально понимаем

«Я хочу, чтобы Llama3 работала в 10 раз лучше, используя мои личные знания» — Local Agentic RAG с...

«Я хочу, чтобы Llama3 работала в 10 раз лучше, используя мои личные знания» — Local Agentic RAG с...

Семантическое разделение для RAG

Семантическое разделение для RAG

Excel против Power BI против SQL против Python | Сравнение на фондовом рынке

Excel против Power BI против SQL против Python | Сравнение на фондовом рынке

© 2025 dtub. Все права защищены.



  • Контакты
  • О нас
  • Политика конфиденциальности



Контакты для правообладателей: infodtube@gmail.com