Семантическое разделение для RAG

Семантическое разделение на фрагменты для RAG позволяет нам создавать более краткие фрагменты для наших конвейеров RAG, чат-ботов и агентов ИИ. Мы можем объединить это с различными моделями LLM и встраиваемыми моделями OpenAI, Cohere, Anthropic и т. д., а также библиотеками, такими как LangChain или CrewAI, для создания потенциально улучшенных конвейеров дополненной генерации (RAG) для поиска.

📌 Код:
https://github.com/pinecone-io/exampl...

🚩 Введение в семантическую фрагментацию:
https://www.aurelio.ai/learn/semantic...

🌲 Подпишитесь на последние статьи и видео:
https://www.pinecone.io/newsletter-si...

👋🏼 Консалтинг в области искусственного интеллекта:
https://aurelio.ai

👾 Discord:
  / discord  

Twitter:   / jamescalam  
LinkedIn:   / jamescalam  

00:00 Семантическая фрагментация для RAG
00:45 Что такое семантическое разделение на фрагменты
03:31 Семантическое разделение на фрагменты в Python
12:17 Добавление контекста к фрагментам
13:41 Предоставление LLM дополнительного контекста
18:11 Индексирование наших фрагментов
20:27 Создание фрагментов для LLM
27:18 Запрос фрагментов

#искусственный интеллект #ИИ #НЛП #чатбот #openai