Раздел базы знаний

Подготовка данных для RAG

Извлечение, очистка, chunking (разбиение на чанки), metadata (метаданные) и обновление индекса.

Подготовка данных для RAG
Раздел RAGDataПодготовка данных для RAG
ВсеРуководство 11Метод 6Паттерн 3Термин 3Сравнение 1Безопасность 1Чек-лист 1
01
Термин

Chunking (разбиение на чанки) документов: базовые стратегии

Практическое руководство по подготовке корпоративных данных: Chunking (разбиение на чанки) документов: базовые стратегии. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
02
Руководство

Chunking (разбиение на чанки) договоров, регламентов и закупочной документации

Практическое руководство по подготовке корпоративных данных: Chunking (разбиение на чанки) договоров, регламентов и закупочной документации. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
03
Руководство

Chunking (разбиение на чанки) исходного кода по функциям и символам

Практическое руководство по подготовке корпоративных данных: Chunking (разбиение на чанки) исходного кода по функциям и символам. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
04
Руководство

Chunking (разбиение на чанки) таблиц без потери заголовков и связей

Практическое руководство по подготовке корпоративных данных: Chunking (разбиение на чанки) таблиц без потери заголовков и связей. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
05
Метод

Contextual retrieval (поиск контекста): добавление контекста к chunks (чанки)

Практическое руководство по подготовке корпоративных данных: Contextual retrieval (поиск контекста): добавление контекста к chunks (чанки). Материал связывает технические решения с измеримым качеством retrieval, ответа и бизнес‑процесса.

Открыть материал →
06
Термин

Data lineage и происхождение ответа

Практическое руководство по подготовке корпоративных данных: Data lineage и происхождение ответа. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
07
Руководство

Document ingestion для RAG: полный конвейер

Практическое руководство по подготовке корпоративных данных: Document ingestion для RAG: полный конвейер. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
08
Метод

Fixed-size chunking (разбиение на чанки): размер и overlap

Практическое руководство по подготовке корпоративных данных: Fixed-size chunking (разбиение на чанки): размер и overlap. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
09
Руководство

HTML и веб-страницы в RAG: очистка навигационного шума

Практическое руководство по подготовке корпоративных данных: HTML и веб-страницы в RAG: очистка навигационного шума. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
10
Метод

Late chunking (разбиение на чанки): embeddings с контекстом документа

Практическое руководство по подготовке корпоративных данных: Late chunking (разбиение на чанки): embeddings с контекстом документа. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
11
Руководство

OCR сканов и изображений перед индексированием

Практическое руководство по подготовке корпоративных данных: OCR сканов и изображений перед индексированием. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
12
Паттерн

Parent-child chunks (чанки): маленький поиск, большой контекст

Практическое руководство по подготовке корпоративных данных: Parent-child chunks (чанки): маленький поиск, большой контекст. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
13
Сравнение

Parquet или JSONL для массовой подготовки RAG

Практическое руководство по подготовке корпоративных данных: Parquet или JSONL для массовой подготовки RAG. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
14
Метод

Recursive chunking (разбиение на чанки) для иерархических документов

Практическое руководство по подготовке корпоративных данных: Recursive chunking (разбиение на чанки) для иерархических документов. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
15
Метод

Semantic chunking (разбиение на чанки): разбиение по смыслу

Практическое руководство по подготовке корпоративных данных: Semantic chunking (разбиение на чанки): разбиение по смыслу. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
16
Метод

Sentence window retrieval (поиск контекста) и контекст вокруг совпадения

Практическое руководство по подготовке корпоративных данных: Sentence window retrieval (поиск контекста) и контекст вокруг совпадения. Материал связывает технические решения с измеримым качеством retrieval, ответа и бизнес‑процесса.

Открыть материал →
17
Паттерн

Версионирование документов и индекса RAG

Практическое руководство по подготовке корпоративных данных: Версионирование документов и индекса RAG. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
18
Руководство

Дедупликация документов и фрагментов

Практическое руководство по подготовке корпоративных данных: Дедупликация документов и фрагментов. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
19
Паттерн

Инкрементальное обновление индекса

Практическое руководство по подготовке корпоративных данных: Инкрементальное обновление индекса. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
20
Руководство

Как извлекать структуру DOCX для RAG

Практическое руководство по подготовке корпоративных данных: Как извлекать структуру DOCX для RAG. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
21
Чек-лист

Качество корпуса для RAG: критерии приёмки

Практическое руководство по подготовке корпоративных данных: Качество корпуса для RAG: критерии приёмки. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
22
Руководство

Коннекторы к SharePoint, Confluence, Drive, S3 и CRM

Практическое руководство по подготовке корпоративных данных: Коннекторы к SharePoint, Confluence, Drive, S3 и CRM. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
23
Термин

Метаданные в RAG: фильтры, версии и provenance

Практическое руководство по подготовке корпоративных данных: Метаданные в RAG: фильтры, версии и provenance. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
24
Безопасность

Обнаружение и маскирование PII до индексации

Практическое руководство по подготовке корпоративных данных: Обнаружение и маскирование PII до индексации. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
25
Руководство

Парсинг PDF для RAG: текст, структура и координаты

Практическое руководство по подготовке корпоративных данных: Парсинг PDF для RAG: текст, структура и координаты. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →
26
Руководство

Таблицы Excel в RAG: строки, листы и контекст

Практическое руководство по подготовке корпоративных данных: Таблицы Excel в RAG: строки, листы и контекст. Материал связывает технические решения с измеримым качеством retrieval (поиск контекста), ответа и бизнес‑процесса.

Открыть материал →