Поиск
- wikistreaming data
…Как вы обрабатываете streaming данные для real-time RAG|524. Как вы обрабатываете streaming данные для real-time RAG]] - [[800…
- wikiStreaming TTS
# Streaming TTS ## Определение Преобразование текста в речь в реальном времени, необходимое для низкой задержки в голосовых агентах. ## Где встречается - [[800…
- wikiSpark Structured Streaming
# Spark Structured Streaming ## Определение Модуль Spark для обработки потоковых данных в real-time, используемый в архитектурах real-time RAG. ## Где…
- wikiLLM streaming
# LLM streaming ## Определение Техника инференса, позволяющая обрабатывать последовательности произвольной длины без перезапуска за счёт вытеснения старых токенов из KV cache…
- wikireal-time RAG
…Как вы обрабатываете streaming данные для real-time RAG|269. Как вы обрабатываете streaming данные для real-time RAG]] - [[524…
- wikiStreaming
# Streaming ## Определение Техника постепенной выдачи токенов ответа по мере их генерации, снижающая воспринимаемую задержку; часто реализуется через Server-Sent Events…
- wikiStreaming pipeline
# Streaming pipeline ## Определение Архитектурный паттерн, при котором все компоненты обрабатывают данные потоково для минимизации задержки. Часто используется с Kafka и…
- wikiApache Spark Streaming
# Apache Spark Streaming ## Определение Библиотека Spark для потоковой обработки данных, альтернатива Flink для оконной обработки streaming данных. ## Где встречается - [[262…
- wikiEvent streaming
# Event streaming ## Определение Метод обработки данных в реальном времени, при котором события непрерывно поступают и обрабатываются по мере возникновения. Типичная…
- wikiWhisper streaming
# Whisper streaming ## Определение Specific implementation of streaming ASR using OpenAI Whisper model. ## Где встречается - [[544. Как вы строите real-time…
- wikiStreamingResponse
…Реализовать streaming с SSE|217. Реализовать streaming с SSE]] ## Навигация - [[00. Индекс терминов|Индекс терминов]] - [[00. Индекс разборов|Индекс разборов…
- wikiApache Flink
# Apache Flink ## Определение Фреймворк для потоковой обработки данных, используемый для оконной обработки streaming данных в real-time RAG. ## Где встречается…
- wikiStreaming ASR
# Streaming ASR ## Определение Распознавание речи в реальном времени токен за токеном, используемое в voice-агентах для минимизации задержки. ## Где встречается…
- wikistreaming feature pipeline
# streaming feature pipeline ## Определение Архитектурный паттерн для real-time RAG, обеспечивающий непрерывное обновление признаков из потоковых данных. ## Где встречается - [[800…
- wikistreaming chunking
# streaming chunking ## Определение Метод обработки больших документов путём разбиения на чанки и их последовательной передачи для индексации. ## Где встречается - [[17…
- wikiwatermark
…Как вы обрабатываете streaming данные для real-time RAG|269. Как вы обрабатываете streaming данные для real-time RAG]] - [[524…
- wikiEnd-to-end streaming
# End-to-end streaming ## Определение Архитектура real-time voice agent, где ASR, LLM и TTS работают в непрерывном потоке для…
- wikiStreaming Ingestion
# Streaming Ingestion ## Определение Процесс непрерывного приёма данных из систем очередей (Kafka, Kinesis) для обновления фичей и индексов в реальном времени…
- wikisse-starlette
…Как вы реализуете streaming в production с учетом network limitations]] - [[217. Реализовать streaming с SSE|217. Реализовать streaming с SSE…
- wikistreaming-агент
# streaming-агент ## Определение Тип агента, в котором кэширование префикса снижает задержки и стоимость обработки. ## Где встречается - [[218. Настроить prompt caching…
- wikistreaming tasks
# streaming tasks ## Определение Задачи инференса с бесконечным потоком токенов, где память не растёт линейно, что делает их эффективными для длинных…
- wikiStreamingCallbackHandler
# StreamingCallbackHandler ## Определение Компонент LangChain для обработки потокового вывода токенов на стороне клиента. ## Где встречается - [[41. LangChain vs LlamaIndex vs Haystack…
- wikiClumsy
# Clumsy ## Определение Инструмент для симуляции нестабильной сети на Windows, используемый для тестирования работы streaming в условиях ограничений сети. ## Где встречается…
- wikiStreaming deduplication
# Streaming deduplication ## Определение Инкрементальное обновление индекса дедупликации в реальном времени для исключения дубликатов при загрузке данных. ## Где встречается - [[257. Как…
- wikiTombstone records
# Tombstone records ## Определение Специальные события, используемые для удаления записей из индекса в streaming-обработке данных для real-time RAG. ## Где…
- wikiStreaming parsing
# Streaming parsing ## Определение Обработка больших документов по частям для экономии памяти и снижения задержки при парсинге. ## Где встречается - [[272. Как…
- wikiimportance scoring
# importance scoring ## Определение Критерий вытеснения токенов из кэша на основе их вклада в последующие предсказания, используемый в streaming LLM для…
- wikiSM
# SM ## Определение Аппаратный вычислительный блок GPU (Streaming Multiprocessor), содержащий warp schedulers, ALU и собственный кэш L1. На H100 и других…
- wikiPacket loss
…Влияет на качество streaming и реального времени. ## Где встречается - [[214. Как вы реализуете streaming в production с учетом network limitations…
- wikiAdaptive buffering
# Adaptive buffering ## Определение Метод динамического изменения размера чанка или времени накопления данных в streaming-системе в зависимости от скорости сети…
- answerКак вы строите real-time voice agent с latency <500ms?
…Такая архитектура требует сквозного [[Вики/Real-time ingestion\|streaming]] ([[Вики/End-to-end streaming\|end-to-end streaming]]), где данные…
- wikiStreamingLLM
# StreamingLLM ## Определение Техника для работы с бесконечным контекстом: сохраняет начальные якорные токены и последнее окно, а остальные отбрасывает для сжатия…
- wikiFaust
…Как вы обрабатываете streaming данные для real-time RAG|269. Как вы обрабатываете streaming данные для real-time RAG]] ## Навигация…
- answerКак вы обрабатываете streaming данные для real-time RAG?
…Ключевое решение — использование stream processing frameworks (Flink|Apache Flink, Streaming|Structured Spark Streaming|Structured Streaming) с оконной агрегацией, инкрементальным эмбеддингом…
- wikilate-arriving data
…Требуют специальной обработки (водяные знаки, оконные функции) в streaming RAG-системах для корректной агрегации. ## Где встречается - [[851. Как строить streaming…
- answerКак вы строите real-time voice agent с latency <500ms?
…Варианты - [[Вики/Whisper streaming\|Whisper streaming]] ([[Вики/faster-whisper\|faster-whisper]] с [[Вики/online decoding\|online decoding]]) — использует [[Вики/model…
- wikiReal-time ingestion
…Как строить streaming RAG pipeline (real-time ingestion)|851. Как строить streaming RAG pipeline (real-time ingestion)]] - [[800+ вопросов|800…
- wikiONNX
…Как вы обрабатываете streaming данные для real-time RAG|269. Как вы обрабатываете streaming данные для real-time RAG]] - [[320…
- answerЧто такое streaming LLM для бесконечного контекста (техника rollback)?
…Что такое streaming LLM для бесконечного контекста (техника rollback)? ## Краткий тезис [[Вики/LLM streaming\|Streaming LLM]] — это подход, позволяющий языковой…
- wikiEventSourceResponse
…Реализовать streaming с SSE|217. Реализовать streaming с SSE]] ## Навигация - [[00. Индекс терминов|Индекс терминов]] - [[00. Индекс разборов|Индекс разборов…
- wikiconnection handling
…Реализовать streaming с SSE|217. Реализовать streaming с SSE]] ## Навигация - [[00. Индекс терминов|Индекс терминов]] - [[00. Индекс разборов|Индекс разборов…
- wikiasync generator
…Реализовать streaming с SSE|217. Реализовать streaming с SSE]] ## Навигация - [[00. Индекс терминов|Индекс терминов]] - [[00. Индекс разборов|Индекс разборов…
- answerПочему Kafka лучше RabbitMQ для event streaming?
…Выбор между ними сводится к задаче: **[[Вики/Streaming\|streaming]] → [[Вики/Kafka\|Kafka]], [[Вики/Task queue\|task queue]] / [[Вики/Remote Procedure…
- wikiasyncio.sleep
…Реализовать streaming с SSE|217. Реализовать streaming с SSE]] ## Навигация - [[00. Индекс терминов|Индекс терминов]] - [[00. Индекс разборов|Индекс разборов…
- wikiStrimzi
…Как строить streaming RAG pipeline (real-time ingestion)|851. Как строить streaming RAG pipeline (real-time ingestion)]] ## Навигация - [[00. Индекс…
- wikiCancelledError
…Реализовать streaming с SSE|217. Реализовать streaming с SSE]] ## Навигация - [[00. Индекс терминов|Индекс терминов]] - [[00. Индекс разборов|Индекс разборов…
- answerКак вы делаете streaming в production с учетом network limitations?
…Как вы делаете streaming в production с учетом network limitations? ## Краткий тезис [[Вики/Streaming\|Streaming]] в [[Вики/production\|production]] — это…
- wikiEmbedding throughput
…Как вы обрабатываете streaming данные для real-time RAG|269. Как вы обрабатываете streaming данные для real-time RAG]] ## Навигация…
- wikiAuthentication
…Как вы реализуете streaming в production с учетом network limitations|214. Как вы реализуете streaming в production с учетом network…
- wikiworkers
…Реализовать streaming с SSE|217. Реализовать streaming с SSE]] ## Навигация - [[00. Индекс терминов|Индекс терминов]] - [[00. Индекс разборов|Индекс разборов…