Поиск

  • wikidata lineage

    # data lineage ## Определение Сквозная прослеживаемость пути данных от исходных документов через чанкинг, эмбеддинг, retrieval до финального ответа LLM. Каждый запрос…

  • wikiOpenLineage

    # OpenLineage ## Определение Открытый стандарт и набор библиотек для сбора метаданных о передаче данных между компонентами (data lineage), обеспечивающий отслеживание происхождения…

  • wikiMarquez

    # Marquez ## Определение Open-source платформа для сбора, визуализации и управления data lineage, работающая поверх OpenLineage. ## Где встречается - [[265. Как вы…

  • wikiApache Atlas

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • answerКак вы проектируете data lineage для RAG (от документа к ответу)?

    …Как вы проектируете data lineage для RAG (от документа к ответу)? ## Краткий тезис [[Вики/data lineage\|Data lineage]] в [[Вики…

  • answerКак вы проектируете data lineage для RAG (от документа к ответу)?

    Data lineage (происхождение данных) [[Вики/data lineage\|Data lineage]] (также [[Вики/data lineage\|provenance]]) — это [[Вики/метаданные\|метаданные]], описывающие жизненный…

  • wikiGraph databases for prompt lineage

    # Graph databases for prompt lineage ## Определение Использование графовых баз данных для хранения истории изменений промптов, позволяющее отслеживать зависимости и эволюцию…

  • wikiWhyLogs

    # WhyLogs ## Определение Инструмент для профилирования данных, используемый для отслеживания изменений и дополнения data lineage в ML-пайплайнах. ## Где встречается - [[265…

  • wikiSimilarity search

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiOverlap

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiSentenceTransformers

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiPostgreSQL

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikihash

    …Как вы храните историю изменений промптов (prompt lineage)]] - [[624. Как вы защищаете RAG от data poisoning через неявные инструкции (subtle…

  • wikiRAG pipeline

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • answerКак вы храните историю изменений промптов (prompt lineage)?

    …В контексте LLM-приложений это аналог lineage|data lineage для данных и model lineage для моделей: нужно знать, какой «код…

  • wikiSHA-256

    …Как вы храните историю изменений промптов (prompt lineage)|95. Как вы храните историю изменений промптов (prompt lineage)]] - [[245. Как вы…

  • wikiUUID

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiGit

    …Как вы храните историю изменений промптов (prompt lineage)|95. Как вы храните историю изменений промптов (prompt lineage)]] - [[102. Объясните концепцию…

  • wikiindexing

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiMLflow

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiCI/CD

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiVersion control

    …Как вы проектируете data lineage для RAG (от документа к ответу)|520. Как вы проектируете data lineage для RAG (от…

  • wikiрегрессионное тестирование

    …Как вы храните историю изменений промптов (prompt lineage)|95. Как вы храните историю изменений промптов (prompt lineage)]] - [[140. Как вы…

  • wikiElasticsearch

    …Как вы проектируете data lineage для RAG (от документа к ответу)|520. Как вы проектируете data lineage для RAG (от…

  • wikiметаданные

    …Как вы проектируете data lineage для RAG (от документа к ответу)|520. Как вы проектируете data lineage для RAG (от…

  • wikiDocker Compose

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiSQLite

    …Как вы храните историю изменений промптов (prompt lineage)|95. Как вы храните историю изменений промптов (prompt lineage)]] - [[146. Как вы…

  • wikiмониторинг

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiRAG

    …Как вы проектируете data lineage для RAG (от документа к ответу)|520. Как вы проектируете data lineage для RAG (от…

  • wikiFastAPI

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiChroma

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Настроить дашборд для failures

    …и импортировать в [[Вики/Grafana\|Grafana]] через [[Вики/data lineage\|Data Source]] “[[Вики/CSV\|CSV]]” 4. Альтернатива: использовать [[Вики/In…

  • wikiWeights & Biases

    …Как вы храните историю изменений промптов (prompt lineage)|95. Как вы храните историю изменений промптов (prompt lineage)]] - [[106. Как вы…

  • wikiLangSmith

    …Как вы храните историю изменений промптов (prompt lineage)|95. Как вы храните историю изменений промптов (prompt lineage)]] - [[109. Как вы…

  • wikiFaiss

    …Как вы мониторите дрейф данных (data drift) для RAG|74. Как вы мониторите дрейф данных (data drift) для RAG]] - [[77…

  • wikiOpenTelemetry

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiKafka

    …Как вы проектируете data lineage для RAG (от документа к ответу)|520. Как вы проектируете data lineage для RAG (от…

  • answerКак вы делаете incremental ingestion для часто меняющихся документов?

    …Как вы проектируете data lineage для RAG (от документа к ответу)\|265]] - Следующий: [[267. Что такое data version control (DVC…

  • wikichunking

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiPrompt engineering

    …Как вы проектируете data lineage для RAG (от документа к ответу)|265. Как вы проектируете data lineage для RAG (от…

  • wikiSelf-RAG

    …Как вы проектируете data lineage для RAG (от документа к ответу)|520. Как вы проектируете data lineage для RAG (от…

  • wikiA/B testing

    …Как вы мониторите дрейф данных (data drift) для RAG|74. Как вы мониторите дрейф данных (data drift) для RAG]] - [[76…

  • answerКак вы комбинируете реальные и синтетические данные для максимального качества?

    …Документируйте [[Вики/data lineage\|происхождение данных]]: real и synthetic должны быть чётко размечены в датасете. --- ## 10. Пример из практики: fine…

  • practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Настроить distributed tracing через OpenTelemetry

    …Добавить [[Вики/data lineage\|источник данных]] [[Вики/Jaeger\|Jaeger]] - Нажать **[[Вики/configuration\|Configuration]] → Data sources → [[Вики/Add\|Add]] [[Вики/data

  • answerКак вы делаете synthetic data generation для редких классов в датасете?

    …Как вы проектируете data lineage для RAG (от документа к ответу)\|520]] | Как бороться с дисбалансом классов в датасете? | | [[521…

  • practiceТЕХНИЧЕСКОЕ ЗАДАНИЕ: Настроить monitoring delegation

    …Подключить [[Вики/Grafana\|Grafana]] к [[Вики/Grafana\|Prometheus]] - Создать [[Вики/data lineage\|data source]] типа [[Вики/Grafana\|Prometheus]], URL: `[[Вики…

  • answerКак вы делаете data quality monitoring для RAG корпуса?

    …Как вы проектируете data lineage для RAG (от документа к ответу)\|520]] | Как вы проектируете пайплайн индексации документов? | | [[525. Как…

  • answerКак вы документируете RAG-систему для команды?

    …Архитектурная схема (первое, что видит разработчик) [[Вики/database schema\|Схема]] должна отображать [[Вики/data lineage\|поток данных]] от запроса пользователя…

  • answerКак вы проектируете промпты, которые работают с разными моделями?

    …Документирование и версионирование промпта Ведите версии промпта ([[Вики/Git\|Git]], [[Вики/Data versioning\|DVC]]), указывая, для каких моделей они протестированы…

  • answerКак избежать benchmark contamination (когда модель видела тестовые данные)?

    …путём сравнения с тестовым набором перед обучением. - [[Вики/data lineage\|Data provenance]] — отслеживание источника каждого документа. Если документ мог попасть…