Spark

Определение

Фреймворк для распределённой обработки данных, применяемый для трансформаций в ELT, параллельной генерации эмбеддингов и пакетной обработки в production.

Где встречается

• 264. Как вы делаете backfill эмбеддингов при смене embedding модели
• 526. Как вы делаете schema evolution для метаданных документов в RAG
• 853. Как организовать feature store для AI (Feast, Hopsworks)
• 856. Как организовать data versioning (DVC, LakeFS, Delta Lake)
• 858. Как проектировать ETL vs ELT для RAG
• 863. Как проектировать Airflow DAG для RAG ingestion
• 800+ вопросов

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление