Spark
Spark
Определение
Фреймворк для распределённой обработки данных, применяемый для трансформаций в ELT, параллельной генерации эмбеддингов и пакетной обработки в production.
Где встречается
- 264. Как вы делаете backfill эмбеддингов при смене embedding модели
- 526. Как вы делаете schema evolution для метаданных документов в RAG
- 853. Как организовать feature store для AI (Feast, Hopsworks)
- 856. Как организовать data versioning (DVC, LakeFS, Delta Lake)
- 858. Как проектировать ETL vs ELT для RAG
- 863. Как проектировать Airflow DAG для RAG ingestion
- 800+ вопросов