Bi-encoder
Bi-encoder
Определение
Архитектура с двумя независимыми кодировщиками (для запроса и документа), сворачивающими вход в один вектор, что обеспечивает быстрый поиск в ANN.
Где встречается
- 14. Как вы обрезаете контекст, когда retrieved documents больше контекстного окна LLM
- 18. Что такое Multi-vector retrieval и зачем он нужен
- 371. Что такое LambdaMART и как он используется для reranking в RAG
- 372. Как вы строите двухступенчатый ретривал (fast ANN + slow cross-encoder) в RAG
- 380. Что такое semantic ranking на основе embeddings (вторая стадия после ANN)
- 552. Как вы делаете image captioning для RAG (извлечение описания изображения)
- 554. Как вы делаем image retrieval по тексту с высокой точностью
- 651. Как работает attention математически Выведите формулу scaled dot-product attention.
- 869. Как избежать benchmark contamination (когда модель видела тестовые данные)
- 46. Настроить cross-encoder reranking