Knowledge Portal

aivaro.ru

  • Оглавление
  • Вопросы
  • Практика
  • Вики
  • Тесты
  • Поиск
✈Telegram @AetSeidhe
RUEN中文
…
Оглавление/Вики/цепочки

цепочки

цепочки

Определение

Последовательные шаги в LLM-приложениях, которые отслеживаются в трейсинге для анализа производительности и отладки.

Где встречается

  • 800+ вопросов

Навигация

  • Индекс терминов
  • Индекс разборов
  • Оглавление

Теги

wikiтерминarchitecture

Обратные ссылки (71)

  • CrewAI vs AutoGen vs LangGraph — сравнение?
  • LangChain vs LlamaIndex vs Haystack — что выберете и почему?
  • LangSmith — зачем и как используете?
  • n8n, Make, Zapier — как вы интегрируете их с LLM?
  • В чем разница между Chain-of-Thought (CoT) и Latent Reasoning?
  • Индекс терминов
  • Как Harness Engineering связан с наблюдаемостью (OpenTelemetry, LangSmith, трассировка)?
  • Как бы вы добавили "отмену" (cancellation) для длительных LLM операций?
  • Как вы combine language representation с DSPy?
  • Как вы валидируете, что DSPy-оптимизация действительно улучшила модель, а не просто переобучилась под метрику?
  • Как вы делаете agent evaluation на длинных horizon (100+ шагов)?
  • Как вы делаете distributed tracing для цепочки: user → gateway → RAG → LLM → user?
  • Как вы делаете retrieval для структурированных данных (SQL, Knowledge Graph)?
  • Как вы делаете synthetic data для multi-turn диалогов (агентов)?
  • Как вы измеряете «cost of reasoning» у агента (не только токены, но и шаги, время, ошибки)?
  • Как вы интегрируете DSPy с RAG-пайплайном? Приведите пример сигнатуры.
  • Как вы проектируете data lineage для RAG (от документа к ответу)?
  • Как вы проектируете red teaming evaluation для jailbreak устойчивости?
  • Как вы проектируете промпт для long context рассуждения (CoT, ToT, GoT)?
  • Как вы тестируете long-context capability модели (бенчмарки: RULER, Needle in a Haystack)?
  • Как вы тестируете агента на «неожиданные input» (не только adversarial, но и просто странные)?
  • Как вы храните историю изменений промптов (prompt lineage)?
  • Как защититься от prompt stealing (кража системного промпта)?
  • Как изменилась роль инженера с приходом Harness Engineering?
  • Как измерять «коэффициент полезного делегирования» (сколько задач решено правильно)?
  • Как код как язык представления улучшает рассуждение LLM?
  • Как обеспечивать exactly-once delivery между агентами?
  • Как оптимизировать траектории агента (trajectory optimization)?
  • Как предотвращать collusion (сговор) между агентами в децентрализованной системе?
  • Как проектировать agent permissions (least privilege модель)?
  • Как проектировать graceful degradation при отказе LLM API?
  • Как происходит PII leakage через LLM и как защититься?
  • Как работает LLM fingerprinting (идентификация модели по ответам)?
  • Как работает RoPE (Rotary Position Embedding) и чем лучше абсолютных позиций?
  • Как работает Toolformer (обучение агента использованию инструментов)?
  • Как работает hierarchical planning для агентов (разбивка на подзадачи)?
  • Как работает process reward model (PRM) vs outcome reward model (ORM)?
  • Как работает tree search (MCTS) для LLM агентов?
  • Как работает алгоритм ReST (Reinforced Self-Training) и когда он лучше PPO?
  • Как работает ∇-Reasoner (градиентный спуск в пространстве токенов на этапе теста)?
  • Как спроектировать агента, который может выполнять цепочку из 5-10 действий?
  • Как тестировать delegation paths (интеграционное тестирование multi-agent)?
  • Как тестировать инструменты агента (tool testing изолированно)?
  • Как управлять версиями промптов в production (best practices)?
  • Как язык промпта (русский vs английский) влияет на схему рассуждения?
  • Какие 3 книги/курса вы рекомендуете по production LLM?
  • Какие инструменты и фреймворки существуют для Harness Engineering?
  • Какое будущее у DSPy? Вытеснит ли он LangChain в 2026-2027?
  • Назовите 7 production failure modes для agentic AI систем по PAEF (Pandey, 2026)?
  • ТЕХНИЧЕСКОЕ ЗАДАНИЕ: Интегрировать OpenTelemetry в RAG
  • ТЕХНИЧЕСКОЕ ЗАДАНИЕ: Написать postmortem для неудачного делегирования
  • ТЕХНИЧЕСКОЕ ЗАДАНИЕ: Настроить distributed tracing
  • ТЕХНИЧЕСКОЕ ЗАДАНИЕ: Настроить self-consistency для CoT
  • ТЕХНИЧЕСКОЕ ЗАДАНИЕ: Реализовать cost-aware routing
  • ТЕХНИЧЕСКОЕ ЗАДАНИЕ: Реализовать fuzzing для агента
  • Что такое Agent Loop и какие компоненты входят в production-ready loop?
  • Что такое Chain-of-Thought без токенов (latent CoT) и как это реализовано?
  • Что такое Cost Engineering для LLM-систем?
  • Что такое DSPy в контексте агентов?
  • Что такое DSPy и какую проблему он решает, которую не решают LangChain или LlamaIndex?
  • Что такое Semantic Kernel и чем отличается от LangChain?
  • Что такое agent communication protocol (формат сообщений между агентами)?
  • Что такое agent state management (состояние агента между вызовами)?
  • Что такое autoscaling inference и как его настроить?
  • Что такое error budget для AI качества и как его считать?
  • Что такое jailbreak as a service (коммерческие jailbreak сервисы) и как защититься?
  • Что такое rate limiting на разных уровнях (user, API key, IP, global) и как реализовать?
  • Что такое skill libraries для агентов и как их создавать?
  • Что такое trajectory optimization для агентов и как ее реализовать?
  • Что такое tree search agents (MCTS for LLM) и когда они эффективны?
  • Что такое «circuit breaker» на уровне меж-агентских вызовов?