专题：llm-monitoring

本文探讨了智能助手在生产环境中的监控挑战，指出其与传统软件的不同之处，如无限输入空间和LLM的非确定性行为。提出结构化审核和LLM辅助评估两种方法，并介绍了LangSmith平台作为专用监控工具，帮助分析用户行为、错误模式和异常情况。