1作者: aman_madhukar029 个月前原帖
想听听其他产品经理(或任何与大型语言模型驱动的聊天机器人密切合作的人)的看法: - 你们目前是如何监控聊天机器人的性能、行为和输出质量的? - 对你们来说,哪些指标或关键绩效指标(KPI)最为重要(例如,幻觉率、延迟、用户满意度、留存率)? - 你们使用了哪些特定的工具或仪表板?有没有自制的解决方案? - 在更新提示或模型时,你们是如何处理错误跟踪、反馈循环或回归问题的? 我们正在这个领域进行开发,希望更好地了解现实中的实践、痛点,以及对于大型语言模型产品来说“良好的监控”是什么样的。 期待听到你们的经验,提前感谢!
2作者: dennisy9 个月前原帖
我看到过多个关于使用代理框架(如 LangGraph、Mastra 等)的 HN 讨论帖,意见褒贬不一。我想发这个问题,试图引发一场良好的讨论,以捕捉一些具体而明确的观点,支持双方的论点,因为到目前为止,大多数评论并没有提供足够的证据来支持他们的看法。 显然,我们必须考虑到框架可以非常小[1],也可以非常大[2],因此需要以不同的方式来看待它们。 对于那些“自制”的人,请尽量分享更多细节。 [1] https://the-pocket.github.io/PocketFlow/ [2] https://www.langchain.com/langgraph
4作者: gdulli9 个月前原帖
你的项目赚得太少,维护起来让你感到厌烦吗?<p>我不再需要全职收入,与其做一份传统工作,我更愿意维护一些曾经盈利但现在不再值得投入时间的项目。<p>我喜欢管理一些人们在使用的日常事务,并且我并不追求任何所谓的“独角兽”潜力。<p>欢迎通过我个人简介中的邮箱与我联系,讨论相关事宜。
2作者: bames_jond9 个月前原帖
我非常喜欢3B1B,以及他制作的那些既吸引人又易于理解的视频。但他并没有为每一个主题制作视频。每当我在数学或物理方面需要帮助时,我都会尝试观看他的视频,但问题在于这些视频并不够具体,无法满足我的内容或课程需求。这个问题适用于所有的视频讲解,它们都缺乏个性化。大多数教育视频解释的是一般性主题,但它们并不完全符合我所提出的具体问题或我需要的解释方式。这就是我想要填补的空白。因此,我开发了一个工具,可以生成高质量、视觉吸引力强的解释视频,完全根据你提出的问题量身定制。无论是一个小众的数学问题、你物理课上的一个概念,还是教科书中没有很好解释的内容,这个工具都能以类似于3B1B频道的风格为你创建一个定制的解释。 这个工具在一段时间内是免费的。我和我的联合创始人已经将部分储蓄投入到这个项目中,除非我们在不久的将来获得外部资金,否则我们将不得不为产品增加付费层或完全关闭它。同时,如果你能在我们的Discord服务器上给予一些支持,我们将非常感激。感谢你的时间! 你可以在这里亲自试用这个工具 --> [https://trytorial.com/](https://trytorial.com/)。同样,如果你能在我们的Discord服务器上给予一些支持,我们将非常感激。感谢你的时间!
1作者: lendacerda9 个月前原帖
在我看来,您可以告诉我们您希望获得哪些信息以及负载模式(payload_schema)是什么,我们会在您的条件满足时,向您发送量身定制的“警报”。我们会持续进行网络爬虫,但您也可以发送您自己的文档。 您定义Webhook,我们会对应该触发这些Webhook的事件保持敏感。 例如:“如果某家大型科技公司的股票下跌10%,请提醒我。” “当新教皇当选时,请通知我。”您还可以发送您自己的文档,例如:“请在公司财务政策发生重大变化时提醒我”,然后发送一份包含公司下季度预测的PDF(这只是一个随机示例)。 您觉得这会是一个有趣的服务吗?