返回首页
最新
自从Fivetran在今年三月开始根据每个连接器的MAR（每月活动请求）进行定价以来，我听到许多数据从业者反映计算Fivetran的定价有多困难。<p><a href="https://www.reddit.com/r/dataengineering/comments/1ij5mhw/fivetran_pricing_update_expect_higher_costs_if/" rel="nofollow">https://www.reddit.com/r/dataengineering/comments/1ij5mhw/fi...</a><p>因此，我构建了一个Fivetran成本监控工具，完全基于Snowflake，使用Streamlit开发，并将其作为免费列表发布——只需在Snowflake市场搜索“ETL成本监控器”。该工具考虑了您当前的定价模型和任何合同折扣（针对年度协议），提供详细的成本细分：当前和预测成本、连接器级别和表级别的成本分布，以及高流量连接器的洞察。<p>您还可以设置每月预算，并在实际或预测成本超过阈值时接收电子邮件警报。对于突然的MAR激增，也会提供警报。警报通过Snowflake任务和用户创建的电子邮件通知集成来处理。
嗨，HN，我们是 Abhinav、Andy 和 Jeremy，我们正在开发 Lucidic AI（[https://dashboard.lucidic.ai](https://dashboard.lucidic.ai)），这是一款 AI 代理可解释性工具，旨在帮助观察和调试 AI 代理。
这里是一个演示：[https://youtu.be/Zvoh1QUMhXQ](https://youtu.be/Zvoh1QUMhXQ)。
开始使用非常简单，只需一行代码。您只需在代理代码中调用 `lai.init()` 并登录到仪表板。您可以查看每次运行的跟踪、跨会话的累积趋势、内置或自定义评估以及分组的失败模式。调用 `lai.create_step()` 并添加您想要的任何元数据、内存快照、工具输出、状态信息，我们会为调试进行索引。
我们曾在斯坦福 AI 实验室（SAIL）进行 NLP 研究，致力于创建一个 AI 代理（使用微调模型和 DSPy）来解决数学奥林匹克问题（专注于 AIME/USAMO）；我们意识到调试这些代理是非常困难的。但最后一根稻草是我们构建了一个可以在线购买商品的电子商务代理。它在结账时不断失败，每次一行代码的更改、调整提示、切换到 Llama、调整工具逻辑，都意味着需要重新运行 10 分钟，只是为了看看是否能到达同一个结账页面。
在这个时候，我们都觉得这太糟糕了，因此我们通过更好的调试、监控和评估来改善代理的可解释性。
我们首先倾听用户的反馈，他们告诉我们传统的 LLM 可观察性平台无法捕捉代理的复杂性。代理不仅仅是输入/输出对，它们还有工具、记忆和事件。因此，我们自动将 OTel（和/或常规）代理日志转换为交互式图形可视化，基于记忆和行动模式对相似状态进行聚类。
我们听说人们希望即使在图形中也能测试小的更改，因此我们创建了“时间旅行”功能，您可以修改任何状态（内存内容、工具输出、上下文），然后重新模拟 30-40 次，以查看结果分布。我们嵌入响应，按相似性聚类，并展示哪些修改导致稳定与发散的行为。
然后我们发现人们在同一任务上运行代理 10 次，逐个观察每次运行，浪费了几个小时查看大部分重复的状态。因此，我们构建了基于相似状态嵌入的轨迹聚类（如相似工具或记忆），以在大规模模拟中揭示行为模式。
接着，我们利用这些信息创建了一种力导向布局，自动将代理采取的相似路径分组，状态显示为节点，动作显示为边，失败概率则用颜色强度表示。聚类使失败模式变得明显；您可以看到数百次运行中的趋势，而不是单个跟踪。
最后，当人们看到我们的可观察性功能时，他们自然希望拥有评估能力。因此，我们开发了一个概念，让人们可以创建自己的评估标准，称为“评分标准”，这让您可以定义具体的标准，为每个标准分配权重，并设定评分定义，从而为您提供一种结构化的方法，以根据您的具体要求衡量代理性能。
为了评估这些标准，我们利用自己的平台构建了一个调查代理，它比传统的 LLM 作为评判者的方法更有效地审查您的标准并评估性能。
要开始使用，请访问 [dashboard.lucidic.ai](https://dashboard.lucidic.ai) 和 [https://docs.lucidic.ai/getting-started/quickstart](https://docs.lucidic.ai/getting-started/quickstart)。您可以免费使用 1,000 次事件和步骤创建。
期待您的想法！如有任何疑问，请随时联系 team@lucidic.ai。
我创建了一个气氛照片编辑器（主要是为了我自己）。<p>你可以用它来：
- 从图片中移除人物
- 改变照片的风格
- 重新设计你的厨房（我主要的用途）
- 向照片中添加物体
- 改变你的头发颜色
- 任何你想做的事情 :)<p>这只是第一个版本，我会不断添加新功能。<p>请告诉我这对其他人是否有用，或者你有什么建议。