Arize AI

Coinbase Wallet通过AI代理重构开发流程，将开发时间从20-25天缩短至1.8天。

通过模型选择和Harness路由策略，编码代理成本可从每轮100美元降至15-20美元，关键在任务分工与成本计算方式。

代码模式使AI代理能通过编程解决复杂任务，非工程领域应用激增，Claude和Codex模型已推出非工程变体。

更强大模型无法解决所有代理失败问题，关键在于工具、上下文和系统设计，而非模型本身。

Phoenix内置MCP服务器通过SQL工具使代理查询跟踪数据成本降低17倍，代码模式在沙箱中执行保障安全。

Arize Signal工具通过分析生产跟踪发现Alyx代理中的隐藏重试循环，传统监控可能将其误判为正常运行。

通过追踪数据和验证优化，可在不牺牲质量的前提下降低LLM成本，关键策略包括连接支出与请求、验证优化效果、分析模型选择影响。

Arize AI推出成本控制代理，通过自动化分析和优化LLM调用，显著降低代理应用的运营成本。

模型成本评估应关注任务完成成本而非每token价格，2400次测试表明按任务难度路由可同时优化成本与覆盖范围。

文章提出从人工操作代理开发转向系统化改进的工程架构，通过自动化循环提升效率。

Kiro CLI与Arize Skills结合，通过可观测性追踪和评估代码代理变更，解决生成代码验证难题。

Cursor通过集成验证架构实现AI代码可信度管控，结合行为工件、风险评分和自动化审查，使40%的PR无需人工审核。

OpenAI通过整合用户显式/隐式反馈构建了统一数据层，结合LLM管道和聚类分析实现自动化问题追踪，使截图可直接生成修复代码。

本文提出系统性方法衡量LLM评估者与人类判断一致性，通过三个核心问题和六步流程提升评估可靠性。

该推文为AIE NYC 2026会议的赞助商宣传，重点介绍Arize AI的金融领域AI工具，但缺乏技术深度和实用价值。

文章为Fireworks AI的活动宣传，未提供技术细节，仅提及将与Arize AI合作讨论模型成本问题。