Flowise [特性]结果包括llm令牌的使用以及响应

3okqufwl  于 5个月前  发布在  其他
关注(0)|答案(1)|浏览(70)

API调用结果对象将包括令牌利用率

出于会计原因,获取每次调用的令牌利用率是有用的。类似于openai包含的其他元数据。

r3i60tvu

r3i60tvu1#

我同意,如果能涵盖所有模型就太好了。我会在VertexAI模型中使用它。

相关问题