dbow

dbow

V2EX member #63551, joined on 2014-05-25 18:18:52 +08:00
Today's activity rank 7884
Per dbow's settings, the topics list is hidden
Deals info, including closed deals, is not hidden
dbow's recent replies
@qazwsxkevin 不是机密没必要用 dgx 双机, 它也正常支持 1M 上下文,跟 api 一样.
@v2exgo trace 完给它数据, 不要有品牌这些东西, 让它还原算法.
@v2exgo v4 flash 对逆向来者不拒, 不用解锁
@Suroy 1 只能跑量化损失较大的模型
@yinmin 有 kv cache, 非常快, 速度稳定不变, codex 上跑一个晚上的任务也不会崩.
@sillydaddy 这只算了输出, 实际并发能做到 200tok/s, 输入能做到 1000 tok/s,输入也是收费的
@Yserver 已经开启了 dspark 才有 60~70tok/s
@op351 大概三年能回本, 目前一个月 1k 的 v4 flash api 费用,假定涨价后价格翻倍, 则一年需要 2.4w 的 token 费用, 算上电费之后三年回本.
@Nasdaq 全交给 ai
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5520 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 10ms · UTC 07:41 · PVG 15:41 · LAX 00:41 · JFK 03:41
♥ Do have faith in what you're doing.