#Inferact
共 5 条 · 7 天 0 条 · 30 天 0 条
信息流里打上「Inferact」标签的资讯、产品与论文,按刊登时间排,新的在上。
8月12日
8月7日
Simon Mo与Matt Bornstein谈开源权重模型:成本与控制
Simon Mo是vLLM作者,他讲开源权重模型怎么在成本和控制上赢过闭源API,还吐槽专有API宕机问题,适合做线上服务的开发者。
7月10日
首届vLLM大会将在Ray Summit举办,8月24-26日旧金山
vLLM社区第一次线下大会,想了解高性能推理前沿和开源生态的朋友别错过,直接和NVIDIA、AMD、Google TPU的工程师面对面。