#大规模数据处理

共 2 条 · 7 天 0 条 · 30 天 0 条

信息流里打上「大规模数据处理」标签的资讯、产品与论文，按刊登时间排，新的在上。

5月29日

Hugging Face 1分55秒克隆68TB数据，Xet去重优化

Hugging Face 把 68TB 数据克隆时间压缩到 2 分钟以内，做大规模数据处理的团队可以直接用上这些优化，省时又省成本。

#数据基础设施 #Hugging Face #Xet去重 #大规模数据处理

Julien Chaumond@julien_c原文

5月28日

产品 Agent 与开发者09:51

Agent Lake = 智能体 + 大规模数据处理，LangChain 对话 Cogent CTO

做智能体应用或数据管线的团队，Agent Lake 可能解决你头疼的扩展性问题——LangChain 这次聊的架构思路值得点开听听。

#智能体 #大规模数据处理 #Agent Lake #LangChain

官方账号LangChain@LangChainAI原文