跳到正文
Hugging Face Blog · LeRobot·· 2025-09-16AI 评分65

Hugging Face LeRobotDataset v3.0 发布:支持百万级集数流式读取

`LeRobotDataset:v3.0`: Bringing large-scale datasets to `lerobot`

AI 导读

Hugging Face 发布 LeRobotDataset v3.0,通过合并多集文件与元数据索引解决扩展性瓶颈,原生支持流式读取以处理百万级集数。该格式将表格数据存为 Parquet、视频存为 MP4,利用 JSONL 元数据管理单集信息,避免文件系统压力。

来源:Hugging Face Blog · LeRobot · huggingface.co