输入
注意:
folder_name 的选项通过扫描 datasets 目录自动生成。当某个子文件夹包含 metadata.json 文件或至少一个 .safetensors 文件时,该子文件夹会被列为数据集。系统会在所有配置的数据集根目录中搜索所选数据集文件夹。节点会读取选定文件夹中所有名为 shard_*.pkl 的文件,如果未找到任何分片文件,则会抛出错误。
输出
本文档由 AI 生成。如果您发现任何错误或有改进建议,欢迎贡献! 在 GitHub 上编辑
Source fingerprint (SHA-256):
9f914b27f067460f6f3b54f3f2a7bb793c65b99c85e8aa14ab64894be26bd816