关于训练

[Vincent131499]

很棒的工作! 被吸引过来了!
我在跑继续预训练的时候,没有跑通,很多地方不太清楚,可以出一个从准备数据到训练的readme吗?
主要有以下疑惑:
1.目前不知道如果用自己的数据去做预训练,这个数据要整理成什么形式?
2.运行代码,会报错:
Error executing job with overrides: ['run_name=VisionTSpp_base', 'model=visionts', 'data=lotsa_v1_weighted']
Error in call to target 'uni2ts.model.moirai.pretrain.MoiraiPretrain':
NotADirectoryError(20, 'Not a directory')
full_key: model

麻烦大佬帮忙看一下,感谢

[HALF111]

您好！很抱歉回复晚了，感谢你的关注和反馈！

关于问题 1（如何用自己的数据进行预训练）：
我们当前的训练框架和数据格式基本沿用了 Salesforce uni2ts 仓库的设计。所以想添加自己的预训练数据，建议可以参考以下两点：

1. 自定义数据加载器：可以查看 src/uni2ts/data/ 目录下已有的 Dataset 类，模仿其方式实现新的数据集类。
2. 数据格式：我们也是沿用了Uni2TS 使用的基于 PyArrow 的存储格式。可以参考 Salesforce 提供的 LOTSA 数据集结构，将时序数据整理成类似的 PyArrow 格式。

另外，由于这部分功能主要来自 Uni2TS，我们也建议可以额外在 uni2ts 的仓库 中提 issue。他们对如何转换为 PyArrow 格式等细节会更熟悉吧，也能提供更权威的支持。

关于问题 2 （NotADirectoryError: Not a directory），能否麻烦您提供更详细的错误信息呢。例如：具体运行了哪个 Bash 命令。报错发生在哪一行code、以及完整的 traceback 等信息。有这些信息的话我会去复现排查下问题的。多谢~