作为刚接触FATE的新人,尤其是工程向的,肯定很好奇FATE运行过程中,产生的日志都记录在哪里?运行过程中的模型和中间数据都保存在哪里?
总的来看,FATE运行时产生数据包括如下几部分:
- db部分,记录和各项metircs,存在mysql(standalone 模式是sqlite)中。参见FATE学习:运行过程中产生的数据(二) db部分
- 日志:落盘在本地,logs目录下。参见
FATE学习:跟着日志读源码(一)日志目录结构 - jobs 运行时参数:基于输入中的配置项和默认配置项(缺省部分)生成的配置,存在jobs 目录,用来记录job 运行时参数。参见FATE学习:运行过程中产生的数据(一) job部分
- lmdb数据:包括upload interection 和lr等模型计算的结果,存在lmdb中。参见FATE学习:运行过程中产生的数据(三) lmdb部分
- 模型数据:记录了训练好的模型和表等数据。参见FATE学习:运行过程中产生的数据(四) model_cache