文档
注册

概述

  • MindIO SDK端支持宿主机和容器内部署,MindIO仅提供SDK。
  • 容器场景的镜像制作、镜像部署、镜像安全加固等由使用者保证。
  • 只支持如下几种框架的固定版本。
  • 在使用MindIO服务时,启动训练任务的用户需要和启动MindIO守护进程的用户属于同一个主组。

安装MindIO SDK之后,为了使用MindIO的缓存加速能力,将训练模型中使用到Python文件中的Torch的load/save函数,替换为MindIO SDK的load/save函数。

  • 支持将同一份数据保存到多个路径,将训练模型中循环保存同一份数据的torch.save函数,替换为MindIO SDK的torch_mindio.multi_save函数。
  • MindIO SDK提供register_checker(callback, check_dict, user_context, timeout_sec)接口,支持将需要观察的文件夹和文件夹下的普通文件个数作为check_dict的元素注册到MindIO,MindIO会在timeout_sec时间内检查这些文件夹下的文件个数,并检查其与check_dict元素指定的文件个数是否相同,通过注册的callback函数回调应用程序,user_context为callback函数的第二个参数,支持用户设置callback函数中需要调用的参数;timeout_sec为注册事件超时时间,当超过超时时间仍然检查到未符合要求,则会在回调函数中报告错误。用户可以根据检查结果处理后续业务逻辑。
  • MindIO SDK提供rename(src, dst)接口,支持根据UnderFS路径将MemFS中同一父目录的源文件或源文件夹重命名为目的文件或目的文件夹。
搜索结果
找到“0”个结果

当前产品无相关内容

未找到相关内容,请尝试其他搜索词