文档HOT
下载
中文
注册

在计算节点安装MindIO TFT SDK

在大模型训练框架使用的Python环境中，安装MindIO TFT SDK，使能训练任务故障，加速训练恢复。

操作步骤

  1. 以安装用户{MindIO-install-user}登录安装节点。

    安装用户设置的口令需符合口令复杂度要求（请参见口令复杂度要求）。密码有效期为90天，您可以在“/etc/login.defs”文件中修改有效期的天数，或者通过chage命令来设置用户的有效期，详情请参见设置用户有效期。

  2. 将内存缓存系统软件包上传至设备上安装用户有权限读写的路径下。
    • 内存缓存系统软件包以获取的实际包名为准。
    • 如果Python环境是共享目录，则在任一计算节点上传即可，否则所有计算节点都需要上传安装包。
  3. 进入软件包上传路径，解压内存缓存系统软件包。
    unzip Ascend-mindxdl-mindio_{version}_linux-{arch}.zip
    表1 解压后内层目录结构

    目录

    目录内文件

    说明

    install

    hand_out_deploy.py

    MindIO ACP安装包。

    host_ip_list

    memfs.conf

    scp_file.sh

    ssh_cmd.sh

    Ascend-mindxdl-mindio_{version}_linux-{arch}.tar

    -

    security_tool_{arch}.tar.gz

    -

    MindIO TFT证书管理脚本工具。

    mindio_ttp-{mindio_ttp_version}-cp37-cp37m-linux_{arch}.whl

    -

    MindIO TFT安装包。

    mindio_ttp-{mindio_ttp_version}-cp38-cp38-linux_{arch}.whl

    mindio_ttp-{mindio_ttp_version}-cp39-cp39-linux_{arch}.whl

    mindio_ttp-{mindio_ttp_version}-cp310-cp310-linux_{arch}.whl

    mindio_ttp-{mindio_ttp_version}-cp311-cp311-linux_{arch}.whl
  4. 进入上传路径，执行以下命令，安装MindIO TFT SDK。
    此处以mindio_ttp-{mindio_ttp_version}-cp38-cp38-linux_{arch}.whl为例，请用户根据环境中的Python版本选择相应的安装包（Python 3.8自身存在安全漏洞）。
    pip3 install mindio_ttp-{mindio_ttp_version}-cp38-cp38-linux_{arch}.whl --force-reinstall --no-index
    • 首次安装MindIO TFT SDK回显如下，表示安装成功。
      1
2
3
      Processing ./mindio_ttp-{mindio_ttp_version}-cp38-cp38-linux_{arch}.whl
Installing collected packages: mindio_ttp
Successfully installed mindio_ttp-{mindio_ttp_version}
    • 非首次安装MindIO TFT SDK回显如下，表示安装成功。
      1
2
3
4
5
6
7
      Processing ./mindio_ttp-{mindio_ttp_version}-cp38-cp38-linux_{arch}.whl
Installing collected packages: mindio_ttp
  Atempting uninstall: mindio-ttp
    Found existing installation: mindio_ttp {mindio_ttp_version}
    Uninstalling mindio_ttp-{mindio_ttp_version}:
      Successfully uninstalled mindio_ttp-{mindio_ttp_version}
Successfully installed mindio_ttp-{mindio_ttp_version}
  5. 将软件安装目录内的可执行文件和代码脚本权限更改为550，避免出现非法篡改。
    chmod -R 550 {MindIO TFT SDK安装目录}
父主题： 安装部署