并行策略：

1、auto_parallel（自动并行）
2、operator_parallel（手动并行）
3、optimizer_parallel（优化器并行）
4、pipeline_parallel（流水线并行）
5、recompute（重计算）

运行方式：

请参考：https://www.bilibili.com/video/BV1VN41117AG/?spm_id_from=333.999.0.0&vd_source=eb3a45e6eb4dccc5795f97586b78f429
中的实验部分