【星空体育硬件产品型号】必填*：
MLU290

【使用操作系统】必填*：
ubuntu

【使用驱动版本】必填*：
v4.20.16

【出错信息】必填*：

【当前已做了哪些信息确认】选填：

代码跑通了,原论文作者是使用V100跑了72小时,我使用6机器48卡才跑了66小时.

我不清楚是什么方面有问题，毕竟这个效率差的有点多

应该有很多能提升的地方，还望贵单位的工程师能指点一下。

【参考配置文档链接】选填

MLU290、驱动v4.20.16、项目叫Geneformer、不清楚训练的时候有没有使用上mlu
【相关日志文档】选填
如有，可附件

【出错代码链接】选填：
github的或gitee的代码的链接，