【PYTHON-解决问题】使用GPU训练模型（.fit）时报错：Blas GEMM launch failed

最新推荐文章于 2026-03-14 00:43:43 发布
原创 最新推荐文章于 2026-03-14 00:43:43 发布 · 741 阅读 · 1 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文介绍了一种在使用GPU进行模型训练时遇到BlasGEMMlaunchfailed错误的解决办法。通过nvidia-smi工具检查并找到占用大量显存的进程，记录其PID并终止该进程，从而解决训练过程中出现的问题。

【问题描述】
使用GPU训练模型（.fit）时报错，返回Blas GEMM launch failed。使用nvidia-smi查看GPU状态，发现显存几乎占满，而GPU使用率极低。

【问题解决】
使用nvidia-smi查看GPU状态，找出占显存最多的一个进程，记下其PID号，使用kill PID号杀掉进程，即可正常训练。

【补充说明】
（nvidia-smi显示的GPU状态）
nvidia-smi后显示的GPU状态

标签
#tensorflow #python #gpu
凡天宁
关注
Rust for ML工程师：内存安全与零拷贝张量实战
最新发布
weixin_34209851的博客
07-12 323
张量计算和数据预处理是机器学习工程的核心环节，其性能瓶颈往往源于内存分配、跨语言调用和运行时不确定性。Rust凭借所有权系统、无GC确定性延迟和零成本抽象，为ML场景提供底层可控的内存模型与线程调度能力。通过ndarray的Arc<RawVec>设计、polars的Arrow零拷贝解析、以及CUDA原生ABI直通，Rust可显著优化GPU显存利用、消除Python GIL阻塞，并保障推理服务的亚毫秒级延迟稳定性。本文聚焦ML工程师真实工作流——从PyTorch训练卡顿、ONNX部署抖动，到边缘设备延时压测，
CentOS 7下Ollama+Dify+DeepSeek离线部署全攻略（附模型迁移技巧）
weixin_28826521的博客
03-14 329
本文详细介绍了在CentOS 7无网环境下，从零开始离线部署Ollama、DeepSeek模型与Dify平台的完整实战攻略。内容涵盖基础环境规划、Ollama服务安装、模型文件迁移技巧、Docker引擎离线部署，以及Dify平台与本地Ollama服务的集成配置，为企业内网构建安全、可控的AI应用提供了一套经过验证的解决方案。
【深度学习】训练时现Interal Error：Blas GEMM launch failed.
gongdiwudu的专栏
07-08 1万+
Tensorflow程序运行中出现"Interal Error：Blas GEMM launch failed."，此错误主要是由于程序运行时GPU的空间不足而引起的。故一般出现此错误的时候，会发现程序提示的GPU freeMemory 少。
同济大学C++mooc第五、六讲参考答案
cjzui6666的博客
06-21 1万+
同济大学C++moooc第5、6讲 第五讲 第一题 随机产生10个30~100(包括30，100)的正整数，求它们的最大值、最小值、平均值，并显示整个数组的值和结果。 代码片. // #include<iostream> const int n = 10; using namespace std; int main() { int s[n],i,j,t,sum=0; for (i = 0; i < n; i++)
Internal Error： Blas GEMM launch failed 问题
feixiang7701的博客
08-08 3万+
      Tensorflow程序运行中出现"Interal Error：Blas GEMM launch failed."，此错误主要是由于程序运行时GPU的空间不足而引起的。故一般出现此错误的时候，会发现程序提示的GPU freeMemory 很少，如下图所示。        出现显存不足的主要问题是Tensorflow默认申请可使用的全部显存，当tensorflow程序运行会话却没有...
调GPU运算错误:Blas GEMM launch failed
weixin_43983379的博客
04-22 7308
tensorflow2 配置gpu GPU版的tensorflow在模型训练时遇到Blas GEMM launch failed错误，或者keras遇到相同错误（keras 一般将tensorflow作为backend，如果安装了GPU版本的tensorflow，那么在使用keras时会优先使用GPU），类似报错如下： Blas GEMM launch failed : a.shape=(1, 1...
TensorFlow-gpu报错Blas GEMM launch failed解决方案
weixin_43082510的博客
03-08 4711
出现Blas GEMM launch failed报错的原因是tensorflow在调用GPU时的显存分配出现问题，tensorflow默认申请可使用的全部显存，当tensorflow程序运行会话却没有关闭会话释放资源的时候，就会出现此错误。 解决方法 在运行Session时将： with tf.Session() as sess: 替换为： gpu_options = tf.GPUOption...
Tensorflow 2.1.0 出现 InternalError: Blas GEMM launch faile的错误解决方法
fei_007_的博客
07-28 642
Tensorflow 2.1.0 出现 InternalError: Blas GEMM launch faile的错误解决方法： 关闭现有工程，重新打开，运行即可解决。 InternalError: Blas GEMM launch faile 其中，笔者遇到的问题的代码如下： # TensorFlow and tf.keras import tensorflow as tf from tensorflow import keras # Helper libraries import ..
tensorflow-gpu中使用keras时 “Blas GEMM launch failed”错误的解决方法
Humanlike_
03-26 5221
环境：Anaconda 4.5.11            tensorflow-gpu 1.13.1            CUDA 10.0   &nbs...
训练模型时Interal Error：Blas GEMM launch failed.
intmain_S的博客
01-05 822
仅支持 Linux系统，也就是windows系统无法安装。所以只能用Linux系统。最近在跑毕业实验，遇到上述问题。但是有一个致命的原因是。
如何处理TensorFlow中的InternalError: Blas GEMM launch failed
热门推荐
沉淀所学，分享所思，让热爱与成长同行。商务记录AI实战经验，助力开发者快速成长。 热爱AI，希望做出有影响力的技术成果。 技术点亮生活，分享连接价值与机会。 专注AI落地实战，陪你走好技术每一步。
07-10 5万+
大家好，我是默语，擅长全栈开发、运维和人工智能技术。。这个错误通常出现在进行矩阵乘法运算时，特别是涉及到BLAS库调用时。本文将深入分析这个错误的原因，并提供详细的解决方案和代码示例。希望通过这篇文章，能够帮助大家更好地使用TensorFlow进行深度学习模型的开发。是TensorFlow中的一个错误，通常出现在调用BLAS库进行矩阵乘法运算时。这可能是由于GPU内存不足、驱动问题或TensorFlow配置不当引起的。# 示例代码try:在这个例子中，进行大规模矩阵乘法运算时可能会触发。方法描述。
Internal Error:Blas GEMM launch failed解决方法
weixin_44737922的博客
07-09 4633
参考文章链接 该问题是因为GPU显存不足 在要运行的代码前加上这段，问题便解决了（环境为TensorFlow2.x） os.environ["CUDA_VISIBLE_DEVICES"] = '0' #指定第一块GPU可用 config = tf.compat.v1.ConfigProto() config.gpu_options.per_process_gpu_memory_fraction = 0.8 # 程序最多只能占用指定gpu50%的显存 config.gpu_options.allow_g
InternalError (see above for traceback): Blas GEMM launch failed已解决
Cbanyungong的博客
06-10 6363
Tensorflow配置的环境是Win10 RTX2060显存,CUDA 9.0,cudnn7,tensorflow-gpu1.5。 运行程序出现InternalError (see above for traceback): Blas GEMM launch failed : a.shape=(1, 25088), b.shape=(25088, 4096), m=1, n=4096, k=25...
【tensorflow报错】tensorflow.python.framework.errors_impl.InternalError: Blas GEMM launch failed：XXX
weixin_44445154的博客
12-16 9985
tensorflow报错解决
RTX3090 tensorflow1.x报错：Blas GEMM launch failed
AFXBR的博客
04-05 4942
本文主要解决使用3090运行tensorflow1.x代码的问题
Blas GEMM launch failed 错误解决方案
UX_LEGEND的专栏
10-12 3832
错误信息如下： tensorflow.python.framework.errors_impl.InternalError: 2 root error(s) found. (0) Internal: Blas GEMM launch failed : a.shape=(10, 10), b.shape=(10, 10), m=10, n=10, k=10 [[{{node sequential/simple_rnn/while/body/_1/MatMul_1}}]] [[Res...
Tensorflow错误集
xjb_Sunshine的博客
09-17 565
2018年9月16日 错误1： InternalError (see above for traceback): Blas GEMM launch failed 错误解释：基础线性代数子程序库（Blas）广义矩阵乘法（GEMM）运行错误 错误原因：一般由于程序运行时GPU的空间不足而引起 个人解决方案： 我遇到这个问题是由于我同时跑了两个程序，上一个程序运行时GPU占用80%，所以在运...
InternalError: Blas GEMM launch failed 原因
yao8130628的博客
04-14 2151
ubuntu 16.04 + cuda 9.0 + cudnn 7.05 +tensorflow-gpu==1.5 发生原因： (1)、由于其他pythonx程序占用了ＧＰＵ资源，导致现有程序没法分配足够的资源去执行当前程序。 (2)、tensorflow-gpu默认占用所有显存，注意在初始化 Session 的时候为其分配固定数量的显存，否则可能会在开始训练的时候直接报错退出。 解决办法： （1...
InternalError (see above for traceback): Blas GEMM launch failed : a.shape=(x, x), b.shape=(x,x)錯誤
keineahnung2345的博客
11-27 7819
這個錯誤是在一開始訓練Keras（使用TensorFlow當backend）模型的時候就出現。Python版本：3.5.2 Keras版本：2.1.2 TensorFlow版本：1.3.0 使用`nvidia-smi`查看GPU memory的使用情況：發現己被其它程序佔滿。 試著將這些程序關掉，然後再重新運行剛剛那段代碼（不必重啟kernel），問題即可成功解決！
2025最新版FUSION360安装包
本文详细介绍了Autodesk Fusion360建模软件的免费下载和安装步骤，包括如何通过官方网站获取软件，填写个人信息，创建账号，以及安装过程中需要注意的事项。安装完成后，用户需要使用注册的账号登录软件进行激活。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值