训练3个epoch后loss变为nan

Question

如果我把mosaic设置为True，大概第一个epoch走了一半就nan了。
如果我把mosaic设置为False, 大概第三个epoch走了一大半后就nan了是什

fanjiaqi123 · Answer

把batch_size值减小，亲测有效

bubbliiiing · Answer

你训练的是啥呢，没有遇见过

qybing · Answer

我也遇到了，有的nan,有的正常

bubbliiiing · Answer

你们训练的物体的情况可以透露一下么，我也不知道是什么问题

bubbliiiing · Answer

已经给ciou所有除号加上了epsilon的判断，你们再试试看

ZaoYum-Liao · Answer

你们训练的物体的情况可以透露一下么，我也不知道是什么问题

我是做垃圾分类的

ZaoYum-Liao · Answer

已经给ciou所有除号加上了epsilon的判断，你们再试试看

好的，今晚试了看看

bubbliiiing · Answer

是否解决？

ZaoYum-Liao · Answer

是否解决？

我把代码重新更新了一下，问题消失了.....
请问一下，我通过

bubbliiiing · Answer

你应该是需要提高batch_size吧

hongqingxie · Answer

我也遇到一樣的問題，請問可以分享一下最後是怎麼解決的嗎？

bubbliiiing · Answer

我也遇到一樣的問題，請問可以分享一下最後是怎麼解決的嗎？

已经给ciou所有除号加

Franco52576 · Answer

我也遇到了一样的问题，使用最新的加epsilon还是出现nan的情况，我做的是交通标志检测

bubbliiiing · Answer

你可以重新开始训练试试

我也遇到了一样的问题，使用最新的加epsilon还是出现nan的情况，我做的是交通标志

MiniLisaBear · Answer

你可以重新开始训练试试
我也遇到了一样的问题，使用最新的加epsilon还是出现na

bubbliiiing · Answer

一般这种问题我都是从这个世代开始训练……一般都能解决，我也暂时没有很理解为什么会出现nan

MiniLisaBear · Answer

好的，我试一下，谢谢------------------ 原始邮件 ------------------发

训练3个epoch后loss变为nan about yolov4-keras HOT 17 OPEN