demo批量处理视频时在get_batch处卡住

[Chuan76]

我在使用demo批量处理视频样本时发现模型在遇到某些视频时，会一直卡在frames = vr.get_batch(frame_idx).asnumpy()这句代码，不报错也不继续运行后面的语句。我查看过卡住的视频样本，与其他正常样本没有什么区别，视频格式是h264，也没有出现异常帧索引，但是就有某些特定的样本无法处理，这是什么原因？

[Chuan76]

还有一个问题，在模型输出的output_ids中有时会出现词表末尾的特殊token，这导致在解码时报错，这该如何解决？

[shuyansy]

您好，请问在for循环内部您有加入model.memory.reset()这个语句嘛。

[Chuan76]

是的，我在每轮for循环开始都执行了model.memory.reset()这句代码。并且我发现在max_frames_num = 20情况下无法解码的视频在max_frames_num = 50时可以正常解码，但与此同时会出现其他视频无法解码，这又是什么原因？

[shuyansy]

frames = vr.get_batch(frame_idx).asnumpy() 如果是这里报错应该不是模型的问题，是读视频出了问题。您有试过对这些异常帧直接处理是正常的吗

[Chuan76]

感谢您的解答，我发现确实是异常帧引发的问题。单独对异常帧处理也依然会出现上述问题，在查阅资料后，确认应该是decord包中VideoReader的get_batch方法在底层运行时由于未知原因出现的死锁现象造成上述情况，在参考并使用dmlc/decord#269 中 @兰科斯蒂 重构的SafeVideoReader类之后，问题解决了。有相关问题的也可以去看一下，再次感谢 @shuyansy 的解答！