模型方法

视频特征

双向编码

注意机制

METEOR

LSTM-YTcoco [2]

RGB

No

No

29.07

S2VT [3]

RGB + Optical Flow

No

No

29.8

Joint-BiLSTM [17]

RGB

Yes

No

30.3

BLSTM [18]

RGB

Yes

Yes

32.6

Multi-Task Model [19]

RGB

Yes

Yes

36.0

扩张卷积模型 [11]

RGB

No

Yes

38.45

本文

RGB + Optical Flow + C3D + Audio

Yes

Yes

41.76