加入位置矩阵后的变化(不改变维度)
【5,129,256】

函数变化

验证的时候主要是这一块

先经过一个全连接层
256*256*3

经过全连接之后的数据维度

拆成三块矩阵
第三维度上切片,横着截断

张量维度示意图

将129*256的矩阵
将129*256的矩阵拆开,
拆成4个129*64的矩阵
原来每一行是256个数,现在的每一行是64个数
一行拆成4行
具体的操作是将矩阵的数据全部被展开然后重新排列

加入位置矩阵后的变化(不改变维度)
【5,129,256】
256*256*3
第三维度上切片,横着截断
将129*256的矩阵拆开,
拆成4个129*64的矩阵
原来每一行是256个数,现在的每一行是64个数
一行拆成4行
具体的操作是将矩阵的数据全部被展开然后重新排列