input_ids: 对应词汇表id token_type_ids: token 对应的句子id,值为0或1(0表示对应的token属于第一句,1表示属于第二句)。形状为(b...
![240](https://upload.jianshu.io/users/upload_avatars/9655787/b5b877db-7088-49ff-8074-a2589ce8ab6e.jpg?imageMogr2/auto-orient/strip|imageView2/1/w/240/h/240)
input_ids: 对应词汇表id token_type_ids: token 对应的句子id,值为0或1(0表示对应的token属于第一句,1表示属于第二句)。形状为(b...
分享一下自己看论文收集总结的一些paper. 持续更新~ 欢迎大家来一起更新呀 Adversarial Training (Adversarial Examples) Exp...
玩过Excel的都知道excel里面有个非常好用的分类汇总进行数据展示的功能——pivot table,即数据透视表。在Pandas里面也有个类似的功能,pivot和pivo...
上午发现了一个很好用的函数,query,这里详细记录学习下 pandas.DataFrame.query DataFrame.query(self, expr, inplac...
1 前言 前段时间在看到XLNET,Transformer-XL等预训练模式时,看到源代码都用到sentencepiece模型,当时不清楚。经过这段时间实践和应用,觉得这个方...
超平面的公式 首先明确几个定义:(1) 超平面是指n维线性空间中维度为n-1的子空间。它可以把线性空间分割成不相交的两部分。比如二维空间中,一条直线是一维的,它把平面分成了两...
1. 抱抱脸transformers 报错Couldn't instantiate the backend tokenizer 感觉像sentencepiece不匹配tran...
MCC 1. 定义 MCC ——Matthews correlation coefficient , 马修斯相关系数。sklearn.metrics.matthews_cor...
3. pack_padded_sequence, pad_packed_sequence 1. 处理可变序列 当我们进行batch个训练数据一起计算的时候,我们会遇到多个训练...
本质原因是不同python版本命名有区别用下面代码替换from itertools import zip_longest:
1.torch.expand() torch.expand(), 只能把维度为1的拓展成指定维度。如果哪个维度为-1,就是该维度不变。 2. torch.repeat() t...
3.Pytorch 中 torch.stack()/vstack()/hstack()和torch.cat() 1.torch.stack() torch.stack(ten...
torch.index_select(input, dim, index, *, out=None) → Tensor 作用是: Returns a new tensor w...
1. Anaconda 1. 添加环境变量 如果是安装在默认路径的化,一般是 /home/用户名/anaconda3/bin,如果不是,按照你的路径替换 2. conda 一...