发简信
IP属地：北京
-
transformer、bert、ViT常见面试题总结1.Transformer为何使用多头注意力机制？（为什么不使用一个头） 答案解析参考这里：为什么Transformer 需要进行 Multi-head Attention？...
-
答主是不是写错了啊，roberta的动态掩码不是这样的，你说的这种复制十份依然属于静态mask，只不过是改良版的静态mask
改进版的RoBERTa到底改进了什么？
在XLNet全面超越Bert后没多久，Facebook提出了RoBERTa（a Robustly Optimized BERT Pretraining Approach）。再...
-
机器翻译与自动文摘评价指标 BLEU 和 ROUGE在机器翻译任务中，BLEU 和 ROUGE 是两个常用的评价指标，BLEU 根据精确率(Precision)衡量翻译的质量，而 ROUGE 根据召回率(Recall)衡量翻译...
-
Bert源码解读-BertLayer序 word embedding之后，经过连续的N次(如12or4）的BertLayer串联之后的之后的输出，即为Bert的输出。本篇文章，主要分析一次 BertLayer的...
-
通俗讲解pytorch中nn.Embedding原理及使用函数调用形式 其为一个简单的存储固定大小的词典的嵌入向量的查找表，意思就是说，给一个编号，嵌入层就能返回这个编号对应的嵌入向量，嵌入向量反映了各个编号代表的符号之间的语义关系...
-
论文笔记 | 使用GCN建模关系数据本文主要复述论文["Modeling Relational Data with Graph Convolutional Networks"] 的主要内容，以便自我回顾，也希望...
-
2018 秋招 NLP 面经
2018NLP秋招求职记录 总结 首先介绍一下背景，博主来自大连理工大学，计算机专业研究生，研究方向主要是信息抽取、情感分析之类的。研究生期间一开始主要做实验室的课题（生物文...
-
认识一种新格式：Loom
处理单细胞数据的时候可能会遇到这种格式，一般是某些软件的输入。 1. 创建Loom文件 需要提供矩阵文件(numpy ndarray or scipy sparse matr...
-
R包安装、加载与更新
掌握了R基本的一些概念，今天咱们来简单了解下R包，R包安装、加载与更新 安装R包的几种方式 从CRAN中安装R包 首先是修改镜像，本身就在镜像范围内的就不用了，修改清华镜像站...
-
scRNA-seq数据分析 || Monocle3同系列文章： sc-RAN-seq 数据分析||Seurat新版教程:Guided Clustering Tutorial[https://www.jianshu.com/p...
-
通俗理解word2vec独热编码 独热编码即 One-Hot 编码，又称一位有效编码，其方法是使用N位状态寄存器来对N个状态进行编码，每个状态都有它独立的寄存器位，并且在任意时候，其中只有一位有效。...
-
配置深度学习主机与环境（TensorFlow+1080Ti）：（二）Win10&Ubuntu双系统与显卡驱动安装配置深度学习主机与环境（TensorFlow+1080Ti）：（一）硬件选购与主机组装（二）Win10&Ubuntu双系统与显卡驱动安装（三）CUDA与CUDNN安装（四）基...
