spark

• spark权威指南学习笔记二

• spark权威指南学习笔记一

• spark权威指南学习笔记三

• spark权威指南学习笔记四

NLP

• Synthesizer：transformer中的自注意力机制是否真的有必要？

文本预处理

• 文本领域的Tricks

数据增强

• 文本领域的Tricks

paper

• Reformer

• Synthesizer：transformer中的自注意力机制是否真的有必要？

• Transformer-XL让模型支持长序列建模

• Luna(Linear Unified Nested Attention)

• 基于相对位置编码的自注意力机制

• SimCLS一个应用了对比学习的生成式摘要框架

Attention

• Luna(Linear Unified Nested Attention)

MLP

Langunage Model

读书

• [读书]这就是搜索引擎-核心技术讲解

• 《你的第一本哲学书》

搜索引擎

• [读书]这就是搜索引擎-核心技术讲解

Transformer

• Synthesizer：transformer中的自注意力机制是否真的有必要？

• Luna(Linear Unified Nested Attention)

自注意力机制

• Synthesizer：transformer中的自注意力机制是否真的有必要？

• 基于相对位置编码的自注意力机制

TransformerXL

• Transformer-XL让模型支持长序列建模

语言模型

• Transformer-XL让模型支持长序列建模

线性Attention

• Luna(Linear Unified Nested Attention)

VIM

• 入坑vim（一）

相对位置编码

• 基于相对位置编码的自注意力机制

BM25

• tfidf和bm25

TF-IDF

• tfidf和bm25

对比学习

• SimCLS一个应用了对比学习的生成式摘要框架

生成式摘要

• SimCLS一个应用了对比学习的生成式摘要框架

古文

• 古文

• 古文

哲学

• 《你的第一本哲学书》

2021年

• 2021年年末回顾

CTR预估

• CTR预估系列(二)---AutoInt

• CTR预估系列(一)---WDL

推荐系统

• CTR预估系列(一)---WDL

环境配置

• PyCharm配置远程python解释器和在本地修改服务器代码