参考资料：1911.05722和2003.04297——Kaiming大神最近很火的两篇成果。 BERT在自然语言里如火如荼，图像领域也开始尝试大规模自监督预训练了。但是相比自然语言处理，图像是连续的值，Embedding不是简单的look up的过程，而是待训练的encoder。而训练自监督的时候 ...
分类：
其他好文 时间：
2020-06-20 21:06:25
阅读次数：
139
随着预训练技术的到来，作为深度学习重要应用领域之一，自然语言处理也迎来了新的春天。通过使用预训练模型可以大大减少模型训练对数据的依赖，仅需要使用少量数据在下游任务中微调（Fine-tune），就可以获得效果非常优秀的模型。不过如果希望获得更好的效果，该怎么办呢？有人也许会说：多训练几个epoch嘛！ ...
分类：
其他好文 时间：
2020-06-17 20:25:50
阅读次数：
57
目录 传统的自然语言处理模型 NLP的卷积神经网络（textCNN） 卷积层的最大池化问题 testCNN的应用 一句话简介：借鉴视觉的CNN用于自然语言处理中，通过不同高度（词数量）的卷积核提取特征，合并池化压缩至分类，优势是速度提升很多。 一、传统的自然语言处理模型 1）传统的词袋模型或者连续词... ...
分类：
其他好文 时间：
2020-06-17 01:30:01
阅读次数：
70
作 者：陈鄞 编 出版社：哈尔滨工业大学出版社 I S B N： 9787560341262 定 价： ¥28.00 出版时间:2017年04月 http://product.dangdang.com/24245701.html?point=comment_point 第1章绪论1.1什么是自然语言 ...
分类：
编程语言 时间：
2020-06-16 13:13:26
阅读次数：
156
作者|MOHD SANAD ZAKI RIZVI 编译|VK 来源|Analytics Vidhya 概述 由AI生成的假新闻(神经假新闻)对于我们的社会可能是一个巨大的问题 本文讨论了不同的自然语言处理方法，以开发出对神经假新闻的强大防御，包括使用GPT-2检测器模型和Grover（AllenNL ...
分类：
其他好文 时间：
2020-06-14 12:58:59
阅读次数：
129
Word2Vec超详细的原理推导(包含负采样和层次softmax) 本文链接：https://blog.csdn.net/bqw18744018044/article/details/90295730 ...
分类：
编程语言 时间：
2020-06-11 09:11:53
阅读次数：
98
1.简述人工智能、机器学习和深度学习三者的联系与区别。 人工智能：计算机来构造复杂的、拥有与人类智慧同样本质特性的机器。专家系统、机器学习、进化计算、模糊逻辑、计算机视觉、自然语言处理、推荐系统等。 机器学习：一种实现人工智能的方法。机器学习最基本的做法，是使用算法来解析数据、从中学习，然后对真实世 ...
分类：
其他好文 时间：
2020-06-07 19:36:08
阅读次数：
51
1.简述人工智能、机器学习和深度学习三者的联系与区别。 ①人工智能 人工智能是计算机科学的一个分支，它企图了解智能的实质，并生产出一种新的能以 人类智能相似的方式做出反应的智能机器，该领域的研究包括语音识别、图像识别、 机器人、自然语言处理、智能搜索和专家系统等。人工智能可以对人的意识、思维的 信息 ...
分类：
其他好文 时间：
2020-06-03 14:00:21
阅读次数：
57
现在的社会是大数据社会，现在的时代是大数据时代。大数据处理常用的方法有哪些？一般来说，我们对一个事物进行宏观分析的话，就需要使用到大数据，各种大数据都是如何处理的呢？而今天我们就一起来了解一下，大数据分析都有哪些常用形式。 1、增强分析是数据和分析的未来 增强分析是银行机构大量使用的新兴技术。通过使用机器学习和自然语言处理技术处理数据并使其实现自动化。为了以简单易用的格式获得精确的结果，因
分类：
其他好文 时间：
2020-05-27 11:59:33
阅读次数：
766
目录 定义 BLEU算法详解 NLTK实现 一、定义 BLEU (其全称为Bilingual Evaluation Understudy), 其意思是双语评估替补。所谓Understudy (替补)，意思是代替人进行翻译结果的评估。尽管这项指标是为翻译而发明的，但它可以用于评估一组自然语言处理任务生 ...
分类：
其他好文 时间：
2020-05-26 22:05:43
阅读次数：
143
