奔腾的小马达

未归档

C++(58) C++设计模式(24) Django2.0(17) H3CNE网络工程师之路(1) Linux(18) NLP(4) python(35) PyTorch(7) shell脚本编程(8) TensorFlow(2) web前端开发(89) 开发工具(14) 操作系统(4) 数据分析(5) 数据库(8) 数据结构与算法(8) 机器学习(15) 生活感悟(8) 计算机网络(2)

/ 注册

全部文章 / 未归档（共473篇）

神经网络中的批量归一化Batch Normalization(BN)原理总结

技术交流QQ群:1027579432，欢迎你的加入！ 0.概述深层神经网络存在的问题(从当前层的输入的分布来分析)：在深层神经网络中，中间层的输入是上一层神经网络的输出。因此，之前的层的神经网络参数的变化会导致当前层输入的分布发生较大的差异。在使用随机梯度下降法来训练神经网络时，每次参...

2019-07-11

0 575

神经网络中的批量归一化Batch Normalization(BN)原理总结

技术交流QQ群:1027579432，欢迎你的加入！ 0.概述深层神经网络存在的问题(从当前层的输入的分布来分析)：在深层神经网络中，中间层的输入是上一层神经网络的输出。因此，之前的层的神经网络参数的变化会导致当前层输入的分布发生较大的差异。在使用随机梯度下降法来训练神经网络时，每次参...

2019-07-11

0 479

神经网络中的注意力机制总结及PyTorch实战

技术交流QQ群:1027579432，欢迎你的加入！ 0.概述当神经网络来处理大量的输入信息时，也可以借助人脑的注意力机制，只选择一些关键的信息输入进行处理，用来提高神经网络的效率。在目前的神经网络模型中，可以将max pooling和gating机制近似地看作是自下而上的基于显著性的注...

2019-07-08

0 1227

神经网络中的注意力机制总结及PyTorch实战

技术交流QQ群:1027579432，欢迎你的加入！ 0.概述当神经网络来处理大量的输入信息时，也可以借助人脑的注意力机制，只选择一些关键的信息输入进行处理，用来提高神经网络的效率。在目前的神经网络模型中，可以将max pooling和gating机制近似地看作是自下而上的基于显著性的注...

2019-07-08

0 1389

神经网络中的注意力机制总结及PyTorch实战

技术交流QQ群:1027579432，欢迎你的加入！ 0.概述当神经网络来处理大量的输入信息时，也可以借助人脑的注意力机制，只选择一些关键的信息输入进行处理，用来提高神经网络的效率。在目前的神经网络模型中，可以将max pooling和gating机制近似地看作是自下而上的基于显著性的注...

2019-07-08

0 948

从LSTM到GRU基于门控的循环神经网络总结

技术交流QQ群:1027579432，欢迎你的加入！ 1.概述为了改善基本RNN的长期依赖问题，一种方法是引入门控机制来控制信息的累积速度，包括有选择性地加入新的信息，并有选择性遗忘之前累积的信息。下面主要介绍两种基于门控的循环神经网络：长短时记忆网络和门控循环单元网络。因为基本的RNN...

2019-07-05

0 623

中文文本中的关键字提取算法总结

技术交流QQ群:1027579432，欢迎你的加入！ 0.关键词提取定义：从文本中把与这篇文章意义最相关的一些词语抽取出来。应用：在文献检索、自动文摘、文本聚类/分类等方面有着重要的应用，它不仅是进行这些工作不可或缺的基础和前提，也是互联网上信息建库的一项重要工作。 1.关键...

2019-07-03

0 1355

中文分词工具jieba分词器的使用

技术交流QQ群:1027579432，欢迎你的加入！ 1.常见的中文分词工具中科院计算所的NLPIR 哈工大LTP 清华大学THULAC 斯坦福分词器 Hanlp分词器 jieba分词 IKAnalyzer 2.jieba分词算法主要有以下三种： 1...

2019-07-02

0 535

中文分词工具jieba分词器的使用

技术交流QQ群:1027579432，欢迎你的加入！ 1.常见的中文分词工具中科院计算所的NLPIR 哈工大LTP 清华大学THULAC 斯坦福分词器 Hanlp分词器 jieba分词 IKAnalyzer 2.jieba分词算法主要有以下三种： 1...

2019-07-02

0 540

简单好用的中文分词工具之HanLP的安装与使用

技术交流QQ群:1027579432，欢迎你的加入！ 0.HanLP的安装 pyhanlp是HanLP的Python的接口，支持自动下载与升级HanLP，兼容pthon2、python3。由于HanLP主项目采用Java开发，所以安装之前，windows系统必须先安装Java运行环境，注意...

2019-06-29

0 545