【优化技巧】CNN的参数调优技巧

博文翻译陈杰 发表了文章 • 0 个评论 • 27 次浏览 • 2017-02-14 19:04 • 来自相关话题

http://lamda.nju.edu.cn/weixs/project/CNNTricks/CNNTricks.html
 
占坑

利用生成HNN模型建立端到端的对话系统

博文翻译陈杰 发表了文章 • 0 个评论 • 65 次浏览 • 2017-01-23 19:31 • 来自相关话题

挖了一堆坑了 
Building End-To-End Dialogue Systems Using Generative Hierarchical Neural Network Models 查看全部

【聊天机器人系列之一】聊天机器人中深度学习的应用介绍

博文翻译陈杰 发表了文章 • 0 个评论 • 50 次浏览 • 2017-01-21 19:47 • 来自相关话题

挖了一堆坑
 
DEEP LEARNING FOR CHATBOTS, PART 1 – INTRODUCTION 查看全部

【教程】从零开始实现一个神经网络

博文翻译陈杰 发表了文章 • 0 个评论 • 46 次浏览 • 2017-01-21 19:32 • 来自相关话题

 
 
原文链接:IMPLEMENTING A NEURAL NETWORK FROM SCRATCH IN PYTHON – AN INTRODUCTION 查看全部

【RNN系列教程】RNN的科普介绍

博文翻译陈杰 发表了文章 • 0 个评论 • 45 次浏览 • 2017-01-21 19:29 • 来自相关话题

继续占坑~
 
http://www.wildml.com/2015/09/ ... rnns/

【Python图像处理系列】检测火车并识别其前进方向

博文翻译陈杰 发表了文章 • 0 个评论 • 35 次浏览 • 2017-01-21 19:11 • 来自相关话题

继续占坑,挨个补~
 
原文地址:Image Processing in Python
继续占坑,挨个补~
 
原文地址:Image Processing in Python

【教程】不平衡数据集上的数据预测模型

论文阅读陈杰 发表了文章 • 0 个评论 • 43 次浏览 • 2017-01-21 18:53 • 来自相关话题

 继续占坑,有时间了补上
 
 
论文:A Survey of Predictive Modelling under Imbalanced Distributions 查看全部
 继续占坑,有时间了补上
 
 
论文:A Survey of Predictive Modelling under Imbalanced Distributions

不平衡数据集上的分类策略

博文翻译陈杰 发表了文章 • 0 个评论 • 45 次浏览 • 2017-01-18 21:27 • 来自相关话题

先占坑,近期补上
 
原文链接:Learning from Imbalanced Classes
先占坑,近期补上
 
原文链接:Learning from Imbalanced Classes

深度学习书籍推荐

书籍推荐陈杰 发表了文章 • 1 个评论 • 728 次浏览 • 2016-04-07 16:18 • 来自相关话题

【编者注】本文推荐了基本目前可以购买或者可以预购的书籍,适合对深度学习领域的同学进行系统性的学习。
目前还没有多少深度学习领域的书籍,因为它还是个非常新的领域。但是现在有几本书和一些有趣的书可以预购了。








在本博文中,你将会接触到几本现在就可以购买的深度学习相关书籍。


深度学习教科书

这是一本深度学习的教科书,已经发布有一段时间了,它就叫做 Deep Learning。






它是由深度学习领域的顶级专家Ian Goodfellow,Yoshua Bengio 和 Aaron Courville共同编写,这本书中包含了该领域中的大部分算法还有相应的练习。

我认为它将是这个领域的重要著作,主要是因为它是免费的。就像学习机器学习就该去阅读《The Elements of Statistical Learning》一样重要的书籍。

这本书的大部分内容已经完工,我抢了推荐去阅读它来了解深度学习领域中的理论和算法。

目前的内容如下:

* 第一部分: 应用数学和机器学习基础
    * 线性代数
    * 概率和信息论
    * 数值计算
    * 机器学习基础
* 第二部分: 主流深度网络
    * 前向深度网络
    * 正则化
    * 训练深度模型的优化方法
    * 卷积网络
    * 序列模型:递归网络
    * 实用方法论
    * 应用
* 第三部分:深度学习研究
    * 线性因素模型
    * 自动编码
    * 表示学习
    * 深度学习中的结构化概率模型
    * 蒙特卡洛方法
    * 配分函数
    * 近似推断
    * 深度泛化模型

O'Reilly的深度学习书籍

目前有两本由O'Reilly出版的深度学习书籍:

* Deep Learning: A Practitioner’s Approach
* Fundamentals of Deep Learning: Designing Next-Generation Machine Intelligence Algorithms

# Deep Learning: A Practitioner's Approach






这是一本应用书籍,由Deeplearning4J的两位创始人Adam Gibson和Josh Patterson共同编写。Deeplearning4J(DL4J)是针对Java应用的深度学习框架。

这本书非常实用,它面向Java开发者和数据科学家编写,同时我推测其中的例子均采用DL4J框架实现。

这本书计划于2016年5月出版,目前还没有目录信息。

Fundamentals of Deep Learning: Designing Next-Generation Machine Intelligence Algorithms






这是另一本实用书籍,它是Nikhil Buduma基于Python语言编写。它涵盖了深度学习的概念和例子。可以预购这本书,目前它有五章内容。

这本书的目录如下:

* 神经网络
* 训练前向反馈神经网络
* 用TensorFlow实现神经网络
* 梯度下降
* 卷积神经网络
* 嵌入学习和表示学习
* 序列分析中的深度学习
* 记忆增强深度学习模型
* 深度学习生成模型
* 深度强化学习
* 通用无监督学习
* 训练极限深度神经网络

我非常期待这本书。

Packt出版的深度学习书

Packt在2016年5月将有一本由Yusuke Sugomori编写的名为《Deep Learning with Java》的书籍出版。它同样是面向Java开发者和数据科学家的,同时提供了使用Deeplearning4J实现的例子。






目前还没有这本书的目录,但是我相信它可以预购了,地址在这里。

Deep Belief Nets in C++ and CUDA C

Timothy Masters已经写了一系列的关于人工神经网络的书籍。在2015年,他编写了两本基于C++和CUDA C的深度信任网络数据。

这本书将提供很多例子,它主要关注在DEEP的软件。可以通过他的个人主页来了解更多关于这个软件的内容。

这两本书分别是:

Deep Belief Nets in C++ and CUDA C: Volume 1: Restricted Boltzmann Machines and Supervised Feedforward Networks

这本书的目录如下:

* 有监督前向反馈网络
* 受限波兹曼机
* 贪心学习
* DEEP操作手册

Deep Belief Nets in C++ and CUDA C: Volume II: Autoencoding in the Complex Domain

这本书的目录如下:

* 嵌入式类标签
* 信号处理
* 图像处理
* 自动编码
* DEEP 操作手册

Artificial Intelligence for Humans

Jeff Heaton编写了人工智能方面的三本书籍。

* Artificial Intelligence for Humans, Volume 1: Fundamental Algorithms
* Artificial Intelligence for Humans, Volume 2: Nature-Inspired Algorithms
* Artificial Intelligence for Humans, Volume 3: Deep Learning and Neural Networks

这个系列的第三本书中涵盖了人工神经网络内容,以及一些深度学习上的技巧。






这本书的目录如下:

* 神经网络基础
* 自组织迎合
* Hopfield网络和波兹曼机
* 前向反馈神经网络
* 训练和评价
* 后向训练
* 其他训练
* NEAT,CPNN和混合NEAT
* 深度学习
* 卷积神经网络
* 调参合模型选择
* Dropout和正则化
* 时间序列和递归网络
* 设计神经网络
* 可视化
* 神经网络建模

Jeff是一位社区活跃者,他的书籍得到了广泛的关注,因为他采用了KickStarter来创作。他的第三本书将会是了解神经网络和深度神经网络应用场景的好读物。


Deep Learning in R
N. D. Lewis 在统计和机器学习方面有多本著作。在2016年初,他完成了在R语言方面的深度学习书籍:《Deep Learning Made Easy with R: A Gentle Introduction for Data Science》。






这本书的目录如下:

* 深度神经网络
* Elman神经网络
* Jordan神经网络
* 自动编码的奥秘
* NutShell下的自动编码
* 受限波兹曼机
* 深度置信网络

Neural Networks and Deep Learning

这本是由Michael Nielsen编写的免费书,地址在这里。

总结

在本文中,你可以找到基本现有的深度学习书籍。

如果你已经购买或者读过其中的几本,请留言告诉我你的读后感。

如果还有其他深度学习方面的书籍遗漏,请留言告诉我补充。
 
 
原文链接:Deep Learning Books(翻译:陈杰)

===================================================
译者介绍
陈杰,北京理工大学计算机学院在读博士,研究方向是自然语言处理在企业网络信誉评价方面的应用,正在努力学习深度学习在文本处理方面的知识,专注文本情感分析、评论有用性预测方面。
 
  查看全部
【编者注】本文推荐了基本目前可以购买或者可以预购的书籍,适合对深度学习领域的同学进行系统性的学习。
目前还没有多少深度学习领域的书籍,因为它还是个非常新的领域。但是现在有几本书和一些有趣的书可以预购了。


d1.jpg



在本博文中,你将会接触到几本现在就可以购买的深度学习相关书籍。


深度学习教科书

这是一本深度学习的教科书,已经发布有一段时间了,它就叫做 Deep Learning

d2.png


它是由深度学习领域的顶级专家Ian Goodfellow,Yoshua BengioAaron Courville共同编写,这本书中包含了该领域中的大部分算法还有相应的练习。

我认为它将是这个领域的重要著作,主要是因为它是免费的。就像学习机器学习就该去阅读《The Elements of Statistical Learning》一样重要的书籍。

这本书的大部分内容已经完工,我抢了推荐去阅读它来了解深度学习领域中的理论和算法。

目前的内容如下:

* 第一部分: 应用数学和机器学习基础
    * 线性代数
    * 概率和信息论
    * 数值计算
    * 机器学习基础
* 第二部分: 主流深度网络
    * 前向深度网络
    * 正则化
    * 训练深度模型的优化方法
    * 卷积网络
    * 序列模型:递归网络
    * 实用方法论
    * 应用
* 第三部分:深度学习研究
    * 线性因素模型
    * 自动编码
    * 表示学习
    * 深度学习中的结构化概率模型
    * 蒙特卡洛方法
    * 配分函数
    * 近似推断
    * 深度泛化模型

O'Reilly的深度学习书籍

目前有两本由O'Reilly出版的深度学习书籍:

* Deep Learning: A Practitioner’s Approach
* Fundamentals of Deep Learning: Designing Next-Generation Machine Intelligence Algorithms

# Deep Learning: A Practitioner's Approach

d3.jpg


这是一本应用书籍,由Deeplearning4J的两位创始人Adam GibsonJosh Patterson共同编写。Deeplearning4J(DL4J)是针对Java应用的深度学习框架。

这本书非常实用,它面向Java开发者和数据科学家编写,同时我推测其中的例子均采用DL4J框架实现。

这本书计划于2016年5月出版,目前还没有目录信息。

Fundamentals of Deep Learning: Designing Next-Generation Machine Intelligence Algorithms

d4.jpg


这是另一本实用书籍,它是Nikhil Buduma基于Python语言编写。它涵盖了深度学习的概念和例子。可以预购这本书,目前它有五章内容。

这本书的目录如下:

* 神经网络
* 训练前向反馈神经网络
* 用TensorFlow实现神经网络
* 梯度下降
* 卷积神经网络
* 嵌入学习和表示学习
* 序列分析中的深度学习
* 记忆增强深度学习模型
* 深度学习生成模型
* 深度强化学习
* 通用无监督学习
* 训练极限深度神经网络

我非常期待这本书。

Packt出版的深度学习书

Packt在2016年5月将有一本由Yusuke Sugomori编写的名为《Deep Learning with Java》的书籍出版。它同样是面向Java开发者和数据科学家的,同时提供了使用Deeplearning4J实现的例子。

d5.jpg


目前还没有这本书的目录,但是我相信它可以预购了,地址在这里

Deep Belief Nets in C++ and CUDA C

Timothy Masters已经写了一系列的关于人工神经网络的书籍。在2015年,他编写了两本基于C++和CUDA C的深度信任网络数据。

这本书将提供很多例子,它主要关注在DEEP的软件。可以通过他的个人主页来了解更多关于这个软件的内容。

这两本书分别是:

Deep Belief Nets in C++ and CUDA C: Volume 1: Restricted Boltzmann Machines and Supervised Feedforward Networks

这本书的目录如下:

* 有监督前向反馈网络
* 受限波兹曼机
* 贪心学习
* DEEP操作手册

Deep Belief Nets in C++ and CUDA C: Volume II: Autoencoding in the Complex Domain

这本书的目录如下:

* 嵌入式类标签
* 信号处理
* 图像处理
* 自动编码
* DEEP 操作手册

Artificial Intelligence for Humans

Jeff Heaton编写了人工智能方面的三本书籍。

* Artificial Intelligence for Humans, Volume 1: Fundamental Algorithms
* Artificial Intelligence for Humans, Volume 2: Nature-Inspired Algorithms
* Artificial Intelligence for Humans, Volume 3: Deep Learning and Neural Networks

这个系列的第三本书中涵盖了人工神经网络内容,以及一些深度学习上的技巧。

d6.jpg


这本书的目录如下:

* 神经网络基础
* 自组织迎合
* Hopfield网络和波兹曼机
* 前向反馈神经网络
* 训练和评价
* 后向训练
* 其他训练
* NEAT,CPNN和混合NEAT
* 深度学习
* 卷积神经网络
* 调参合模型选择
* Dropout和正则化
* 时间序列和递归网络
* 设计神经网络
* 可视化
* 神经网络建模

Jeff是一位社区活跃者,他的书籍得到了广泛的关注,因为他采用了KickStarter来创作。他的第三本书将会是了解神经网络和深度神经网络应用场景的好读物。


Deep Learning in R
N. D. Lewis 在统计和机器学习方面有多本著作。在2016年初,他完成了在R语言方面的深度学习书籍:《Deep Learning Made Easy with R: A Gentle Introduction for Data Science》

d7.jpg


这本书的目录如下:

* 深度神经网络
* Elman神经网络
* Jordan神经网络
* 自动编码的奥秘
* NutShell下的自动编码
* 受限波兹曼机
* 深度置信网络

Neural Networks and Deep Learning

这本是由Michael Nielsen编写的免费书,地址在这里

总结

在本文中,你可以找到基本现有的深度学习书籍。

如果你已经购买或者读过其中的几本,请留言告诉我你的读后感。

如果还有其他深度学习方面的书籍遗漏,请留言告诉我补充。
 
 
原文链接:Deep Learning Books(翻译:陈杰)

===================================================
译者介绍
陈杰,北京理工大学计算机学院在读博士,研究方向是自然语言处理在企业网络信誉评价方面的应用,正在努力学习深度学习在文本处理方面的知识,专注文本情感分析、评论有用性预测方面。
 
 

建立该网站的初衷是什么?

站务信息dl4nlp 发表了文章 • 1 个评论 • 117 次浏览 • 2016-02-28 19:18 • 来自相关话题

【站长的话】本文用来说明本站的用途,同时还有为什么要建立该站,以及该站的计划是什么。
 
本站的用途
 
本站旨在科普、记录、分享深度学习在自然语言处理方面的学习资料,包括网络课程、论文、博文等。
 
建立本站的原因
[]深度学习是各个研究方向上的大势所趋,在自然语言处理领域上也已经有了一定的进展,这个主要反映在学术圈的各个顶级会议上的论文上。[/][]自己在学习深度学习在自然语言处理领域上的知识时,遇到了各种困难。最大的困难莫过于找资料,虽然深度学习的资料比较多,但是该技术得以出名还是在图像和音频方面的优秀性能,在自然语言处理方面相对来说资料较少,而作为一个NLPer,实在是对图像的知识了解甚少,导致了在学习这些基于图像处理的知识时捉襟见肘。于是,决心将自己学习这方面知识的历程整理并分享出来。[/][]独学而无友,则孤陋而寡闻。[/]
 
该站的计划
[]记录学习DL for NLP的知识曲线,并分享。[/][]翻译部分优秀的博客文章。[/][]对顶会文章进行学习和笔记分享。[/]
 
记于2016.2.28

=================================================================================
站长,还在努力争取毕业的一个博士NLPer,希望通过本社区认识更多的NLPer,一起研究和学习DL,并将其应用在NLP领域上。
 
 
  查看全部
【站长的话】本文用来说明本站的用途,同时还有为什么要建立该站,以及该站的计划是什么。
 
本站的用途
 
本站旨在科普、记录、分享深度学习在自然语言处理方面的学习资料,包括网络课程、论文、博文等。
 
建立本站的原因
    []深度学习是各个研究方向上的大势所趋,在自然语言处理领域上也已经有了一定的进展,这个主要反映在学术圈的各个顶级会议上的论文上。[/][]自己在学习深度学习在自然语言处理领域上的知识时,遇到了各种困难。最大的困难莫过于找资料,虽然深度学习的资料比较多,但是该技术得以出名还是在图像和音频方面的优秀性能,在自然语言处理方面相对来说资料较少,而作为一个NLPer,实在是对图像的知识了解甚少,导致了在学习这些基于图像处理的知识时捉襟见肘。于是,决心将自己学习这方面知识的历程整理并分享出来。[/][]独学而无友,则孤陋而寡闻。[/]

 
该站的计划
    []记录学习DL for NLP的知识曲线,并分享。[/][]翻译部分优秀的博客文章。[/][]对顶会文章进行学习和笔记分享。[/]

 
记于2016.2.28

=================================================================================
站长,还在努力争取毕业的一个博士NLPer,希望通过本社区认识更多的NLPer,一起研究和学习DL,并将其应用在NLP领域上。