Deep Learning

A collection of 2 posts
Deep Learning

再从Deep Learning看科技的变革

其实,Deep Learning的基础奠定于几十年前的神经网络。 然而在90年代和整个2000年代,神经网络被工业和学术界抛弃了。为什么?因为效果还不如比如图像处理里面的各种adaboost、ASM等等特定方法,语音识别里面效果则远远不如HMM隐形马尔可夫模型。其实差距的关键,在于神经网络依赖于大量的标定数据用于学习,以及耗费大量的计算资源用于训练。 这两者在2010年之前都是不可能的。 随着移动互联网的爆发,计算性能的提高,学术界能获取到的标定数据指数型增长 ,GPU并行计算能力也有了飞跃(其实计算能力的提高带来的另一个附加变革则是同样被丢弃在垃圾堆里面30多年的VR)。 直到2012年左右,深度神经网络开始兴起,伴随而来的是识别率的不断刷新,现在图像和语音方面都已经能够做到高于人类的平均识别率了。也难怪人工智能这2年开始在投资领域和科技界不断冒泡。 这里面几点值得注意: 1. 科技的发展是交替 的。生物计算、VR、神经网络在计算性能的提升后重生;曾经遇到瓶颈的PC发展由于互联网和移动互联网,改变了整个人类社群的接入(连接)结构;当下正处于低潮期的所有产业,会由
3 min read
骇客技

最近人工智能大热背后的功臣 - Deep Learning深度学习

这篇文章纯粹是写给我自己,也算是最近调研的总结。Deep Learning是最近人工智能大热的一个导火索,虽然已经被玩烂了,但是还是稍微补充一些这方面的知识。或许,人工智能的革命会越来越快呢? 1. 机器学习是做什么的 Deep Learning又叫做深度学习,最近人工智能的火爆,AlphaGo的成名,以至于各种语音识别技术(Siri等)突飞猛进,都离不开这几年Deep Learning级数的大发展。 首先,机器要实现所谓的人工智能,其中一个关键节点是模式识别,或者机器学习,其核心就是能够比如识别出人类的手写文字,识别出语音,在这一步基础上,才有后面的分析 的步骤。 在机器学习或者模式识别领域,数十年下来已经了非常多成熟的算法,虽然他们在复杂条件下的准确率只有80%-90%,但是也足以适用绝大部分的场景,比如车牌识别。 传统的机器学习方法有神经网络(ANN),支持向量机(SVM),语音识别领域前些年大热的则是隐形马尔可夫模型(HMM),此外还有灰常多不同的工具和发明被各路大牛探索出来。 以语音识别的HMM为例,识别率大道90%左右则一直无法提升。虽然它已经超过了种种其他各种机
6 min read