萌主天下无敌提示您:看后求收藏(棉花糖小说网www.aaeconomics.com),接着再看更方便。

由于

(,

)的形式比较复杂,参数也非常多,所以直接进行数学上的求解,非常困难。

为了利用计算机算法解决这一问题,计算机科学家们提出了梯度下降算法(

)。

这个算法本质上是在多维空间中沿着各个维度的切线贡献的方向,每次向下迈出微小的一步,从而最终抵达最小值。

由于多维空间在视觉上无法体现,所以人们通常会退到三维空间进行类比。当

(,

)只有两个参数的时候,它的函数图像可以在三维空间里呈现。

就好像一个小球在山谷的斜坡上向下不停地滚动,最终就有可能到达谷底。这个理解重新推广到多维空间内也基本成立。

而由于训练样本的数量很大(上万,几十万,甚至更多),直接根据前面的

(,

)进行计算,计算量会很大,导致学习过程很慢。

、于是就出现了随机梯度下降(

)算法,是对于梯度下降的一个近似。

在这个算法中,每次学习不再针对所有的训练集,而是从训练集中随机选择一部分来计算

(,

),下一次学习再从剩下的训练集中随机选择一部分来计算,直到把整个训练集用光。然后再不断重复这一过程。

深度神经网络(具有多个

)比浅层神经网络有更多结构上的优势,它有能力从多个层次上进行抽象。

从上个世纪八九十年代开始,研究人员们不断尝试将随机梯度下降算法应用于深度神经网络的训练,但却碰到了梯度消失(

)或梯度爆发(

)的问题,导致学习过程异常缓慢,深度神经网络基本不可用。

然而,从

年开始,人们开始使用一些新的技术来训练深度网络,不断取得了突破。这些技术包括但不限于:

采用卷积网络(;

);

;(

);

利用

获得更强的计算能力等。

深度学习的优点显而易见:这是一种全新的编程方式,它不需要我们直接为要解决的问题设计算法和编程,而是针对训练过程编程。

网络在训练过程中就能自己学习到解决问题的正确方法,这使得我们可以用简单的算法来解决复杂的问题,而且在很多领域胜过了传统方法。

而训练数据在这个过程发挥了更重要的作用:简单的算法加上复杂的数据,可能远胜于复杂的算法加上简单的数据。

深度网络往往包含大量的参数,这从哲学原则上不符合奥卡姆剃刀原则,通常人们要在调整这些参数上面花费巨大的精力;

训练深度网络需要大量的计算力和计算时间;

过拟合(

)问题始终伴随着神经网络的训练过程,学习过慢的问题始终困扰着人们,&#

;.

&#

;&#

;&#

;

.&#

;这容易让人们产生一种失控的恐惧,同时也对这项技术在一些重要场合的进一步应用制造了障碍。

的故事,所讲的就是一个人工智能程序,通过自我学习,最终逐渐统治世界的故事。

那么,现在的人工智能技术的发展,会导致这种情况发生吗?这恐怕还不太可能。一般人认为,大概有两个重要因素:

第一,以现在的人工智能来说,它的自我学习还是限定在人们指定的方式,只能学习解决特定的问题,仍然不是通用的智能。

第二,现在对于人工智能的训练过程,需要人们为其输入规整化的训练数据,系统的输入输出仍然对于数据的格式要求很严格,这也意味着,即使把人工智能程序连到网上,它也不能像

那样对于互联网上海量的非结构化数据进行学习。

然而这仅仅是对普通的人工智能,但是对起源这样真正的网络智能生命来说,以上两点要求它完全都能够做到。

科幻灵异推荐阅读 More+
村庄模拟器

村庄模拟器

山大人呀
村庄模拟器简介: 顾凡在达成了所有经营类游戏成就后穿越了! 目标:在一百年内在鬼魅世界建立一个最强大的村子! 顾凡踌躇满志的开始了游戏,他相信,他一定能成功! 只不过......这帮村民为什么这么沙雕! 谨慎到头皮发麻的村长,犯花痴的女战士,只想着复仇的小屁孩,连自己都治不好的女药师...... 请问这个游戏的退出键在哪里? 什么?死了就能退出了? 哦,那没事了。
科幻 完结 36万字
星战萌娘

星战萌娘

侠雨
星战萌娘简介: 这是一本讲述人类正式踏入星际时代后,艰难生存的热血凯歌…… 好吧,其实就是一个没啥追求的家伙带着一群妹子到处晃荡找事的简单日常而已。 波澜壮阔,精彩纷呈,没谱没溜的广阔宇宙里,出现了一群无节操的远征军团,他们以小博大,大小通吃,啥都敢干。 郑重提示……请勿代入现实世界任何科学观,魔炮少女是不存在的。
科幻 连载 185万字
凌晨学院I

凌晨学院I

扬尘逆世01
凌晨学院I简介: 在现实世界的某个地方,有一座学院,它的名字叫做‘凌晨学院’。在这里生活的每一个人,都要面对生与死的任务考验。 一旦进入学院的人,等于踏上了一条不归路,有人开始绝望,有人开始泯灭人性,当然更多的是在这里艰难求生。他们甚至找不到离开的办法,这些任务危机四伏,每一次都让参与者步步惊心,活下去的机会只有一次。 在学院里面爱恨交错,生离死别,一幕幕的亲情与友情,背叛与伤害..... ..
科幻 连载 14万字
狂暴穿越

狂暴穿越

沉睡不能醒来
狂暴穿越简介: 二十二世纪恐怖人物秦乱山,被判为死刑犯后强迫进行时空穿越。可是他却发现,第二纪元人类终将毁灭的悲剧。时空之不可逆转,在未来的世界中,他该如何拯救人类。 空中城市,第三纪元的进化之地,他在这集装箱遍地的城市能否寻找到答案。没有老爷爷的帮助,没有高科技知识的显摆,神马古诗词人家根本不在乎,在这里他只比野兽高一等。未来的城市世界,第二纪元的人类成为低等动物,不想成为动物园的野兽,那么就
科幻 完结 118万字
贪婪的夏燹

贪婪的夏燹

黑文凰
贪婪的夏燹简介: 人类,总是徘徊在得到和失去的轮回中... 而迷恋和贪求的快感,却总是如此短暂... 无尽的贪求和渴望,让夏燹获得了成为一名被混沌所选中的代行者,旅行于各个世界之间,尽情地将自身的贪欲奉献于无尽的混沌之中... 恣意妄为吧,贪求一切的灵魂... 尽情攫取吧,渴求至高快感,以真实为名的存在... (严肃正经向。适量YY,无后宫以及女主,会以严肃认真合理的手段进行恶搞。)
科幻 连载 46万字
阴阳鬼盗

阴阳鬼盗

无双
阴阳鬼盗简介: 【最诡异】十六年前天生异象贼星转世,十六年后霉运当头的他克死最后一个亲人。他是鬼盗传人马程峰! 点背怎么办?盗运!阳寿尽了怎么办?盗命!命格轻怎么办?盗魂! 与人斗,与鬼斗,与命斗,与天斗…… 阴阳鬼盗,盗转乾坤,颠覆盗义,天下无双!
科幻 连载 339万字