0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

由一只小貓帶咱們走進(jìn)深度學(xué)習(xí)的世界吧!

8g3K_AI_Thinker ? 來(lái)源:未知 ? 作者:李倩 ? 2018-07-27 17:35 ? 次閱讀

首先就由一只小貓帶咱們走進(jìn)深度學(xué)習(xí)的世界吧!

對(duì)于一個(gè)輸入樣本來(lái)說(shuō),深度學(xué)習(xí)和機(jī)器學(xué)習(xí)有著相同的目的,就是要把這個(gè)樣本進(jìn)行最準(zhǔn)確的分類。咱們從肉眼看很容易這是一只貓,因?yàn)槲覀冇兄@么多年的積累常識(shí)嘛!但是計(jì)算機(jī)可不這么聰明一眼就能看得出來(lái),在計(jì)算機(jī)中,一個(gè)圖像是由像素點(diǎn)所構(gòu)成的。

這里可能有同學(xué)對(duì)于計(jì)算機(jī)視覺(jué)不是很了解,我簡(jiǎn)單的介紹下,像素點(diǎn)是一個(gè)從0到255范圍內(nèi)的一個(gè)正值,那么這個(gè)點(diǎn)的大小意味著這個(gè)點(diǎn)所對(duì)應(yīng)區(qū)域的一個(gè)亮度。咱們也可以把一個(gè)圖片當(dāng)成一個(gè)三維數(shù)組比如[256,256,3]這里的256就分別代表了圖片的長(zhǎng)和寬的大小,最后的3就是圖片的顏色通道,不知道通道是什么也不要緊,咱們暫且知道圖片是矩陣組成的就好啦!

這個(gè)矩陣就是長(zhǎng)的這個(gè)樣子

那么我們所面臨的挑戰(zhàn)是什么呢?

我們要面對(duì)的可不僅僅是這樣一只蹲在我們面前可愛(ài)的小貓,在實(shí)際中有著很多的可能性,比如光照強(qiáng)度,遮蔽程度,角度等等,這些就成為了我們深度學(xué)習(xí)任務(wù)的一個(gè)極大的挑戰(zhàn)。

這些異形就是我們所面臨的挑戰(zhàn)

深度學(xué)習(xí)要解決的最核心也是最基本的問(wèn)題就是分類任務(wù)了,它也是咱們理解深度學(xué)習(xí)一個(gè)最好的入手點(diǎn)。

分類問(wèn)題的常規(guī)套路

一個(gè)分類任務(wù)的常規(guī)套路大致可以分為三點(diǎn):

1、收集數(shù)據(jù)并給定標(biāo)簽:

就是我們要制作訓(xùn)練集了,包括data label這兩部分,別小看收集數(shù)據(jù)了,這部其實(shí)很麻煩的,沒(méi)有合適的數(shù)據(jù)很難訓(xùn)練出優(yōu)秀的模型的,兩個(gè)量都很重要,一個(gè)是質(zhì)量一個(gè)是數(shù)量,對(duì)于我們深度學(xué)習(xí)來(lái)說(shuō),數(shù)量是很重要的,基本上都要以萬(wàn)為基本單位的。

2、訓(xùn)練一個(gè)分類器:這步可以說(shuō)是很核心的一步,分類器的效果好壞決定了我們最終應(yīng)用的效果,深度學(xué)習(xí)之所以效果要超過(guò)傳統(tǒng)的機(jī)器學(xué)習(xí)在部分領(lǐng)域上比如計(jì)算機(jī)視覺(jué),主要在于深度學(xué)習(xí)所訓(xùn)練的分類器更強(qiáng)大,這節(jié)課咱們只簡(jiǎn)單的介紹,干貨還是在后面的。

3、測(cè)試評(píng)估:一個(gè)好的分類器,不是咱們通過(guò)大量的數(shù)據(jù)和一個(gè)強(qiáng)大的模型結(jié)構(gòu)就可以的。在訓(xùn)練好分類器后,一個(gè)更重要的點(diǎn)就是我們要去測(cè)試和評(píng)估,比如準(zhǔn)確率,召回率等衡量指標(biāo)。我們要通過(guò)這些指標(biāo)反復(fù)調(diào)節(jié)模型參數(shù)直到得到最好的模型無(wú)論是機(jī)器學(xué)習(xí)還是深度學(xué)習(xí)都離不開(kāi)這三步,有了這樣的一個(gè)流程下面我們就來(lái)看一看傳統(tǒng)的機(jī)器學(xué)習(xí)算法是如何進(jìn)行分類任務(wù)的。

這個(gè)就是數(shù)據(jù)庫(kù),簡(jiǎn)單說(shuō)下這個(gè)數(shù)據(jù)庫(kù)有10類標(biāo)簽,就是有10個(gè)類別,接下來(lái)要做的就是訓(xùn)練一個(gè)分類模型啦。

我的這個(gè)做法很多同學(xué)可能會(huì)說(shuō)我很二,但是為了更好的給那些剛?cè)腴T(mén)(坑)的同學(xué)更直觀的表達(dá),咱們簡(jiǎn)單的來(lái)樂(lè)呵下就好。

用每個(gè)圖片的像素點(diǎn)所構(gòu)成的矩陣去算和它像素點(diǎn)差異最小的那幾個(gè)數(shù)據(jù)樣本是哪幾個(gè)。雖然做法很二,但這也是一個(gè)簡(jiǎn)單的K近鄰問(wèn)題,我們通過(guò)像素點(diǎn)的L1距離(這個(gè)看公式吧)去計(jì)算輸入和所有訓(xùn)練集中的樣本的距離然后找出最小的那K個(gè),輸入的樣本的類別就是那K個(gè)里投票和。

這里我要強(qiáng)調(diào)的是,我不是用這種做法去說(shuō)一個(gè)分類的流程,而是讓大家看到咱們傳統(tǒng)做法所需的一些東西。這里咱們?cè)谧龇诸惖臅r(shí)候所需的參數(shù)有K近鄰中的K的大小,還要選擇距離公式也就是L的選擇,這只是最少的參數(shù)選擇,要是更復(fù)雜的模型我們所需選擇的參數(shù)就更多了。不同的參數(shù)選擇可以說(shuō)對(duì)于最終的結(jié)果有著很大的影響,這也就是傳統(tǒng)的機(jī)器學(xué)習(xí)算法很頭疼的一個(gè)問(wèn)題很多東西都需要咱們不斷去嘗試。那么深度學(xué)習(xí)一個(gè)很強(qiáng)大的地方就是我們并不需要設(shè)定很多這樣的超參數(shù)。

接下來(lái)咱們?cè)賮?lái)強(qiáng)調(diào)下上面這張圖,這個(gè)的目的就是很多同學(xué)并沒(méi)有太多機(jī)器學(xué)習(xí)和實(shí)戰(zhàn)的基礎(chǔ),需要給大家對(duì)數(shù)據(jù)集的劃分有個(gè)大致的概念。

我們?cè)谟?xùn)練模型之前的數(shù)據(jù)準(zhǔn)備要把整個(gè)數(shù)據(jù)分成兩個(gè)大部分,一個(gè)是訓(xùn)練數(shù)據(jù),一個(gè)是測(cè)試數(shù)據(jù)。理論上來(lái)說(shuō)測(cè)試數(shù)據(jù)是很寶貴的,我們只有在最后的時(shí)候才能使用測(cè)試數(shù)據(jù)去評(píng)估,在訓(xùn)練的過(guò)程中決不允許出現(xiàn)測(cè)試數(shù)據(jù)。

還有就是我們還要把訓(xùn)練數(shù)據(jù)這個(gè)大部分切分成幾個(gè)小份,比如5個(gè)小份,這么做的目的是我們還需要驗(yàn)證集,驗(yàn)證集的意思就是我們?cè)谟?xùn)練模型的時(shí)候要不斷的做一個(gè)模型自測(cè)試效果的過(guò)程,比如用其中的4小份作為訓(xùn)練數(shù)據(jù),用另一小份作為驗(yàn)證數(shù)據(jù)。還有一個(gè)知識(shí)點(diǎn)要給大家強(qiáng)調(diào)下,我們?cè)趯?shí)際訓(xùn)練模型的時(shí)候更多的是使用交差驗(yàn)證,什么是交差呢?就是我們這次取這4個(gè)作為訓(xùn)練下次我們?cè)偃×硗?個(gè)作為訓(xùn)練,這樣就可以保證咱們訓(xùn)練模型的可靠性更大!

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 分類器
    +關(guān)注

    關(guān)注

    0

    文章

    152

    瀏覽量

    13204
  • 機(jī)器學(xué)習(xí)

    關(guān)注

    66

    文章

    8428

    瀏覽量

    132842
  • 深度學(xué)習(xí)
    +關(guān)注

    關(guān)注

    73

    文章

    5510

    瀏覽量

    121343

原文標(biāo)題:由一只貓看深度學(xué)習(xí)面臨哪些挑戰(zhàn)?

文章出處:【微信號(hào):AI_Thinker,微信公眾號(hào):人工智能頭條】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    從零開(kāi)始走進(jìn)FPGA世界 V2.0【轉(zhuǎn)】

    ` 本帖最后由 普萊斯隊(duì)長(zhǎng) 于 2013-3-3 09:07 編輯 從零開(kāi)始走進(jìn)FPGA,總結(jié)我大學(xué)FPGA所學(xué),并不能把您帶到多高的深度,只為將您帶進(jìn)FPGA世界,希望能給你點(diǎn)
    發(fā)表于 08-10 11:03

    養(yǎng)一只compass需要什么樣的條件?

    ,如果你擁有臺(tái)運(yùn)動(dòng)相機(jī)的時(shí)候,就沒(méi)有那么矯情。你可以它上山下海,可以它環(huán)游世界。當(dāng)然還有個(gè)更接地氣的小公舉,生活記錄相機(jī)compas
    發(fā)表于 12-17 14:19

    從零開(kāi)始走進(jìn)FPGA世界

    從零開(kāi)始走進(jìn)FPGA世界
    發(fā)表于 03-12 13:11

    什么是深度學(xué)習(xí)?使用FPGA進(jìn)行深度學(xué)習(xí)的好處?

    任務(wù)。首先,我們以張“貓的圖像”作為輸入,教它輸入和輸出的對(duì)應(yīng)關(guān)系,這樣神經(jīng)網(wǎng)絡(luò)的輸出就是“這張圖像是一只貓”。這個(gè)階段稱為學(xué)習(xí)。在完成定量的學(xué)
    發(fā)表于 02-17 16:56

    一只電容救活顯象管

    一只電容救活顯象管筆者家中有臺(tái)老式的14英寸的黑白電視機(jī),使用十年來(lái),
    發(fā)表于 04-17 22:26 ?681次閱讀

    一只單連開(kāi)關(guān)控制三盞燈

    一只單連開(kāi)關(guān)控制三盞燈
    發(fā)表于 09-10 08:57 ?3055次閱讀
    <b class='flag-5'>一只</b>單連開(kāi)關(guān)控制三盞燈

    一只單連天關(guān)控制盞燈并另外連接一只插座

    一只單連天關(guān)控制盞燈并另外連接一只插座
    發(fā)表于 09-10 08:58 ?935次閱讀
    <b class='flag-5'>一只</b>單連天關(guān)控制<b class='flag-5'>一</b>盞燈并另外連接<b class='flag-5'>一只</b>插座

    使用一只發(fā)光二極管的三功能指示電路

    使用一只發(fā)光二極管的三功能指示電路
    發(fā)表于 04-20 11:32 ?406次閱讀
    使用<b class='flag-5'>一只</b>發(fā)光二極管的三功能指示電路

    電子玩具--小貓捉鳥(niǎo)電路圖

    制作過(guò)程 在線上畫(huà)一只形像小貓捉鳥(niǎo)的圖案,然后貼在三夾板上,用鋼絲鋸沿圖案邊緣鋸下,即可制成,把發(fā)光二極管裝在貓眼里,其余電路裝在小貓背后固定即可。 本裝置耗電省,2節(jié)5號(hào)電池可連續(xù)使用4個(gè)月左右。
    發(fā)表于 08-23 22:54 ?1000次閱讀
    電子玩具--<b class='flag-5'>小貓</b>捉鳥(niǎo)電路圖

    一只LED閃爍_源代碼

    基礎(chǔ)的電子類資料,設(shè)計(jì)和開(kāi)發(fā)必備資料,快來(lái)下載學(xué)習(xí)
    發(fā)表于 09-27 17:12 ?4次下載

    還記得那些年的華碩筆記本電腦嗎?讓我們走進(jìn)華碩筆記本世界

    在過(guò)去的華碩筆記本電腦世界你對(duì)這些又有哪些了解呢?和小編走進(jìn)華碩筆記版電腦世界去了解它吸引人的
    發(fā)表于 03-24 09:40 ?2274次閱讀

    進(jìn)深度學(xué)習(xí)算法的光伏出力預(yù)測(cè)方法

    為提高光伏出力的預(yù)測(cè)精度,提出了種改進(jìn)深度學(xué)習(xí)算法的光伏出力預(yù)測(cè)方法。首先,針對(duì)傳統(tǒng)的深度學(xué)習(xí)算法采用批量梯度下降(batch gradi
    發(fā)表于 12-17 10:42 ?8次下載
    改<b class='flag-5'>進(jìn)深度</b><b class='flag-5'>學(xué)習(xí)</b>算法的光伏出力預(yù)測(cè)方法

    機(jī)器學(xué)習(xí)的類型介紹

    機(jī)器學(xué)習(xí)可以分為監(jiān)督學(xué)習(xí),半監(jiān)督學(xué)習(xí),非監(jiān)督學(xué)習(xí),強(qiáng)化學(xué)習(xí),深度
    發(fā)表于 03-12 16:01 ?3270次閱讀

    使用HPEC促進(jìn)深度學(xué)習(xí)技術(shù)

      期待已久的機(jī)器學(xué)習(xí)時(shí)代終于到來(lái)了。深度學(xué)習(xí)技術(shù)對(duì)作戰(zhàn)人員的潛在好處既巨大又深遠(yuǎn)。隨著防御系統(tǒng)趨向于更大的應(yīng)用程序自主性,深度學(xué)習(xí)技術(shù)過(guò)于
    的頭像 發(fā)表于 11-02 09:48 ?776次閱讀

    讀懂深度學(xué)習(xí),走進(jìn)深度學(xué)習(xí)+”階段

    人工智能的概念在1956年就被提出,如今終于走入現(xiàn)實(shí),離不開(kāi)種名為“深度學(xué)習(xí)”的技術(shù)。深度學(xué)習(xí)的運(yùn)作模式,如同
    的頭像 發(fā)表于 01-14 23:34 ?916次閱讀
    讀懂<b class='flag-5'>深度</b><b class='flag-5'>學(xué)習(xí)</b>,<b class='flag-5'>走進(jìn)</b>“<b class='flag-5'>深度</b><b class='flag-5'>學(xué)習(xí)</b>+”階段