0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

機(jī)器學(xué)習(xí)必需數(shù)據(jù)標(biāo)注,人工標(biāo)注幫助AI快速落地

倩倩 ? 來源:lq ? 作者:中國日報(bào)網(wǎng) ? 2019-09-20 10:29 ? 次閱讀

“目前我國已有龐大的數(shù)據(jù)加工隊(duì)伍,僅北京就有一百多家專門從事數(shù)據(jù)標(biāo)注的公司,全國從事這項(xiàng)工作的人大概超過千萬,很多頭部的互聯(lián)網(wǎng)技術(shù)企業(yè)都有自己的數(shù)據(jù)標(biāo)注公司?!?/p>

目前人工智能落地場景不斷豐富,智能化應(yīng)用正改變著我們的生活。而在AI產(chǎn)業(yè)高速發(fā)展的背后,數(shù)據(jù)標(biāo)注師這個(gè)新職業(yè)的從業(yè)人數(shù)也正在壯大。數(shù)據(jù)標(biāo)注行業(yè)流行著一句話,“有多少智能,就有多少人工”。目前AI算法能學(xué)習(xí)的數(shù)據(jù),必須通過人力逐一標(biāo)注,這些人力為AI產(chǎn)業(yè)提供養(yǎng)料,構(gòu)建了AI金字塔的基礎(chǔ)。

近日,支付寶公益基金會、阿里巴巴人工智能實(shí)驗(yàn)室聯(lián)合中國婦女發(fā)展基金會在貴州銅仁萬山區(qū)啟動了“AI豆計(jì)劃”,這是該計(jì)劃在全國啟動的第一個(gè)試點(diǎn)地區(qū)。作為一種 “AI+扶貧”的公益新模式,計(jì)劃旨在通過AI產(chǎn)業(yè)釋放出的大量就業(yè)機(jī)會,在貧困地區(qū)培訓(xùn)相關(guān)職業(yè)人才、孵化社會企業(yè),讓貧困群眾實(shí)現(xiàn)在家門口就業(yè)脫貧。

這些從業(yè)者不需要背井離鄉(xiāng),她們可以受訓(xùn)上崗,為AI機(jī)器學(xué)習(xí)進(jìn)行數(shù)據(jù)的分類和標(biāo)注工作,讓機(jī)器可以快速學(xué)習(xí)和認(rèn)知文字、圖片、視頻等內(nèi)容,成為一名“AI培育師”。

機(jī)器學(xué)習(xí)必需數(shù)據(jù)標(biāo)注

AI數(shù)據(jù)標(biāo)注員被稱作“人工智能背后的人工”。“數(shù)據(jù)是人工智能的血液。當(dāng)下是大數(shù)據(jù)基礎(chǔ)上的人工智能,是數(shù)據(jù)智能的深度學(xué)習(xí)時(shí)代,可以說誰掌握了數(shù)據(jù),誰就有可能做好?!敝锌圃鹤詣踊芯繂T、視語科技創(chuàng)始人王金橋告訴科技日報(bào)記者。他解釋,當(dāng)前的人工智能也被稱作數(shù)據(jù)智能,在這個(gè)發(fā)展階段,神經(jīng)網(wǎng)絡(luò)的層數(shù)越多,神經(jīng)網(wǎng)絡(luò)越深,需要用于訓(xùn)練的數(shù)據(jù)量越大,“比如目前人臉識別做得好的是中青年人臉識別系統(tǒng),因?yàn)槟贻p人坐車住酒店,采集的數(shù)據(jù)量大,小孩和老年人數(shù)據(jù)相對較少?!?/p>

但同時(shí),只有數(shù)據(jù)是沒用的。對于深度學(xué)習(xí)來講,數(shù)據(jù)只有加上標(biāo)簽才有意義,才能用于機(jī)器的學(xué)習(xí)和進(jìn)化?!皹?biāo)注是一個(gè)必須的工作?!蓖踅饦蛘f。

王金橋介紹,從數(shù)據(jù)的收集、清洗、標(biāo)注到校驗(yàn)都離不開人工。數(shù)據(jù)標(biāo)注最基本的就是畫框,比如檢測目標(biāo)是車,標(biāo)注員就需要把一張圖上的所有車都標(biāo)出來,畫框要完全卡住車的外接矩形,框得不準(zhǔn)確機(jī)器就可能“學(xué)壞”。再比如人的姿態(tài)識別,就包括18個(gè)關(guān)鍵點(diǎn),經(jīng)過訓(xùn)練的標(biāo)注員才能掌握這些關(guān)鍵點(diǎn)的標(biāo)注,標(biāo)注完成的數(shù)據(jù)也才能符合機(jī)器學(xué)習(xí)的標(biāo)準(zhǔn)。

不同的數(shù)據(jù)類型對標(biāo)注員的要求也不一樣。除了一般較為簡單、可以通過培訓(xùn)掌握的標(biāo)注,還有一些需要專業(yè)背景的標(biāo)注,比如在醫(yī)療數(shù)據(jù)標(biāo)注中,標(biāo)注員需要做醫(yī)療圖像的分割,把腫瘤區(qū)域標(biāo)出來,類似工作就需要看得懂片子的醫(yī)生完成。再比如地方方言或外國文字,需要的也是掌握那門語言的標(biāo)注員。

人工標(biāo)注幫助AI快速落地

隨著人工智能的發(fā)展,數(shù)據(jù)的訓(xùn)練量非常大,數(shù)據(jù)標(biāo)注公司應(yīng)運(yùn)而生,這些公司以網(wǎng)絡(luò)方式運(yùn)作,一個(gè)平臺有產(chǎn)品經(jīng)理和項(xiàng)目經(jīng)理,接到一個(gè)任務(wù)就找人來做,大家通過網(wǎng)絡(luò)群組報(bào)名后,由產(chǎn)品經(jīng)理來培訓(xùn),之后各自領(lǐng)取自己的任務(wù),登錄賬號進(jìn)行標(biāo)注,檢驗(yàn)經(jīng)理校驗(yàn)合格后就付錢,不合格則需要重新修正。

“目前已經(jīng)形成龐大的數(shù)據(jù)加工隊(duì)伍,僅北京就有一百多家專門從事數(shù)據(jù)標(biāo)注的公司,全國從事這項(xiàng)工作的人大概超過千萬,很多頭部的互聯(lián)網(wǎng)技術(shù)企業(yè)都有自己的數(shù)據(jù)標(biāo)注公司?!蓖踅饦蛘f,“這個(gè)階段數(shù)據(jù)對性能的貢獻(xiàn)是最大的,數(shù)據(jù)越多越豐富、代表性越強(qiáng)、模型效果越好,算法的健壯性和魯棒性就越強(qiáng)。目前情況是大部分AI公司都還沒有實(shí)現(xiàn)盈利,但標(biāo)注公司除外?!?/p>

據(jù)王金橋介紹,國外也是一樣,無人零售、無人駕駛等都需要大量的人力,基于用工成本的問題,除了隱私數(shù)據(jù)之外,他們會把標(biāo)注工作放在第三世界國家完成,馬來西亞、泰國、印度等國家都有數(shù)據(jù)標(biāo)注分公司。

常見的報(bào)道中,數(shù)據(jù)標(biāo)注總被描述為“血汗工廠”,這項(xiàng)工作和從業(yè)者被描述得廉價(jià)低質(zhì),人被重復(fù)性機(jī)械式的勞動異化。在王金橋的解釋下,這一刻板印象也被逐漸打破。

他直言,目前這種大量的人工標(biāo)注是有價(jià)值的,因?yàn)槔碚撋辖鉀Q問題很難,但有了大量數(shù)據(jù),設(shè)計(jì)深度學(xué)習(xí)網(wǎng)絡(luò),可以在特定場景特定應(yīng)用中用數(shù)據(jù)訓(xùn)練神經(jīng)網(wǎng)絡(luò),從而在很多場景中可以讓AI快速落地占領(lǐng)市場、驅(qū)動行業(yè)應(yīng)用、促進(jìn)行業(yè)升級和迭代。

“比如在手機(jī)玻璃缺陷、高鐵軌道的缺陷、電網(wǎng)高壓線絕緣子損壞等檢測工作中,無人機(jī)拍攝畫面后,由人來檢測,隨著數(shù)據(jù)量增加,機(jī)器得到的訓(xùn)練越來越充分,機(jī)器慢慢可以自動檢測,類似工作可以很大程度上由機(jī)器代勞?!蓖踅饦蛘f,目前人工智能的智能性雖然比較弱,但在各行各業(yè)都會帶來改變,這是AI推動產(chǎn)業(yè)革命的機(jī)會。

數(shù)據(jù)標(biāo)注需求持續(xù)增加

“現(xiàn)在科研界研究的都是無監(jiān)督、小樣本的深度學(xué)習(xí),通過三維合成數(shù)據(jù),用虛實(shí)結(jié)合的數(shù)據(jù)生成方式來訓(xùn)練機(jī)器,盡量減少數(shù)據(jù)的采集和標(biāo)注,讓機(jī)器自主學(xué)習(xí)、自主進(jìn)化?!蓖踅饦蛘f,但由于缺乏理論上的突破性技術(shù),所以雖然技術(shù)增長速度很快,但整體水平還比較低,目前的深度學(xué)習(xí)還是依賴基于統(tǒng)計(jì)意義的大數(shù)據(jù)模型,這要求數(shù)據(jù)足夠多、足夠均衡、基本滿足真實(shí)世界的分布。

因此,標(biāo)注這項(xiàng)工作會一直存在。

但王金橋也表示,隨著無監(jiān)督、小樣本深度學(xué)習(xí)的進(jìn)步,重復(fù)性標(biāo)注的工作量會越來越少?!皺C(jī)器的識別和人一樣,人經(jīng)過幾千年的進(jìn)化,用語言用文字記錄和存儲幾千年的文明,所以看到桌子就知道是桌子,看到靈芝知道是靈芝。機(jī)器也需要不斷理解更多的內(nèi)容,有數(shù)據(jù)標(biāo)簽,它才能學(xué)習(xí),才會有智能。數(shù)據(jù)的加工是一個(gè)長期存在的過程,由畫框到基礎(chǔ)詞匯,慢慢形成自己的知識圖譜,才能自我推理和思考?!?/p>

目前的數(shù)據(jù)標(biāo)注公司基本采取“計(jì)件付費(fèi)”的模式,標(biāo)注員的待遇與任務(wù)量和難度直接相關(guān),熟練工一天能標(biāo)幾千張圖片,月收入最高過萬。這項(xiàng)工作也有一定專業(yè)性,受過培訓(xùn)才知道怎么標(biāo)、標(biāo)得清楚,人也要認(rèn)真細(xì)心?!懊刻飚a(chǎn)生的數(shù)據(jù)量太大了,數(shù)據(jù)量持續(xù)增加,對標(biāo)注的需求也持續(xù)增加?!蓖踅饦蛘f。

據(jù)阿里巴巴集團(tuán)副總裁、阿里巴巴人工智能實(shí)驗(yàn)室總經(jīng)理陳麗娟介紹,貴州萬山僅僅是一個(gè)起點(diǎn),未來項(xiàng)目的整體規(guī)劃將聚焦貧困地區(qū),尋找更多更適合發(fā)展“AI標(biāo)注”產(chǎn)業(yè)的地區(qū)來落地。同時(shí),也希望更多的人工智能企業(yè)加入,把AI標(biāo)注的訂單定向輸送給貧困地區(qū),為貧困群眾提供更多就業(yè)機(jī)會。陳麗娟說。

延伸閱讀

AI數(shù)據(jù)服務(wù)發(fā)展新方向:細(xì)分化、多模態(tài)、專業(yè)化

數(shù)據(jù)表明,當(dāng)前AI發(fā)展出現(xiàn)了細(xì)分化、多模態(tài)以及專業(yè)化三大特征。相應(yīng)的,新變化對于AI數(shù)據(jù)服務(wù)行業(yè)也形成了一定的影響與方向指引。

當(dāng)前AI已經(jīng)進(jìn)入技術(shù)落地階段,應(yīng)用場景涉及安防、金融、家居、交通等各大行業(yè)。而未來,在數(shù)據(jù)標(biāo)注行業(yè),從業(yè)者也將隨著AI行業(yè)而一同進(jìn)入細(xì)分市場追逐階段。

同時(shí)多模態(tài)也成為了AI技術(shù)發(fā)展的一個(gè)特征。所謂多模態(tài),即是對多維時(shí)間、空間、環(huán)境數(shù)據(jù)的感知與融合。如當(dāng)前的自動駕駛需要雷達(dá)+攝像頭才能跑的更穩(wěn),安防行業(yè)需要攝像頭+雷達(dá)紅外RFID才能感知得更精準(zhǔn)、更真實(shí)。而在數(shù)據(jù)服務(wù)產(chǎn)業(yè),企業(yè)也需要適應(yīng)AI技術(shù)發(fā)展的多模態(tài)特征,掌握對多維傳感器融合的數(shù)據(jù)采集與標(biāo)注。

此外,盡管當(dāng)前AI技術(shù)已經(jīng)進(jìn)入落地階段,但是頭部AI企業(yè)的落地場景相較傳統(tǒng)行業(yè)的AI落地場景,在技術(shù)上會更有前沿性。而這些企業(yè)的一些先進(jìn)技術(shù)研究也很有可能成為未來數(shù)據(jù)服務(wù)行業(yè)的一大發(fā)展方向,所以數(shù)據(jù)服務(wù)企業(yè)也需要在這些前沿場景中不斷探索,才能在行業(yè)競爭中獲得長期發(fā)展。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 人工智能
    +關(guān)注

    關(guān)注

    1791

    文章

    47282

    瀏覽量

    238533
  • 機(jī)器學(xué)習(xí)

    關(guān)注

    66

    文章

    8418

    瀏覽量

    132654
  • 深度學(xué)習(xí)
    +關(guān)注

    關(guān)注

    73

    文章

    5503

    瀏覽量

    121174
收藏 人收藏

    評論

    相關(guān)推薦

    標(biāo)貝數(shù)據(jù)標(biāo)注在智能駕駛訓(xùn)練中的落地案例

    標(biāo)貝科技深耕AI數(shù)據(jù)服務(wù)多年,在無人駕駛、自動駕駛等智能駕駛領(lǐng)域擁有豐富的合作案例。多次采用點(diǎn)云標(biāo)注以及3D&2D融合等標(biāo)注方式為智能駕駛領(lǐng)域客戶提供環(huán)境感知、決策策劃、車道線
    的頭像 發(fā)表于 12-24 15:17 ?447次閱讀
    標(biāo)貝<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>標(biāo)注</b>在智能駕駛訓(xùn)練中的<b class='flag-5'>落地</b>案例

    標(biāo)貝數(shù)據(jù)標(biāo)注案例分享:車載語音系統(tǒng)數(shù)據(jù)標(biāo)注

    車載語音識別系統(tǒng)是指利用機(jī)器學(xué)習(xí)算法實(shí)現(xiàn)的一種自然語言處理技術(shù),載語音識別系統(tǒng)通過辨別聲音的語調(diào)、語速和音量,將所聽到的語音轉(zhuǎn)化成可讀取的語言數(shù)字,從而達(dá)到實(shí)現(xiàn)車輛控制、語音導(dǎo)航等多個(gè)汽車控制功能
    的頭像 發(fā)表于 12-24 14:24 ?115次閱讀
    標(biāo)貝<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>標(biāo)注</b>案例分享:車載語音系統(tǒng)<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>標(biāo)注</b>

    SCB后備保護(hù)器的選型標(biāo)注及行業(yè)應(yīng)用解決方案

    ,在SPD異常時(shí)快速斷開回路,避免過大的故障電流影響整個(gè)系統(tǒng)的安全性。 二、SCB后備保護(hù)器的選型標(biāo)注方式 標(biāo)注規(guī)范 SCB后備保護(hù)器的選型標(biāo)注通?;谝韵聨讉€(gè)參數(shù): 電壓等級(Un)
    的頭像 發(fā)表于 12-23 11:04 ?107次閱讀
    SCB后備保護(hù)器的選型<b class='flag-5'>標(biāo)注</b>及行業(yè)應(yīng)用解決方案

    軟通動力入選《人工智能數(shù)據(jù)標(biāo)注產(chǎn)業(yè)圖譜》

    近日,由中國信息通信研究院、中國人工智能產(chǎn)業(yè)發(fā)展聯(lián)盟牽頭,聯(lián)合中國電信集團(tuán)、沈陽市數(shù)據(jù)局、保定高新區(qū)等70多家單位編制完成并發(fā)布了《人工智能數(shù)據(jù)標(biāo)注
    的頭像 發(fā)表于 12-03 10:18 ?156次閱讀

    標(biāo)貝科技:自動駕駛中的數(shù)據(jù)標(biāo)注類別分享

    自動駕駛訓(xùn)練模型的成熟和穩(wěn)定離不開感知技術(shù)的成熟和穩(wěn)定,訓(xùn)練自動駕駛感知模型需要使用大量準(zhǔn)確真實(shí)的數(shù)據(jù)。據(jù)英特爾計(jì)算,L3+級自動駕駛每輛汽車每天產(chǎn)生的數(shù)據(jù)高達(dá)4000GB,作為自動駕駛技術(shù)應(yīng)用落地
    的頭像 發(fā)表于 11-22 15:07 ?901次閱讀
    標(biāo)貝科技:自動駕駛中的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>標(biāo)注</b>類別分享

    標(biāo)貝科技:自動駕駛中的數(shù)據(jù)標(biāo)注類別分享

    自動駕駛訓(xùn)練模型的成熟和穩(wěn)定離不開感知技術(shù)的成熟和穩(wěn)定,訓(xùn)練自動駕駛感知模型需要使用大量準(zhǔn)確真實(shí)的數(shù)據(jù)。據(jù)英特爾計(jì)算,L3+級自動駕駛每輛汽車每天產(chǎn)生的數(shù)據(jù)高達(dá)4000GB,作為自動駕駛技術(shù)應(yīng)用落地
    的頭像 發(fā)表于 11-22 14:58 ?451次閱讀
    標(biāo)貝科技:自動駕駛中的<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>標(biāo)注</b>類別分享

    工具型AI標(biāo)注平臺SpeedDP工作流程是怎樣的?

    SpeedDP作為一個(gè)工具型AI平臺,它能提供從數(shù)據(jù)標(biāo)注、模型訓(xùn)練、測試驗(yàn)證到RockChip嵌入式硬件平臺模型部署的可視化AI開發(fā)功能。平臺所需算法并不是固定的,使用者可以根據(jù)自身實(shí)
    的頭像 發(fā)表于 11-19 01:02 ?304次閱讀
    工具型<b class='flag-5'>AI</b><b class='flag-5'>標(biāo)注</b>平臺SpeedDP工作流程是怎樣的?

    標(biāo)貝科技:AI基礎(chǔ)數(shù)據(jù)服務(wù),人工智能行業(yè)發(fā)展的底層支撐

    隨著不同大模型在語言理解及生成等領(lǐng)域的出色表現(xiàn),大模型別后的規(guī)模規(guī)律不斷強(qiáng)化數(shù)據(jù)在要提升AI性能上的關(guān)鍵作用,AI數(shù)據(jù)服務(wù)可加速高質(zhì)量數(shù)據(jù)
    的頭像 發(fā)表于 11-14 18:32 ?269次閱讀
    標(biāo)貝科技:<b class='flag-5'>AI</b>基礎(chǔ)<b class='flag-5'>數(shù)據(jù)</b>服務(wù),<b class='flag-5'>人工</b>智能行業(yè)發(fā)展的底層支撐

    AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第一章人工智能驅(qū)動的科學(xué)創(chuàng)新學(xué)習(xí)心得

    人工智能:科學(xué)研究的加速器 第一章清晰地闡述了人工智能作為科學(xué)研究工具的強(qiáng)大功能。通過機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等先進(jìn)技術(shù),
    發(fā)表于 10-14 09:12

    螞蟻數(shù)科發(fā)布AI賦能新一代數(shù)據(jù)標(biāo)注產(chǎn)品

    在近日舉行的2024 Incluison·外灘大會上,螞蟻數(shù)科憑借其技術(shù)創(chuàng)新的深厚底蘊(yùn),正式推出了新一代AI數(shù)據(jù)標(biāo)注產(chǎn)品,旨在為企業(yè)客戶提供全方位、智能化的數(shù)據(jù)解決方案。這款產(chǎn)品的問世
    的頭像 發(fā)表于 09-10 16:04 ?467次閱讀

    SpeedDP! 超便利AI自動圖像標(biāo)注工具 功能豐富、省時(shí)省力

    超級AI,在線標(biāo)注,既能解放雙手,又省時(shí)省力。傳統(tǒng)的標(biāo)注模式需要你對著目標(biāo)不斷拉框,反復(fù)機(jī)械的動作做多了就變得“麻木”,影響效率還使人煩惱。而SpeedDP的出現(xiàn),可以有效的提升標(biāo)注
    的頭像 發(fā)表于 08-30 12:59 ?286次閱讀
    SpeedDP! 超便利<b class='flag-5'>AI</b>自動圖像<b class='flag-5'>標(biāo)注</b>工具   功能豐富、省時(shí)省力

    標(biāo)貝數(shù)據(jù)采集標(biāo)注在自動駕駛場景中落地應(yīng)用實(shí)例

    AI數(shù)據(jù)服務(wù)作為人工智能和機(jī)器學(xué)習(xí)的基礎(chǔ),在自動駕駛領(lǐng)域中有著重要地位。與其他人工智能應(yīng)用場景相
    的頭像 發(fā)表于 05-28 14:22 ?577次閱讀
    標(biāo)貝<b class='flag-5'>數(shù)據(jù)</b>采集<b class='flag-5'>標(biāo)注</b>在自動駕駛場景中<b class='flag-5'>落地</b>應(yīng)用實(shí)例

    慧視SpeedDP大模型打造圖像標(biāo)注新時(shí)代

    人工智能時(shí)代,圖像標(biāo)注不僅能夠反哺AI的發(fā)展,還能進(jìn)一步降低項(xiàng)目成本。傳統(tǒng)的圖像標(biāo)注需要人工采用文本或者相應(yīng)工具機(jī)械式的進(jìn)行圖像標(biāo)簽分配,
    的頭像 發(fā)表于 05-24 08:29 ?552次閱讀
    慧視SpeedDP大模型打造圖像<b class='flag-5'>標(biāo)注</b>新時(shí)代

    led發(fā)光模塊的地線可以標(biāo)注為什么

    LED發(fā)光模塊是一種常見的電子元件,用于將電能轉(zhuǎn)化為光能。地線是模塊中一個(gè)重要的接線點(diǎn),起到連接模塊與地面的作用,以確保電路的正常工作。本文將詳細(xì)介紹LED發(fā)光模塊的地線標(biāo)注的原因和意義,以及
    的頭像 發(fā)表于 01-24 14:53 ?813次閱讀

    利用AI實(shí)現(xiàn)自動圖像標(biāo)注不是夢

    了SpeedDP深度學(xué)習(xí)算法開發(fā)平臺,如今平臺已經(jīng)實(shí)現(xiàn)移動端使用,可運(yùn)行于Windows或Linux操作系統(tǒng),可完成自動標(biāo)注AI算法開發(fā)(項(xiàng)目配置、訓(xùn)練、評估、測
    的頭像 發(fā)表于 01-04 08:29 ?1314次閱讀
    利用<b class='flag-5'>AI</b>實(shí)現(xiàn)自動圖像<b class='flag-5'>標(biāo)注</b>不是夢