0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

如何使用計算機讓機器人理解人類語言以及含義

貿(mào)澤電子 ? 來源:貿(mào)澤電子 ? 作者:貿(mào)澤電子 ? 2021-05-17 16:19 ? 次閱讀

超過44億互聯(lián)網(wǎng)用戶通過社交媒體帖子、評論、推薦以及類似的互動產(chǎn)生了驚人的數(shù)據(jù)量。從這些數(shù)據(jù)中收集的見解對于指導(dǎo)企業(yè)和創(chuàng)新者進行產(chǎn)品開發(fā)、市場營銷和客戶支持都是無價之寶。

但是,由于人類語言和文化背景的復(fù)雜性,讓機器很難理解和解釋客戶提供的觀點性數(shù)據(jù),因此提取見解極具挑戰(zhàn)性。自然語言處理(NLP)和機器學(xué)習(xí)(ML)等工具使計算機能夠理解人類語言以及含義。

此外,情感分析是人工智能AI)研究的一個前沿領(lǐng)域,它可以幫助機器理解客戶提供的非結(jié)構(gòu)化數(shù)據(jù),并將觀點解釋為肯定、否定或中立。

01

語義分析中的語言復(fù)雜性

為了解自然語言處理中的情感分析,讓我們先來看看餐廳點評中的一個簡單表述:“湯很不錯”,對其中情感的分析包括三個步驟:

STEP-1

確定表述、語句或全文中是否包含觀點。

STEP-2

了解這些觀點是肯定、否定還是中立的(也就是所謂的極性)。

STEP-3

確定觀點的目標(biāo)。

在本例中,對于餐廳提供的特定餐品,情感分析得出的無疑是正面結(jié)論。但是,其他例子則不太直接,例如與之類似的另一個表述:“啤酒很涼”。許多人會認(rèn)為這種觀點是正面的,因為他們喜歡這樣的啤酒,但是涼這個詞如果換到其他語境中,它的“極性”可能就是負面的。例如,“咖啡很涼”這個表述的結(jié)構(gòu)和形容詞完全相同,但許多人都不會認(rèn)為咖啡涼了是一件好事。

其他語言復(fù)雜性也帶來了更多的挑戰(zhàn),例如包含多種情感的表述,比如說:“菜不錯,就是湯有點涼”。在這里,我們根據(jù)客戶對湯冷、湯熱的偏好,會得出正面、負面和模棱兩可的情緒。同樣,如果說“湯熱乎乎的,但是啤酒很涼”,對大多數(shù)人來說這都是一種正面表述,但在某種潛在的客戶語境下卻模棱兩可。

修飾語進一步模糊了“極性”之間的界限。例如,可以想象一下這樣一條意見:“工作人員太過熱情了”,此時,我們還必須考慮諷刺、嘲諷或修辭手法,這也就為正確識別情緒帶來了難題。例如“我們等了一個多小時了,這服務(wù)也太好了吧!”這種表述在訓(xùn)練數(shù)據(jù)中往往不多見,并且很難通過系統(tǒng)性的方式來手動編碼。

02

語義分析中的文化變量

將個人、文化或環(huán)境偏好納入考量后,判斷觀點的“極性”就變得更具挑戰(zhàn)性。例如,現(xiàn)在我們來分析一下客戶對日式旅館的評論。傳統(tǒng)的日式旅館往往都豪華昂貴,但配備的沐浴設(shè)施是公共洗浴區(qū)而非獨立浴室。

將有無某種東西歸類為正面或負面看起來似乎直截了當(dāng)。例如:“淋浴間有污垢”或“有一個兒童游泳池”。然而日式旅館的例子說明了為什么將文化變量和個人喜好納入考慮對于獲得有用的數(shù)據(jù)見解至關(guān)重要。在日本,客人認(rèn)為公共洗浴區(qū)是一個正面的屬性;相比之下,大多數(shù)歐洲游客會對此持負面看法,對費用較高的酒店而言尤其如此。這個例子所表現(xiàn)的還只是一個特征和兩種文化。

03

解決自然語言處理中的語言和文化多樣性問題

在自然語言處理中,可能需要在整個文檔級別以及段落和句子級別分析情感,往往做完了這一步才能匯總出結(jié)果。全文檔分析非常有用,而段落和句子級別的分析可以產(chǎn)生更細粒度和相對準(zhǔn)確的結(jié)果(即除了可以識別對產(chǎn)品整體的情感外,還可以識別有關(guān)特定產(chǎn)品特征的情感)。這一過程的挑戰(zhàn)來自于如何制訂出一套詞匯,并將這套詞匯作為一組規(guī)則,讓機器用它來將情感分類為正面、負面或中立。

對此,我們可以先從許多免費工具和資源入手,它們都已經(jīng)在公開數(shù)據(jù)上進行過訓(xùn)練。例如,Natural Language Toolkit、spaCy和TextBlob等軟件庫都包括情緒模型,而且還允許使用用戶數(shù)據(jù)進行再訓(xùn)練。如果您不喜歡寫代碼,那么Google Cloud Platform或Microsoft Azure等云服務(wù)也可以讓您立即開始進行情緒分析:只需將需要分析的文本粘貼到瀏覽器中,然后就可以構(gòu)建您的應(yīng)用了。

除了原型之外,數(shù)據(jù)集和機器學(xué)習(xí)模型還應(yīng)進一步解決語言和文化復(fù)雜性的問題。這就意味著:

在計劃上:需要找出一種結(jié)構(gòu)化的方法來發(fā)現(xiàn)多樣性和有用的深入見解。例如,分析您的數(shù)據(jù)以了解深層的語言和文化、語氣、來源、作者群體特征,然后咨詢語言學(xué)家以解釋這些要素。通過采訪與作者同屬一個群體的人來進一步細化您的方法,以準(zhǔn)確了解微妙差別和語境。

在訓(xùn)練數(shù)據(jù)上:需要確定多樣化處理所需的示例,并添加人工提供的注釋。這也可能意味著查閱諸如詞典等知識庫、為特定問題添加更多訓(xùn)練數(shù)據(jù),或者在某些情況下,從數(shù)據(jù)中刪除對結(jié)果的客觀真實性構(gòu)成損害的不良或誤導(dǎo)性內(nèi)容。

在建模上:需要找到相應(yīng)的方法,以數(shù)學(xué)上可處理的方式來表示句子。例如,將任意文本表示為數(shù)值向量的詞嵌入,這種方法可用來將語境中使用的單詞映射為相應(yīng)的正面、負面或中立情緒。

理想情況下,數(shù)據(jù)分析會顯式或隱式地基于各客戶的偏好進行。但是,這種分析相當(dāng)麻煩,而且在許多情況下,如果用戶資料無法辨識,就無法進行分析。更易采用的方法是根據(jù)地區(qū)和語言分析數(shù)據(jù),然后使用單獨的訓(xùn)練示例對文化差異進行建模。

04

結(jié)論

客戶在媒體帖子、評論、推薦中提供的數(shù)據(jù)為企業(yè)和創(chuàng)新者提供了寶貴的見解。自然語言和文化的復(fù)雜性讓由人工智能驅(qū)動的機器難以理解客戶的觀點;但是,情感分析可以幫助確保這些方面被捕獲并反映在見解中。

您可以從使用免費工具和資源入手,但是解決語言和文化復(fù)雜性的問題具有挑戰(zhàn)性,需要大量的計劃、數(shù)據(jù)準(zhǔn)備和建模。提高對語言和文化復(fù)雜性的認(rèn)識是獲得有用的見解的良好起點,也是一條極有價值的途徑,讓您能夠進一步了解客戶和他們的需求。

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 人工智能
    +關(guān)注

    關(guān)注

    1792

    文章

    47525

    瀏覽量

    239256
  • 機器學(xué)習(xí)
    +關(guān)注

    關(guān)注

    66

    文章

    8428

    瀏覽量

    132850
  • 自然語言處理
    +關(guān)注

    關(guān)注

    1

    文章

    619

    瀏覽量

    13601

原文標(biāo)題:將人類知識轉(zhuǎn)移到人工智能

文章出處:【微信號:貿(mào)澤電子,微信公眾號:貿(mào)澤電子】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人的基礎(chǔ)模塊

    具身智能機器人的基礎(chǔ)模塊,這個是本書的第二部分內(nèi)容,主要分為四個部分:機器人計算系統(tǒng),自主機器人的感知系統(tǒng),自主機器人的定位系統(tǒng),自主
    發(fā)表于 01-04 19:22

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人大模型

    的設(shè)計不僅提高了機器人對環(huán)境的理解能力,還使其能夠更精準(zhǔn)地執(zhí)行復(fù)雜任務(wù)。 擴散模型的新思路 除了大模型,擴散模型的引入為機器人控制開辟了新的研究方向。在以UniPi為代表的創(chuàng)新工作中,通過用戶的自然
    發(fā)表于 12-29 23:04

    【「具身智能機器人系統(tǒng)」閱讀體驗】1.初步理解具身智能

    對人工智能、機器人技術(shù)和計算系統(tǒng)交叉領(lǐng)域感興趣的讀者來說不可或缺的書。這本書深入探討了具身智能這一結(jié)合物理機器人和智能算法的領(lǐng)域,該領(lǐng)域正在塑造自主系統(tǒng)及其應(yīng)用的未來。 開篇部分探討了具身智能
    發(fā)表于 12-28 21:12

    C語言數(shù)組應(yīng)用計算機導(dǎo)論A第6講:數(shù)組

    C語言數(shù)組應(yīng)用計算機導(dǎo)論A第6講:數(shù)組
    發(fā)表于 11-20 15:33 ?0次下載

    機器視覺和計算機視覺有什么區(qū)別

    。機器視覺的研究目標(biāo)是機器具有類似人類的視覺能力,能夠自動、準(zhǔn)確地完成各種視覺任務(wù)。 計算機視覺 計算
    的頭像 發(fā)表于 07-16 10:23 ?573次閱讀

    計算機視覺的工作原理和應(yīng)用

    計算機視覺(Computer Vision,簡稱CV)是一門跨學(xué)科的研究領(lǐng)域,它利用計算機和數(shù)學(xué)算法來模擬人類視覺系統(tǒng)對圖像和視頻進行識別、理解、分析和處理。其核心目標(biāo)在于使
    的頭像 發(fā)表于 07-10 18:24 ?2176次閱讀

    ROS機器人開發(fā)更便捷,基于RK3568J+Debian系統(tǒng)發(fā)布!

    提供了操作系統(tǒng)應(yīng)有的服務(wù),包括硬件抽象,底層設(shè)備控制,常用函數(shù)的實現(xiàn),進程間消息傳遞,以及包管理。它也提供用于獲取、編譯、編寫、和跨計算機運行代碼所需的工具和庫函數(shù)。 圖1 隨著工業(yè)智能化
    發(fā)表于 07-09 11:38

    機器人視覺與計算機視覺的區(qū)別與聯(lián)系

    機器人視覺與計算機視覺是兩個密切相關(guān)但又有所區(qū)別的領(lǐng)域。 1. 引言 在當(dāng)今科技迅猛發(fā)展的時代,機器人計算機視覺技術(shù)在各個領(lǐng)域發(fā)揮著越來越重要的作用。
    的頭像 發(fā)表于 07-09 09:27 ?708次閱讀

    計算機視覺和機器視覺區(qū)別在哪

    計算機視覺和機器視覺是兩個密切相關(guān)但又有明顯區(qū)別的領(lǐng)域。 一、定義 計算機視覺 計算機視覺是一門研究如何使計算機能夠像
    的頭像 發(fā)表于 07-09 09:22 ?489次閱讀

    計算機視覺屬于人工智能嗎

    屬于,計算機視覺是人工智能領(lǐng)域的一個重要分支。 引言 計算機視覺是一門研究如何使計算機具有視覺能力的學(xué)科,它涉及到圖像處理、模式識別、機器學(xué)習(xí)等多個領(lǐng)域。
    的頭像 發(fā)表于 07-09 09:11 ?1362次閱讀

    自然語言處理技術(shù)在計算機系統(tǒng)中的應(yīng)用

    自然語言處理(Natural Language Processing, NLP)作為計算機科學(xué)與人工智能領(lǐng)域中的一個重要分支,其目標(biāo)是計算機能夠
    的頭像 發(fā)表于 07-04 14:35 ?562次閱讀

    機器人視覺的結(jié)構(gòu)及工作原理

    機器人視覺是一種利用計算機視覺技術(shù)實現(xiàn)機器人對環(huán)境的感知和理解的技術(shù)。它涉及到圖像采集、圖像處理、特征提取、目標(biāo)識別、場景理解等多個環(huán)節(jié)。
    的頭像 發(fā)表于 07-04 11:27 ?1223次閱讀

    機器人視覺的作用是什么

    一、引言 機器人視覺是機器人技術(shù)的重要組成部分,它利用計算機視覺技術(shù)對機器人周圍環(huán)境進行感知、識別和理解,為
    的頭像 發(fā)表于 07-04 11:24 ?791次閱讀

    語言模型:原理與工程實踐+初識2

    前言 深度學(xué)習(xí)是機器學(xué)習(xí)的分支,而大語言模型是深度學(xué)習(xí)的分支。機器學(xué)習(xí)的核心是計算機系統(tǒng)通過對數(shù)據(jù)的學(xué)習(xí)提高性能,深度學(xué)習(xí)則是通過創(chuàng)建人工
    發(fā)表于 05-13 00:09

    計算機系統(tǒng)如何應(yīng)對大模型時代的挑戰(zhàn)與機遇

    “操作系統(tǒng)管理著計算機的資源和進程,以及所有的硬件和軟件。計算機的操作系統(tǒng)用戶在不需要了解計算機語言的情況下與
    發(fā)表于 01-23 11:06 ?591次閱讀
    <b class='flag-5'>計算機</b>系統(tǒng)如何應(yīng)對大模型時代的挑戰(zhàn)與機遇