0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

正則表達(dá)式是什么 如何能導(dǎo)致拒絕服務(wù)攻擊

馬哥Linux運(yùn)維 ? 來源:馬哥Linux運(yùn)維 ? 作者:子沐愛掃地 ? 2022-05-13 16:38 ? 次閱讀

介紹

當(dāng)您想到拒絕服務(wù)攻擊時,您會想到什么?可能是一大群機(jī)器人試圖訪問 Web 服務(wù)器的資源以使其癱瘓。好吧,這肯定是導(dǎo)致拒絕服務(wù)攻擊的一種方式。但是,還有一種您可能沒有聽說過的方式。它被稱為 ReDoS,是由正則表達(dá)式引起的。

正則表達(dá)式?但這怎么可能呢?那不是通過使用過濾器來匹配字符串、將字符串列入白名單和黑名單,從而使我們的工作更輕松嗎?是的,但是攻擊者也可以利用它來使應(yīng)用程序(服務(wù)器)屈服。讓我們了解如何!

正則表達(dá)式是什么?

021448ee-d067-11ec-bce3-dac502259ad0.png

簡而言之,正則表達(dá)式是一種用于匹配(編程語言中)字符串的模式。讓我們通過一個示例來理解它吧,該示例是“用正則表達(dá)式在服務(wù)器端驗(yàn)證電子郵件地址”。

letregex=newRegExp('[a-z0-9]+@[a-z]+.[a-z]{2,3}');
lettestEmails=["notanemail.com","workingexample@email.com","another_working@somethingelse.org","notworking@1.com"];
testEmails.forEach((address)=>{
console.log(regex.test(address))
});

上面是一段 JavaScript 代碼(譯者注:不會 JS 也無妨,對閱讀本文的影響不大,請繼續(xù)閱讀)。我們在這里使用的正則表達(dá)式是 [a-z0–9]+@[a-z]+.[a-z]{2,3}。我們提供了幾個電子郵件地址,然后我們需要檢查它們是否遵循電子郵件地址的一般模式。讓我們分解一下正則表達(dá)式。

  • [a-z0–9]+:表示此處的字符串可以是任何小寫字母和數(shù)字。末尾的加號 (+) 表示必須至少有一個字符(無論是小寫字母還是數(shù)字)。

  • @:表示此處應(yīng)該有 AT(@)符。

  • [a-z]+:表示此處字符串應(yīng)該包含(一個或多個)小寫字母的字符

  • .:表示此處應(yīng)該有一個點(diǎn)(.)

  • [a-z]{2,3}:表示此處字符串是由小寫字母組成的,但其長度只能是 2 或 3。

讓我們將其與我們選擇的電子郵件 ID 進(jìn)行比較。讓電子郵件 ID 為 yourremail12@yahooemail.com。

  • youremail12@ 對應(yīng)于 [a-z0-9]+@
  • yahooemail 對應(yīng)于 [a-z]+
  • .com 對應(yīng)于 .[a-z]{2,3}

這通常是正則表達(dá)式的工作方式。但這不是會按預(yù)期工作嗎?這如何能導(dǎo)致拒絕服務(wù)攻擊呢?讓我們了解一下。

正則表達(dá)式由正則表達(dá)式運(yùn)算器處理。在 ReDoS 攻擊期間,攻擊者通過提供輸入字符串強(qiáng)制正則表達(dá)式運(yùn)算器陷入循環(huán)。當(dāng)它處于循環(huán)中時,正則表達(dá)式運(yùn)算器可能會花費(fèi)大量時間,并消耗大量資源。這會導(dǎo)致其他合法客戶端無法使用資源,并可能導(dǎo)致 Web 服務(wù)器和應(yīng)用程序無響應(yīng)并最終崩潰。

另一種情況可能是設(shè)計不良的正則表達(dá)式模式,這可能導(dǎo)致輸入驗(yàn)證失敗,在正則表達(dá)式運(yùn)算器解析時會消耗大量時間等。

有害正則表達(dá)式(Evil Regex)

有害正則表達(dá)式模式是攻擊者可以利用的正則表達(dá)式。根據(jù) Wikipedia,這些是有害正則表達(dá)式模式的特征。

  • 正則表達(dá)式將重復(fù)(+*)應(yīng)用于復(fù)雜的子表達(dá)式。
  • 對于重復(fù)的子表達(dá)式,存在一個匹配,同時該匹配也是另一個有效匹配的后綴。

這說明了如果已經(jīng)有一個復(fù)雜的子表達(dá)式,并且應(yīng)用一些像 +* 這樣的貪婪運(yùn)算符,可能會導(dǎo)致一個有害的正則表達(dá)式。

例如,

我們考慮以下正則表達(dá)式:^(a+)+$

^$ 定義了字符串必須分別以 a 開頭和結(jié)尾。

如果我們提供 aaaaaaaaaaaaaaaaaaaaaaaaaaaaaa,正則表達(dá)式運(yùn)算器將在幾毫秒內(nèi)處理它并返回 True。

如果我提供 aaaaaaaaaaaaaaaaaaaaaaaaaaaaaa!,你覺得會發(fā)生什么!

如果您運(yùn)行它,則對于所提供的正則表達(dá)式,(在返回 False 之前)需要花費(fèi)大約 2 秒的時間來處理。只是通過添加一個額外的感嘆號會導(dǎo)致這么長的時間嗎?

讓我們從正則表達(dá)式運(yùn)算器的角度來看看它是如何工作的。正則表達(dá)式運(yùn)算器直到達(dá)到感嘆號之前將會正常工作。由于我們沒有指定查找 (!) 標(biāo)記,因此它會回溯到前面的字母,并查看是否有另一種方法來解析先前的字符,以便可以驗(yàn)證整個字符串。在它最終發(fā)現(xiàn)絕不會返回 True 之前,這樣的回溯將會一直持續(xù)下去。

如您所知,回溯會導(dǎo)致大量時間消耗。攻擊者可以使用它來利用有害正則表達(dá)式模式。


譯者注

看完上述內(nèi)容后,有些讀者可能仍對剛才的示例(回溯)表示不解。為了讓讀者能夠更加清晰地了解其原理,我將上例中正則表達(dá)式運(yùn)算器可能將執(zhí)行的步驟進(jìn)行了分解演示。

下列演示的過程只是存在的一種可能(實(shí)際情況取決于正則表達(dá)式引擎的實(shí)現(xiàn))

回溯次數(shù) 解析結(jié)果
0 {aaaaaaaaaaaaaaaaaaaaaaaaaaaaaa}
1 {aaaaaaaaaaaaaaaaaaaaaaaaaaaaa}, {a}
2 {aaaaaaaaaaaaaaaaaaaaaaaaaaaa}, {aa}
3 {aaaaaaaaaaaaaaaaaaaaaaaaaaaa}, {a}, {a}
4 {aaaaaaaaaaaaaaaaaaaaaaaaaaa}, {aaa}
5 {aaaaaaaaaaaaaaaaaaaaaaaaaaa}, {aa}, {a}
6 {aaaaaaaaaaaaaaaaaaaaaaaaaaa}, {a}, {aa}
7 {aaaaaaaaaaaaaaaaaaaaaaaaaaa}, {a}, {a}, {a}
8 {aaaaaaaaaaaaaaaaaaaaaaaaaa}, {aaaa}
... ...
2147483647 {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}, {a}

從上面的表格可以看出,正則引擎可能會做出 (近 20 億)種解析結(jié)果。

也就是,對于示例給出的有害正則表達(dá)式和惡意字符串。如果按照我們的演示進(jìn)行,設(shè)有效最長子串的長度為 ,那么回溯時間復(fù)雜度為(證明過程略,感興趣的讀者可去探究帕斯卡三角形)。該時間復(fù)雜度是指數(shù)級別,多么可怕的時間復(fù)雜度級別啊!

對于 30 個 a,僅多出一個感嘆號,執(zhí)行時間竟然多出約 20 億倍。當(dāng)然了,這里僅是一種可能的演示,在作者示例中的時間僅多了千倍左右。這可以從很多方面解釋,例如正則引擎的某些優(yōu)化,或比例受某些較長固定執(zhí)行時間的支配等。

譯者注結(jié)束


可利用性

開發(fā)人員和我們一樣都是人類,因此都會出錯。他們創(chuàng)建的許多應(yīng)用程序可能會包含可利用的正則表達(dá)式模式。對于有經(jīng)驗(yàn)的黑客或安全專家來說,正則表達(dá)式模式很容易被猜到,而在有些情況下,源代碼是可以在線獲得的。攻擊者可以利用這一點(diǎn)來謀取利益,并可能降低被攻擊者的利益。

糟糕的正則表達(dá)式模式也可能會導(dǎo)致繞過許多安全控制,無論是在 Web 應(yīng)用程序還是網(wǎng)絡(luò)防火墻上。

因此,始終建議在將應(yīng)用程序部署到生產(chǎn)環(huán)境之前正確測試正則表達(dá)式模式。

緩解措施

  • 緩解這種情況的最佳方法是根本不去使用它。尤其當(dāng)你是新手時。

  • 如有必要,請使用安全的正則表達(dá)式。這樣只需尋找另一種替換方法來完成相同的輸出。

  • 在使用正則表達(dá)式之前,請?jiān)?regex101.com 或其他在線資源等網(wǎng)站上測試它們。

  • 安全掃描用戶輸入永遠(yuǎn)不會過時。

  • 現(xiàn)在存在著很多正則表達(dá)式運(yùn)算器。我建議您使用更高效的正則表達(dá)式引擎。你可以看看 https://github.com/google/re2

  • 測試您是否正在使用易受攻擊的正則表達(dá)式引擎或運(yùn)算器。例如,url-regex 是一個用于測試匹配 URL 的正則表達(dá)式的包。

結(jié)論

我們忽視的諸如此類的小事可能會給安全增加了很大的風(fēng)險。在這篇文章中,我們了解了可能由有害正則表達(dá)式模式引起的 DoS 攻擊、主要原因、以及我們應(yīng)如何緩解它們。有必要緩解這種情況,因?yàn)樗鼈儠绊懢W(wǎng)站的可用性,并且可能會花費(fèi)您很多資金。

原文標(biāo)題:正則表達(dá)式也會導(dǎo)致拒絕服務(wù)?探討 ReDos(可能會中招哦)

文章出處:【微信公眾號:馬哥Linux運(yùn)維】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

審核編輯:湯梓紅
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    12

    文章

    9160

    瀏覽量

    85426
  • 拒絕服務(wù)
    +關(guān)注

    關(guān)注

    0

    文章

    3

    瀏覽量

    8006
  • 正則表達(dá)式
    +關(guān)注

    關(guān)注

    0

    文章

    27

    瀏覽量

    3496

原文標(biāo)題:正則表達(dá)式也會導(dǎo)致拒絕服務(wù)?探討 ReDos(可能會中招哦)

文章出處:【微信號:magedu-Linux,微信公眾號:馬哥Linux運(yùn)維】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    什么是正則表達(dá)式?正則表達(dá)式如何工作?哪些語法規(guī)則適用正則表達(dá)式?

    正則表達(dá)式又稱規(guī)則表達(dá)式(Regular Expression,在代碼中常簡寫為 regex、regexp 或 RE),是一種用于匹配、查找、替換文本的強(qiáng)大工具。它能夠以特定的模式匹配字符串,從而
    的頭像 發(fā)表于 11-03 14:41 ?3656次閱讀
    什么是<b class='flag-5'>正則表達(dá)式</b>?<b class='flag-5'>正則表達(dá)式</b>如何工作?哪些語法規(guī)則適用<b class='flag-5'>正則表達(dá)式</b>?

    shell正則表達(dá)式學(xué)習(xí)

    正則表達(dá)式在計算機(jī)科學(xué)中,是指一個用來描述或者匹配一系列符合某個句法規(guī)則的字符串的單個字符串。在很多文本編輯器或其他工具里,正則表達(dá)式通常被用來檢索和/或替換那些符合某個模式的文本內(nèi)容。許多
    發(fā)表于 07-25 17:18

    深入淺出boost正則表達(dá)式

    什么是正則表達(dá)式正則表達(dá)式是一種用來描述一定數(shù)量文本的模式。Regex代表Regular Express. 如果您不知道什么是正則表達(dá)式,請看這篇文章:深入淺出之正則表達(dá)式
    發(fā)表于 09-08 18:09 ?9次下載

    PHP正則表達(dá)式

    PHP正則表達(dá)式,PHP建設(shè)必備的的工具,初學(xué)者簡單易懂快速入門,高手進(jìn)階手冊。
    發(fā)表于 04-18 10:46 ?0次下載

    精通正則表達(dá)式

    詳細(xì)的快速正則表達(dá)式的查詢電子書,簡單而豐富
    發(fā)表于 05-16 18:04 ?5次下載

    關(guān)于java正則表達(dá)式的用法詳解

    正則表達(dá)式 一個正則表達(dá)式是一個用于文本搜索的文本模式。換句話說,在文本中搜索出現(xiàn)的模式。例如,你可以用正則表達(dá)式搜索網(wǎng)頁中的郵箱地址或超鏈接。 正則表達(dá)式示例 下面是一個簡單的Jav
    發(fā)表于 09-27 14:24 ?0次下載

    快速入門IPv6和正則表達(dá)式

    對于日常開發(fā)中只接觸IPv4,并沒有深入研究過正則表達(dá)式的開發(fā)者,面對IPv6和正則表達(dá)式,容易產(chǎn)生畏懼心理,覺得是兩座難以翻越的大山。本文通過一些表格整理對IPv6的表示方法,以及正則表達(dá)式的特殊符號進(jìn)行了分類和說明,帶領(lǐng)大家
    的頭像 發(fā)表于 03-30 09:31 ?9014次閱讀
    快速入門IPv6和<b class='flag-5'>正則表達(dá)式</b>

    Python正則表達(dá)式教程之標(biāo)準(zhǔn)庫的完整介紹及使用示例說明

    本文介紹了Python對于正則表達(dá)式的支持,包括正則表達(dá)式基礎(chǔ)以及Python正則表達(dá)式標(biāo)準(zhǔn)庫的完整介紹及使用示例。本文的內(nèi)容不包括如何編寫高效的正則表達(dá)式、如何優(yōu)化
    發(fā)表于 01-23 16:00 ?3次下載
    Python<b class='flag-5'>正則表達(dá)式</b>教程之標(biāo)準(zhǔn)庫的完整介紹及使用示例說明

    Python正則表達(dá)式的學(xué)習(xí)指南

    本文介紹了Python對于正則表達(dá)式的支持,包括正則表達(dá)式基礎(chǔ)以及Python正則表達(dá)式標(biāo)準(zhǔn)庫的完整介紹及使用示例。本文的內(nèi)容不包括如何編寫高效的正則表達(dá)式、如何優(yōu)化
    發(fā)表于 09-15 08:00 ?0次下載
    Python<b class='flag-5'>正則表達(dá)式</b>的學(xué)習(xí)指南

    Python正則表達(dá)式指南

    本文介紹了Python對于正則表達(dá)式的支持,包括正則表達(dá)式基礎(chǔ)以及Python正則表達(dá)式標(biāo)準(zhǔn)庫的完整介紹及使用示例。本文的內(nèi)容不包括如何編寫高效的正則表達(dá)式、如何優(yōu)化
    發(fā)表于 03-26 09:13 ?10次下載
    Python<b class='flag-5'>正則表達(dá)式</b>指南

    C語言如何使用正則表達(dá)式

    C語言的正則表達(dá)式規(guī)則,特此跟大家分享。
    的頭像 發(fā)表于 03-16 08:41 ?4943次閱讀

    python正則表達(dá)式中的常用函數(shù)

    編譯正則表達(dá)式模式,返回一個正則對象的模式。(可以把那些常用的正則表達(dá)式編譯成正則表達(dá)式對象,這樣可以提高一點(diǎn)效率。)
    的頭像 發(fā)表于 03-18 16:12 ?1801次閱讀

    Linux入門之正則表達(dá)式

    正則表達(dá)式是用來表達(dá)字符串匹配模式的方法,利用正則表達(dá)式,可以讓我們輕易地實(shí)現(xiàn)對目標(biāo)字符串的**查找**、**刪除**、**替換**等操作。 正則表達(dá)式并不復(fù)雜,它并不包含難以理
    的頭像 發(fā)表于 05-12 15:31 ?881次閱讀
    Linux入門之<b class='flag-5'>正則表達(dá)式</b>

    shell腳本基礎(chǔ):正則表達(dá)式grep

    在Linux上有許多命令可以使用正則表達(dá)式,其中最常見的是grep命令和sed命令。正則表達(dá)式有多種類型,每種類型中可以使用的元字符類型不同。最常見的是基本正則表達(dá)式和擴(kuò)展正則表達(dá)式。
    的頭像 發(fā)表于 05-29 09:29 ?1256次閱讀
    shell腳本基礎(chǔ):<b class='flag-5'>正則表達(dá)式</b>grep

    Python中的正則表達(dá)式

    哈嘍大家好,我是了不起,今天給大家講Python中的正則表達(dá)式 在Python中,正則表達(dá)式是一種強(qiáng)大的文本處理工具,它可以用來匹配、搜索、替換文本。正則表達(dá)式是一個特殊的字符序列,它可以描述一類
    的頭像 發(fā)表于 06-21 16:52 ?991次閱讀