某科技公司技術(shù)中心運(yùn)營(yíng)部晨會(huì)

安全主管老王：“兄弟們，持續(xù)一周的數(shù)據(jù)防泄漏演習(xí)中，客戶名單輕易發(fā)送到了私人郵箱！財(cái)務(wù)的報(bào)銷單截圖在朋友圈曬了三天！法務(wù)的合同草稿居然出現(xiàn)在相親相愛一家人的群里？！數(shù)據(jù)防泄漏任務(wù)艱巨啊，我們的技防手段還是存在明顯的不足呀！”

部門眾兄弟心中默到：“第1024次失敗了...防不甚防啊，一周的加班毀于一旦，”

為啥敏感數(shù)據(jù)防不甚防？

數(shù)據(jù)量大
每天每人至少產(chǎn)生GB級(jí)別數(shù)據(jù)，隨著用戶數(shù)增加，相關(guān)關(guān)聯(lián)、外部交換數(shù)據(jù)會(huì)出現(xiàn)激增。
文件格式多樣
文字報(bào)告、財(cái)務(wù)表格、合同掃描件、會(huì)議錄音、監(jiān)控截圖、聊天記錄、設(shè)計(jì)圖紙，文件格式多樣，數(shù)據(jù)展示形態(tài)多樣。
文件流轉(zhuǎn)途徑多
即時(shí)通信工具、電子郵件、USB外設(shè)、視頻拍照，交互越多，通道越多。

數(shù)據(jù)防泄漏的關(guān)鍵在于對(duì)于數(shù)據(jù)的敏感性識(shí)別，除了無限量使用人力做純“人工智能”識(shí)別，有沒有更好的方案來解決這個(gè)問題？當(dāng)然有，多模態(tài)AI了解一下。

什么是多模態(tài)AI？

通俗的說，讓AI像人類一樣綜合運(yùn)用五感來感知認(rèn)識(shí)世界。
多模態(tài)AI = 視覺 + 文本 + 語音 + 跨模態(tài)理解*數(shù)據(jù)融合
舉個(gè)簡(jiǎn)單的例子：

從這里例子我們可以看出，相較于單模態(tài)的識(shí)別，多模態(tài)AI的判斷會(huì)更準(zhǔn)確，從而提供更高的準(zhǔn)確性。

簡(jiǎn)單的多模態(tài)AI識(shí)別系統(tǒng)架構(gòu)如下圖所示：

基本功能模塊構(gòu)成包括如下：
文本感知，通常使用NLP語義分析+正則分析技術(shù)，常用于合同條款、身份證號(hào)、密鑰分析
圖像感知，通常使用目標(biāo)檢測(cè)+OCR透視眼技術(shù)，主要用于處理截圖中的二維碼、公章、表格數(shù)據(jù)
語音感知，通知通過聲紋識(shí)別+關(guān)鍵詞捕捉，可以用識(shí)別會(huì)議錄音中的電話號(hào)碼等
多模態(tài)決策引擎，通過對(duì)于感知模塊數(shù)據(jù)進(jìn)行綜合判定來最終確認(rèn)“這數(shù)據(jù)到底多敏感”。

主流架構(gòu)對(duì)比

多模態(tài)AI可以用做什么？

誤殺率下降
以前：把“交易金額：一塊兩毛五”識(shí)別成敏感數(shù)據(jù)（金額也是錢！嚴(yán)謹(jǐn)?。?br /> 現(xiàn)在：自動(dòng)忽略小額轉(zhuǎn)賬截圖（AI：呵，人類窮得如此安全...）

檢出率提升
成功攔截《公司燒烤福利申請(qǐng)表》里隱藏的客戶手機(jī)號(hào)（提交人：“我寫調(diào)料偏好里也能被發(fā)現(xiàn)？！”）

最好的安全防護(hù)，不是讓人類變成機(jī)器，而是讓機(jī)器學(xué)會(huì)人類的幽默與溫度。

審核編輯 黃宇