大數(shù)據(jù)分析手段的廣泛應(yīng)用，助推數(shù)據(jù)快速增長，存儲形態(tài)相繼經(jīng)歷了從傳統(tǒng)存儲到大數(shù)據(jù)存儲1.0再到大數(shù)據(jù)存儲2.0的變遷，以應(yīng)對海量數(shù)據(jù)的挑戰(zhàn)。1.0時(shí)代解決了海量存儲的問題，通過分布式架構(gòu)和軟件定義，讓數(shù)據(jù)能夠存得下。2.0時(shí)代解決了便捷管理的問題，通過多協(xié)議訪問、生命周期管理、異構(gòu)存儲管理、混合云管理，讓企業(yè)管好數(shù)據(jù)。

1、存儲引擎+智能引擎：更強(qiáng)大的MOS對象存儲

企業(yè)耗費(fèi)資本存儲數(shù)據(jù)，最終是為了利用數(shù)據(jù)價(jià)值創(chuàng)造經(jīng)濟(jì)效益。存儲倘若仍是一個(gè)“傻盒子”，只能存儲卻不能感知數(shù)據(jù)，是無法滿足企業(yè)真正需要的。企業(yè)對數(shù)據(jù)價(jià)值利用的強(qiáng)烈訴求，驅(qū)動大數(shù)據(jù)存儲步入3.0時(shí)代。這要求存儲足夠智能，可基于數(shù)據(jù)感知實(shí)現(xiàn)數(shù)據(jù)處理和智能調(diào)度，基于應(yīng)用感知實(shí)現(xiàn)訪問加速，通過存儲自身的智能運(yùn)維減少人力依賴。如此，才能幫助企業(yè)用好數(shù)據(jù)，以智能存儲為數(shù)字底座，構(gòu)建面向未來的IT基礎(chǔ)架構(gòu)。而杉巖MOS海量對象存儲的智能數(shù)據(jù)處理引擎，正是承載了這一使命。

從杉巖的產(chǎn)品戰(zhàn)略來看，海量存儲核心引擎和智能數(shù)據(jù)處理引擎，支撐起了更為強(qiáng)大的MOS對象存儲。前者依托分布式架構(gòu)、多樣化管理策略以及全面的企業(yè)級特性，滿足企業(yè)存儲和管理海量數(shù)據(jù)的需求；后者依托開放式平臺和強(qiáng)大的數(shù)據(jù)處理能力，并基于數(shù)據(jù)感知實(shí)現(xiàn)智能調(diào)度，滿足智能處理數(shù)據(jù)、挖掘數(shù)據(jù)價(jià)值的需求。雙引擎驅(qū)動，讓MOS對象存儲集海量數(shù)據(jù)存儲、管理、價(jià)值挖掘于一體，無疑是企業(yè)應(yīng)對大數(shù)據(jù)挑戰(zhàn)的極佳選擇。

2、智能數(shù)據(jù)處理引擎：加速智能應(yīng)用，釋放數(shù)據(jù)價(jià)值

數(shù)字化浪潮來襲，大數(shù)據(jù)、人工智能的發(fā)展超出預(yù)期，在各行業(yè)的落地應(yīng)用也逐漸鋪開，企業(yè)利用AI挖掘數(shù)據(jù)價(jià)值的需求是不言而喻的。在傳統(tǒng)模式下，對數(shù)據(jù)庫文件等結(jié)構(gòu)化數(shù)據(jù)進(jìn)行價(jià)值挖掘相對容易，但是對于圖像、影音等非結(jié)構(gòu)化數(shù)據(jù)的價(jià)值挖掘是比較困難的。MOS的智能數(shù)據(jù)處理引擎，正是為此而生。通過對非結(jié)構(gòu)化數(shù)據(jù)的多維度標(biāo)簽化和結(jié)構(gòu)化處理，讓有價(jià)值的數(shù)據(jù)更容易被發(fā)現(xiàn)，實(shí)現(xiàn)更高效的價(jià)值挖掘。有了智能數(shù)據(jù)處理引擎，數(shù)據(jù)處理能力下沉到存儲內(nèi)部，通過與海量存儲核心引擎高效聯(lián)動，并基于數(shù)據(jù)感知實(shí)現(xiàn)智能調(diào)度，極大地簡化業(yè)務(wù)流程，提升業(yè)務(wù)效率。

智能管理10億文件，幫助廣發(fā)證券打造內(nèi)容管理平臺

目前，智能數(shù)據(jù)處理引擎幫助許多行業(yè)客戶實(shí)現(xiàn)了數(shù)據(jù)的高效價(jià)值挖掘，提升收益。

廣發(fā)證券原來的檔案管理往往需要業(yè)務(wù)員人眼篩查，耗時(shí)長、易出錯(cuò)，檔案查詢不夠精準(zhǔn)。采用智能數(shù)據(jù)處理引擎后，當(dāng)客戶電子檔案存入時(shí)，通過身份證識別插件，將客戶的姓名、出生年月、身份證號等信息提取出來并打上標(biāo)簽，后續(xù)營業(yè)廳工作人員可直接通過檔案檢索界面，根據(jù)標(biāo)簽信息進(jìn)行檔案的精細(xì)化檢索，也可以自定義檢索模板，方便高效。此外，為滿足合規(guī)要求，需將合同文件（Word文檔）轉(zhuǎn)為PDF文檔并添加水印后再存檔。該項(xiàng)目中對相關(guān)文件設(shè)定生命周期策略，自動調(diào)用智能數(shù)據(jù)處理引擎的文檔格式轉(zhuǎn)換（Word轉(zhuǎn)PDF）和添加水印功能，處理后的文件自動轉(zhuǎn)存至目標(biāo)桶，整個(gè)過程基于生命周期策略自動觸發(fā)，無需人工介入，極大提升了業(yè)務(wù)效率。

圖4.智能數(shù)據(jù)處理引擎對證件照片和文檔的加工處理

智能存儲助力質(zhì)檢效率提升，幫助UTAC節(jié)省20%存儲空間

UTAC是全球十大芯片封測廠商之一，在其芯片封測產(chǎn)線上，通過工業(yè)攝像機(jī)拍攝芯片的高清圖像（BMP格式，單張30MB以上）進(jìn)行智能質(zhì)檢，每天數(shù)據(jù)增量80TB，每月文件增量1.3億個(gè)，存儲3-4個(gè)月，預(yù)計(jì)需要PB級存儲空間。進(jìn)一步交流得知，部分圖片僅前三天需要高清格式，以便于人工復(fù)核，三天之后僅作歸檔和檢索，或者直接刪除。利用智能數(shù)據(jù)處理引擎將BMP圖片轉(zhuǎn)為JPG圖片（單張10MB以內(nèi)），并基于圖片標(biāo)簽實(shí)現(xiàn)生命周期自動化管理（如圖片到期自動刪除，轉(zhuǎn)碼后歸檔到冷池）。該方案幫助用戶節(jié)省20%存儲空間，且數(shù)據(jù)處理效率相比傳統(tǒng)方案提升了30%，總體成本降低了60%以上。

智能數(shù)據(jù)處理引擎在機(jī)器學(xué)習(xí)場景的應(yīng)用

機(jī)器學(xué)習(xí)場景下，訓(xùn)練素材以圖片為主。如果原始素材是視頻文件，可以通過MOS智能數(shù)據(jù)處理引擎，在存儲內(nèi)部對視頻進(jìn)行抽幀，抽幀后產(chǎn)生的圖片用于訓(xùn)練推理。如果有特殊需要，可以對抽幀圖片進(jìn)行二次處理或自定義標(biāo)簽，再用于推理訓(xùn)練，顯著提升訓(xùn)練效率。

3、開放生態(tài)，打造強(qiáng)大的智能處理平臺

杉巖MOS智能數(shù)據(jù)處理引擎就像應(yīng)用市場一樣，是一個(gè)開放式平臺，可以集成豐富的第三方插件，比如合合信息的身份證識別、票據(jù)識別等插件，微模式公司的人臉識別、車輛識別等插件，用戶可以按需添加插件，擴(kuò)展數(shù)據(jù)處理能力。目前，MOS智能數(shù)據(jù)處理引擎支持圖片轉(zhuǎn)碼、圖片裁剪、添加水印、身份證識別、人臉識別、車牌識別、票據(jù)識別、文檔識別、語音識別、內(nèi)容提取、文件格式轉(zhuǎn)換等20余項(xiàng)處理功能，為用戶提供更強(qiáng)大的智能處理平臺，滿足不同場景的數(shù)據(jù)處理需求。

智能數(shù)據(jù)處理引擎是杉巖數(shù)據(jù)面對大數(shù)據(jù)存儲發(fā)展趨勢的應(yīng)對方案，在海量存儲和便捷管理的基礎(chǔ)上，讓存儲“理解”數(shù)據(jù)，基于數(shù)據(jù)感知實(shí)現(xiàn)數(shù)據(jù)預(yù)處理和智能調(diào)度，簡化業(yè)務(wù)流程；基于應(yīng)用感知實(shí)現(xiàn)訪問加速，快速響應(yīng)業(yè)務(wù)需求；依托智能運(yùn)維減少人力依賴，打造更強(qiáng)大的智能數(shù)字底座，構(gòu)建面向未來的智能IT基礎(chǔ)架構(gòu)。

fqj