91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

非結(jié)構(gòu)化數(shù)據(jù)時(shí)代下對(duì)象存儲(chǔ)該怎么玩?

SSDFans ? 來(lái)源:ssdfans ? 作者:ssdfans ? 2020-12-03 14:13 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

對(duì)象,是對(duì)象存儲(chǔ)的昵稱。相對(duì)于NAS,我喜歡叫她OBJ,一個(gè)基于網(wǎng)絡(luò)的存儲(chǔ)程序。

最早由AWS(Amazon Web Services)的工程師開(kāi)發(fā)了這個(gè)后來(lái)被稱為(Simple Storage Service)的程序,因?yàn)槿齻€(gè)首字母都是S,所以簡(jiǎn)稱S3。目前,Amazon S3已經(jīng)成為了事實(shí)上的對(duì)象存儲(chǔ)標(biāo)準(zhǔn),而這也是一個(gè)在線零售商向科技公司轉(zhuǎn)型的印記。

按照貝索斯的理解,作為一個(gè)網(wǎng)絡(luò)服務(wù),對(duì)象可以存儲(chǔ)和檢索任意位置,任意數(shù)量的數(shù)據(jù),當(dāng)時(shí)貝索斯對(duì)S3提出要求是,“其規(guī)模要達(dá)到無(wú)限大,而且沒(méi)有計(jì)劃性的停機(jī)時(shí)間。”

對(duì)象的使用場(chǎng)景和分類

商業(yè)環(huán)境中,很多公司都有大量的電子影像和文件需要存儲(chǔ),例如,銀行票據(jù),電子保單和電子合同等。當(dāng)然更少不了各種手機(jī)APP產(chǎn)生的照片、音樂(lè)和視頻。這些場(chǎng)景以前都是NAS,未來(lái)終將歸于對(duì)象。

從某種程度上講,在非結(jié)構(gòu)化的存儲(chǔ)世界里,對(duì)象存儲(chǔ)一切,下面就介紹幾個(gè)對(duì)象給你認(rèn)識(shí)。

商用:主要是HDS的HCP、IBM的CleverSafe和NetApp的Grid等

開(kāi)源:事實(shí)上似乎只有Ceph

搞對(duì)象的經(jīng)驗(yàn)和教訓(xùn)

有人的地方就有江湖,有產(chǎn)品地方,除了故事,還有事故。還記得上次NAS文章中提到的那個(gè)朋友嗎?今天接著講他跟HDS的小故事。

朋友說(shuō),多年前他們公司就建了影像集中存儲(chǔ)平臺(tái),數(shù)據(jù)存在NAS上,但是隨著業(yè)務(wù)快速發(fā)展,影像文件飛速增加,NAS在存儲(chǔ)容量和inode等方面都受到了挑戰(zhàn)。也就是說(shuō),隨著影像文件越來(lái)越多,這個(gè)痛點(diǎn)越發(fā)明顯。當(dāng)然,總是有辦法可以維持,但是能維持多久?

長(zhǎng)痛不如短痛,為了應(yīng)對(duì)未來(lái)更大規(guī)模的存儲(chǔ)需求,上馬對(duì)象成了一項(xiàng)必須完成的任務(wù)。看Gartner分析報(bào)告,跟行業(yè)用戶技術(shù)交流,最終,他們選擇了HCP,作為影像平臺(tái)的新一代存儲(chǔ)解決方案。

但是上線沒(méi)多久,對(duì)象存儲(chǔ)就遇到了性能不穩(wěn)的情況,這次不再是245萬(wàn)個(gè)垃圾文件,而是8000萬(wàn)個(gè)生產(chǎn)影像。

問(wèn)題很快就定位了,廠商給出的結(jié)論是,他家的桶(Bucket,對(duì)象存儲(chǔ)里的專有名詞,用來(lái)放具體對(duì)象數(shù)據(jù))需要文件存儲(chǔ)時(shí)有相應(yīng)的目錄層次,否則就會(huì)造成數(shù)據(jù)分布不均衡,影響性能。最后,在開(kāi)發(fā)人員的配合下,重新對(duì)數(shù)據(jù)做了遷移,算是徹底消除了這個(gè)隱患。

對(duì)于非結(jié)構(gòu)化數(shù)據(jù)的管理,不管使用什么存儲(chǔ),NAS還是OBJ,也不管產(chǎn)品什么樣,最安全,最穩(wěn)妥的方式就是一定要設(shè)計(jì)好數(shù)據(jù)存儲(chǔ)的目錄層次。

你以為故事就這樣結(jié)束了?當(dāng)然沒(méi)有,這只不過(guò)是頭盤(pán),后面還有主菜,因?yàn)槠邢?,找機(jī)會(huì)再講后來(lái)發(fā)生的故事。

對(duì)象的現(xiàn)狀與對(duì)比分析

對(duì)象存儲(chǔ)的主要特征,基于S3標(biāo)準(zhǔn)的X86分布式,采用多副本和糾刪碼存儲(chǔ)數(shù)據(jù)。不過(guò),在本周的華為2019上海全聯(lián)接大會(huì)上,已經(jīng)有人開(kāi)始玩ARM了。

目前,傳統(tǒng)商業(yè)存儲(chǔ)廠商都有自己相應(yīng)的對(duì)象存儲(chǔ)產(chǎn)品,各家也都有拿的出手的客戶案例,而我這次主要想談?wù)勯_(kāi)源的Ceph。

如果讓我給Ceph定位,我就把Ceph跟OBJ劃等號(hào)。當(dāng)然無(wú)論做云的,還是做存儲(chǔ)的都不會(huì)認(rèn)同我的說(shuō)法,因?yàn)樗麄儽任腋芨蛻糁v故事。

早年間,我朋友就開(kāi)始接觸學(xué)習(xí)Ceph,做了很多準(zhǔn)備工作,但因?yàn)槟承┰?,最后并沒(méi)有真正落地到具體項(xiàng)目。最近聽(tīng)說(shuō)他那里又有新需求,打算重新對(duì)開(kāi)源對(duì)象存儲(chǔ)進(jìn)行測(cè)試,就順便問(wèn)了問(wèn)情況。

目前基于Ceph研發(fā)的存儲(chǔ)玩家主要是XSKY和杉巖數(shù)據(jù),也是他們這次測(cè)試的主要目標(biāo)。

XSKY,不多說(shuō)了,算是Ceph的布道者。

杉巖數(shù)據(jù),一家總部在深圳,專注存儲(chǔ)的科技公司,業(yè)務(wù)發(fā)展還不錯(cuò)。朋友說(shuō)他印象最深的就是,第一次跟杉巖做交流,看了幾頁(yè)P(yáng)PT,就已經(jīng)知道杉巖是干嘛的了,完全對(duì)標(biāo)XSKY,商業(yè)戰(zhàn)略和產(chǎn)品定位很清晰。當(dāng)然,杉巖的對(duì)象產(chǎn)品也提供CDP這種數(shù)據(jù)保護(hù),算是自己獨(dú)特的優(yōu)勢(shì)。

要說(shuō)產(chǎn)品功能和售后服務(wù),相對(duì)還是傳統(tǒng)存儲(chǔ)廠商更完善。初創(chuàng)公司都是基于開(kāi)源Ceph做的研發(fā),版本迭代快,產(chǎn)品功能同質(zhì)化,我覺(jué)得技術(shù)差異反而弱化,需要綜合評(píng)估服務(wù),當(dāng)然姿態(tài)也很重要。

現(xiàn)在對(duì)象之后

客戶搞開(kāi)源對(duì)象似乎就兩種選擇,要么自己養(yǎng)一票懂代碼人的玩自研,要么就找個(gè)專業(yè)基于Ceph做研發(fā)的公司買(mǎi)產(chǎn)品,前者門(mén)檻太高,國(guó)內(nèi)玩得起的沒(méi)多少,后者似乎像是更現(xiàn)實(shí)的做法。

朋友負(fù)責(zé)的對(duì)象存儲(chǔ),上線兩年,對(duì)象存了5億多,目前每天增量還有100萬(wàn)左右,這個(gè)量級(jí),沒(méi)個(gè)對(duì)象,誰(shuí)受得了。

這個(gè)時(shí)代,面對(duì)新技術(shù)、新產(chǎn)品,唯一的選擇就是以開(kāi)放的心態(tài)去擁抱他。沒(méi)對(duì)象的,抓緊找個(gè)合適的吧。否則,被時(shí)代拋棄的時(shí)候,連聲再見(jiàn)都沒(méi)有。

原文標(biāo)題:非結(jié)構(gòu)化數(shù)據(jù)時(shí)代,對(duì)象存儲(chǔ)該怎么玩?

文章出處:【微信公眾號(hào):ssdfans】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 存儲(chǔ)
    +關(guān)注

    關(guān)注

    13

    文章

    4804

    瀏覽量

    90093
  • NAS
    NAS
    +關(guān)注

    關(guān)注

    11

    文章

    320

    瀏覽量

    114997

原文標(biāo)題:非結(jié)構(gòu)化數(shù)據(jù)時(shí)代,對(duì)象存儲(chǔ)該怎么玩?

文章出處:【微信號(hào):SSDFans,微信公眾號(hào):SSDFans】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    高保真仿真地圖生成:UE+Blender協(xié)同編輯在aiSim中的實(shí)現(xiàn)路徑!

    引言在前兩篇文章中,我們系統(tǒng)闡述了結(jié)構(gòu)化道路場(chǎng)景的構(gòu)建路徑。第一篇《如何高效構(gòu)建與測(cè)試結(jié)構(gòu)化道路場(chǎng)景?》從宏觀層面剖析了
    的頭像 發(fā)表于 03-13 17:32 ?411次閱讀
    高保真仿真地圖生成:UE+Blender協(xié)同編輯在aiSim中的實(shí)現(xiàn)路徑!

    物聯(lián)網(wǎng)數(shù)據(jù)中臺(tái)的功能應(yīng)用有哪些

    源,包括數(shù)據(jù)庫(kù)、文件系統(tǒng)、云存儲(chǔ)、物聯(lián)網(wǎng)設(shè)備、社交媒體等,將分散在不同系統(tǒng)中的結(jié)構(gòu)化、半結(jié)構(gòu)化結(jié)構(gòu)化
    的頭像 發(fā)表于 02-26 14:35 ?73次閱讀

    技術(shù)分享|道路數(shù)據(jù)編輯與格式適配解析

    1引言我們此前發(fā)布的《如何高效構(gòu)建與測(cè)試結(jié)構(gòu)化道路場(chǎng)景?》一文,已系統(tǒng)闡述了結(jié)構(gòu)化道路仿真的必要性、當(dāng)前面臨的技術(shù)難點(diǎn)及其解決方案。而在智能駕駛仿真測(cè)試的場(chǎng)景構(gòu)建中,無(wú)論是
    的頭像 發(fā)表于 02-13 16:01 ?118次閱讀
    技術(shù)分享|道路<b class='flag-5'>數(shù)據(jù)</b>編輯與格式適配解析

    數(shù)字的基礎(chǔ)是什么

    、用戶交互等渠道持續(xù)收集結(jié)構(gòu)化(如數(shù)據(jù)庫(kù)記錄)和結(jié)構(gòu)化數(shù)據(jù)(如文本、圖像、視頻)。 數(shù)據(jù)
    的頭像 發(fā)表于 02-04 17:53 ?1141次閱讀

    如何高效構(gòu)建與測(cè)試結(jié)構(gòu)化道路場(chǎng)景?

    高保真虛擬數(shù)據(jù)集開(kāi)源發(fā)布,兼容nuScenes,開(kāi)箱即用!01引言隨著智能駕駛仿真測(cè)試等技術(shù)的快速發(fā)展,行業(yè)評(píng)估體系已從單一的“測(cè)試?yán)锍虜?shù)”向更全面的“場(chǎng)景覆蓋度”及“邊緣場(chǎng)景”檢驗(yàn)演進(jìn)。在此趨勢(shì),實(shí)車(chē)測(cè)試向仿真環(huán)境遷移已成為提升驗(yàn)證效率與安全的必然選擇。統(tǒng)計(jì)
    的頭像 發(fā)表于 01-04 17:33 ?642次閱讀
    如何高效構(gòu)建與測(cè)試<b class='flag-5'>非</b><b class='flag-5'>結(jié)構(gòu)化</b>道路場(chǎng)景?

    功率放大器在磁場(chǎng)激勵(lì)對(duì)狹窄結(jié)構(gòu)化液體環(huán)境適應(yīng)性研究的應(yīng)用

    實(shí)驗(yàn)名稱: 磁場(chǎng)激勵(lì)對(duì)狹窄結(jié)構(gòu)化液體環(huán)境的卓越環(huán)境適應(yīng)性和出色的3D可控性驗(yàn)證 研究方向: 在臨床實(shí)踐中,天然孔口通常為醫(yī)療器械提供對(duì)各種靶組織的侵入性通路。這些體腔/腔(例如泌尿和消化系統(tǒng)
    的頭像 發(fā)表于 11-25 10:04 ?276次閱讀
    功率放大器在磁場(chǎng)激勵(lì)<b class='flag-5'>下</b>對(duì)狹窄<b class='flag-5'>非</b><b class='flag-5'>結(jié)構(gòu)化</b>液體環(huán)境適應(yīng)性研究的應(yīng)用

    結(jié)構(gòu)化布線中使用電纜標(biāo)簽的4個(gè)主要優(yōu)勢(shì)

    在現(xiàn)代通信和網(wǎng)絡(luò)基礎(chǔ)設(shè)施建設(shè)中,結(jié)構(gòu)化布線系統(tǒng)扮演著至關(guān)重要的角色。它不僅確保了網(wǎng)絡(luò)的高效傳輸和穩(wěn)定運(yùn)行,還為未來(lái)的擴(kuò)展和維護(hù)提供了便利。而在結(jié)構(gòu)化布線中,電纜標(biāo)簽的使用雖看似是一個(gè)小小的細(xì)節(jié),卻能
    的頭像 發(fā)表于 11-24 10:34 ?346次閱讀

    NetApp助力對(duì)象存儲(chǔ)現(xiàn)代,提升速度、可擴(kuò)展性和安全性

    智能數(shù)據(jù)基礎(chǔ)設(shè)施公司NetApp? (NASDAQ: NTAP) 今天宣布推出NetApp StorageGRID? 12.0,這是一款可擴(kuò)展的軟件定義對(duì)象存儲(chǔ)解決方案,專為
    的頭像 發(fā)表于 09-11 10:41 ?571次閱讀

    Smarsh攜手戴爾科技構(gòu)建現(xiàn)代智能數(shù)據(jù)中心

    如今,越來(lái)越多的企業(yè)意識(shí)到,不只是合同和郵件,所有日常溝通的結(jié)構(gòu)化數(shù)據(jù)——語(yǔ)音、視頻、聊天記錄、會(huì)議紀(jì)要等,都是潛在的合規(guī)風(fēng)險(xiǎn)點(diǎn)。
    的頭像 發(fā)表于 07-08 15:58 ?876次閱讀

    智能體AI面臨結(jié)構(gòu)化數(shù)據(jù)難題:IBM推出解決方案

    ,同時(shí)提供一個(gè)開(kāi)放的混合數(shù)據(jù)基礎(chǔ)架構(gòu)和企業(yè)級(jí)的結(jié)構(gòu)化結(jié)構(gòu)化數(shù)據(jù)管理。 智能體AI面臨
    的頭像 發(fā)表于 07-02 09:40 ?561次閱讀

    DDN攜手NVIDIA釋放結(jié)構(gòu)化數(shù)據(jù)的AI價(jià)值

    DDN 通過(guò)與 NVIDIA AI 數(shù)據(jù)平臺(tái)的合作,推出聯(lián)合解決方案,簡(jiǎn)化了企業(yè)對(duì)結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)、訪問(wèn)和激活方式,助力客戶釋放生成式 A
    的頭像 發(fā)表于 06-10 10:31 ?976次閱讀

    數(shù)智化時(shí)代數(shù)據(jù)存儲(chǔ)“進(jìn)化論”如何書(shū)寫(xiě)?

    。Gartner預(yù)測(cè),到2028年,企業(yè)軟件應(yīng)用中具備自主性AI的比例將從不到1%升至33%,30%的企業(yè)機(jī)構(gòu)會(huì)把數(shù)據(jù)變現(xiàn)或入表納入數(shù)據(jù)戰(zhàn)略。在此背景,作為數(shù)據(jù)承載關(guān)鍵設(shè)施的
    的頭像 發(fā)表于 04-16 11:21 ?695次閱讀
    數(shù)智化<b class='flag-5'>時(shí)代</b>,<b class='flag-5'>數(shù)據(jù)</b><b class='flag-5'>存儲(chǔ)</b>“進(jìn)化論”<b class='flag-5'>該</b>如何書(shū)寫(xiě)?

    從零到一:如何利用結(jié)構(gòu)化數(shù)據(jù)中臺(tái)快速部署AI解決方案

    ……這些“非標(biāo)”數(shù)據(jù)量大、來(lái)源廣、結(jié)構(gòu)雜,卻恰恰是驅(qū)動(dòng)AI模型的關(guān)鍵燃料。 ? 想要從零到一,快速部署AI解決方案,一個(gè)可行路徑是——構(gòu)建結(jié)構(gòu)化數(shù)
    的頭像 發(fā)表于 04-14 13:50 ?783次閱讀

    華為加速AI時(shí)代數(shù)據(jù)存儲(chǔ)產(chǎn)業(yè)發(fā)展

    近日,在華為中國(guó)合作伙伴大會(huì)2025上,華為數(shù)據(jù)存儲(chǔ)產(chǎn)品線總裁周躍峰發(fā)表“共筑數(shù)智解決方案,共享數(shù)據(jù)存儲(chǔ)產(chǎn)業(yè)大發(fā)展”主題演講,深入探討如何加速AI行業(yè)
    的頭像 發(fā)表于 04-01 15:35 ?1199次閱讀

    樹(shù)莓派AI套件:如何將混亂的數(shù)據(jù)變成有序的魔法

    使用RaspberryPiAI套件進(jìn)行結(jié)構(gòu)化數(shù)據(jù)處理——Hailo邊緣AI結(jié)構(gòu)化數(shù)據(jù)處理、R
    的頭像 發(fā)表于 03-25 09:37 ?990次閱讀
    樹(shù)莓派AI套件:如何將混亂的<b class='flag-5'>數(shù)據(jù)</b>變成有序的魔法