91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

冰上的大數(shù)據(jù)

星星科技指導(dǎo)員 ? 來(lái)源:嵌入式計(jì)算設(shè)計(jì) ? 作者:Brandon Lewis ? 2022-08-17 09:40 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

波音噴氣發(fā)動(dòng)機(jī)每運(yùn)行 30 分鐘,就會(huì)產(chǎn)生 10 TB 的數(shù)據(jù)。那是 1 萬(wàn)億字節(jié),或相當(dāng)于美國(guó)國(guó)會(huì)圖書(shū)館整個(gè)印刷館藏的數(shù)字化等價(jià)物。將其乘以每天在美國(guó)上空推動(dòng)超過(guò) 87,000 次航班的噴氣發(fā)動(dòng)機(jī)數(shù)量,您就會(huì)獲得大量數(shù)據(jù)。

盡管一些人猜測(cè)大數(shù)據(jù)不會(huì)轉(zhuǎn)化為分析療法,但它仍然與物聯(lián)網(wǎng)IoT) 密不可分。如果思科等公司的預(yù)測(cè)是正確的,那么到 2020 年,我們將有大約 500 億個(gè)支持互聯(lián)網(wǎng)的“事物”不斷地啁啾,雖然它們可能不會(huì)都在噴氣發(fā)動(dòng)機(jī)剪輯上生成數(shù)據(jù),但這絕對(duì)構(gòu)成了數(shù)據(jù)海嘯。

那么,我們將如何處理所有這些數(shù)據(jù)?收獲的信息必須在某種程度上具有價(jià)值,否則它一開(kāi)始就不會(huì)被收獲。另一方面,并??非所有數(shù)據(jù)都是平等的。收集到的絕大多數(shù)數(shù)據(jù)可能會(huì)被存檔和遺忘,直到偶爾報(bào)告需要它,訪問(wèn)一次或兩次,然后再次被遺忘。根據(jù) Enterprise Strategy Group 的研究,這種“不經(jīng)常訪問(wèn)”的信息(也稱為第 3 層或“冷”數(shù)據(jù))占記錄數(shù)據(jù)的 80%。而且,盡管這些年來(lái)內(nèi)存的平均成本急劇下降,但在大數(shù)據(jù)規(guī)模上,每 GB 幾美分的成本可以很快加起來(lái)。

這種信息過(guò)載的明顯答案是冷數(shù)據(jù)存儲(chǔ)替代方案,它們比用于定期訪問(wèn)的數(shù)據(jù)更便宜且容量更大。因此,公司通常選擇以下兩種解決方案之一:歷史悠久的磁帶庫(kù),或者最近的云。

磁帶庫(kù)已經(jīng)使用了幾十年,非常適合以極低的成本存儲(chǔ)大量數(shù)據(jù)。它們也可以被認(rèn)為是“綠色的”,因?yàn)榇艓?a target="_blank">驅(qū)動(dòng)器僅在使用時(shí)旋轉(zhuǎn)(這可以節(jié)省電力),并且位于內(nèi)部可以相對(duì)快速地訪問(wèn)冷數(shù)據(jù)。然而,磁帶庫(kù)也有一些缺點(diǎn),包括大中型存儲(chǔ)系統(tǒng)的前期費(fèi)用高昂、遠(yuǎn)程訪問(wèn)困難、磁帶退化的可能性以及在單個(gè)現(xiàn)場(chǎng)位置維護(hù)檔案的漏洞。而不是“數(shù)據(jù)海嘯”想想“數(shù)據(jù)”和“海嘯”)。

公司探索云存儲(chǔ)的可能性,通過(guò)提供無(wú)限的存儲(chǔ)空間、低成本以及防止盜竊、自然災(zāi)害等的遠(yuǎn)程容量,彌補(bǔ)了磁帶庫(kù)的一些疑慮。然而,云解決方案的主要特點(diǎn)是檢索數(shù)據(jù)通常非常耗時(shí),并且可能會(huì)變得昂貴,具體取決于檢索的數(shù)據(jù)量。例如,Amazon Glacier 之類(lèi)的服務(wù)至少需要 3-5 小時(shí)來(lái)檢索數(shù)據(jù)集(可在 24 小時(shí)內(nèi)下載),如果在給定的數(shù)據(jù)中檢索到超過(guò) 5% 的數(shù)據(jù),則按千兆字節(jié)收費(fèi)月。

兩者的交叉點(diǎn)似乎會(huì)有所改進(jìn),并包含優(yōu)化訪問(wèn)的硬件和軟件元素,同時(shí)確保每 GB 存儲(chǔ)的成本盡可能低。

冷藏:冰上的大數(shù)據(jù)

軟件定義存儲(chǔ) (SDS) 是一個(gè)新術(shù)語(yǔ),但從技術(shù)角度來(lái)看,它類(lèi)似于軟件定義網(wǎng)絡(luò) (SDN),因?yàn)橛布壿嫳怀橄鬄楣芾泶鎯?chǔ)基礎(chǔ)設(shè)施的軟件層。從本質(zhì)上講,這意味著可以虛擬化存儲(chǔ)功能或服務(wù)(如重復(fù)數(shù)據(jù)刪除、復(fù)制、快照和精簡(jiǎn)配置),從而實(shí)現(xiàn)在商用硬件上運(yùn)行的融合存儲(chǔ)架構(gòu)。因此,可以實(shí)施具有成本效益的存儲(chǔ)策略,將磁帶庫(kù)的可訪問(wèn)性和效率與云的可擴(kuò)展性和遠(yuǎn)程功能相結(jié)合。

例如,由 Storiant 提供支持的 RGS Cold Storage 是針對(duì)第 3 層數(shù)據(jù)的本地存儲(chǔ)解決方案,它基于 Avnet, Inc. 的業(yè)務(wù)部門(mén) RGS 的現(xiàn)成硬件。機(jī)柜級(jí)設(shè)備與 60 個(gè)提供 PB 級(jí)容量的 HDD 托架完全集成,并利用基于 OpenZFS 的 Storiant 軟件(以前稱為 SageCloud)與私有云接口。Storiant 數(shù)據(jù)管理軟件還提高了訪問(wèn)性能,將處于停滯狀態(tài)的數(shù)據(jù)的檢索時(shí)間縮短至 30 秒,同時(shí)允許 HDD 在不使用時(shí)減速以顯著降低功耗??蓴U(kuò)展的 RGS 冷存儲(chǔ)架構(gòu)每月每 GB 存儲(chǔ) 0.01 美元,針對(duì)大多數(shù)大數(shù)據(jù)部署進(jìn)行了成本優(yōu)化。

雖然 SDS 等存儲(chǔ)管理技術(shù)有助于為有價(jià)值的業(yè)務(wù)分析奠定基礎(chǔ),但它們還確保財(cái)務(wù)和計(jì)算資源可用于定期執(zhí)行的“第 1 層”數(shù)據(jù)。在一個(gè)過(guò)多的信息實(shí)際上會(huì)變成一件壞事的環(huán)境中,將其中的一些信息保持在深度凍結(jié)狀態(tài)是很重要的。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 發(fā)動(dòng)機(jī)

    關(guān)注

    33

    文章

    2695

    瀏覽量

    72629
  • 物聯(lián)網(wǎng)
    +關(guān)注

    關(guān)注

    2945

    文章

    47818

    瀏覽量

    414838
  • SDS
    SDS
    +關(guān)注

    關(guān)注

    0

    文章

    50

    瀏覽量

    16399
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    海光3350便攜機(jī)主板:大數(shù)據(jù)處理利器

    隨著企業(yè)數(shù)字化轉(zhuǎn)型加速,大數(shù)據(jù)處理需求從固定機(jī)房向移動(dòng)場(chǎng)景延伸。無(wú)論是金融機(jī)構(gòu)外出調(diào)研、科研團(tuán)隊(duì)野外數(shù)據(jù)采集,還是個(gè)人創(chuàng)作者處理海量素材,便攜設(shè)備的性能成為關(guān)鍵。海光便攜機(jī)主板憑借獨(dú)特的技術(shù)優(yōu)勢(shì),正成為大數(shù)據(jù)處理領(lǐng)域的“移動(dòng)解決
    的頭像 發(fā)表于 12-26 11:15 ?485次閱讀

    大數(shù)據(jù)解決方案如何實(shí)施

    大數(shù)據(jù)解決方案實(shí)施的難點(diǎn)在于以下幾點(diǎn): ?1.很少有優(yōu)質(zhì)可用的數(shù)據(jù) ?在數(shù)聚股份看來(lái),這幾年數(shù)據(jù)交易機(jī)構(gòu)如雨后春筍,“數(shù)據(jù)變現(xiàn)”成為很多擁有數(shù)據(jù)
    的頭像 發(fā)表于 12-25 18:22 ?1041次閱讀

    最受歡迎的大數(shù)據(jù)可視化工具

    ?在數(shù)聚股份看來(lái),大數(shù)據(jù)可視化是進(jìn)行各種大數(shù)據(jù)分析的最重要組成部分之一。 一旦原始數(shù)據(jù)流被以圖像形式表示時(shí),以此做決策就變得容易多了。 為了滿足并超越客戶的期望,大數(shù)據(jù)可視化工具應(yīng)該具
    的頭像 發(fā)表于 12-24 17:05 ?254次閱讀
    最受歡迎的<b class='flag-5'>大數(shù)據(jù)</b>可視化工具

    大數(shù)據(jù)平臺(tái)運(yùn)營(yíng)的基礎(chǔ)是什么

    在數(shù)聚股份看來(lái),越來(lái)越多的企業(yè)開(kāi)始搭建自己的大數(shù)據(jù)平臺(tái)體系,并傾注大量資源用于平臺(tái)的迭代和運(yùn)營(yíng)。那么大數(shù)據(jù)平臺(tái)作為越來(lái)越被關(guān)注的企業(yè)新興價(jià)值點(diǎn),它應(yīng)該以何種方式看待,并且以什么樣的方式去建設(shè)和運(yùn)營(yíng)
    的頭像 發(fā)表于 12-23 16:07 ?228次閱讀

    湖北大數(shù)據(jù)集團(tuán)到訪維智科技參觀交流

    近日,湖北大數(shù)據(jù)集團(tuán)有限公司黨委書(shū)記、董事長(zhǎng)汪小波率隊(duì)到訪維智科技。雙方圍繞時(shí)空數(shù)據(jù)融合、公共數(shù)據(jù)授權(quán)運(yùn)營(yíng)及行業(yè)應(yīng)用場(chǎng)景開(kāi)發(fā)等議題展開(kāi)深入探討。
    的頭像 發(fā)表于 11-03 10:02 ?629次閱讀

    東軟集團(tuán)領(lǐng)跑中國(guó)醫(yī)療大數(shù)據(jù)解決方案市場(chǎng)

    近日,國(guó)際數(shù)據(jù)公司(IDC)權(quán)威發(fā)布《中國(guó)醫(yī)療大數(shù)據(jù)解決方案市場(chǎng)份額,2024:全域數(shù)據(jù)支撐》(Doc#CHC53739825,2025年9月)報(bào)告。報(bào)告顯示,在中國(guó)醫(yī)療大數(shù)據(jù)解決方案
    的頭像 發(fā)表于 10-30 17:09 ?702次閱讀

    組態(tài)大數(shù)據(jù)平臺(tái)是什么?有什么功能?

    組態(tài)大數(shù)據(jù)平臺(tái)是融合 組態(tài)技術(shù) 與 大數(shù)據(jù)處理能力 的綜合性平臺(tái),通過(guò)圖形化、可配置的方式實(shí)現(xiàn)數(shù)據(jù)采集、存儲(chǔ)、分析、可視化及遠(yuǎn)程控制,適用于工業(yè)自動(dòng)化、能源管理、樓宇監(jiān)控等領(lǐng)域。其核心價(jià)值在于降低
    的頭像 發(fā)表于 10-30 11:29 ?223次閱讀
    組態(tài)<b class='flag-5'>大數(shù)據(jù)</b>平臺(tái)是什么?有什么功能?

    御控工業(yè)物聯(lián)網(wǎng)大數(shù)據(jù)解決方案:排水設(shè)備遠(yuǎn)程監(jiān)控與大數(shù)據(jù)統(tǒng)計(jì)系統(tǒng)

    御控工業(yè)物聯(lián)網(wǎng)推出排水設(shè)備遠(yuǎn)程監(jiān)控與大數(shù)據(jù)統(tǒng)計(jì)系統(tǒng),通過(guò)物聯(lián)網(wǎng)、大數(shù)據(jù)、云計(jì)算等技術(shù)構(gòu)建“感知-傳輸-分析-決策”閉環(huán)管理體系,助力排水行業(yè)數(shù)字化轉(zhuǎn)型。
    的頭像 發(fā)表于 09-12 10:04 ?662次閱讀

    維智科技亮相2025中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)

    近日,全球大數(shù)據(jù)領(lǐng)域矚目的盛會(huì)——2025中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)隆重開(kāi)幕。作為華為重要生態(tài)合作伙伴,維智科技作為時(shí)空人工智能與城市數(shù)字化領(lǐng)域的領(lǐng)先企業(yè),受邀參加展覽展示。
    的頭像 發(fā)表于 09-04 18:03 ?1425次閱讀

    在EZ串行的BLE“無(wú)響應(yīng)寫(xiě)入”中, CAN一次通信中接收的最大數(shù)據(jù)包大小是多少?

    :所有數(shù)據(jù)都顯示在與 ez-Serial 和 PUART 連接的 TeraTerm 上 [問(wèn)題] (1)在 EZ 串行的 BLE“無(wú)響應(yīng)寫(xiě)入”中, CAN 一次通信中接收的最大數(shù)據(jù)包大小是多少? (2
    發(fā)表于 07-07 07:33

    更改最大數(shù)據(jù)包大小時(shí)無(wú)法識(shí)別USB設(shè)備如何解決?

    將生產(chǎn)者 EP 端點(diǎn)描述符中的最大數(shù)據(jù)包大小從 1024 字節(jié)更改為 512 字節(jié)時(shí),無(wú)法識(shí)別 USB 設(shè)備。 請(qǐng)告知如何解決這個(gè)問(wèn)題。
    發(fā)表于 05-20 08:13

    深開(kāi)鴻成為中國(guó)物流與采購(gòu)聯(lián)合會(huì)大數(shù)據(jù)分會(huì)“副會(huì)長(zhǎng)單位”

    近日,深開(kāi)鴻與中國(guó)物流與采購(gòu)聯(lián)合會(huì)規(guī)劃院、中國(guó)物流與采購(gòu)聯(lián)合會(huì)大數(shù)據(jù)分會(huì)在北京舉行合作會(huì)談。雙方圍繞數(shù)據(jù)資產(chǎn)入表、物流規(guī)劃和行業(yè)發(fā)展等相關(guān)內(nèi)容進(jìn)行了溝通,并達(dá)成多項(xiàng)合作共識(shí)。會(huì)上,李錦瑩會(huì)長(zhǎng)代表中國(guó)
    的頭像 發(fā)表于 05-19 19:06 ?769次閱讀
    深開(kāi)鴻成為中國(guó)物流與采購(gòu)聯(lián)合會(huì)<b class='flag-5'>大數(shù)據(jù)</b>分會(huì)“副會(huì)長(zhǎng)單位”

    英泰斯特與東湖大數(shù)據(jù)、動(dòng)力再生簽署戰(zhàn)略合作協(xié)議

    近日,武漢英泰斯特電子技術(shù)有限公司(以下簡(jiǎn)稱:英泰斯特)分別與武漢東湖大數(shù)據(jù)科技股份有限公司(以下簡(jiǎn)稱:東湖大數(shù)據(jù))、武漢動(dòng)力電池再生技術(shù)有限公司(以下簡(jiǎn)稱:動(dòng)力再生)正式簽署戰(zhàn)略合作協(xié)議。
    的頭像 發(fā)表于 05-08 09:25 ?914次閱讀

    云知聲與宜興大數(shù)據(jù)公司簽署合作協(xié)議

    近日,江蘇云知聲科技有限公司(簡(jiǎn)稱“云知聲”)與宜興市大數(shù)據(jù)發(fā)展有限公司(簡(jiǎn)稱“大數(shù)據(jù)公司”)簽署合作協(xié)議,攜手推動(dòng)區(qū)域數(shù)字化協(xié)同發(fā)展,共同構(gòu)建數(shù)字經(jīng)濟(jì)發(fā)展新格局。
    的頭像 發(fā)表于 04-10 11:49 ?838次閱讀

    安徽京準(zhǔn):GPS北斗衛(wèi)星校時(shí)服務(wù)器助力大數(shù)據(jù)云計(jì)算

    安徽京準(zhǔn):GPS北斗衛(wèi)星校時(shí)服務(wù)器助力大數(shù)據(jù)云計(jì)算
    的頭像 發(fā)表于 04-02 09:27 ?740次閱讀