希捷科技陳昱嘉:存儲(chǔ)巨頭面對(duì)“時(shí)”與“勢(shì)”,如何賦能AIoT存儲(chǔ)?
【CPS中安網(wǎng) cps.com.cn】今年IDC發(fā)布了Data2025的報(bào)告,其中提到,2018年全球產(chǎn)生了33ZB的數(shù)據(jù)量,但是在2025年會(huì)達(dá)到175ZB,主要增長(zhǎng)的數(shù)據(jù)來(lái)自于AIOT物聯(lián)網(wǎng),其中最大的一部分是來(lái)自于安防產(chǎn)業(yè)。
這意味著,未來(lái)安防行業(yè)對(duì)海量數(shù)據(jù)存儲(chǔ)的市場(chǎng)需求是非常大的。
物聯(lián)網(wǎng)AIOT為何會(huì)產(chǎn)生如此大的數(shù)據(jù)量呢?縱觀整個(gè)AIoT,它的架構(gòu)其實(shí)是分為三層的,包括終端、邊緣、云。其中,邊緣和云從2006年開(kāi)始就已經(jīng)被大家熟悉了很多,包括阿里云、AWS、騰訊云等等都已經(jīng)深入到我們的生活中。但是在十幾年后的今天,大部分?jǐn)?shù)據(jù)存儲(chǔ)、處理會(huì)集中在邊緣層次,因?yàn)閿?shù)據(jù)量增長(zhǎng)迅猛增加,云受限于帶寬和處理能力,沒(méi)有辦法全部存儲(chǔ),只有把數(shù)據(jù)離散到邊緣的層次進(jìn)行存儲(chǔ)和處理,才能將海量的數(shù)據(jù)存儲(chǔ)起來(lái)。這就是完整的AIoT架構(gòu)。
AIoT的架構(gòu)是由很多的技術(shù)組成的,目前沒(méi)有辦法用任何一種簡(jiǎn)單的方案來(lái)描述它。那么,從數(shù)據(jù)存儲(chǔ)的角度,如何能夠?yàn)锳IoT架構(gòu)提供適合的存儲(chǔ)解決方案呢?
在第十五屆安防論壇上,希捷科技資深解決方案顧問(wèn)陳昱嘉表示,希捷科技在40年的發(fā)展中,一直深耕海量數(shù)據(jù)存儲(chǔ)的硬盤(pán)研發(fā),隨著人工智能的發(fā)展,針對(duì)目前AI智能場(chǎng)景的應(yīng)用也有了極具針對(duì)性的解決方案,盡全力保障客戶數(shù)據(jù)的安全。
希捷科技資深解決方案顧問(wèn)陳昱嘉
在接下來(lái)的闡述中,陳昱嘉介紹了希捷科技在賦能AIOT存儲(chǔ)上做的三大塊業(yè)務(wù)。
賦能AIOT存儲(chǔ)一:研發(fā)多元硬盤(pán)滿足海量數(shù)據(jù)存儲(chǔ)需求
首先,看看安防行業(yè)對(duì)攝像頭的需求。上面左圖是IDC統(tǒng)計(jì)的2017年、2021年全球攝像頭的發(fā)貨量,同時(shí)希捷的發(fā)貨量逐年增長(zhǎng),但有一點(diǎn)引起注意的是,低像素的200萬(wàn)以下的攝像頭發(fā)貨量在下降,絕對(duì)數(shù)量上也在下降。
400萬(wàn)、800萬(wàn)、1200萬(wàn)的攝像頭增長(zhǎng)越來(lái)越快,特別是高像素的攝像頭增長(zhǎng)越來(lái)越快,像素越高意味著客戶要求的存儲(chǔ)空間越多。為此,希捷的業(yè)務(wù)重心也調(diào)整到像素高的攝像頭上。
第二,現(xiàn)在客戶對(duì)存儲(chǔ)的時(shí)間有了不一樣的要求,以前客戶是要求1—3天或者是7天,但是現(xiàn)在,大部分的客戶要求7—15天,如果是銀行和交通可能要求存3個(gè)月或者是3年都有可能,越長(zhǎng)的存儲(chǔ)時(shí)間對(duì)存儲(chǔ)空間要求也越高。
上面右邊這個(gè)圖橙色的方塊是希捷NVR的銷量,綠色的是硬盤(pán)容量需求的增長(zhǎng)。NVR每年大約增長(zhǎng)10%,很穩(wěn)定,硬盤(pán)容量的需求2倍于NVR的需求,硬盤(pán)增長(zhǎng)需求是20%。
這就帶來(lái)一個(gè)問(wèn)題,同樣的一臺(tái)AIoT要求的容量是原來(lái)的2倍、3倍或者是4倍,NVR可能就是4個(gè)或者是8個(gè)槽位,解決問(wèn)題就是把硬盤(pán)單盤(pán)的容量翻倍,原來(lái)是1T和2T的為主流,現(xiàn)在是4—6T,能夠看到的未來(lái)是,8—10T甚至是更高的容量將成為整個(gè)市場(chǎng)的容量。
硬盤(pán)的單盤(pán)容量不斷地增長(zhǎng),有一系列的核心技術(shù)做支撐,在這方面希捷作為專業(yè)的硬盤(pán)生產(chǎn)廠家,有兩項(xiàng)核心技術(shù),能確保未來(lái)提供足夠容量的硬盤(pán)滿足存儲(chǔ)需求的增長(zhǎng)。
首先第一個(gè)技術(shù)是HAMR,但其實(shí)這已經(jīng)不是一個(gè)新的技術(shù)了,已經(jīng)有十幾年了,原理上也簡(jiǎn)單,因?yàn)槊芏确浅8叩拇沤橘|(zhì)很難改寫(xiě),所以必須要把它加熱,用一個(gè)激光發(fā)射器把它加進(jìn)行改寫(xiě),這個(gè)原理雖然很簡(jiǎn)單,但是工程實(shí)現(xiàn)卻非常難。
希捷在明年會(huì)有第一代的HAMR的產(chǎn)品發(fā)布,產(chǎn)品容量是20TB,未來(lái)確保單臺(tái)硬盤(pán)的年增長(zhǎng)率達(dá)到30%。
“硬盤(pán)的容量不斷地增長(zhǎng)帶來(lái)另外一個(gè)問(wèn)題,性能的問(wèn)題,如果性能不變化,但硬盤(pán)不斷地變化,就會(huì)帶來(lái)一個(gè)IOPS/TB在下降,很多的用戶希望硬盤(pán)容量增加的同時(shí)性能也提升。
我們推出了一個(gè)MACH2的技術(shù),這在硬盤(pán)里面放兩套電機(jī),硬盤(pán)的上下磁頭可以按照不同的方向轉(zhuǎn),這樣帶來(lái)的好處是我們的性能直接翻倍,能夠確保我們的硬盤(pán)性能能夠根據(jù)我們的容量不斷地增長(zhǎng)。”陳昱嘉介紹道。
希捷在2006年推出了世界上首款監(jiān)控硬盤(pán),2019年推出了一系列新的監(jiān)控硬盤(pán),從2TB到8TB,不斷推出新的產(chǎn)品滿足不同的需求。
那新的產(chǎn)品和舊的產(chǎn)品有什么區(qū)別呢?
陳昱嘉說(shuō):“首先從質(zhì)量上來(lái)看,新的產(chǎn)品和之前的產(chǎn)品一模一樣,能夠支持64路高清視頻的錄制和16路的回放,180TB/年寫(xiě)入量和100萬(wàn)小時(shí)的MTBF和三年質(zhì)保和OSP防腐蝕。
更重要的是體現(xiàn)我們的優(yōu)化成本,體現(xiàn)在我們的TCO上,我們單盤(pán)的重量和功耗下降了。功耗下降了很容易理解,但是重量下降實(shí)際上對(duì)我們可能有更大的好處,一臺(tái)機(jī)架可以放更多的硬盤(pán),不再受限于承重的考慮,減少大家的機(jī)架空間,很多時(shí)候這個(gè)價(jià)格比我們的電費(fèi)還要高,今年整個(gè)SKYHAWK的產(chǎn)品從1T到8T都推出了新產(chǎn)品?!?/p>
除了能夠提供海量的硬盤(pán)存儲(chǔ)空間滿足整個(gè)AIoT的存儲(chǔ)需求外,希捷還針對(duì)今年安防行業(yè)最熱門(mén)的人工智能,專門(mén)設(shè)計(jì)了符合AI應(yīng)用分析的硬盤(pán)。
賦能AIOT存儲(chǔ)二:專為AI應(yīng)用設(shè)計(jì)的硬盤(pán)
安防行業(yè)人工智能的發(fā)展,從2016年AlphaGo擊敗李世石開(kāi)始,就發(fā)生了一些變化。
上面這三位是深度學(xué)習(xí)的巨頭,獲得了IT業(yè)界的諾貝爾獎(jiǎng)圖靈獎(jiǎng)。這從一個(gè)側(cè)面說(shuō)明,AI運(yùn)用到實(shí)踐中的技術(shù)其實(shí)已經(jīng)比較成熟了。
從最核心的AI芯片來(lái)說(shuō),2016年已經(jīng)有領(lǐng)先的廠家出了第一代的AI芯片,當(dāng)時(shí)只有一款芯片可以選,就是英美達(dá)的TX1,但這塊板賣(mài)13億美元,如此天價(jià),大部分客戶都沒(méi)有辦法接受。
到了2019年,在安博會(huì)展館里,具備芯片技術(shù)的企業(yè)也不少,包括海思、地平線等等都能夠提供AI芯片,這樣就帶來(lái)了一個(gè)好處,芯片的成本從3位數(shù)的美元降為1位數(shù)的美元,大部分客戶都可以接受這個(gè)成本,那么在AI應(yīng)用上,成本就沒(méi)有什么限制了。
現(xiàn)在大部分做芯片的企業(yè),都不會(huì)再說(shuō)自己的準(zhǔn)確率從97%到97.1%,也不會(huì)說(shuō)自己的產(chǎn)品有多少性能了,而是開(kāi)始專注在找一個(gè)細(xì)分場(chǎng)景的應(yīng)用把AI真正落地。
發(fā)現(xiàn)有場(chǎng)景適合落地后,就要推出解決方案了。陳昱嘉認(rèn)為,首先,硬盤(pán)要真正的產(chǎn)品化,除了要在容量、性能上符合客戶的要求外,還要在成本上也要符合客戶的要求。
所以有沒(méi)有一款適合AI應(yīng)用的機(jī)械硬盤(pán)呢?希捷在今年推出了一個(gè)新的產(chǎn)品,是專門(mén)為AI應(yīng)用設(shè)計(jì)的SkyHawk AI硬盤(pán),16TB的硬盤(pán)。
這個(gè)為AI應(yīng)用專門(mén)設(shè)計(jì)的硬盤(pán)滿足的存儲(chǔ)需求,除了傳統(tǒng)的視頻錄制之外,還有整理出來(lái)的圖片,以及分析出來(lái)的結(jié)構(gòu)化數(shù)據(jù),統(tǒng)一存在一個(gè)數(shù)據(jù)庫(kù),圖片是200—500K的小文件,視頻是循環(huán)錄制的。
這三種數(shù)據(jù)對(duì)硬盤(pán)性能有不同的要求,視頻錄制要求順序讀寫(xiě),這個(gè)相對(duì)容易處理,而小圖片會(huì)復(fù)雜一點(diǎn),結(jié)構(gòu)化的數(shù)據(jù)對(duì)硬盤(pán)要求就更高了。
希捷酷鷹AI硬盤(pán)有一個(gè)獨(dú)有的AI固件,這個(gè)固件把硬盤(pán)進(jìn)行優(yōu)化,來(lái)分別符合以上三個(gè)需求,硬盤(pán)是一圈圈的,這款硬盤(pán)的性能是有區(qū)別的,內(nèi)圈的性能比外圈低,性能最好的部分是在硬盤(pán)的外圈,中圈是性能中間的,內(nèi)圈是性能比較低的。
這三種數(shù)據(jù)可以做優(yōu)化,可以把視頻錄像全部放在內(nèi)圈,即使在內(nèi)圈也完全可以滿足錄制和視頻的讀取。圖片放在內(nèi)圈,然后結(jié)構(gòu)化的數(shù)據(jù)放在外圈,滿足不同的應(yīng)用,滿足客戶不同的要求,基本上滿足市面上所有AI線上的需求。
陳昱嘉透露,一些廠家在賣(mài)AI產(chǎn)品的時(shí)候,一般會(huì)把希捷的酷鷹 AI硬盤(pán)集成在里面一起打包給客戶。
這些廠家發(fā)現(xiàn),如果是只賣(mài)一個(gè)AI產(chǎn)品的話,客戶可能會(huì)自己買(mǎi)硬盤(pán),可能會(huì)買(mǎi)一個(gè)比較簡(jiǎn)單的監(jiān)控機(jī)的硬盤(pán),這樣一用,發(fā)現(xiàn)一旦業(yè)務(wù)上去以后性能掉得很快,客戶會(huì)認(rèn)為NVR不行,實(shí)際上是因?yàn)榭蛻魶](méi)有選擇合適的硬盤(pán)。
現(xiàn)在很多的廠家把酷鷹AI集成在他的產(chǎn)品里面,一起打包給客戶,避免客戶的選擇錯(cuò)誤。
陳昱嘉補(bǔ)充道:“酷鷹 AI硬盤(pán)今年推出16TB,我們還有8TB、10TB和14TB。那么有人會(huì)問(wèn)為什么要把硬盤(pán)容量做得這么大?
因?yàn)槲覀冎肋@個(gè)硬盤(pán)不僅僅要存視頻,還要存圖片和結(jié)構(gòu)化的數(shù)據(jù),還有一些其他的數(shù)據(jù),對(duì)使用的要求可能更高。除此之外,我們的硬盤(pán)規(guī)格要比普通的硬盤(pán)規(guī)格高很多,除了支持64路的視頻錄制和16路的回放,還能夠支持32路的AI智能分析,他是550TB/年寫(xiě)入,支持AI分析的NVR?!?/p>
賦能AIOT存儲(chǔ)三:數(shù)據(jù)丟失了也能恢復(fù)
陳昱嘉在演講的最后,提到了一個(gè)大家特別關(guān)心的問(wèn)題,那就是,假如數(shù)據(jù)丟失了怎么辦?有沒(méi)有什么辦法可以恢復(fù)?陳昱嘉很肯定地說(shuō):有的!
希捷的酷鷹硬盤(pán)健康管理SHM,這個(gè)方案包含三步:預(yù)警、干預(yù)、恢復(fù)。
“預(yù)警是一個(gè)預(yù)告,我們會(huì)時(shí)刻監(jiān)控我們硬盤(pán)運(yùn)行的工作環(huán)境,如果發(fā)現(xiàn)有高溫、發(fā)現(xiàn)有振動(dòng)、或者是鏈路不太對(duì),會(huì)直接產(chǎn)生一個(gè)報(bào)警,提醒我們的用戶說(shuō)你這個(gè)硬盤(pán)是工作在一個(gè)不健康的環(huán)境里,你要盡量把它改善掉。
硬盤(pán)在比較好的環(huán)境可以工作很多年,故障率很低,但是一直工作在高溫、振動(dòng)比較強(qiáng)的情況下,硬盤(pán)的失效率會(huì)比較高。
我們通過(guò)預(yù)警的功能提醒用戶,盡量讓我們的硬盤(pán)處在一個(gè)比較正常的工作環(huán)境之下。有時(shí)候條件限制沒(méi)有辦法,用戶可能對(duì)這個(gè)報(bào)警沒(méi)有做處理。
沒(méi)有做處理的情況下我們硬盤(pán)的時(shí)效性會(huì)提高,我們監(jiān)測(cè)內(nèi)部發(fā)現(xiàn)硬盤(pán)可能在2周到1個(gè)月會(huì)壞了,這個(gè)時(shí)候會(huì)產(chǎn)生一個(gè)嚴(yán)重告警,提示我們的用戶,你這款硬盤(pán)馬上要廢了,你現(xiàn)在要做的事情趕快把數(shù)據(jù)備份出來(lái),這塊硬盤(pán)基本上可以下線了,這是非常有用的。
這給我們客戶大概1到2周的時(shí)間提前備份數(shù)據(jù),避免數(shù)據(jù)的流失,這對(duì)我們客戶是一個(gè)非常好的解決方案。”陳昱嘉說(shuō),當(dāng)然也有的時(shí)候,雖然有這個(gè)預(yù)警功能,但有些客戶其實(shí)并不重視,等到硬盤(pán)真的壞了,數(shù)據(jù)丟失了才知道數(shù)據(jù)的珍貴,然后就要再花時(shí)間和精力去想辦法把它恢復(fù)。
據(jù)了解,希捷是目前業(yè)界唯一一家提供原廠數(shù)據(jù)恢復(fù)服務(wù)的公司SRS,希捷在杭州有一個(gè)專門(mén)處理恢復(fù)的無(wú)塵實(shí)驗(yàn)室,如果數(shù)據(jù)真的丟了以后,還可以找他們做最后一次恢復(fù),把數(shù)據(jù)從故障的硬盤(pán)里面恢復(fù)出來(lái),成功率能達(dá)到90%。
陳昱嘉最后總結(jié)說(shuō):“我們能夠提供海量的存儲(chǔ)滿足客戶存儲(chǔ)的需求,提供酷鷹硬盤(pán)做大流量的視頻存儲(chǔ),針對(duì)AI的智能分析,我們提供了酷鷹 AI智能硬盤(pán),來(lái)支持AI智能分析的需求,同時(shí)對(duì)于數(shù)據(jù)安全,我們提供SHM包括SRS,預(yù)防數(shù)據(jù)丟失,如果真的丟失了,我們提供SRS幫助大家恢復(fù)數(shù)據(jù)。”