開(kāi)源云數(shù)據(jù)編排軟件開(kāi)發(fā)商Alluxio宣布與英特爾合作推出上市解決方案，以提供帶有第二 代Intel Xeon可擴(kuò)展處理器的內(nèi)存加速層和Intel Optane永久內(nèi)存(PMem)。該解決方案消除了越來(lái)越多地基于分解的計(jì)算和存儲(chǔ)架構(gòu)構(gòu)建的分析集群的性能下降的情況。

“如今，按云分類的存儲(chǔ)缺乏有效的文件系統(tǒng)語(yǔ)義支持，例如'重命名'。此外，分散的云存儲(chǔ)通常無(wú)法利用DRAM和SSD等計(jì)算端存儲(chǔ)介質(zhì)作為緩沖區(qū)和頁(yè)面緩存，” Alluxio創(chuàng)始人兼首席執(zhí)行官李浩元表示。“添加Alluxio數(shù)據(jù)編排系統(tǒng)和Intel的Optane持久性內(nèi)存可以解決這兩個(gè)問(wèn)題，從而為云存儲(chǔ)帶來(lái)最大的收益，并且比傳統(tǒng)的本地配置具有競(jìng)爭(zhēng)性甚至更好的性能。這對(duì)于遠(yuǎn)程數(shù)據(jù)的混合云環(huán)境特別有用。”

基準(zhǔn)測(cè)試結(jié)果顯示，添加Alluxio和Intel永久內(nèi)存1時(shí)，與本地HDFS相比，完成速度提高了2.13倍，在DRAM緩存上的速度提高了1.92倍，可支持4TB決策支持查詢。使用PMem App Direct模式的一項(xiàng)功能，即通過(guò)App Direct進(jìn)行存儲(chǔ)，Alluxio可以訪問(wèn)高性能的塊存儲(chǔ)，而無(wú)需在I / O總線上移動(dòng)數(shù)據(jù)的等待時(shí)間，從而可以加速數(shù)據(jù)并減少查詢時(shí)間。與Alluxio和Intel Xeon處理器可擴(kuò)展，一個(gè)I / O密集型基準(zhǔn)提供了一個(gè)3.4倍的加速超過(guò)分列S3對(duì)象存儲(chǔ)和1.3倍的加速通過(guò)共同定位的計(jì)算和存儲(chǔ)架構(gòu)2。

此外，Alluxio還與英特爾進(jìn)行了戰(zhàn)略合作，旨在改善共同客戶在管理和處理數(shù)據(jù)方面的經(jīng)驗(yàn)，例如對(duì)英特爾深度學(xué)習(xí)Boost(英特爾至強(qiáng)可擴(kuò)展處理器內(nèi)置的AI加速技術(shù))的優(yōu)化。Alluxio和英特爾將攜手將解決方案推向市場(chǎng)，以幫助推動(dòng)下一代數(shù)據(jù)，分析和AI應(yīng)用程序和用例的發(fā)展。

“通過(guò)這種新的合作，我們將向市場(chǎng)推出一種解決方案，該解決方案能夠?qū)崿F(xiàn)企業(yè)級(jí)共享存儲(chǔ)，并更快地提供洞察力，以解決我們?cè)贖adoop上受限的存儲(chǔ)和計(jì)算資源方面所面臨的挑戰(zhàn)，” Alluxio首席商務(wù)官Rowan Scranage說(shuō)。“我們計(jì)劃與英特爾一道，通過(guò)內(nèi)存中的數(shù)據(jù)加速器層來(lái)破壞高級(jí)分析和AI現(xiàn)狀，以加速中間數(shù)據(jù)訪問(wèn)并緩解數(shù)據(jù)瓶頸，這是我們的許多客戶將其視為日益增長(zhǎng)的大數(shù)據(jù)需求所面臨的主要挑戰(zhàn)。 ”

英特爾數(shù)據(jù)平臺(tái)部門企業(yè)分析和AI首席技術(shù)官Arijit Bandyopadhyay說(shuō)：“我們很高興與Alluxio合作，并將這一引人入勝的解決方案推向市場(chǎng)。” “隨著越來(lái)越多的公司構(gòu)建面臨性能挑戰(zhàn)的高級(jí)分析和AI應(yīng)用程序，基于Alluxio的內(nèi)存中數(shù)據(jù)加速器與英特爾的Optane持久內(nèi)存相結(jié)合，將把數(shù)據(jù)本地性，數(shù)據(jù)可訪問(wèn)性和數(shù)據(jù)彈性帶回到環(huán)境中?；谖覀兺ㄟ^(guò)這種聯(lián)合解決方案所獲得的性能提升，我們期待將其大規(guī)模推向市場(chǎng)。”

要了解更多信息或開(kāi)始使用英特爾和Alluxio聯(lián)合解決方案，請(qǐng)聯(lián)系 sales @ al luxio.com

腳注： 英特爾于2019年12月6日使用以下配置進(jìn)行了測(cè)試。隨后將有詳細(xì)的白皮書(shū)。

Optane PMem緩存：2個(gè)插槽Intel®Xeon®Gold 6240處理器，18核HT On Turbo ON總內(nèi)存192 GB(12插槽/ 16GB / 2666 MHz)，DCPMM 1TB(8插槽/ 128GB / 2666 MHz)，DCPMM固件版本01.02.00.5410，BIOS：SE5C620.86B.0X.02.0094.102720191711(ucode：0x500002c)，BKC版本：ww08.2019，F(xiàn)edora 29(Server Edition)，4.20.6-200.fc29.x86_64，應(yīng)用存儲(chǔ)：11x適用于Ceph OSD的1TB硬盤(ST1000NX0313)，Hadoop版本：Hadoop 3.1.2，Alluxio版本：Alluxio 2.0.0，Spark版本：Spark 2.3.0，Hive版本：Hive 3.1.1，Ceph版本：Ceph 12.2.12

DRAM緩存： 2插槽Intel®Xeon®Gold 6240處理器，18核HT On Turbo ON總內(nèi)存768 GB(24插槽/ 32GB / 2666 MHz)，BIOS：SE5C620.86B.0X.02.0094.102720191711(ucode：0x500002c)，F(xiàn)edora 29(服務(wù)器版)，4.20.6-200.fc29.x86_64，應(yīng)用程序存儲(chǔ)：用于Ceph OSD的11x 1TB HDD(ST1000NX0313)，Hadoop版本：Hadoop 3.1.2，Alluxio版本：Alluxio 2.0.0，Spark版本：Spark 2.3。 0，Hive版本：Hive 3.1.1，Ceph版本：Ceph 12.2.12，

不帶緩存： 2插槽Intel®Xeon®Gold 6240處理器，18核HT On Turbo ON總內(nèi)存192 GB(12插槽/ 16GB / 2666 MHz)，BIOS：SE5C620.86B.0X.02.0094.102720191711(ucode：0x500002c)，F(xiàn)edora 29(服務(wù)器版)，4.20.6-200.fc29.x86_64，應(yīng)用程序存儲(chǔ)：用于Ceph OSD的11x 1TB HDD(ST1000NX0313)，Hadoop版本：Hadoop 3.1.2，Alluxio版本：Alluxio 2.0.0，Spark版本：Spark 2.3。 0，Hive版本：Hive 3.1.1，Ceph版本：Ceph 12.2.12

　　免責(zé)聲明：本文由用戶上傳，與本網(wǎng)站立場(chǎng)無(wú)關(guān)。財(cái)經(jīng)信息僅供讀者參考，并不構(gòu)成投資建議。投資者據(jù)此操作，風(fēng)險(xiǎn)自擔(dān)。 如有侵權(quán)請(qǐng)聯(lián)系刪除！