開源云數(shù)據(jù)編排軟件開發(fā)商Alluxio宣布與英特爾合作推出上市解決方案，以提供帶有第二 代Intel Xeon可擴(kuò)展處理器的內(nèi)存加速層和Intel Optane永久內(nèi)存(PMem)。該解決方案消除了越來越多地基于分解的計(jì)算和存儲架構(gòu)構(gòu)建的分析集群的性能下降的情況。

“如今，按云分類的存儲缺乏有效的文件系統(tǒng)語義支持，例如'重命名'。此外，分散的云存儲通常無法利用DRAM和SSD等計(jì)算端存儲介質(zhì)作為緩沖區(qū)和頁面緩存，” Alluxio創(chuàng)始人兼首席執(zhí)行官李浩元表示。“添加Alluxio數(shù)據(jù)編排系統(tǒng)和Intel的Optane持久性內(nèi)存可以解決這兩個(gè)問題，從而為云存儲帶來最大的收益，并且比傳統(tǒng)的本地配置具有競爭性甚至更好的性能。這對于遠(yuǎn)程數(shù)據(jù)的混合云環(huán)境特別有用。”

基準(zhǔn)測試結(jié)果顯示，添加Alluxio和Intel永久內(nèi)存1時(shí)，與本地HDFS相比，完成速度提高了2.13倍，在DRAM緩存上的速度提高了1.92倍，可支持4TB決策支持查詢。使用PMem App Direct模式的一項(xiàng)功能，即通過App Direct進(jìn)行存儲，Alluxio可以訪問高性能的塊存儲，而無需在I / O總線上移動數(shù)據(jù)的等待時(shí)間，從而可以加速數(shù)據(jù)并減少查詢時(shí)間。與Alluxio和Intel Xeon處理器可擴(kuò)展，一個(gè)I / O密集型基準(zhǔn)提供了一個(gè)3.4倍的加速超過分列S3對象存儲和1.3倍的加速通過共同定位的計(jì)算和存儲架構(gòu)2。

此外，Alluxio還與英特爾進(jìn)行了戰(zhàn)略合作，旨在改善共同客戶在管理和處理數(shù)據(jù)方面的經(jīng)驗(yàn)，例如對英特爾深度學(xué)習(xí)Boost(英特爾至強(qiáng)可擴(kuò)展處理器內(nèi)置的AI加速技術(shù))的優(yōu)化。Alluxio和英特爾將攜手將解決方案推向市場，以幫助推動下一代數(shù)據(jù)，分析和AI應(yīng)用程序和用例的發(fā)展。

“通過這種新的合作，我們將向市場推出一種解決方案，該解決方案能夠?qū)崿F(xiàn)企業(yè)級共享存儲，并更快地提供洞察力，以解決我們在Hadoop上受限的存儲和計(jì)算資源方面所面臨的挑戰(zhàn)，” Alluxio首席商務(wù)官Rowan Scranage說。“我們計(jì)劃與英特爾一道，通過內(nèi)存中的數(shù)據(jù)加速器層來破壞高級分析和AI現(xiàn)狀，以加速中間數(shù)據(jù)訪問并緩解數(shù)據(jù)瓶頸，這是我們的許多客戶將其視為日益增長的大數(shù)據(jù)需求所面臨的主要挑戰(zhàn)。 ”

英特爾數(shù)據(jù)平臺部門企業(yè)分析和AI首席技術(shù)官Arijit Bandyopadhyay說：“我們很高興與Alluxio合作，并將這一引人入勝的解決方案推向市場。” “隨著越來越多的公司構(gòu)建面臨性能挑戰(zhàn)的高級分析和AI應(yīng)用程序，基于Alluxio的內(nèi)存中數(shù)據(jù)加速器與英特爾的Optane持久內(nèi)存相結(jié)合，將把數(shù)據(jù)本地性，數(shù)據(jù)可訪問性和數(shù)據(jù)彈性帶回到環(huán)境中。基于我們通過這種聯(lián)合解決方案所獲得的性能提升，我們期待將其大規(guī)模推向市場。”

要了解更多信息或開始使用英特爾和Alluxio聯(lián)合解決方案，請聯(lián)系 sales @ al luxio.com

腳注： 英特爾于2019年12月6日使用以下配置進(jìn)行了測試。隨后將有詳細(xì)的白皮書。

Optane PMem緩存：2個(gè)插槽Intel®Xeon®Gold 6240處理器，18核HT On Turbo ON總內(nèi)存192 GB(12插槽/ 16GB / 2666 MHz)，DCPMM 1TB(8插槽/ 128GB / 2666 MHz)，DCPMM固件版本01.02.00.5410，BIOS：SE5C620.86B.0X.02.0094.102720191711(ucode：0x500002c)，BKC版本：ww08.2019，F(xiàn)edora 29(Server Edition)，4.20.6-200.fc29.x86_64，應(yīng)用存儲：11x適用于Ceph OSD的1TB硬盤(ST1000NX0313)，Hadoop版本：Hadoop 3.1.2，Alluxio版本：Alluxio 2.0.0，Spark版本：Spark 2.3.0，Hive版本：Hive 3.1.1，Ceph版本：Ceph 12.2.12

DRAM緩存： 2插槽Intel®Xeon®Gold 6240處理器，18核HT On Turbo ON總內(nèi)存768 GB(24插槽/ 32GB / 2666 MHz)，BIOS：SE5C620.86B.0X.02.0094.102720191711(ucode：0x500002c)，F(xiàn)edora 29(服務(wù)器版)，4.20.6-200.fc29.x86_64，應(yīng)用程序存儲：用于Ceph OSD的11x 1TB HDD(ST1000NX0313)，Hadoop版本：Hadoop 3.1.2，Alluxio版本：Alluxio 2.0.0，Spark版本：Spark 2.3。 0，Hive版本：Hive 3.1.1，Ceph版本：Ceph 12.2.12，

不帶緩存： 2插槽Intel®Xeon®Gold 6240處理器，18核HT On Turbo ON總內(nèi)存192 GB(12插槽/ 16GB / 2666 MHz)，BIOS：SE5C620.86B.0X.02.0094.102720191711(ucode：0x500002c)，F(xiàn)edora 29(服務(wù)器版)，4.20.6-200.fc29.x86_64，應(yīng)用程序存儲：用于Ceph OSD的11x 1TB HDD(ST1000NX0313)，Hadoop版本：Hadoop 3.1.2，Alluxio版本：Alluxio 2.0.0，Spark版本：Spark 2.3。 0，Hive版本：Hive 3.1.1，Ceph版本：Ceph 12.2.12

標(biāo)簽： Alluxio 增強(qiáng)型混合云解決方案