1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

10月24日,由華為技術有限公司與福建鯤鵬生態創新中心聯合主辦的“1024鯤鵬開發者技術沙龍”在福州順利舉行。

在沙龍上,來自福建鯤鵬生態創新中心運營總監宋宗佑為活動進行致辭,福建鯤鵬生態創新中心生態總監朱曉彤對鯤鵬生態創業中心進行介紹,加深了大家對於鯤鵬產業的理解。

宋宗佑:這是一個萬億級的市場,也是非常龐大的生態體系

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

福建鯤鵬生態創新中心運營總監宋宗佑

創新引領未來,程式碼改變世界。鯤鵬積極參與發展戰略,各省也積極擁抱出臺鯤鵬產業。與此同時,各地方政府現在已經是把鯤鵬計算產業放在戰略佈局中,今年,福州市政府出臺了77號檔案《關於構建鯤鵬產業生態的實施意見》幫助本地鯤鵬產業和鯤鵬夥伴共同發展。鯤鵬生態是華為開放自主的鯤鵬處理器主機板、部件,以及聯合夥伴打造,拓展到虛擬化、大資料平臺、中介軟體零服務等上層應用軟體,這是一個萬億級的市場,也是非常龐大的生態體系。現在,華為在各地區打造鯤鵬產業生態基地,聯合夥伴開展應用示範,培養產業人才,孵化產業標準。我們的目標就是要構築一個鯤鵬生態圈,啟用商業市場。在今天的開發者日上,希望大家能夠結識新朋友,對鯤鵬生態有更深的瞭解,與鯤鵬生態一起成長!

朱曉彤:鵬計算產業已成燎原之勢,產業生態逐步走向快車道

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

福建鯤鵬生態創新中心生態總監朱曉彤

我來對鯤鵬生態創業中心做個介紹。當前全球進入了資料為關鍵生產要素的數字經濟時代,數字應用多樣性促使資料資源發生變化。鯤鵬計算產業致力打造全球競爭力計算產業叢集,透過業界提供基於鯤鵬處理器的軟硬體基礎設施,滿足市場對新計算的需求,支撐全社會的的數字化轉型。當前,自動駕駛、人工智慧、雲遊戲、智慧製造、物聯網等應用場景的多樣化,傳統單一的架構難以滿足現在市場的資料處理和使用者體驗的要求,因此對計算平臺提出新的要求。

新計算發展的成功關鍵在於完善整個生態體系,鯤鵬生態基於鯤鵬處理器的基礎軟硬體設施、行業應用以及服務,涵蓋了從底層硬體、基礎軟體到上層應用的全產業鏈。縱觀全景,從硬體上,鯤鵬生態圍繞昇騰AI晶片、儲存控制晶片、網路控制晶片等主要部件,以及它構成的PC、伺服器、儲存等整機產品;從上層基礎軟體上,鯤鵬包括資料庫、作業系統中間鍵等軟體,如尤拉和高斯系統與資料庫;基於行業應用,鯤鵬主要涵蓋了金融、製造、政府、交通、農林電力等各個行業,並且提供數字化的行業應用解決方案。

華為公司對鯤鵬的投入也在持續,2019年華為釋出了面向所有開發者的破土計劃2。0,未來5年會投入15億美元用於發展鯤鵬生態。

福建鯤鵬生態創新中心目前可以為開發者和企業夥伴提供伺服器資源,鯤鵬創新中心的主要運營職責,包括產業服務、人才培養、生態培育等,可以發放華為的認證考試券。

如今,鯤鵬計算產業一年多來發展已成燎原之勢,聚集了1000多家軟硬體企業,形成了基於鯤鵬的軟硬體產品3000多款,產業生態逐步走向快車道。

接下來,華為的技術專家對鯤鵬雲平臺和大資料平臺展開了詳細介紹,並透過實踐講解了平臺解決方案。

鯤鵬雲平臺解決方案

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

鯤鵬雲平臺解決方案工程師劉繼周

我今天主要對鯤鵬生態做介紹,加深大家對於鯤鵬在虛擬化方面所做的事情的理解。

首先從當前業界的趨勢,也就是虛擬化雲計算開始。從PC時代到移動網際網路時代,再到AI+5G的雲時代,不斷變化擴充套件的新場景需要多樣性的計算,雲平臺也隨之出現雲化和虛擬化的趨勢。

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

傳統行業市場基於KVM技術構築成熟、穩定的IaaS平臺,網際網路行業基於Docker容器技術構築靈活、標準化、輕量化PaaS平臺。在這樣的背景下,華為鯤鵬計算雲平臺應運而生。

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

鯤鵬的最佳化方向主要是兩大主線,一個是KVM,一個是docker技術的虛擬化。現在,鯤鵬推出的OpenStack+KVM是主流,上圖中可以看到OpenStack+KVM開發框架虛擬化管理平面,是基於虛擬化之上。最底層為鯤鵬平臺。

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

目前,鯤鵬在虛擬化開源上已支援Qemu,KVM,並基於KVM進行調優,在硬體、虛擬化和作業系統上做了最佳化。

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

鯤鵬還支援Kubernetes+Docker雲平臺。

目前,鯤鵬主要部署在金融、政府、運營商、政府網。

鯤鵬一個很大的優點是核多,64核+多核計算架構,資源池大,整機效能高。虛擬機器基於物理核構建,VM隔離性好,效能更穩定。

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

另外,鯤鵬還支援混合部署,新的OpenStack+KVM把原有的作為計算節點,混合不同的雲,基於原有的X86AZ,可以把鯤鵬平臺作為計算平臺進行擴容。

鯤鵬很多虛擬化方案程式碼和調優手段都是開源的,希望大家能夠共同參與到虛擬化共建中來。

鯤鵬計算大資料解決方案

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

鯤鵬大資料研發工程師王登陽

首先從整體架構上介紹一下鯤鵬大資料解決方案,它主要由硬體基礎、作業系統、中介軟體,以及大資料平臺等多個部分組成。

硬體基礎方面,鯤鵬大資料解決方案提供了基於鯤鵬處理器的泰山伺服器,在快取記憶體的情況下,同時支援SSD用於加速。

作業系統方面,支援當前主流的商用開源作業系統和國產化作業系統,比如華為自研的尤拉等。中介軟體JDK、GCC等大資料編譯器中介軟體目前也都是支援鯤鵬產業生態的。

加速特性方面,支援EC編解碼指令加速,同時提供了基於指令與演算法最佳化的KAL機器學習庫等。除此之外,也支援常見的Hbase等眾多大資料元件,和華為自研的FusionLnsight、開源的Apache、CDh/HDP和星環等平臺。

目前,鯤鵬生態基礎逐漸完善,技術成熟,也支援更多的合作伙伴進行大資料平臺的移植。

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

大資料對應的典型配置方案主要是針對實時流處理、實時檢索、離線分析/資料探勘和冷資料儲存進行資料處理的最佳化。

離線分析以HDFS為資料底座,常見的計算引擎以Hive/Spark為主。在離線分析上,推薦的典型配置是鯤鵬5220搭配12塊SATA資料盤。實時檢索,主要是針對海量資料,進行實時查詢,其對查詢響應時間要求比較高,一般採用的是2P的鯤鵬5250和24塊1。2GSAS資料盤。最後是實時流處理,一般透過Kafka將資料傳輸給Stom和Flink,完成資料處理後,上傳到Redis進行儲存。這同樣對查詢響應時間要求較高,通常採用2P的鯤鵬5220和12塊1。2G的SAS盤。

1024 鯤鵬開發者技術沙龍·福州站圓滿收官!給程式設計師的福利你收到了嗎?

此外,鯤鵬大資料還做了一些適配和開源的實踐。在大資料的適配上,常見的大資料元件移植主要是針對包含移植內容有JAr包、SO檔案和可執行二進位制檔案等。鯤鵬大資料還在大資料上進行了特性開發並開源,包括SM4的國密加速,透過內建加解密加速引擎,明文資料透過匯流排傳輸,來有效保證資料的安全性,目前支援SM3/SM4的國密演算法。

目前,鯤鵬大資料開源生態發展迅速,在Hbase等幾個核心元件上開源社群都支援ARM、最新的ES和Hadoop。後期,鯤鵬大資料將繼續完善社群對應的ARM構建,保證不同版本的軟體對應的編譯流程打包,甚至是測試流程能力完整和完備,確保程式碼在ARM上的質量。

圍繞生態建設,鯤鵬大資料也有了一些進展。比如2019年在HC大會上,鯤鵬四個開發套件亮相,包括分析掃描、程式碼遷移工具、編譯器和效能最佳化工具。而且,隨著鯤鵬影響力與日俱增,鯤鵬社群也應運而生,現已涵蓋了10+的軟體領域,包括中介軟體、作業系統等,同時提供200+主流軟體和豐富的產品技術支援和解決方案。另外,鯤鵬大資料還打通了自己的Maven倉庫和RPM倉庫,提供含有SO檔案空文件的jar包。

總結起來,鯤鵬大資料有以下幾大優勢:

高效能:鯤鵬多核實現高併發IO

平滑擴容:支援鯤鵬與x86混合部署,實現現網叢集平滑擴容 • 安全加解密:基於晶片內建硬體加解密,支援國密演算法

豐富生態:支援主流開源軟體和國產化商業軟體,軟硬體解耦

鯤鵬展翅,未來可期,希望後期鯤鵬發展道路上,可以看到在座各位的身影。

想要了解沙龍上還發生了哪些有趣的互動嗎?

圖片直播:

https://www。pailixiang。com/album_ia883432105。html

炒股開戶享福利,入金抽188元紅包,100%中獎!

開啟App看更多精彩內容