新一代大資料與人工智慧基礎架構技術的發展與趨勢
2018年是開源軟體歷史上最精彩的一年,2個IPO加上5個併購,開源技術到達新的高度。回溯過去大資料時代的15年,開源技術的創新潮流,包括叢集技術,流計算,資料庫,容器技術和機器學習,可謂一波接著一波。
2003-2004年Google釋出的GFS和MapReduce論文,對業界的影響可謂意義深遠,它全面揭開了大資料的時代序幕。2006年,Doug Cutting加入Yahoo併發布Hadoop 0.1版本,同年Google釋出BigTable論文。2008年,SQL/">MySQL 10億美元被Sun收購。2009年,Spark從Berkeley大學的AMPLab實驗室誕生,程式員Johan Oskarsson舉辦第一個NoSQL資料庫活動。2010年,RackSpace與NASA聯合發起OpenStack雲端計算專案。2011年,451 Research分析師Matthew Aslett首次提出NewSQL概念。2012年,Red Hat首次達到10億美元的年收入。2013年,Docker的崛起意味容器時代的開始。2014年, 隨著Hadoop三駕馬車之一的Hortonworks IPO,Hadoop到達高峰時期,但在同年Hadoop保持的記錄被Spark打破。2015年,Google開源Tensorflow,Kubernetes 1.0釋出並捐給CNCF組織。2017年, Hadoop 3.0正式釋出。2018年,Cloudera和Hortonworks兩大巨頭合併,Elastic IPO,市值49億美元。
這一幕幕精彩的故事背後隱藏著技術一次又一次的改革和創新,到底是上層業務應用的發展驅動底層基礎架構技術的發展,還是基礎架構的創新顛覆業務應用模式?下面我們一起回顧和預測這些關鍵技術的演變發展和未來趨勢。