| 封面故事 | Uber | 大數據 | IT預算 | IT省錢術 | Hadoop | HDFS | Yarn | 叢集聯邦 | 通用負載平衡

【Uber大數據平臺效益優化術】Uber手把手分享平臺效率優化8項心法,從檔案瘦身到聯邦叢集都優化

Uber大數據省錢術第3支箭瞄準平臺效率,透過檔案格式優化、改善YARN排程策略、叢集聯邦等方法來提高效率,後來還發起HydroElectricity專案,就像蓄水發電般,善用後臺工作節省前臺CPU耗能

2022-02-15

| google | HDFS | ACID

Google大資料服務Dataproc加入表格格式支援ACID交易

現在Dataproc用戶可以利用開源專案Delta Lake以及Apache Iceberg,來應用表格格式處理ACID交易

2020-01-07

| Hadoop | 大數據 | MongoDB | HDFS

4千多臺Hadoop伺服器HDFS不設防,累計破5PB資料任意存取

在網路上曝光不設防的Hadoop主機,有1900個公開HDFS主機節點位於美國,另有1426個位於中國,且幾乎所有的HDFS主機都置放在雲端代管服務中,有1059個放置在Amazon,另有507個放置在阿里巴巴

2017-06-04

| Hadoop | 大數據 | Yarn | HDFS | MapReduce

暌違2年,Hadoop終於再釋2.8新版,一次推出近3千項更新

從2015年6月釋出2.7版之後,隔了快兩年,Hadoop終於又有大改版,Apache基金會近日發布了Hadoop 2.8版,一次推出了2,919項更新功能或新特色。

2017-03-29

| Apache Hadoop | Hadoop | Hortonworks | 蔣燚峰 | HDFS | 分散式儲存

Hadoop關鍵推手揭露核心分散式檔案系統HDFS發展策略

身為Apache Hadoop開源專案主要核心開發團隊成員,日本Hortonworks解決方案架構師蔣燚峰分享Hadoop近期變革,並揭露核心分散式檔案系統HDFS的4大發展方向

2015-12-06