The Register報道,Percolator是一種增量處理平臺,它能持續(xù)更新索引系統(tǒng),無需從頭重新處理一遍整個系統(tǒng)。Google的工程師計劃在下個月舉行的年度USENIX Symposium 會議上公布Percolator相關論文。為了提高效率,MapReduce和其它批量處理系統(tǒng)創(chuàng)造了大數(shù)據(jù)批量,因此無法處理單個小規(guī)模的數(shù)據(jù)更新。Percolator系統(tǒng)便是為了解決這一問題,它能對一個大數(shù)據(jù)集增量處理更新。用Percolator替代MapReduce,每天處理相同數(shù)量的文檔,能在搜索結果中將文檔平均年齡(average age)減少50%。