[hadoop-taiwan] 在 Hadoop MapReduce 當中使用 Random number 要注意
- From: Yi-Kai Tsai <yikai@xxxxxxxxxxxxx>
- To: "hadoop-taiwan@xxxxxxxxxxxxx" <hadoop-taiwan@xxxxxxxxxxxxx>
- Date: Sat, 15 Aug 2009 11:04:15 +0800
因為fault tolerant的環境中有些Task可能會被重新(重複)執行,所以如果在
Map() or Reduce() 當中有使用到 random number 而沒有特別注意的話,結果可能
會不同.
FYI
http://blog.rapleaf.com/dev/?p=160
--
Yi-Kai Tsai (cuma) <yikai@xxxxxxxxxxxxx>, Asia Search Engineering.
Other related posts:
- » [hadoop-taiwan] 在 Hadoop MapReduce 當中使用 Random number 要注意 - Yi-Kai Tsai