jinfeng_wang

          G-G-S,D-D-U!

          BlogJava 首頁 新隨筆 聯系 聚合 管理
            400 Posts :: 0 Stories :: 296 Comments :: 0 Trackbacks

          公告

          歡迎交流鏈接,給我留言

          常用鏈接

          留言簿(40)

          隨筆分類(592)

          隨筆檔案(400)

          Domestic

          Foreign

          搜索

          積分與排名

          最新評論

          閱讀排行榜

          評論排行榜

          http://hadoop.apache.org/mapreduce/docs/r0.21.0/mapred_tutorial.html


          經驗總結:
          1)必須將相關的Class文件(包括Map,Reduce)打包成Jar文件
          2)export HADOOP_CLASSPATH=./
          3)  不要將Jar文件和Class文件混淆在一起,放在一個目錄, 例如目錄結構如下:
              否則執行 hadoop jar test.jar   NewMaxTemperature /input /output 的時候, 會出現 下面的錯誤,
              參考: http://groups.google.com/group/hadoopors/browse_thread/thread/b011ef93af5633ae/8227267657518bbb?#8227267657518bbb 
          2011-10-22 22:44:12,062 INFO org.apache.hadoop.mapred.TaskInProgress: Error from attempt_201110222208_0014_m_000001_3 on tracker_ad:localhost/127.0.0.1:2401: java.lang.RuntimeException: java.lang.ClassNotFoundException: NewMaxTemperature$NewMaxTemperatureMapper
           at org.apache.hadoop.conf.Configuration.getClass(Configuration.java:1128)
           at org.apache.hadoop.mapreduce.task.JobContextImpl.getMapperClass(JobContextImpl.java:167)
           at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:612)
           at org.apache.hadoop.mapred.MapTask.run(MapTask.java:328)
           at org.apache.hadoop.mapred.Child$4.run(Child.java:217)
           at java.security.AccessController.doPrivileged(Native Method)
           at javax.security.auth.Subject.doAs(Subject.java:415)
           at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:742)
          posted on 2011-10-22 23:09 jinfeng_wang 閱讀(1225) 評論(0)  編輯  收藏 所屬分類: hadoop

          只有注冊用戶登錄后才能發表評論。


          網站導航:
           
          主站蜘蛛池模板: 马公市| 全椒县| 邹平县| 常州市| 安平县| 江安县| 温泉县| 泰顺县| 广饶县| 江北区| 邵阳市| 铜川市| 庆阳市| 平武县| 大英县| 齐河县| 福清市| 南通市| 额济纳旗| 牙克石市| 阿尔山市| 东光县| 广安市| 鹰潭市| 琼中| 梓潼县| 方山县| 岑巩县| 长乐市| 罗江县| 仙居县| 上林县| 通渭县| 寿阳县| 平远县| 东方市| 巫溪县| 永德县| 西安市| 景泰县| 通州区|