김용환 블로그(2004-2020) :: hadoop streaming 실행시 에러 처리

link管理

链接快照平台

相关文章推荐

叛逆的沙发 · Convert data ...· 19 小时前 ·

苦恼的雪糕 · 苹果台湾下架内置积分墙App_新浪游戏_手机新浪网· 4 周前 ·

含蓄的弓箭 · 背靠大树的赫罗纳，不做被看低的“小曼城”|赫 ...· 3 月前 ·

飘逸的豆芽 · Appium Win环境搭建 | Sutune· 4 月前 ·

飞奔的山羊 · 立山, 无轨电车 — 车辆列表 — 市区电力交通网· 4 月前 ·

孤独的烤地瓜 · TA 关注的仓库 - yuyu2you ...· 5 月前 ·

hadoop streaming 실행시 특별한 에러가 메시지 없이 job이 종료되었다.

hadoop job url도 특별히 문제 없는데... map 시작 전에 아래와 같은 에러가 발생했다.

ERROR streaming.StreamJob: Job not successful. Error: NA
INFO streaming.StreamJob: killJob...
Streaming Command Failed!

원인은 hadoop streaming에 쓰는 mapper에 사용하는 python 코드에 indent가 잘 못 되어 있었다. 흘...

-mapper \"dump.py ${YEAR}${MONTH}${DAY}\" \

-file dump.py \

...

문제의 원인은 역시 사람의 버그였다.

python -m py_compile dump.py 을 이용하여 문법 체크를 미리 하는 것이 좋다.

推荐文章

叛逆的沙发 · Convert data com.alibaba.excel.metadata.data.ReadCellData@35e792f8 to class java.util.Date error -

19 小时前

苦恼的雪糕 · 苹果台湾下架内置积分墙App_新浪游戏_手机新浪网

4 周前

含蓄的弓箭 · 背靠大树的赫罗纳，不做被看低的“小曼城”|赫罗纳|曼城|瓜迪奥拉|懂球帝

3 月前

飘逸的豆芽 · Appium Win环境搭建 | Sutune

4 月前

飞奔的山羊 · 立山, 无轨电车 — 车辆列表 — 市区电力交通网

4 月前

孤独的烤地瓜 · TA 关注的仓库 - yuyu2you (yuyu2you) - Gitee.com

5 月前