大数据全系列 教程
1869个小节阅读:464.8k
目录
JAVA全系列 教程
面向对象的程序设计语言
Python全系列 教程
Python3.x版本,未来主流的版本
人工智能 教程
顺势而为,AI创新未来
大厂算法 教程
算法,程序员自我提升必经之路
C++ 教程
一门通用计算机编程语言
微服务 教程
目前业界流行的框架组合
web前端全系列 教程
通向WEB技术世界的钥匙
大数据全系列 教程
站在云端操控万千数据
AIGC全能工具班
A A
White Night
run方法
xxxxxxxxxx
@Override
public int run(String[] args) throws Exception {
Configuration conf = this.getConf();
//处理接收到的参数 -d 2030-12-18
processArgs(conf,args);
//创建Job对象等
Job job = Job.getInstance(conf, "ETL");
//设置入口类
job.setJarByClass(AnalyserLogDataRunner.class);
//设置输入路径
setJobInputPaths(job);
//设置Mapper类以及Mapper输出的key和value类型
job.setMapOutputKeyClass(NullWritable.class);
job.setMapOutputValueClass(Put.class);
job.setMapperClass(AnalyserLogDataMapper.class);
//设置Mapper处理的后的数据存入到hbase中哪张表中
TableMapReduceUtil.initTableReducerJob(
EventLogConstants.HBASE_NAME_EVENT_LOGS,//清洗后的数据放入的表名
null,//Reducer类,不需要指定为null
job,//指定job对象
null,
null,
null,
null,
false
);
//设置Reduce任务的数量为0
job.setNumReduceTasks(0);
//提交作业,将返回结果true转变为0,false变为-1
return job.waitForCompletion(true)? 0:-1;
}