资源描述
Hadoop大数据解决方案进阶应用,Hadoop,讲师:迪伦(北风网版权所有),HBase编程实践及案例分析(6),HbaseMapReduce编程实例:HbaseMapReduce编程,课程目标,对应MapReduce的hbase实现类,InputFormat类HBase实现了TableInputFormatBase类,该类提供了对表数据的大部分操作其子类TableInputFormat则提供了完整的实现,用于处理表数据并生成键值对Mapper类和Reducer类HBase实现了TableMapper类和TableReducer类TableMapper类只是将输入的对的类型分别限定为Result和ImmutableBytesWritableIdentityTableMapper类和IdentityTableReducer类则是上述两个类的具体实现OutputFormat类HBase实现的TableOutputFormat将输出的对写到指定的HBase表中,HbaseMapReduce编程,MapReduce程序基本框架创建Job对象,设置基本属性设置scan对象,指定扫描区间和数据列调用TableMapReduceUtil的initTableMapperJob和initTableReducerJob设置Mapper和Reducer等信息提交作业,实例:HbaseMapReduce编程,实例:HbaseMapReduce编程,实例:操作步骤,确保Hadoop和Hbase运行正常在Hbase中创建表创建mapper源表bloghbase(main):006:0createblog,article,author增加测试数据article具有如下qualifiercontent,tags,titleauthor具有如下qualifiername,nickname创建目标表hbase(main):007:0createtag_friend,person运行MapReduce作业验证结果hbase(main):009:0scantag_friend,实例:HbaseMapReduce编程,实例:HbaseMapReduce编程Mapper实现,欢迎访问我们的官方网站,
展开阅读全文