hadoop3.x mapreduce 实现统计词频-ToolRunner方式提交
hbase2.1.x MapReduce统计大量数据的行数
hadoop3.x集群:执行 wordcount 测试 yarn 和 MapReduce
hadoop3.x mapreduce 实现wordcount-在yarn执行、查看结果
hadoop3.x mapreduce案例:UID去重(2)(yarn运行)
hadoop3.x MapReduce序列化机制-自定义序列化类(Writable、WritableComparable)
Hive 底层依赖 MapReduce(或 Tez/Spark)执行分布式计算,并非所有查询都触发 MapReduce:简单的元数据查询(如查表结构)仅访问 Hive Metastore,而涉及 数据扫描、计算、聚合 的查询会触发 MapReduce 任务。
hadoop3.x mapreduce案例:实现词统计wordcount(本机运行)
hadoop3.x mapreduce案例:UID去重(1)(本机运行)
hadoop3.x MapReduce 切片机制与MapTask并行度、切片源码(FileInputFormat)