ZY笔记
  • Java
    • CoreJava
    • Spring
    • java测试
    • 性能分析
  • 大数据
    • Kafka
    • Hadoop
    • HBase
    • Spark
    • Druid
  • Python
  • Scala
    • Scala
    • Gradle
  • Bug
  • Tricks
  • 想法

预则立,不预则废

  • 当前位置 : 
  • ZY笔记
  • /标签为 [ mapreduce ] 的文章
  • 关于MapReduce6 – 重构WordCount

    2015年9月20日 作者:白42
    暂无评论

    这里是一个更完整的WordCount实例。在这个实例中使用了很多前面提到的MapReduce框架的特性。 这个实例需要HDFS支持运行,尤其是关于DistributedCache的一些特性。因此,这个

    [阅读更多...]
  • 关于MapReduce5 – 一些有用的特性

    2015年9月16日 作者:白42
    暂无评论

    提交作业到队列 用户将作业提交到队列。队列是作业的集合,允许系统添加特定的功能,比如,队列通过ACL决定哪些用户可以提交作业。通常主要由Hadoop调度器使用队列。 Hadoop的配置信息使用了一个单

    [阅读更多...]
  • 关于MapReduce4 – 作业的输入输出

    2015年9月8日 作者:白42
    暂无评论

    作业的输入 InputFormat InputFormat描述了MapReduce作业的输入规范。 MapReduce框架根据MapReduce作业的InputFormat来做这些事情: 校验作业的输

    [阅读更多...]
  • 关于MapReduce3 – 作业的配置和执行

    2015年9月6日 作者:白42
    暂无评论

    配置 一个Job就表示了一个MapReduce的作业配置。 Job是用户向Hadoop框架描述一个MapReduce作业如何执行的最主要的接口。框架会尽力按Job的描述去忠实地执行一个作业,但是: 一

    [阅读更多...]
  • 关于MapReduce2 – Job主体

    2015年9月4日 作者:白42
    暂无评论

    这一部分内容会适当深入说明用户即将面对的MapReduce框架的各个环节。这有助于用户从一个更细的粒度地去实现、配置、调优作业。 我们先看看Mapper和Reducer接口。通常应用程序实现这两个接口

    [阅读更多...]
  • 关于MapReduce1 – QuickStart

    2015年9月2日 作者:白42
    暂无评论

    概述 Hadoop Mapreduce是一个简单易用的框架。基于MapReduce写出来的程序能够运行在由上千台商用机器组成的大型集群上,以一种可靠的容错的方式并行处理T级别的海量数据。 一个MapR

    [阅读更多...]
第 1 页,共 1 页1

文章归档

  • 2019年十二月
  • 2019年十一月
  • 2019年十月
  • 2019年九月
  • 2019年八月
  • 2019年七月
  • 2019年六月
  • 2019年五月
  • 2019年四月
  • 2019年三月
  • 2019年二月
  • 2019年一月
  • 2018年十二月
  • 2018年十一月
  • 2018年十月
  • 2018年九月
  • 2018年七月
  • 2018年五月
  • 2018年四月
  • 2018年三月
  • 2018年二月
  • 2018年一月
  • 2017年十二月
  • 2017年十一月
  • 2017年十月
  • 2017年九月
  • 2017年七月
  • 2017年六月
  • 2017年五月
  • 2017年四月
  • 2017年三月
  • 2017年二月
  • 2017年一月
  • 2016年十二月
  • 2016年十一月
  • 2016年十月
  • 2016年九月
  • 2016年八月
  • 2016年七月
  • 2016年六月
  • 2016年五月
  • 2016年四月
  • 2016年三月
  • 2016年二月
  • 2016年一月
  • 2015年十二月
  • 2015年十一月
  • 2015年十月
  • 2015年九月
  • 2015年八月
  • 2015年七月
  • 2015年四月

友情链接

  • robin's note
  • 我的GIT地址

我的专题

  • Memory Analyzer教程
  • scala学习手账

功能

  • 登录
  • 项目feed
  • 评论feed
  • WordPress.org

标签云

BeautifulSoup cookie Fork/Join git gradle hadoop HBase HeapDump high level consumer HttpClient https IDEA ignore jenkins JMeter kafka lambda mapreduce MAT Metrics MockMVC mysql MySQL分区 PerfMon PyMySQL scala simple consumer source Spark调优 spring SpringBootTest SSL test TLS yarn 乱码 分区 剪贴板 单节点 多线程 方法引用 测试 爬虫 索引 邮件
Theme zAlive by zenoven.
  • 冀ICP备15004595号-1