hadoop基本运行

Hadoop运行模式:

本地 所有程序在一个JVM中运行
伪分布 多进程运行
分布 多机器

关键配置:

本地 不需要任何配置,采用默认值

伪分布

    core-site.xml    fs.defaultFS    hdfs://localhost/
    hdfs-site.xml    dfs.replication    1
    yarn-site.xml    yarn.resourcemanager.hostname    localhost
                            yarn.nodemanager.aux-services    mapreduce_shuffle

分布

    core-site.xml    fs.defaultFS    hdfs://master/
    hdfs-site.xml    dfs.replication    3(默认值)
    yarn-site.xml    yarn.resourcemanager.hostname    master
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 看到题目有没有一种高大上的感觉?毛线,当前是个人、是个公司都在说自己搞大数据,每天没有几个PB的数据入库,每天没有...
    丁小晶的晶小丁阅读 9,988评论 0 50
  • 目的这篇教程从用户的角度出发,全面地介绍了Hadoop Map/Reduce框架的各个方面。先决条件请先确认Had...
    SeanC52111阅读 5,706评论 0 1
  • 简述 hadoop 集群一共有4种部署模式,详见《hadoop 生态圈介绍》。HA联邦模式解决了单纯HA模式的性能...
    mtide阅读 14,531评论 8 20
  • 趴在鹅卵石铺就成的小路旁的草地上,将镜头伸入绿色中。眼前的嫩叶柔顺而不失果敢地挺着胸膛,展示着秋天里不灭的灵魂。
    武陵寺卫阅读 1,339评论 0 0
  • 书,是校园时代,大声朗读的语文课本;是无聊时候,消磨时间的言情小说;是正襟危坐,修身养性的经典名著......那么...
    庚翼阅读 2,958评论 1 2