当前位置: 首页>>hadoop 1.0>> 阅读正文

Hadoop权限管理

Category: hadoop 1.0 View: 28,344 Author: Dong
, ,

  • 评论 (6)
  • 引用通告 (3)
发表评论 发起引用

  • 1楼嘉谟 回复

    Post: 2011-09-21 15:39

    最近面试总是遇到分布式文件系统的问题。自己只看了看googlefs的一些框架。一知半解的,怎么接触实在的分布式系统。可以训练。(我自己只是本科 ,表示没有实验室)

    [回复]

  • 2楼woodpig 回复

    Post: 2012-09-03 08:59

    请教个问题:单个队列均支持优先级和FIFO调度方式
    这个是通过哪个属性来配置,谢谢

    [回复]

    Dong 回复:

    官方文档有说明。

    [回复]

  • 3楼啊菠萝77 回复

    Post: 2012-12-12 08:56

    请教问题,先谢谢啦!
    1. 要使得只有一部分用户能向某个queue提交Job,只需要配置mapred.acls.enabled和mapred.queue.my_queue.acl-submit-job就可以了吗?
    2. 如果是,那么是在jobtracker那台机器上配置,还是在hadoop cluster的所有机器都要配置?
    3. 需要重启哪些service使之生效呢?

    [回复]

  • 4楼Kevin Wang 回复

    Post: 2013-04-19 08:49

    董哥
    有一个小问题需要请教。
    security.client.protocol.acl ACL for ClientProtocol 可以控制用户对hdfs精确到 只读,读写这类的权限么。十分感谢

    :-)

    [回复]

    Dong 回复:

    不可以,只是粗粒度控制。这种细粒度还需采用HDFS本身的类似linux的访问控制。

    [回复]

  • 5楼和谐的小冬瓜 回复

    Post: 2013-05-05 13:07

    请问在提交作业的时候如何设置作业的优先级?如这种方式的 hadoop jar ../hadooptest/hadoop-0.20.2-examples.jar wordcount in out

    [回复]

    Dong 回复:

    example中的wordcount是不可以直接设置优先级的,它不支持-D参数,如果想支持,你需要自己修改和重新编译代码,其他作业支持,可以直接在作业名后面加参数: -D mapred.job.priority=NORMAL,当前优先级有5个,默认是NORMAL,还有VERY_HIGH,HIGH, LOW, VERY_LOW

    [回复]

  • 6楼roadsign 回复

    Post: 2013-05-21 03:05

    董老师,您好
    想向您请教一下关于作业优先级的问题。。如何通过配置文件更改某个作业的优先级,而不用重启jobtracker呢?计算调度器可以么?mesos可以么? 另外这个priprity 可不可以写在fair-scheduler.xml文件里呢?该怎么写呢?

    真心感谢您了!!!

    [回复]

    Dong 回复:

    优先级是每个作业单独配置的,与jobtracker无关,用户提交作业时,指定该作业的优先级。

    [回复]

发表评论