【原】centos6.5下cdh4.6 Oozie安装-白红宇

【原】centos6.5下cdh4.6 Oozie安装

阅读量：6682 次

发布时间：2019-06-25

本文共 3473 字，大约阅读时间需要 11 分钟。

0、oozie只需安装在一台服务器上，这里选择在namenode上来安装；安装用户为cloud-user

1、安装Oozie包：

sudo yum install -y oozie oozie-client

2、对于yarn来说，需要修改/etc/oozie/conf/oozie-env.sh中：

CATALINA_BASE=/usr/lib/oozie/oozie-server

3、配置mysql：

yum install -y mysql-server

创建数据库：

mysql -u root -p

mysql> create database oozie;

mysql> grant all privileges on oozie.* to 'oozie'@'localhost' identified by 'oozie';

mysql> grant all privileges on oozie.* to 'oozie'@'%' identified by 'oozie';

mysql> exit

4、配置oozie-site.xml:

1 
      
        2      
       
        oozie.service.JPAService.jdbc.driver
        3      
       
        com.mysql.jdbc.Driver
        4 
       5 
      
        6      
       
        oozie.service.JPAService.jdbc.url
        7      
       
        jdbc:mysql://10.0.0.2:3306/oozie
        8 
       9 
      
       10      
       
        oozie.service.JPAService.jdbc.username
       11      
       
        oozie
       12 
      13 
      
       14      
       
        oozie.service.JPAService.jdbc.password
       15      
       
        oozie
       16 
      17 
      
       18      
       
        oozie.action.mapreduce.uber.jar.enable
       19      
       
        true
       20 
      21 
      
       22      
       
        oozie.service.HadoopAccessorService.supported.filesystems
       23      
       
        hdfs,viewfs
       24 
      25   
      
       26      
       
        oozie.service.ProxyUserService.proxyuser.cloud-user.hosts
       27      
       
        *
       28 
      29  
      
       30      
       
        oozie.service.ProxyUserService.proxyuser.cloud-user.groups
       31      
       
        *
       32

5、拷贝JDBC Driver：

sudo cp /usr/share/java/mysql-connector-java.jar /var/lib/oozie

sudo cp /usr/lib/hadoop/lib/hadoop-lzo-cdh4-0.4.15-gplextras.jar /var/lib/oozie

sudo cp /usr/lib/hadoop/lib/hadoop-lzo.jar /var/lib/oozie

6、创建oozie 数据库scheme,这一步骤需要root来执行：

su -

　　/usr/lib/oozie/bin/ooziedb.sh create -sqlfile oozie-create.sql

/usr/lib/oozie/bin/ooziedb.sh create -run

7、使能web console：

wget

　　sudo mv /var/lib/oozie/

cd /var/lib/oozie/ && sudo unzip

　　sudo chown -R oozie:oozie /var/lib/oozie/

8、安装Oozie ShareLib：

sudo -u hdfs hadoop fs -mkdir /user/oozie

sudo -u hdfs hadoop fs -chown oozie:oozie /user/oozie

mkdir /tmp/ooziesharelib

cd /tmp/ooziesharelib

tar xzf /usr/lib/oozie/oozie-sharelib-yarn.tar.gz

sudo -u oozie hadoop fs -put share /user/oozie/share

9、启动服务：

sudo service oozie start

10、测试map-reduce：

　　添加/etc/hadoop/conf/core-site.xml

1 
         
           2    
          
           hadoop.proxyuser.oozie.hosts
           3    
          
           10.0.0.2
           4 
          5 
         
           6    
          
           hadoop.proxyuser.oozie.groups
           7    
          
           *
           8