hue(05)、Hue集成mysql、oracle等数据库


声明:本文转载自https://my.oschina.net/zss1993/blog/1625379,转载目的在于传递更多信息,仅供学习交流之用。如有侵权行为,请联系我,我会及时删除。

        在 hue(04)、Hue集成Hive数据仓库 中我们在hue中集成hive数据仓库,替代了hive自己的hwi服务,可以很方便的在hue中进行hive的sql查询等操作。本文我们将在hue中集成mysql、oracle等数据库,这样就可以在hue中对数据存储服务中的数据进行操作。

一、环境准备

         1.hadoop集群服务

         2.hive-mysql元数据库服务

         3.hive服务

         4.hue4.1服务

         5.mysql数据库服务

         6.oracle数据库服务

二、集成准备

         1.启动hadoop集群

            启动hadoop三台机器,然后在主节点机器上启动hadoop集群:start-all.sh

           

          2.启动Hiveserver服务

             在hive机器上启动hiveserver服务:hive --service hiveserver2 或者hive --service hiveserver2 &

          3.启动Hive Metastore服务

            在hive机器上启动Hive Metastore服务:hive --service metastore或者hive --service metastore &    

             

            看到如下信息,说明启动完成:

             

         4.启动Hue服务

             在hue的/bulid/env/bin/目录下执行./supervisor 命令启动hue服务

            

          5.验证启动

              在终端输入jps -ml查看:

              

             可以看到hadoop集群个hive服务启动都正常

          6.启动数据存储服务

             分别启动需要hue集成的mysql、oracle等数据库服务

三、集成MySQL服务

         1.配置过程

         打开hue的/desktop/conf/目录下的 pseudo-distributed.ini文件        

          

         编辑pseudo-distributed.ini文件 ,找到[librdbms]这一节下的[[databases]],然后添加关于集成mysql

         服务的配置信息:

         [[[mysql]]]
         nice_name=db_mysql
         engine=mysql
         host=hdpc05
         port=3306
         user=root
         password=123456

        

        2.验证过程

        如果之前hue服务是启动的,先重启hue服务,然后登陆hue服务控制台页面:

       

        点击mysql标签,可以看到成功集成了mysql数据库服务

               

       3.简单使用

       双击某个数据库可以看到库中的表或者右击选择Open in Browser在右边的Table Browser视图中,可

      以看到该数据库下的表:

      

       或

      

       在Table Browser视图中选择表点击view可以查看表结构信息和表数据信息:

      

      可以看到表结构和部分表数据,更多的操作点击其他操作标签即可,这里不过多演示

         

四、集成Oracle服务

         1.配置过程

         打开hue的/desktop/conf/目录下的 pseudo-distributed.ini文件        

          

         编辑pseudo-distributed.ini文件 ,找到[librdbms]这一节下的[[databases]],然后添加关于集成

         oracle服务的配置信息:

         [[[oracle]]]
         nice_name=db_oracle
         engine=oracle
         host=192.168.1.102
         port=1521
         user=***
         password=***

         配置完成后,重启hue服务,我们登陆hue控制状态点击oracle存储查看,控制台提示如下错误:

         Error loading cx_Oracle module: No module named cx_Oracle

        

         这是因为hue是python写的,所以使用python连接oracle时需要cx_Oracle这个模块,安装这个还需

        要配置oracle官方的两个客户端文件,下面我们开始配置过程:

        1>.下载oracle连接需要的两个客户端文件

            instantclient-basic-linux.x64-12.2.0.1.0.zip

            instantclient-sdk-linux.x64-12.1.0.2.0.zip

            下载地址:http://www.oracle.com/technetwork/topics/linuxx86-64soft-092277.html

        2>.使用ftp上传到hue的oracle目录下

          

           上传的文件如下:

          

           解压两个文件都到instantclient12.2中:

          

           全部解压后文件如下:

          

        3>.添加环境变量

           使用命令vi  /etc/profile 写入以下配置:

            #Oracle client Profile
            export ORACLE_HOME=/home/hue-branch-4.1/oracle/instantclient12.2/
            export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$ORACLE_HOME

           

            使用source /etc/profile使配置立即生效:

           

        4>.创建软连接

           ln -s libclntsh.dylib.11.1 libclntsh.dylib

           ln -s libocci.dylib.11.1 libocci.dylib

           ln -s libclntsh.so.11.1 libclntsh.so

          

       5>.安装cx_Oracle某块

          使用find / -name pip查找pip目录

         

          cd /home/hue-branch-4.1/build/env/bin

         

          然后执行./pip install cx_Oracle安装

         

         至此cx_Oracle某块就安装完成了

         2.验证过程

            配置完成后我们登陆hue控制台点击oracle标签,控制台提示‘name’的错误:

           

           这是因为配置oracle时少一个name的参数:

          

          配置完成后我们重启hue服务查看hue控制台:

         

          此时就完成了hue对oracle的集成配置,具体的使用和mysql差不多,同上面内容

五、总结

         本文是在hue中集成mysql和oracle服务,mysql的集成相对简单,oracle的集成复杂一点,需要注意地方比较多,集成过程中遇到的坑都写在文中了,希望能帮到大家。

本文发表于2018年02月27日 18:31
(c)注:本文转载自https://my.oschina.net/zss1993/blog/1625379,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。如有侵权行为,请联系我们,我们会及时删除.

阅读 8275 讨论 1 喜欢 2

抢先体验

扫码体验
趣味小程序
文字表情生成器

闪念胶囊

你要过得好哇,这样我才能恨你啊,你要是过得不好,我都不知道该恨你还是拥抱你啊。

直抵黄龙府,与诸君痛饮尔。

那时陪伴我的人啊,你们如今在何方。

不出意外的话,我们再也不会见了,祝你前程似锦。

这世界真好,吃野东西也要留出这条命来看看

快捷链接
网站地图
提交友链
Copyright © 2016 - 2021 Cion.
All Rights Reserved.
京ICP备2021004668号-1