亚洲激情专区-91九色丨porny丨老师-久久久久久久女国产乱让韩-国产精品午夜小视频观看

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

如何進行hue安裝以及hive hdfs oozie集成

發布時間:2021-10-19 17:28:51 來源:億速云 閱讀:156 作者:柒染 欄目:大數據

如何進行hue安裝以及hive hdfs oozie集成,相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。

[toc]

環境需求

  • jdk


  • maven


  • git


  • 第三方依賴 yum install -y gcc-c++ libxml2-devel.x86_64 libxslt-devel.x86_64 python-devel openldap-devel asciidoc cyrus-sasl-gssapi openssl-devel mysql-devel sqlite-devel gmp-devel libffi-devel npm 還有缺失什么可自行安裝


創建hue用戶和用戶組

groupadd hue

useradd -g hue hue

切換用戶并進入hue根目錄

su hue

cd ~

從git上拉取hue源碼

git clone https://github.com/cloudera/hue.git

進入hue-master目錄并編譯

cd hue-master

make apps 需要等待較長時間,若中間還缺少依賴可自行安裝

修改hue配置文件

vi /home/hue/hue-master/desktop/conf/pseudo-distributed.ini

時區

[desktop]

time_zone=Asia/Shanghai

用戶角色

[desktop]

server_user=hue

server_group=hue

default_user=hue

hdfs配置

[hadoop]

[[hdfs_clusters]]

fs_defaultfs=hdfs://集群名稱

webhdfs_url=http://hdfsMaster1:14000/webhdfs/v1

yarn配置

[hadoop]

[[yarn_clusters]]

[[[default]]]

resourcemanager_host=resourcemanager

resourcemanager_api_url=http://resourcemanager:8088

submit_to=True

proxy_api_url=http://172.19.131.104:8088

history_server_api_url=http://172.19.131.104:19888

database配置

(hue數據庫先創建好并授予權限給hue用戶) [database]

engine=mysql

host=mysqlhost

port=3306

user=hue

password=123456

name=hue

oozie配置(已默認可不配)

[oozie]

remote_data_dir=/user/hue/oozie/workspaces

enable_cron_scheduling=true

enable_document_action=true

liboozie配置

[liboozie]

oozie_url=http://master1:11000/oozie

beeswax配置(hive)

[beeswax]

hive_server_host=172.19.131.107

hive_server_port=10000

數據庫初始化

/home/hue/hue-master/build/env/bin/hue syncdb

/home/hue/hue-master/build/env/bin/hue migrate

運行

/home/hue/hue-master/build/env/bin/supervisor

問題解決

若hdfs路徑無法訪問

在hadoop的core-site配置文件下配置 hadoop.proxyuser.hue.groups=*

hadoop.proxyuser.hue.hosts=*

若hive數據庫無法訪問

可以在權限管理那里(本人用的是ranger)進行hive的數據庫授權

若oozie提交任務執行失敗

可查看MapReduce的日志,可能是當前用戶無法提交任務配置信息到yarn下的目錄

看完上述內容,你們掌握如何進行hue安裝以及hive hdfs oozie集成的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

hue
AI

屏南县| 资溪县| 江陵县| 乌什县| 肇州县| 营口市| 桑日县| 元阳县| 济南市| 武威市| 顺昌县| 阜康市| 华蓥市| 桦甸市| 夏河县| 青神县| 五大连池市| 宁城县| 永城市| 大化| 社会| 鱼台县| 广饶县| 湖南省| 眉山市| 丹寨县| 望都县| 南投县| 芷江| 视频| 肇州县| 郸城县| 寿宁县| 和林格尔县| 沁源县| 镇原县| 浦城县| 屯门区| 璧山县| 建平县| 德保县|