您好,登錄后才能下訂單哦!
如何進行hue安裝以及hive hdfs oozie集成,相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。
[toc]
jdk
maven
git
第三方依賴 yum install -y gcc-c++ libxml2-devel.x86_64 libxslt-devel.x86_64 python-devel openldap-devel asciidoc cyrus-sasl-gssapi openssl-devel mysql-devel sqlite-devel gmp-devel libffi-devel npm 還有缺失什么可自行安裝
groupadd hue
useradd -g hue hue
su hue
cd ~
git clone https://github.com/cloudera/hue.git
cd hue-master
make apps 需要等待較長時間,若中間還缺少依賴可自行安裝
vi /home/hue/hue-master/desktop/conf/pseudo-distributed.ini
[desktop]
time_zone=Asia/Shanghai
[desktop]
server_user=hue
server_group=hue
default_user=hue
[hadoop]
[[hdfs_clusters]]
fs_defaultfs=hdfs://集群名稱
webhdfs_url=http://hdfsMaster1:14000/webhdfs/v1
[hadoop]
[[yarn_clusters]]
[[[default]]]
resourcemanager_host=resourcemanager
resourcemanager_api_url=http://resourcemanager:8088
submit_to=True
proxy_api_url=http://172.19.131.104:8088
history_server_api_url=http://172.19.131.104:19888
(hue數據庫先創建好并授予權限給hue用戶) [database]
engine=mysql
host=mysqlhost
port=3306
user=hue
password=123456
name=hue
[oozie]
remote_data_dir=/user/hue/oozie/workspaces
enable_cron_scheduling=true
enable_document_action=true
[liboozie]
oozie_url=http://master1:11000/oozie
[beeswax]
hive_server_host=172.19.131.107
hive_server_port=10000
/home/hue/hue-master/build/env/bin/hue syncdb
/home/hue/hue-master/build/env/bin/hue migrate
/home/hue/hue-master/build/env/bin/supervisor
在hadoop的core-site配置文件下配置 hadoop.proxyuser.hue.groups=*
hadoop.proxyuser.hue.hosts=*
可以在權限管理那里(本人用的是ranger)進行hive的數據庫授權
可查看MapReduce的日志,可能是當前用戶無法提交任務配置信息到yarn下的目錄
看完上述內容,你們掌握如何進行hue安裝以及hive hdfs oozie集成的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。