数据湖的环境共享datalake元数据共享方案
一、hdfs配置:
进入hdfs---配置---搜:hdfs-site.xml 的 HDFS 服务高级配置代码段(安全阀)
xml的配置hdfs以下信息:
xml信息
dfs.client.failover.proxy.provider.offline
org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider
dfs.client.failover.proxy.provider.nameservice1
org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider
dfs.ha.automatic-failover.enabled.offline
true
dfs.nameservices
offline,nameservice1
dfs.ha.namenodes.nameservice1
namenode223,namenode305
dfs.namenode.rpc-address.nameservice1.namenode223
prod-data-lake-002:8020
dfs.namenode.servicerpc-address.nameservice1.namenode223
prod-data-lake-002:8022
dfs.namenode.http-address.nameservice1.namenode223
prod-data-lake-002:9870
dfs.namenode.https-address.nameservice1.namenode223
prod-data-lake-002:9871
dfs.namenode.rpc-address.nameservice1.namenode305
prod-data-lake-003:8020
dfs.namenode.servicerpc-address.nameservice1.namenode305
prod-data-lake-003:8022
dfs.namenode.http-address.nameservice1.namenode305
prod-data-lake-003:9870
dfs.namenode.https-address.nameservice1.namenode305
prod-data-lake-003:9871
dfs.ha.automatic-failover.enabled.nameservice1
true
4.搜hdfs-site.xml 的 HDFS 复制高级配置代码段(安全阀),占击以xml查看。
6.搜hdfs-site.xml 的 HDFS 客户端高级配置代码段(安全阀),点南以xml查看
8.hdfs-site.xml 的 HttpFS 高级配置代码段(安全阀)
10.搜hdfs-site.xml 的NameNode 高级配置代码段(安全阀)
以上hdfs配置完成。
二、配置mysql数据库
输入datalke(数据湖的mysql元数据的账号和密码信息)
版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。
暂时没有评论,来抢沙发吧~