数据湖的环境共享datalake元数据共享方案

网友投稿 260 2022-11-23

数据湖的环境共享datalake元数据共享方案

一、hdfs配置:

进入hdfs---配置---搜:hdfs-site.xml 的 HDFS 服务高级配置代码段(安全阀)

xml的配置hdfs以下信息:

xml信息

dfs.client.failover.proxy.provider.offline org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider dfs.client.failover.proxy.provider.nameservice1 org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider dfs.ha.automatic-failover.enabled.offline true dfs.nameservices offline,nameservice1 dfs.ha.namenodes.nameservice1 namenode223,namenode305 dfs.namenode.rpc-address.nameservice1.namenode223 prod-data-lake-002:8020 dfs.namenode.servicerpc-address.nameservice1.namenode223 prod-data-lake-002:8022 dfs.namenode.http-address.nameservice1.namenode223 prod-data-lake-002:9870 dfs.namenode.https-address.nameservice1.namenode223 prod-data-lake-002:9871 dfs.namenode.rpc-address.nameservice1.namenode305 prod-data-lake-003:8020 dfs.namenode.servicerpc-address.nameservice1.namenode305 prod-data-lake-003:8022 dfs.namenode.http-address.nameservice1.namenode305 prod-data-lake-003:9870 dfs.namenode.https-address.nameservice1.namenode305 prod-data-lake-003:9871 dfs.ha.automatic-failover.enabled.nameservice1 true

4.搜hdfs-site.xml 的 HDFS 复制高级配置代码段(安全阀),占击以xml查看。

6.搜hdfs-site.xml 的 HDFS 客户端高级配置代码段(安全阀),点南以xml查看

8.hdfs-site.xml 的 HttpFS 高级配置代码段(安全阀)

10.搜hdfs-site.xml 的NameNode 高级配置代码段(安全阀)

以上hdfs配置完成。

二、配置mysql数据库

输入datalke(数据湖的mysql元数据的账号和密码信息)

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:java awt生成签名图片如何消除锯齿化
下一篇:Java匿名内部类方法调用
相关文章

 发表评论

暂时没有评论,来抢沙发吧~