在腾讯云环境下，dolphinscheduler调度sqoop脚本从mysql写数据到hive表报unKnowHostException和NullPointerException异常处理
在腾讯云环境下，dolphinscheduler海豚调度sqoop脚本可以正常从mysql消费数据到hive表中，但是DS的状态却显示为失败。看DS的运行日志，出现了空指针异常，获取应该的状态失败。查看DS的worker日志，发现DS每次是去连接host:8088获取应用的状态，而腾讯云的httpaddress端口为5004。解决方法：1、在DS的conf中的common.properties配置
在腾讯云环境下，dolphinscheduler海豚调度sqoop脚本可以正常从mysql消费数据到hive表中，但是DS的状态却显示为失败。
看DS的运行日志，出现了空指针异常，获取应该的状态失败。
查看DS的worker日志，发现DS每次是去连接host:8088获取应用的状态，而腾讯云的httpaddress端口为5004。
解决方法：
1、在DS的conf中的common.properties配置文件中加入配置resource.manager.httpaddress.port=5004
2、
将每个节点的DS的conf中common.properties配置文件中的这个配置的端口改成5004
如果修改完配置后，是通过DS自带的一键部署脚本install.sh来重新部署，需要修改install.sh脚本中的配置：
因为使用这个脚本重新部署的时候，这个参数会覆盖在common.properties中的配置。
魔乐社区（Modelers.cn) 是一个中立、公益的人工智能社区，提供人工智能工具、模型、数据的托管、展示与应用协同服务，为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作，由全产业链共同建设、共同运营、共同享有，推动国产AI生态繁荣发展。
更多推荐
1
0- 0
已为社区贡献1条内容
所有评论(0)