为何需要重启node manager

tencentyun / hadoop-cos

hadoop-cos（CosN文件系统）为Apache Hadoop、Spark以及Tez等大数据计算框架集成提供支持，可以像访问HDFS一样读写存储在腾讯云COS上的数据。同时也支持作为Druid等查询与分析引擎的Deep Storage

MIT License

83 stars 50 forks source link

Closed LazWorm closed 6 months ago

LazWorm commented 6 months ago

从文档来看，cos distcp以及hadoop cos相关的包都是放在hadoop客户端的，distcp应该是由客户端发起，为何需要重启node manager，重启node manager会影响到客户端加载jar包吗？还是说我的理解出错了？谢谢

yuyang733 commented 6 months ago

原则上应该是不需要重启 NM 的，只是避免某些情况，hadoop-cos 的相关依赖包没有加载到 NM 进程的 classpath 中的情况。