- 博客(2)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 开启spark dynamicallocation，任务一直在等待，信息为inital job has not accepted anyresources
版本：spark2.4.8模式：spark on yarn client提交：spark sql客户端执行sql不开spark dynamicallocation相关配置，任务能完全运行成功，开启spark dynamicallocation配置之后，任务一直在等待，并重复上面的字样，刚开始以为资源不够，但是仔细看了配置，是足够的。继续查看container log，发现另一个报错The auxService:spark_shuffle does not exist解决方案如下：
2021-09-18 11:05:41
247
原创 spark history web访问报错java.lang.NoSuchMethodError: javax.ws.rs.core.Application.getProperties()
版本：spark2.4.8模式：spark on yarn具体错误：访问history-web的时候，一片空白，查不出配置在hdfs的log，仔细看了conf下的配置没问题，然后浏览器F12发现接口方法报错，信息为java.lang.NoSuchMethodError: javax.ws.rs.core.Application.getProperties()Ljava/util/Map;搜索了这个方法来源于jersey-core。由于是spark on yarn，yarn的jersy-cor..
2021-09-18 10:03:22
861
1
jersey-core-1.9.jar
解决java.lang.NoSuchMethodError: javax.ws.rs.core.Application.getProperties()Ljava/util/Map;
已经打包好的，放心使用，可反编译查看下
2021-09-18
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人