java.lang.NoSuchMethodError: org.yaml.snakeyaml.LoaderOptions.setMaxAliasesForCollections(I)V的解决
10:01:39.361 DEBUG org.springframework.boot.diagnostics.LoggingFailureAnalysisReporter - Application failed to start due to an exception java.lang.NoSuchMethodError: org.yaml.s...
SpringCloud 2020.x.x工程bootstrap引导配置不生效的解决方案
关注公众号 风色年代（itfantasycc） 500G Java微服务资料合集送上~ 注意：2020版本以后，添加spring-cloud-context是没有用的，因为官方重构了bootstrap引导配置的加载方...
记Spark on Yarn集群错误汇总
我们经常使用Spark on yarn的模式进行开发和任务调度，但是常常会出现各种错误。 本文将这些问题汇总并...
spark遇到的一些问题及其解决办法
1. ERROR org.apache.spark.storage.DiskBlockObjectWriter: Uncaught exception while reverting partial writes to file /home/work/hdd9/yarn/ttttt-hadoop/nodemanager/usercache/s_sa...
spark常见问题处理
1、spark thriftserver报以下错误，其他诸如hive/sparksql等方式均正常 ERROR ActorSystemImpl: Uncaught fatal error from thread shutting down ActorSystem java.lang.OutOfMemoryErr...
org.apache.spark.SparkException: Task not serializable
前言 本文隶属于专栏《Spark异常问题汇总》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！ 本专栏目录结构和参考文献请见 Spark异常问题汇总 ...
如何查看Spark日志与排查报错问题
一、各界面说明 1.1、查看YARN页面的driver日志 可以在右侧搜索框中填对应application号找到任务，然后点击对应的application号链接，如下图所示： 这样会进入该application的信息界面...
Spark常见错误剖析与应对策略
问题一： 日志中出现：org.apache.spark.shuffle.MetadataFetchFailedException: Missing an output location for shuffle 0 原因分析： shuffle分为shuffle write和shuffle read两部...
关于Eclipse编译运行MapReduce程序报错问题的解决
根据http://dblab.xmu.edu.cn/blog/hadoop-build-project-using-eclipse/进行下载安装 问题1：安装好后，关闭welcome界面后，没有DFS Location。经查询，是Hadoop-Eclipse-Plugin插件安装失...
Hadoop安装好之后使用jar运行mapreduce内置程序的时候报错
//20210309 写在前面：安装好hadoop之后，试着运行mapreduce内置的pi程序，发现报错，在此记录一下排除并修复bug的过程 正文 问题起因：mapreduce运行内置pi程序的时候报出如下错...