spark-shell 执行代码报错

spark-shell 执行代码val rdd2=rdd1.flatMap(_.split(" ")).map(x=>(x,1)).reduceByKey(_+_)  报错：

org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.ipc.StandbyException): Operation category READ is not supported in state standby

是在yarn上？哪个版本的

einhep 发表于 2016-5-31 11:39
是在yarn上？哪个版本的

基于zookeeper的standalone HA.

应该是你启用HA造成的，可能有些数据是在启用hdfs HA就已经存在了，启用了HA以后，元数据没有升级。

已解决了，在yun01-nn-01上使用hdfs dfsadmin -safemode get 查看，发现另一个master的safemode为on,将之改为off即可。