运行zeppelin 0.6.×时遇到问题:(0.7.*不需要下面的步骤的)
1. java.lang.NoSuchMethodError: org.apache.hadoop.tracing.SpanReceiverHost.get(Lorg/apache/hadoop/conf/
solution:
cd zeppelin-0.6.2-bin-all/lib
rm hadoop-annotations-×××.jar
rm hadoop-auth-×××.jar
rm hadoop-common-×××.jar
cp spark/jars/hadoop-annotations-×××.jar ./
cp spark/jars/hadoop-auth-×××.jar ./
cp spark/jars/hadoop-common-×××.jar ./
重启zeppelin 又出现下面问题:
2. Spark Error: Could not initialize class org.apache.spark.rdd.RDDOperationScope
solution:
cd zeppelin-0.6.2-bin-all/lib
rm jackson-annotations-×××.jar
rm jackson-core-×××.jar
rm jackson-databind-×××.jar
cp spark/jars/jackson-databind-×××.jar ./
cp spark/jars/jackson-core-×××.jar ./
cp spark/jars/jackson-annotations-×××.jar ./
再重启zeppelin 解决问题,删完拷完后一定要重启zeppelin
-----------------------------------------------------------------------------------------------------------------------------------------
zeppelin 加上用户名密码登入功能,需要修改配置
conf/shiro.ini [urls] 改成如下所示
[urls]
#/api/version = anon
/api/interpreter/** = authc, roles[admin]
/api/configurations/** = authc, roles[admin]
/api/credential/** = authc, roles[admin]
#/** = anon
/** = authc
在[users] 下添加用户名和密码和roles,roles 没啥用
在conf/zeppelin-site.xml
修改下面这项:
<property>
<name>zeppelin.anonymous.allowed</name>
<value>false</value>
<description>Anonymous user allowed by default</description>
</property>
修改完配置就得重启才能生效
分享到:
相关推荐
This book is based on the latest 2.0 version of Apache Spark and 2.7 version of Hadoop integrated with most commonly used tools. Learn all Spark stack components including latest topics such as ...
到目前为止,支持Hadoop,Spark,Hbase,Storm,Pig,Mahout,Phoenix,Kafka,Zeppelin,Zookeeper和Alluxio。 它当前支持在并行文件系统Lustre上运行,以及在任何通用网络文件系统上运行。 Slurm,Moab,Torque和...
大数据游乐场:通过Docker-compose与Hadoop,Hive,Spark,Zeppelin和Livy集群。 我希望能够轻松地处理各种大数据应用程序,即Amazon EMR中的那些应用程序。 理想情况下,这可以在一个命令中提出和拆除。 这就是这...
看不到源码docker-spark-hive-zeppelin 组件 Spark v.2.2.2 蜂巢 v.2.3.3 齐柏林飞艇 v.0.8.0 Hadoop 3.1.1 Traefik 1.6.5 支持的基础设施 Kubernetes(k8s) 支持 docker-compose Docker Swarm(长时间未测试) ...
• Apply Apache Spark in Elastic deployments using Jupyter and Zeppelin Notebooks, Docker, Kubernetes and the IBM Cloud • Understand internal details of cost based optimizers used in Catalyst, ...
Zeppelin目前已托管于Apache基金会,但并未列为顶级项目,可以在其公布的官网访问。它提供了一个非常友好的WebUI界面,操作相关指令。它可以用于做数据分析和可视化。其后面可以接入不同的数据处理引擎。包括Flink,...
Apply Apache Spark in Elastic deployments using Jupyter and Zeppelin Notebooks, Docker, Kubernetes and the IBM Cloud Understand internal details of cost based optimizers used in Catalyst, SystemML and...
Hadoop,Yarn,Spark,Hive,Zeppelin:正在运行,未优化。 我对任何反馈都很感兴趣。 快速开始 克隆项目 git clone https://github.com/kibatic/docker-single-node-hadoop.git 创建容器 docker-compose build ...
Spark培训资料库该存储库包含由dimajix进行的Spark和Hadoop培训的许多不同示例,练习和教程。 您随时可以在GitHub上找到最新版本https://github.com/dimajix/spark-training内容存储库包含不同类型的文档Spark / ...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...
此存储库最初是为了使用docker.io容器使用Hadoop,Hive和Spark创建一个具有1个主节点和2个工作节点的3节点hadoop集群。 您可以在此处阅读有关原始项目的更多信息: : 更新:感谢pedro-glongaron,该项目现在有1个...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...
通用 :一站式解决各个问题,ADHOC SQL查询,流计算,数据挖掘,图计算完整的生态圈。只要掌握Spark,就能够为大多数的企业的大数据应用场景提供明显的加速。存储层:HDFS作为底层存储,Hive作为数据仓库 (Hive ...