Ubuntu16.04 + CDH5.14 + saprk2 踩坑实录

1.配置Java环境。

2.修改主机hosts。

3.免密登陆。

4.下载安装包.

5.坑.

• 1. JAVA_HOME.即使设置的很对还是报错。 改链接。 http://www.aboutyun.com/thread-23764-1-1.html
     mkdir –p /usr/java
     ln -s /usr/lib/jdk/jdk1.8.0_181 /usr/java/default
• 2. hue数据库访问。 python的锅。需要装东西 https://stackoverflow.com/questions/5178292/pip-install-mysql-python-fails-with-environmenterror-mysql-config-not-found
     apt install python-dev
     apt install python-mysqldb
• 3. 创建失败 no user cloudera-scm。新开用户。
• 4. ACL问题
     改ACL
• 5. permissions 问题
     hdfs 用户修改所有权限777
• 6. spark2
     安装最新版本即可。
     • java 包错误。Error: A JNI error has occurred, please check your installation and try again
       Exception in thread “main” java.lang.NoClassDefFoundError: org/slf4j/Logger
       修改spark-env.sh
       https://www.jianshu.com/p/6acd6419f697

总结：多google 多看官方文档.