尚硅谷电影推荐系统搭建遇到的问题及知识

腾讯云Superset问题（需更新数据库用户）

登录master节点： cd /usr/local/service/superset/bin export
PYTHONPATH=/usr/local/service/superset/conf ./superset db upgrade
./superset fab create-admin ./superset init 这样试试

./mongod的时候提示找不到共享库文件libcrypto.so.10

linux下安装jiava
你还在ping吗？7种进阶方法让你快速测试端口连通性
linux 内存清理/释放命令
Linux - 设置帮助文件为中文
3种方法更改Linux系统的主机名(hostname)
mysql开启tab自动补全功能

win终端Terminal常用快捷键

linux系统中root用户被提示：Operation not permitted

Hadoop

Shuffle是什么？

在Hadoop中数据从Map阶段传递给Reduce阶段的过程就叫Shuffle，Shuffle机制是整个MapReduce框架中最核心的部分。

ES问题

启动前配置文件中的 network.host 属性设置为 0.0.0.0 后才能启动

Zookeeper

如何彻底删除Kafka中的topic (marked for deletion)
彻底删除Kafka中的topic

Flume ng

解压.tar.gz出错gzip: stdin: not in gzip format tar: /Child returned status 1 tar: Error is not recoverable: exiting now

Kafka

Kafka配置说明-server.properties

Azkaban

compileTestJava 错误问题

Execution failed for task ‘:azkaban-exec-server:compileTestJava’.

> Compilation failed with exit code 1; see the compiler error output
for details.

-x test表示跳过测试

编译成功

其他

使用netstat、lsof查看端口占用情况
netstat
netstat用来查看系统当前系统网络状态信息，包括端口，连接情况等，常用方式如下：

netstat -atunlp,各参数含义如下:

-t : 指明显示TCP端口
-u : 指明显示UDP端口
-l : 仅显示监听套接字(LISTEN状态的套接字)
-p : 显示进程标识符和程序名称，每一个套接字/端口都属于一个程序
-n : 不进行DNS解析
-a 显示所有连接的端口
执行后得表格一目了然，就不做截图了，当然，在众多表目中找一个特定得，肯定不那么顺手，一般该指令会遇grep配合使用，比如查找端口22,就用netstat -tunlp | grep 22 或者干脆netstat -an | grep 22就可以了，查看其它端口类似，当然也可以通过端口状态查找即netstat -anp | grep TIME_WAIT，即只会显示含有TIME_WAIT字符串的条目

lsof
lsof的作用是列出当前系统打开文件(list open files)，不过通过-i参数也能查看端口的连接情况，-i后跟冒号端口可以查看指定端口信息，直接-i是系统当前所有打开的端口

lsof -i:22 #查看22端口连接情况，默认为sshd端口 如下图：

查看连接数

可以看到当前通过端口22连接到机器的一共有4个(主机名和ip已打码)，通过该命令就能清楚知道当前端口状态