qq_37797234的博客

maven添加仓库：<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd"> <modelVer

报错npm ERR! gyp ERR! stack Error: Can't find Python executable "D:\python\Python36\Python36", you can set the PYTHON env variable.解决方法：通过npm install -g cnpm --registry=https://registry.npm.taobao.org cnpm install

一、日志文件完整1、全量数据同步1、修改\canal.deployer-1.1.5\conf\example下的instance.properties通过以下三个配置实现canal全量数据同步# mysql日志文件canal.instance.master.journal.name=mysql-bin.000001# 获取日志的起始位置canal.instance.master.position=0# 获取日志的起始时间戳canal.instance.master.timestamp=16

Git第三方仓库安装方式（IUS）1.安装使用里面说的自动化安装脚本curl https://setup.ius.io | sh2.然后可以看到 git2u相关内容yum search git 3.执行安装，并查看下版本yum remove -y git | yum -y install git2u#或yum remove -y git | yum -y install git2224.检查git是否安装成功，和查看版本git --version...

在/sparkconf/spark-defaults.conf添加配置增加内存和核数spark.driver.memory 3gspark.executor.memory 2gspark.driver.cores 2spark.sql.broadcastTimeout=300 # 心跳检测间隔，以防数据量过大，超时报错

python环境：3.6.8import csvimport jiebadef lst_strip(lst):#去掉多余的空格。如果 a=[' 123','ttt,'vv ','',' ']，如何实现a=['123','fuck','cvm'],因为strip()是对字符串操作，现在是一个list L=[] for v in lst: v = str.strip(v) if v: L.append(v) return

编码格式参数为client_encoding=“UTF-8”连接时如下：import psycopg2con = psycopg2.connect(dbname="test", user="user", password="password", port="5678", host="192.168.56.45", client_encoding="UTF-8")client_encodingThis sets the client_encoding configuration parameter

清除命令如下：yum remove mysql* mariadb* -y rm /etc/my.cnf rm -rf /var/lib/mysql rm -rf /usr/share/mysql rm -rf /usr/lib/mysql #查询mysql服务

在 spark的conf下 创建 hive-site.xml不过在CDH中，hive是默认为hive on spark的，而不是mr新增下面内容：<configuration> <property> <name>hive.metastore.client.connect.retry.delay</name> <value>5</value> </property> <

转载于：https://blog.csdn.net/fjz_lihuapiaoxiang/article/details/83622934在eclipse环境下使用@Slf4j注解时，出现了log cannot be resolved这个异常。经过排查发现是缺少lombok插件的问题。解决方式当然是在eclipse中安装lombok插件啦。这里报错是因为没有lombok-1.16.20.jar这个插件下载完成以后，在eclipse的安装目录里找到eclipse.ini文件,E:\Tools\ecl

步骤打开cmd到达安装目录python setup.py buildpython setup.py install

1.制作requirement.txt　　pip freeze > requirement.txt　　内网安装外部依赖包办法：例如:安装pytest包得时候会顺带安装pytest依赖包离线下载安装包下载单个离线包 - pip download -d your_offline_packages <package_name>批量下载离线包 - pip download -d your_offline_packages -r requirements.txt离线安装安装单个离线

一、Atlas2.1.0编译编译环境：环境准备，jdk8_151以上，maven3.6.6下载源码包：国内下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/atlas/2.1.0/官方下载地址：http://atlas.apache.org/Downloads.html编译：解压源码包，进入解压后源码包的目录。cd /optsudo tar -zxvf apache-atlas-2.1.0-sources.tar.gz #重命名mv

独立集群模式架构图：环境要求Linux：RHEL (Tarball)：Red Hat Enterprise Linux（红帽企业版）CentOS 6.7+ and 7.3+ (RPM))（在使用RHEL or CentOS机器上使用Dremio Linux RPM installer可以部署）Java：jdk8浏览器：Google Chrome 54+、Microsoft Edge 14+（用于访问UI管理界面，Dremio UI 在 http://hostname:9047）Dremio

windows10家庭版装Hyper-V方法：pushd "%~dp0"dir /b %SystemRoot%\servicing\Packages\*Hyper-V*.mum >hyper-v.txtfor /f %%i in ('findstr /i . hyper-v.txt 2^>nul') do dism /online /norestart /add-package:"%SystemRoot%\servicing\Packages\%%i"del hyper-v.txtDi