Kngines`Blog

存在感从来不是别人给的,只有自己太过弱小,才没有足够的分量存在于世界上!...

springboot-mybatis-demo(学习篇)

写在前面 在毕业后(2017.6)任职 大数据研发工程师这段时间里,主要使用 Python 进行数据处理与分析工作。java在日常开发中逐渐被边缘化了,,, 最近的一段时间里,愈发认识到,很有必要拾起曾经自己有些蹩脚的Java开发技能。 毕竟暂时还不能为了一条小河,而放弃一片大海! 结合个人经...

2018-12-07 17:35:09

阅读数:29

评论数:0

idea访问镜像版mysql(实验篇)

写在前面 已安装CentOS 7以上Linux虚拟机。 不想在本地安装mysql, 防止本机环境比较臃肿。 正好通过之前搭建的 Docker 环境,拉取mysql最新镜像并运行容器即可。 ,,, 省去了很多麻烦,,, 具体流程 mysql 官方镜像简介 查看 mysql 镜像 docke...

2018-12-07 14:35:12

阅读数:80

评论数:0

行政区划-基础数据处理

写在前面 在算法研发过程中,通常需要各类的基础数据。 例如,下文中将要提到的行政区划编码与行政区划中文名。 针对基础数据,如果处理不好,可能会对算法结果产生意想不到的影响。 其中,行政区划翻译表中缺少地级市等行政编码,直接导致证件轨迹统计补全等问题,从而影响算法的准确性等 行政区划 ...

2018-12-05 17:42:59

阅读数:27

评论数:0

VMware虚拟机不显示ipv4(无网络)

问题场景 运行虚拟机,执行 ifconfig 查看 IPv4, 以便使用 XShell 进行连接操作。 ifconfig 命令返回结果只包含 IPv6,详细如下图: 即,无网络。通过浏览器访问网络即可验证。 尝试方案 Ubuntu: VMware中ifconfig命令不显示ipv4的一种...

2018-11-17 15:41:13

阅读数:58

评论数:0

iptables: No chain/target/match by that name.

问题描述 重设宿主机网关、重启宿主机 network . docker 容器处于运行状态,同网段机器不能访问 . 宿主机执行开放端口命令,提示如下: [root@localhost ~]# /sbin/iptables -A INPUT -p tcp --dport 8686 -j ACCEP...

2018-11-09 18:06:21

阅读数:31

评论数:0

docker镜像基础: helloworld.war包镜像(上)

写在前面 基于 helloworld.war 包,制作 helloworld 镜像 熟悉 dockerfile 编写 验证 commit 提交镜像失败问题 cp web项目至容器后,不能commit生成最新镜像(volume导致) 实验素材 helloworld.war jdk-8u...

2018-11-04 18:07:50

阅读数:161

评论数:0

简单Web 项目(基础): helloworld

写在前面 简单Web项目, helloworld, 由于网速等问题,非Maven(下载jar 包太慢,另,大财小用) 用于制做 Docker镜像 测试Web项目,具体制作过程将后续出系列文章 另,虽简单,但是真心找了很久! 废了很大劲,没找到直接可利用的 ! 代码框架 Myeclipse ...

2018-11-04 15:50:30

阅读数:112

评论数:0

CentOS 7: Restarting network (via systemctl): Job for network.service failed

写在前面 本机: 无线网络 虚拟机: 桥接网络 虚拟机与主机网络不通。 解决思路尝试 重新设置"虚拟机设置 – 网络适配器 – 桥接模式" 重启虚拟机电脑 重启虚拟机网络 重启失败, 具体提示信息如下图所示: ...

2018-11-03 17:01:10

阅读数:277

评论数:0

Docker(一) Standard_init_linux.go:190: exec user process caused “exec format error

写在前面 最近需要将公司 Web项目 制成Docker镜像,大四实习时接虽触过(可以吹牛的水平),仅限于皮毛而已. 开始后续采坑工作. 问题记录 run.sh 具体内容 source /etc/profile sh /data1/apache-tomcat-7.0.91/bin/cata...

2018-10-21 16:51:18

阅读数:1398

评论数:0

Error:could not open '...jvm.cfg' (高效)

eclipse 运行报错 错误提示如下 原因分析 提示路径下的 jre (java运行环境) 文件夹不存在,eclipse 找不到配置下的jre,抛出异常。 解决方法 复制 JDK 路径下的 jre 文件夹 粘贴到 错误提示 路径即可。 例如,本例中,将D:\Program Fil...

2018-10-15 15:04:16

阅读数:30

评论数:0

Error in loadNamespace(i, c(lib.loc, .libPaths()), versionCheck = vI[[i]]) : 'digest'

α 写在前面 如何利用R语言进行有效数据分挖掘 eclipse + StatET 实际开发中感觉有些繁琐 R语言开发工具之eclipse+StatET Jupyter + R 推荐 Jupyter 安装 R内核 β 问题描述 基于Jupyter,R语言开发过程中,通过 i...

2018-10-10 15:20:42

阅读数:314

评论数:0

Python性能优化技巧(一)

写在前面 运行环境 jupyter 最近在处理大数据量问题,强化下Python性能优化方面的能力。 个人总结便于后续掌握与使用,仅供参考。 后续待更( 深入学习 ) … 1. 循环之外能实现逻辑,不放在循环内处理 [2.22倍] : a = range(10000) size_a = ...

2018-10-08 17:43:02

阅读数:24

评论数:0

jupyter启动闪退,错误日志(windows)

闪退问题 : Windows 安装Anaconda 后,总是不能正常启动,总是异常闪退。 卸载后重新安装,启动失败。 使用管理员权限,启动失败。 注释: 当然,如果可以打印错误日志,那问题就很容易解决了。 另,我这里不是启动路径引起的问题(大多数网文提供的答案是路径问题)。 附,该问题遗...

2018-09-28 10:26:54

阅读数:125

评论数:0

gpx文件解析 Demo

GPX (the GPS Exchange Format) WHAT IS GPX? GPX (the GPS Exchange Format) is a light-weight XML data format for the interchange of GPS data (waypoi...

2018-07-13 00:49:00

阅读数:914

评论数:0

ERROR: Can't get master address from ZooKeeper; znode data == null when using Hbase shell(单机版,HBase)

HBase实验 学习HBase 基础语法。 百度了很多 CSDN, 然而并没有解决我的问题。 文章记录HBase 单机版实验过程,并配置Web UI界面 安装过程 apache.hbase.1.2.6 下载解压至Linux hbase-site.xml 配置 &am...

2018-04-17 23:20:15

阅读数:430

评论数:0

hadoop文件上传下载(java实现工具类HDFSUtil)

HDFSUtil HDFS 基础开发,待补充、重构、优化 实验环境 hadoop 伪分布式环境 将eclipse根目录下local.txt文件上传至HDFS 将HDFS系统中local.txt文件下载至eclipse根目录下 代码 package Utils; impo...

2018-04-16 00:01:43

阅读数:825

评论数:0

KettleDatabaseException: Error occurred while trying to connect to the datab

Kettle(ETL)工具使用 熟悉大数据日常开发工具. Kettle 一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,数据抽取高效稳定。 ETL : EXTRACT(抽取)、TRANSFORM(转换)、LOAD(加载)的简称,实现数据从多个异构数据...

2018-04-15 12:56:47

阅读数:478

评论数:0

org.apache.spark.sql.AnalysisException: cannot resolve '`id`' given input columns

场景描述 Spark 获取MySQL数据并持久化入 json、parquet文件过程记录分析 解析异常 具体原因待分析 Exception in thread "main" org.apache.spark.sql.AnalysisException:...

2018-04-14 22:59:47

阅读数:2780

评论数:0

Hadoop实战-MR倒排索引(三)

场景描述 通过切入具体示例代码,解决问题,从而积累 Hadoop 实战经验。 倒排索引,源于实际应用中需要根据属性的值来查找记录,通过倒排索引,可以根据单词快速获取包含这个单词的文档列表。 实验数据 输入 tom,LittleApple jack,YesterdayOnceMo...

2018-04-11 22:58:11

阅读数:135

评论数:0

master: ssh: connect to host master port 22: Connection refused

场景描述 本地 SecureCRT 连接虚拟机中伪分布式式Hadoop 环境,进行中,突然断电、断网,虚拟机 IP 地址更改(与本机不在同一网段)。 修改无线连接,恢复至同一网段 SecureCRT 连接 虚拟机服务器 失败 本机 ping 虚拟机IP 不通(未知主机) 虚拟机 ping 本...

2018-04-11 21:24:14

阅读数:152

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭