- 博客(8)
- 收藏
- 关注
RSS订阅翻译 2021-07-27
linux unknown filesystem type vboxsf1、在虚拟机当中执行sudo mount /dev/sr0 /media/cdrom2、cd /media/cdrom/ && sh ./VBoxLinuxAdditions.run3、reboot下虚拟机即可安装还会遇到内核的问题，解决方法如下：先 uname -r 看看内核版本然后：xxx为版本号centos yum install kernel-devel-xxxd...
2021-07-27 13:58:13
66
原创 mesos运行spark框架
所在的团队需要引入mesos平台以便运行spark并行计算，花了几天时间部署并测试运行成功，将步骤及遇到的问题整理一下。1、mesos安装。先是采用第三方的二进制包mesosphere安装，然后配置。这一个叫简单，下载到二进制包即可。然后采用了源码编译的安装，安装步骤及遇到的问题如下说明：1.1 下载meso源码包，链接：https://pan.baidu.com/s/1nwCwF...
2018-02-28 17:50:46
2618
原创 spark算子整理
**************************************1、aggregate,第一个为初始值，第二个为element类型，第三个为返回值，其中第一个和第三个可以为自定义类型如同时返回元素的和与元素的个数，第一个值需要传入初始化的一个自定义对象Double distenceAccount = sequencesRDD.aggregate(0.0, new Function2&l...
2018-02-11 11:53:33
179
原创 自整理
1、使用数据库的排它锁实现分布式锁的时候，虽然使用了唯一索引进行for update查询。但是数据库（如MySql）会对查询进行优化，是否使用索引来检索数据最终由数据库通过判断不同执行计划的代价来选择的。如果全表扫描的效率比使用索引搜索高则不会应用索引搜索（如很小的表），那么将触发表锁而不是行锁，就不会起到应用的作用。2、多个数据库连接长时间不释放，可能把数据库连接池撑爆...
2018-02-08 16:51:46
116
转载 常用命令
1、解决类似whoami命令的故障，strace whoami，可以进行命令调用及参数的追踪有助于问题的解决2、lsof 查看进程/用户等正在使用哪个或哪些文件（网络文件也是文件的一种）3、lsof -i:80，-i是查看网络相关的命令4、lsof -t -i|kill 杀死所有的网络进程5、diff对文件进行对比6、lsof，删除了文件，但是如果还有进程正在使用此文件可以通过
2018-01-25 11:02:29
91
转载 复制表结构创建新表
create table HAD_LANE_NODE_CURVATURE as select * from had_test_hp_o.HAD_LANE_NODE_CURVATURE where 1=2;
2018-01-24 16:43:01
1096
转载 数据库表被锁
1、SELECT sid, serial#, username, osuser FROM v$session where sid = (select session_id from v$locked_object)2、ALTER SYSTEM KILL SESSION '575,14977'-- 最后两个分别是sid与serial#
2018-01-23 14:47:10
154
原创 写shapefile字段名导致的异常
java的maven工程将oracle数据库中的MESH表导出为shapefile，导出的字段中有min_longitude,min_latitude,max_longitude,max_latitude字段。完成字段创建以及坐标插入后，保存shp文件的时候总是提示错误：OGR Error: General Error。经过试验后，发现将min_longitude等字段修改为logmin等字段时，
2018-01-23 10:29:34
1180
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人