自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

周君的个人博客

学习,旅游,音乐,不开心也要笑口常开

  • 博客(80)
  • 资源 (7)
  • 问答 (1)
  • 收藏
  • 关注

原创 记录一次redis远程连接失败问题

今天进行redis服务器的远程连接时,几乎连接不上,折腾了一天了,注意,服务器使用的是腾讯云服务器,搭建的redis问题排查:1. 确保 redis.conf 的配置正确,在这个地方主要有两个地方需要注意: a. bind 配置,其中配置为:bind 0.0.0.0 b. 配置protected-mode yes 为:protected-mode no c. 配置远程连接密码,打开requirepass的注释。配置为:requirepa...

2021-12-16 19:45:13 1535 1

原创 SpringBoot2整合Mybatis拦截器,拦截mapper接口的某个方法

需求: 在执行某个动态sql时,where 子句,希望通过用户进行自定义查询条件,比如用户可以传入 “id >100011 and name = '张三'” 的多条件表达式进行查询 (注意:这里的条件查询,为了安全性的考虑,是经过处理的,以免出现安全漏洞。)方法: 1. 自定义mybatis的拦截器MySqlInterceptor(继承 org.apache.ibatis.plugin.Interceptor)对执行的mapper接口进行拦截 2. 改写对应...

2021-01-05 21:49:49 10455 5

原创 linux使用 parted 挂载新的硬盘(大于2T的硬盘)

问题背景,使用 fdisk 进行硬盘的挂载分区时,发现最大只能分配 2 T ,所以超过 2 T 的硬盘我们需要使用 parted 命令进行硬盘的分区1. 首先使用 fdisk -l 查看磁盘列表信息:2. 使用parted 进行 /dev/sdb 的新盘进行分区3. 使用fdisk -l 查询盘信息4. 然后再次进行格式化(parted 进行了初始的格式化)5. 创建 /data_disk 文件夹,并将新的分区挂载这个目录下6. 查询对应盘符的 UUID,使用..

2020-11-19 18:50:19 5411 3

原创 zookeeper报错 NoRouteToHostException: 没有到主机的路由 (Host unreachable)

错误信息:2020-09-14 03:28:23,562 [myid:0] - WARN [WorkerSender[myid=0]:QuorumCnxManager@588] - Cannot open channel to 3 at election address h6/192.168.1.16:3888java.net.ConnectException: 拒绝连接 (Connection refused) at java.net.PlainSocketImpl.socketConnect

2020-09-14 15:33:15 4940 3

原创 寻找矩阵指定长度的路径最大值

问题描述:给定一个矩阵mat和路径的长度path_length, 输出最终的路径和最大路径的值:例子1: mat 为5 × 5矩阵,寻找路径长度为path_length = 5的最大路径区域: [[ 55, 198, 72, 221, 7], [ 24, 247, 14, 210, 49], [ 66, 143, 44, 242, 118], [189, 131, 136, 43, 218], [1...

2020-08-07 16:23:07 801 1

原创 LeetCode 刷题笔记(2) --- 633. 平方数之和(简单)

原文地址:LeetCode--633 平方数之和题目描述:给定一个非负整数c,你要判断是否存在两个整数a和b,使得示例1:输入: 5输出: True解释: 1 * 1 + 2 * 2 = 5示例2:输入: 3输出: False解题方法一:利用双向指针解题思路:可以看成是在元素为 0~target 的有序数组中查找两个数,使得这两个数的平方和为 target,如果能找到,则返回 true,表示 target 是两个整数的平方和。本题和 167. ...

2020-07-04 22:58:10 460

原创 LeetCode 刷题笔记(1) --- 167. 两数之和 II - 输入有序数组(简单)

原题地址:LeetCode---167 两数之和题目描述:给定一个已按照升序排列的有序数组,找到两个数使得它们相加之和等于目标数。函数应该返回这两个下标值 index1 和 index2,其中 index1必须小于index2。说明:返回的下标值(index1 和 index2)不是从零开始的。你可以假设每个输入只对应唯一的答案,而且你不可以重复使用相同的元素。示例:输入: numbers = [2, 7, 11, 15], target = 9输出: [1,2]解释: ...

2020-07-04 22:29:26 181

原创 ubuntu 20.04 更改第一次登录紫色背景(终于有办法修改啦!!!)

ubuntu 20.04 的gnome版本已经升级到了3.36,这个升级带来的变化可不小,相信各位大佬都有了解过,但是对于不喜欢ubuntu这个紫色背景的我,在安装了ubuntu之后,一般的常规操作他的紫色背景必须得干掉,哈哈!在ubuntu 18.04, 19.10 或是之前的版本,都是非常好的修改,一般修改/etc/alternatives/gdm3.css下的文件中的lockDialogGroup即可,但是在ubuntu20.04 你会发现没有这个文件了,取而代之的是 gdm3-theme.g..

2020-06-24 10:12:26 9655

原创 论文笔记《A Robust k-Means Clustering Algorithm Based on Observation Point Mechanism》

tags:聚类相关原文地址:点击查看原文问题: k-means对异常值敏感。 解决方法:在这篇论文中,作者提出了一种基于观察点机制的强健的两阶段k-means聚类算法,该算法能够在不受异常值干扰的情况下准确地发现聚类中心。 算法核心:第一步:基于一组 nondegenerate observation points 选择原始数据集的一小部分。子集很好表示原始数据集,因为它仅包含原始数据...

2020-05-07 12:09:37 611

原创 Linux下网易云缩放 DPI修改(Ubuntu 18.04.4)高分辨率缩放问题

在linux下,很多软件存在问题,网易云音乐也不例外,修改方式如下1,找到网易云音乐的启动文件路径netease-cloud-music.desktop文件,在ubuntu18.04 中,是在/usr/share/applications/ 下,你在启动项中能看到的软件,基本上都在这个文件夹下!2,修改netease-cloud-music.desktop 文件,添加--force-...

2020-03-09 12:54:56 10177 6

原创 Could not transfer artifact xxx from/to xxx解决方案

问题描述:在进行创建maven工程自动导入对应的依赖或者执行 mvn install 时提示如下的错误信息:Could not transfer artifact xxx from/to xxx方法一:这个问题主要就是在你下载相关的依赖包时,没有下载成功照成的,需要找到对应的maven库包,删除以 .lastUpdated 结尾的文件,然后重新下载,一般可以得到解决,这里有一...

2020-02-21 15:38:45 151099 30

原创 《Predict then Propagate: Graph Neural Networks meet Personalized PageRank》论文阅读笔记

文章:Predict then Propagate: Graph Neural Networks meet Personalized PageRank出处:ICLR 2019作者:Johannes Klicpera, Aleksandar Bojchevski & Stephan Gunnemann机构:Technical University of Munich, Germa...

2020-01-08 20:49:56 4339 2

原创 PageRank算法 && 个性化PageRank算法——学习总结

一、什么是PageRankPageRank,中文一般叫佩奇排名或网页排名,是利用网页简单的超链接来计算网页的分值,从而给网页进行排名的一种算法,以Google公司创办人Larry Page之姓来命名。Google用它来体现网页的相关性和重要性,在搜索引擎优化操作中是经常被用来评估网页优化的成效因素之一。它的思想是模拟一个悠闲的上网者,上网者首先随机选择一个网页打开,然后在这个网页上呆了几分...

2020-01-08 15:54:46 1755

原创 2019联想小新pro13.3 Intel i7 10710U+MX250 liinux双系统安装及美化修改(ubuntu19.10 / ubuntu18.04.4 / ubuntu20.04)

1. 前提说明:最近入手了一台2019款的联想小新pro13.3 处理器为Intel i7 10710U,显卡是MX250,由于自己平时使用linux习惯了(以前多用deepin作为自己工作的系统),所以准备安装一下linux的系统,由于deepin相对来说,里面的软件更加贴合我们日常的使用,于是,在deepin深度的官网下载了15.11的镜像,制作启动U盘,发现装不上,尝试了15.1,15...

2020-01-01 16:11:58 7010 24

原创 Matrix Factorization(MF:矩阵分解)的基本原理

Matrix Factorization的基本原理Matrix Factorization的原理比较简单,就是将一个矩阵 D 分解为 U 和 V 的乘积,即对于一个特定的规模为mn 的矩阵 D,估计出规模分别为 mk 和 n*k 的矩阵U和V,使得 UVTUV^TUVT 的值尽可能逼近矩阵 D 。一般来讲,k 的取值应该满足 k≤min{m,n}k ≤ min \{m,n\}k≤min{m,n}...

2019-12-05 18:18:52 2928

原创 Dual Graph Attention Networks for Deep Latent Representation of Multifaceted Social...》论文学习笔记

Dual Graph Attention Networks for Deep Latent Representation of Multifaceted Social Effects in Recommender Systems论文学习笔记,这里主要是对文章的理解和重要部分进行的翻译,如有不对的地方,请大家多多指正!总述腾讯 at WWW 2019,本文提出了对偶注意力网络来更好地学习...

2019-11-21 17:03:56 2224

原创 tensorflow导入时出现 ImportError: DLL load failed: 找不到指定的程序

问题描述在pycharm中安装了tensorflow 1.14.0, 之后出现了如下问题:Traceback (most recent call last):File “D:/pyfile/word4/yy.py”, line 3, inimport tensorflow as tfFile “D:\pyfile\word4\venv\lib\site-packages\ten...

2019-10-19 11:27:05 2658 1

原创 均方根误差(RMSE),平均绝对误差(MAE),标准差(Standard Deviation)

RMSERoot Mean Square Error,均方根误差 是观测值与真值偏差的平方和与观测次数m比值的平方根。 是用来衡量观测值同真值之间的偏差MAEMean Absolute Error ,平均绝对误差 是绝对误差的平均值 能更好地反映预测值误差的实际情况.标准差Standard Deviation ,标准差 是方差的算数平方根 是用来衡量一组数自身的...

2019-10-12 21:39:44 5172

原创 拉普拉斯矩阵

介绍: 拉普拉斯矩阵(Laplacian matrix) 也叫做导纳矩阵、基尔霍夫矩阵或离散拉普拉斯算子,主要应用在图论中,作为一个图的矩阵表示。 给定一个有n个顶点的图G,它的拉普拉斯矩阵 定义为: L=D-A 其中D为图的度矩阵,A为图的邻接矩阵。度矩阵在有向图中,只需要考虑出度或者入度中的一个。 ...

2019-10-12 19:09:25 7591

原创 python 的pip3或pip 加快安装软件的速度

例如:pip3 install numpy pandas matplotlib sklearn tensorflow==2.0.0 -i https://pypi.doubanio.com/simple在安装的时候,使用豆瓣的软件源,及安装的时候,在后面加上 -ihttps://pypi.doubanio.com/simple即可pip3 install 软件名 -ihttp...

2019-10-07 20:57:28 1092

原创 常见机器学习算法优缺点总结

常见机器学习算法优缺点总结1. 回归回归是一种用于连续型数值变量预测和建模的监督学习算法,使用案例包括房地产价格、股价走势或学生成绩等的预测。回归任务的特征是具有数值型目标变量的标注数据集。换言之,每一个用以监督算法的观察样本,都有一个数值型真值。1.1 (正则化)线性回归线性回归是回归任务最常用的算法。它最简的形式,是用一个连续的超平面来拟合数据集(比如,当你仅有两个变...

2019-08-04 17:49:46 6157 1

原创 hive -show databases报错,Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStore

问题一: 刚配置完mysql作为hive的元数据库,成功启动hive后,执行命令show databases; 报错。hive> show databases;FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException...

2019-08-03 21:30:11 2870

原创 使用add-apt-repository时提示,could not find a distribution template for Deepin/stable

错误信息总结zj@zj:~$ sudo add-apt-repository 'deb https://typora.io/linux ./'Traceback (most recent call last): File "/usr/bin/add-apt-repository", line 95, in <module> sp = SoftwareProperti...

2019-07-29 16:59:33 11289 2

原创 SpringBoot 的数据校验和整合JDBC

SpringBoot 的数据校验创建实体类package com.study.entity;​import lombok.Data;import org.hibernate.validator.constraints.Length;​import javax.validation.constraints.Min;import javax.validation.constrain...

2019-07-04 16:30:07 384

转载 SpringMVC+RestFul详细示例实战教程

from:https://blog.csdn.net/albg_boy/article/details/78662008一、SpringMVC基础入门,创建一个HelloWorld程序1.首先,导入SpringMVC需要的jar包。2.添加Web.xml配置文件中关于SpringMVC的配置 <!--configure the setting of spri...

2019-05-28 21:13:33 489

原创 hibernate+spring+tomcat启动报错Not supported by BasicDataSource

最近使用hibernate+spring+jsp的小项目制作过程中出现一些错误,例如:java.lang.UnsupportedOperationException: Not supported by BasicDataSource解决方法为:将对应打dataSource换成org.apache.tomcat.jdbc.pool.DataSource即可...

2018-02-17 11:18:11 737

原创 hibernate学习笔记(1)结构与基本数据类型

一,概览   Hibernate负责从Java类到数据库表的映射,以及从Java数据类型到SQL数据类型的映射。另外还提​​供数据查询和检索功能。它可以显着减少在SQL和JDBC中手动处理数据的开发时间。Hibernate的设计目标是通过消除使用SQL和JDBC进行手动,手工数据处理的需要。(对象关系映射(英语:(Object Relational Mapping,简称ORM,或O/RM,

2018-01-31 15:06:53 320

原创 navicat连接阿里云mysql数据库服务器遇到的1130等相关问题

最近搭建自己的博客网站的时候使用了阿里云的云服务器ESC,搭建了一个mysql数据库,在windows下使用navicat连接mysql的时候,总是连接不上,出现了1130的问题等等错误信息。下面将自己遇到的一些问题解决方法总结如下:首先设置mysql的配置信息:sudo vim /etc/mysql/mysql.conf.d/mysqld.cnf 在这个文件中注释掉这一行:在

2018-01-10 23:07:25 2122

转载 HBase协处理器加载过程(1.2.x)

一、首先来看ObserverCoprocessor:1.观察者协处理器的静态加载的配置是在hbase-site.xml中配置如下属性:通过hbase.coprocessor.region.classes 配置 RegionObservers 和 Endpoints.通过hbase.coprocessor.wal.classes 配置 WALObservers.通过hbase.cop

2018-01-05 23:45:53 883

转载 HBase性能优化完全版

近期在处理HBase的业务方面常常遇到各种瓶颈,一天大概一亿条数据,在HBase性能调优方面进行相关配置和调优后取得了一定的成效,于是,特此在这里总结了一下关于HBase全面的配置,主要参考我的另外两篇文章:(1)http://blog.csdn.net/u014297175/article/details/47975875(2)http://blog.csdn.net/u0142

2018-01-05 23:36:14 7012 2

原创 Hbase 表的设计原则 ————总结

1、列族的数量及列族的势建议将HBase列族的数量设置的越少越好,对于两个或两个以上的列族HBase并不能处理的很好。这是由于HBase的Flushing和压缩是基于Region的。当一个列族所存储的数据达到Flushing的阈值时,该表中所有列族将同时进行Flushing操作。这将带来不必要的I/O开销,列族越多,该特性带来的影响越大。此外,还要考虑到同一个表中不同列族所存储的记录数量的...

2018-01-05 23:10:21 6085

原创 spark SQL(六)性能调整

spark SQL(六)性能调整

2017-12-30 14:40:46 3027

原创 spark SQL (五)数据源 Data Source----json hive jdbc等数据的的读取与加载

1,JSON数据集       Spark SQL可以自动推断JSON数据集的模式,并将其作为一个Dataset[Row]。这个转换可以SparkSession.read.json()在一个Dataset[String]或者一个JSON文件上完成。     请注意,作为json文件提供的文件不是典型的JSON文件。每行必须包含一个单独的,独立的有效JSON对象。有关更多信息,请

2017-12-30 13:50:19 2144

原创 spark SQL (四)数据源 Data Source----Parquet 文件的读取与加载

数据源 Data Source----Parquet 文件的读取与加载

2017-12-30 12:59:00 6786

原创 spark SQL(三)数据源 Data Source----通用的数据 加载/保存功能

spark SQL(三)数据源 Data Source----通用的数据 加载/保存功能

2017-12-30 11:25:25 2226 1

原创 使用ganglia 实现监控 hadoop 和 hbase(详细过程总结)

使用ganglia 实现监控 hadoop 和 hbase

2017-12-27 15:54:08 2865

原创 spark SQL (二) 聚合

spark SQL (二) 聚合

2017-12-23 16:48:08 1829

原创 spark SQL (一)初识 ,简介

一, 简介     Spark SQL是用于结构化数据处理的Spark模块。与基本的Spark RDD API不同,Spark SQL提供的接口为Spark提供了关于数据结构和正在执行的计算的更多信息。在内部,Spark SQL使用这些额外的信息来执行额外的优化。有几种与Spark SQL进行交互的方式,包括SQL和Dataset API。在计算结果时,使用相同的执行引擎,而不管使用哪

2017-12-23 15:30:42 1406

原创 hbase 集群(完全分布式)方式安装

hbase 集群(完全分布式)方式安装

2017-12-19 19:27:56 592

原创 hadoop(集群)完全分布式环境搭建

hadoop 2.8.2 完全分布式环境搭建 ubuntu下

2017-12-18 22:32:58 947

java RESTFul Web Service

java RESTFul Web Service

2017-07-02

Spark机器学习

Spark机器学习.pdf

2017-05-14

hbase-hadoop+database系统入门书籍

hbase-hadoop+database系统入门书籍

2017-05-14

Kafka自学文档

Kafka自学文档 中文版本

2017-05-14

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除