cyz9638527410-CSDN博客

原创 spark write写入数据task failed失败在SaveMode.Append与SaveMode.Overwrite两种模式下的不同表现

转载：spark write写入数据task failed失败在SaveMode.Append与SaveMode.Overwrite两种模式下的不同表现_祁东握力的博客-CSDN博客1、SaveMode.Appendtask失败重试，并不会删除上一次失败前写入的数据（文件根据分区号命名），重新执行时会继续追加数据。所以会出现数据重复。2、SaveMode.Overwritetask失败重试，会删除该分区上次失败所写入的数据文件，然后创建一个新的数据文件写入数据。所以不会出现数据重复。.

2021-10-05 23:53:37 1564

原创单点登录、单设备登录

单点登录：1、https://juejin.im/post/68449038454249717832、https://youngzhang08.github.io/2018/08/08/%E8%81%8A%E8%81%8A%E9%98%BF%E9%87%8C%E6%B7%98%E5%AE%9DSSO%E8%B7%A8%E5%9F%9F%E7%99%BB%E5%BD%95%E8%BF%87%E7%A8%8B/3、https://cloud.tencent.com/developer/article

2020-09-18 16:45:20 479

原创 VUE

VUE1、从网络上下载了 Node.JS，其中 Node.JS 自带了 npm2、npm ：用于环境配置npm install -g vue-cli 2.X版本 npm install -g @vue/cli 3.X版本此时命令行中就可以使用 vue 命令。例如：vue init webpack cyz-demo（模板名字叫 webpack） npm run 会执行 package.json 下的scripts...

2020-09-18 16:44:28 151

原创 MAVEN

MAVEN1.dependencyManagementMaven 使用dependencyManagement 元素来提供了一种管理依赖版本号的方式。通常会在一个组织或者项目的最顶层的父POM 中看到dependencyManagement 元素这样做的好处：统一管理项目的版本号，确保应用的各个项目的依赖和版本一致，才能保证测试的和发布的是相同的成果，因此，在顶层pom中定义共同的依赖关系。同时可以避免在每个使用的子项目中都声明一个版本号，这样想升级或者切换到另一个版本时，只需要在父类容器里更新

2020-09-18 16:40:03 90

原创 JAVA新特性、线程池、ThreadLocal、async

JAVA 8 新特性：publicclassMain{ publicstaticvoidmain(String[] args)throwsIOException{ String[] array = {"Hello","World"}; // 将数组转化为ArrayList ArrayList<String> list =newArrayList<>(Arrays.asL...

2020-09-18 16:36:49 324

转载 Mac上配置Java环境变量

之前看过许多在Mac上配置Java环境变量的教程，但是这些教程比较杂乱，且说明不够详细。没有像在Windows上那样标准统一。由于接触Mac时间不长，非常不习惯在命令行里面配，没有Windows图形化界面那样形象生动。有些文章是指导你在/etc/profile配置，有些文章是指导你在~/.bash_profile配置。看了之后脑子一片混乱，甚至急躁（Mac配置Java怎么这么麻烦！）。今天算是...

2018-06-12 17:39:37 5019 1

转载 java 代理静态代理动态代理

//https://www.zhihu.com/question/20794107//https://mp.weixin.qq.com/s?__biz=MzAxOTc0NzExNg==&mid=2665513926&idx=1&sn=1c43c5557ba18fed34f3d68bfed6b8bd&chksm=80d67b85b7a1f2930ede2803d...

2018-04-18 14:41:35 157

原创多进程多线程 ---- Python和Java

Python：真正的并行执行多任务只能在多核CPU 上实现，但是，由于任务数量远远多于CPU的核心数量，所以，操作系统会自动的把很多任务轮流调度到每个核心上执行。对于操作系统来说，一个任务就是一个进程（Process），比如：打开一个Word就启动了一个Word进程。有些进程还不止同时干一件事，比如：Word，它可以同时进行打字、拼写检查、打印等等...

2018-04-08 16:32:45 703

转载内连接、左外连接、右外连接、交叉连接

转载转载，非原创http://blog.csdn.net/cnham/archive/2008/06/25/2584936.aspx 在之前，我对MSSQL中的内连接和外连接所得出的数据集不是很清楚。这几天重新温习了一下SQL的书本，现在的思路应该是很清楚了，现在把自己的理解发出来给大家温习下。希望和我一样对SQL的连接语句不太理解的朋友能够有所帮助。（发这么菜的教程，各位大大们别笑话偶了，呵:D...

2018-04-08 10:25:30 154

原创 Keras 函数介绍

PS：如果权重需要共享（也就是不要重新初始化），一个办法：使用全局变量（这样只初始化一次，之后都不会再重新初始化了）另一个办法：不用全局变量，每次初始化时，手动录入权重（太麻烦了，不建议）--------------------------------------------------------------------------------------------------...

2018-03-30 14:37:21 591

原创句子相似性的JAVA比较————过程全解

首先，我参考的是这个网址的代码：https://www.cnblogs.com/sanmubird/p/7966154.html基于他的源代码，第一步在Eclipse中创建Maven项目（在进行pom.xml自动获取JAR时，出现了错误，无法通过mvn install 加载到这个项目需要的jar包，原因是：我的电脑似乎给Maven配置了Nexus私服，而且要在服务中手动启动Nexus私服。...

2018-03-04 16:58:56 2029

原创四大检索工具和论文查找网址大全

世界四大检索工具：SCI、EI、ISTP、ISROA资源一站式检索服务平台：http://www.socolar.com/中国科技论文在线：http://www.paper.edu.cn/奇迹文库：http://www.qiji.cn/中国预印本服务系统：http://prep.istic.ac.cn/eprint/香港科技大学科研成果全

2017-12-23 16:58:28 22345

原创 mongodb、redis、hbase三种Nosql数据库的定位

redis基本只适合做缓存Hbase(列式存储)比较适合做离线计算（不知道对不对？？？我是小白），底层依靠hadoop提供的HDFS文件系统，使用时有一整套zookeeper、pig、hive的生态系统。mongodb 去看我专门为mongodb写的博客吧

2017-08-23 16:47:27 354

原创 Nosql-MongoDB数据库

说到Nosql，那就要说说MongoDB了MongoDB是按照类似与JSON的一种方式存储数据，叫BSON。推荐看的网址：http://www.runoob.com/mongodb/mongodb-tutorial.htmlhttp://blog.sina.com.cn/s/blog_966e430001019s8v.htmlMongoDB的应用场景：htt

2017-08-23 16:31:56 257

原创 Nosql--redis数据库

Nosql 和一般的数据库（比如：Mysql、Oracle 、SqlServer等等）不太一样，Nosql数据库没有表的。接下来简单介绍下Nosql数据库中的redis数据库。redis数据库是一个运行在内存的数据库，并且是按照 K-V 的方式存储数据。Redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用。redis的使

2017-08-23 14:49:32 275

转载 Python的类的继承的C3算法的序列

python的继承或者是多重继承都有一个C3算法生成的序列。通过这个序列来调用方法或者初始化父类（爷爷类、爷爷的爷爷类等等）。我刚开始使用多重继承的时候，初始化父类时，就会遇到一个问题，就是super（）调用的是谁，现在我告诉你，不是按照你画的继承树或者在你定义类时括号里的父类（有时候是，有时候不是，因为按照的是C3的序列），这些都会欺骗你，python按照的是计算出来

2017-07-28 17:10:03 633

转载分布式和集群的区别

转载地址：http://www.cnblogs.com/aspirant/p/5697807.htmlhttp://blog.csdn.net/cutesource/article/details/5811914在IDF05（Intel Developer Forum 2005）上，Intel首席执行官Craig Barrett就取消4GHz芯片计划一事，半开玩

2017-07-19 15:35:27 295

原创 python | PyCharm不能RUN，只能RUN in unittest

这样子的原因，我认为只有两个：1、你取的文件名字里包含了 test 字符2、文件的内容，比如类名包含了 test 字符有个链接可以看看 http://jingyan.baidu.com/article/cbcede071e479e02f40b4dc5.html

2017-07-14 20:19:24 2571

转载 python是跨平台的以及 py、pyc、pyo

转载地址（这里更加详细）：http://www.cnblogs.com/dkblog/archive/2009/04/16/1980757.html什么是pyc文件pyc是一种二进制文件，是由py文件经过编译后，生成的文件，是一种byte code，py文件变成pyc文件后，加载的速度有所提高，而且pyc是一种跨平台的字节码，是由python的虚拟机来执行的，这个是

2017-07-14 17:28:50 3122

转载 python爬虫

python的2.x和3.x版本有一些不同。在2.x版本，我用了response.read()之后，再调用response.read()之后，就没有结果了，说明这只能够取一次；在3.x版本中，应该也是类似的。python的正则表达式，有一个很好的链接 https://my.oschina.net/dfsj66011/blog/539814下面就是转载的内容，值得一

2017-07-13 21:36:28 451

转载 C++知识点整理

转载地址：http://blog.csdn.net/yxtxiaotian/article/details/513719861.引用与指针有什么区别?1)引用必须被初始化，指针不必。(const变量也必须在一开始定义的时候就完成初始化)2)引用初始化以后不能被改变，指针可以改变所指的对象。(也即引用初始化完成之后,就永远指向初始化时指定的对象;但指针可以动态修改指向,使之指向其他对

2017-06-15 17:41:04 362

原创 C/C++的inline函数解释

inline内联函数目的是为了解决程序中函数调用的效率问题。一般函数进行调用时，要将程序的执行权转到被调用的函数中，然后再返回到调用它的函数中；而内联函数在进行调用时，是将调用表达式用内联函数体来替换。这样就省去了函数调用，因为调用部分被替换成内敛函数体了！！

2017-06-15 17:20:08 254

转载 C/C++中extern、static关键字详解

转载：http://www.cnblogs.com/yyxt/p/3891712.html1 基本解释：extern可以置于变量或者函数前，以标示变量或者函数的定义在别的文件中，提示编译器遇到此变量和函数时在其他模块中寻找其定义。此外extern也可用来进行链接指定。也就是说extern有两个作用，第一个,当它与"C"一起连用时，如: extern "C" void f

2017-06-15 16:51:29 460

转载 C/C++的预处理指令详解

转载http://www.cnblogs.com/zi-xing/p/4550246.html本文主要记录了C/C++预处理指令，常见的预处理指令如下：#空指令，无任何效果#include包含一个源代码文件#define定义宏#undef取消已定义的宏#if如果给定条件为真，则编译下面代码#ifdef如果宏已经定义，则编译下面代码#ifndef如果宏没有定义，则编译下面代码#eli

2017-06-11 16:27:43 516

原创关于静态链接库（LIB）和动态链接库（DLL）的理解

.lib文件一般情况下有两种情况。其一：就是一般的静态链接库，它将各个目标文件（.obj）、运行时函数库（.lib）、已经编译的资源文件（.res）链接到一起，形成一个可执行文件（.exe）。在可执行文件里包含了程序运行需要的所有函数和资源等等，可执行文件自己就可以装B自己飞，但是它的大小就会很大，并且当有多个程序对它进行使用时，内存里就会放置和程序同数量的文件副本，占用内存空间了。其二

2017-05-26 15:28:48 398

转载代理服务器理解

代理服务器是 Internet链路级网关（Gateway）所提供的一种重要的安全功能，它的工作主要在开放系统互联（OSI）模型的会话层，从而起到防火墙的作用。代理服务器主要功能　　（1）设置用户验证和记账功能，可按用户进行记账，没有登记的用户无权通过代理服务器访问Internet网。并对用户的访问时间、访问地点、信息流量进行统计。　　（2）对用户进行分级管理

2017-05-21 22:24:13 515

转载并行、并发、synchonrized同步的用法

一、多线程的并发与并行：并发：多个线程同时都处在运行中的状态。线程之间相互干扰，存在竞争，(CPU,缓冲区),每个线程轮流使用CPU,当一个线程占有CPU时，其他线程处于挂起状态，各线程断续推进。并行：多个线程同时执行，但是每个线程各自有自己的CPU，不存在CPU资源的竞争，他们之间也可能存在资源的竞争。并发发生在同一段时间间隔内，并行发生在同一时刻内。并发执行的总时间是每

2017-04-25 14:04:03 1041

cyz奋斗的鸭的博客