敌人派-CSDN博客

原创浅谈数据分析、大数据分析和大数据开发的区别

自我介绍在大学期间主要学习一些数据分析的课程例如，统计学，多元统计学，数据挖掘，matalb，R语言统计分析，时间序列分析，也参加了几次数学建模竞赛。对数据分析也有些了解。实习时进了一家大数据公司，实习岗位为数据分析，主要为业务方面的数据分析。工作方面：一、取数机器人，利用程序员开发的大数据平台的接口（一些封装的API）提取数据。二、利用这些数据分析业务的异常点，利用SPSS、R语言和统计...

2020-02-26 15:02:31 2844 1

原创 LATEX 图片跑到后面

解决方式：在图片引入的命令后面加上限制!p，有时候可以强制图片的位置，也就是\begin{figure*}[!问题描述：使用\begin{figure*}命令时，图片的位置不在自己想要放置的页码上面，经常跑到别的地方。如果有时候是连续的几张图片，可能都要加上限制!

2024-03-07 18:26:18 1639

原创 (None, 0, 5) 用keras.layers.MaxPool1D 出错

当你尝试使用 keras.layers.MaxPool1D 对一个形状为 (None, 0, 5) 的张量进行操作时，确实会遇到错误。这是因为 MaxPool1D 期望的输入是一个三维张量，其形状通常为 (batch_size, sequence_length, features)。如果你的输入数据真的是 (None, 0, 5)，那么你需要检查你的数据预处理步骤，确保你没有错误地删除了所有的时间步。在你的例子中，sequence_length 为0，这意味着你的序列长度为0，这在实际应用中是不合理的。

2024-02-25 11:42:48 430

原创 AveragePooling1D层和 MaxPooling1D layer

data_format：字符串，可选项为“channels_last”和“channels_first”。当使用"valid" （padding）填充选项时，结果的输出的形状为：output_shape = (input_shape - pool_size + 1) / strides)pool_size：整数或整数元组，表示池化窗口的大小。例如，pool_size=2 表示在每个维度上使用大小为 2 的池化窗口。strides：步长，如果是None，它默认值为pool_size。默认值为 None。

2024-01-16 20:38:01 405

转载如何判断两个IP地址是否在同一个网段？什么是子网掩码？

对于ip地址我们前面通过多次文章，大家都有一定的理解，有部分朋友还是对子网掩码、ip地址的网段有些疑问，那么今天我们一起来解下这方面的内容。一、什么是子网掩码?在了解ip地址的网段之前，我们先来了解子网掩码，很多对网络了解不深的朋友都对子网掩码有些迷惑，不了解它是用来干什么的?子网掩码不能单独存在，它必须结合IP地址一起使用。子网掩码只有一个作用，就是将某个IP地址划分成网络地址和主机地址两部分。说的通俗的话，就是用来分割子网和区分那些ip是同一个网段的，那些不是同一网段的。例如，两个人都叫张三

2022-04-03 17:47:09 1054

原创 2021-10-12

#!/usr/bin/env python# coding: utf-8# In[3]:import osos.environ["KMP_DUPLICATE_LIB_OK"] = "TRUE"# 网上提到该设置可能有其他风险import numpy as npfrom matplotlib import pyplot as pltfrom sklearn.svm import SVRfrom pandas import DataFramefrom pandas import Ser

2021-10-12 11:59:54 232

原创 JAVA面试记

第一次面试：银行老项目外包1.介绍项目2,怎么理解多态3.haspmap和linklist4,阶乘5，hello 统计单词个数（使用hashmap）hashmap的contains6，线程1）继承Thread类创建线程2）实现Runnable接口创建线程3）使用Callable和Future创建线程4）使用线程池例如用Executor框架7，jsp内置对象request、response、session、application、out、pageContext、config、pag

2021-08-31 22:08:27 198

原创记录写一写看过的java的笔记（非CSDN)的链接

分布式锁之Redis实现

2021-08-06 15:13:16 136

原创数据分析优质文章

1.电商数据分析的4大思维和8个指标来自-数据分析不是个事儿https://www.toutiao.com/i6811013424147857923/?tt_from=weixin&utm_campaign=client_share&wxshare_count=1&timestamp=1627385154&app=news_article&utm_source=weixin&utm_medium=toutiao_android&use_new_st

2021-07-29 10:04:40 188

原创人人开源renren-fast-vue中npm install报错＜% if (process.env.NODE_ENV === ‘production‘) { %＞＜% }else { %＞＜%

人人开源renren-fast-vue 中npm install报错大部分可能node-sass4.9.0安装失败或者有些依赖下载不了首先检查自己环境node -vnpm -v如果可以正确显示版本，按照下面操作1.安装依赖npm install2.如果安装失败清理缓存npm rebuild node-sassnpm uninstall node-sass3.淘宝镜像下载npm i node-sass --sass_binary_site=https://npm.taobao.org/

2021-07-27 10:25:43 574 1

原创 Java面试准备

1.HashSet子类依靠()方法区分重复元素hashcode(),equals()方法HashSet的底层还是用HashMap来实现的。将Entry<K,V>的V都变成了同一个Object对象，public static final PRESENT = new Object()。而HashMap的数据结构是数组+链表+红黑树。调用K的hashCode方法，然后高低16位进行&运算。得到的hash值，与数组tab[]（桶）的长度-1进行&运算，确定插入对象在哪一个桶上。然

2021-07-25 15:20:24 189

原创使用vue.cl创建的vue中app.vue,main.js,index.html之间的关系

首先看看项目结构：Vue.js 目录结构上一章节中我们使用了 npm 安装项目，我们在 IDE（Eclipse、Atom等）中打开该目录，结构如下所示：目录解析目录/文件说明build 项目构建(webpack)相关代码config 配置目录，包括端口号等。我们初学可以使用默认的。node_modules npm 加载的项目依赖模块src 这里是我们要开发的目录，基本上要做的事情都在这个目录里。里面包含了几个目录及文件：assets: 放置一些图片，如logo等。componen

2021-07-11 10:39:34 151

原创 MySQL学习—创建自定义函数

一、基本语法delimiter 自定义符号　　-- 如果函数体只有一条语句, begin和end可以省略, 同时delimiter也可以省略　　create function 函数名(形参列表) returns 返回类型　　-- 注意是retruns　　begin　　　　函数体　　　　-- 函数内定义的变量如：set @x = 1; 变量x为全局变量，在函数外面也可以使用　返回值　　end　　自定义符号　　delimiter ;二、示例定义一个相加函数myfun3-- 自定义函

2021-05-27 15:07:56 858

原创 solr的基础语法

1.q 查询的关键字，此参数最为重要，例如，q= id: 1，默认为q=:，2.fq (filter query)过虑查询，提供一个可选的筛选器查询。返回在q查询符合结果中同时符合的fq条件的查询结果3.sort 排序方式，例如 iddesc 表示按照 “ id” 降序4.start 返回结果的第几条记录开始，一般分页用，默认 0开始5.rows 指定返回结果最多有多少条记录，默认值为 10，配合start实现分页6.fl 指定返回哪些字段，用逗号或空格分隔，注意：字段区分大小写，例如fl= id

2021-05-24 17:49:32 632

原创数据分析实战之RMF模型（用户精准运营）

一、什么是RMF模型RFM模型是衡量客户价值和客户创利能力的重要工具和手段。该机械模型通过一个客户的最近一次消费（Recency）、消费频率(Frequency)以及消费金额(Monetary)三项指标来描述该客户的价值状况。阐述一下什么是R、M及F定义：R：最近一次消费（Recency）最近一次消费意指上一次购买的时候。理论上，上一次消费时间越近的顾客应该是比较好的顾客，对提供即时的商品或是服务也最有可能会有反应。营销人员若想业绩有所成长，只能靠偷取竞争对手的市场占有率，而如果要密切地注意消费者的

2021-05-24 12:01:56 12651

原创 MapReduce的入门知识总结

Hadoop MapReduce是一个软件框架用于轻松编写应用程序，这些应用程序以可靠，容错的方式并行处理大型硬件集群（数千个节点）上的大量数据（多TB数据集）。对于·我们要学习的知识有：MapReduce架构体系一个完整的mapreduce程序在分布式运行时有三类实例进程：1、MRAppMaster：负责整个程序的过程调度及状态协调2、MapTask：负责map阶段的整个数据处理流程3、ReduceTask：负责reduce阶段的整个数据处理流程MapReduce的运算MapReduce

2021-05-21 17:54:50 302

原创 python 之坑使用pandas的dataframe行列不一致

在使用pandas的dataframe进行处理时，特别要注意的地方比如有三个列矩阵，我们想把a，b，c分别作为一个Series组成一个dataframe时a = [1, 1, 1, 1]b = [2, 2, 2, 2]c = [3, 3, 3, 3]如果打印一下会发现print([a, b, c])结果：[[1, 1, 1, 1], [2, 2, 2, 2], [3, 3, 3, 3]]如果这样使用会报错# print(pd.DataFrame([a, b, c], columns

2021-05-20 15:33:05 2827

原创每日Python 数据处理符号采用apply函数和replece函数

对读取的·series采用apply函数和replece函数，替换df1['淘宝订单编号'] = df1['淘宝订单编号'].apply(lambda x:str(x).replace(' ',''))#去除\tdf1['淘宝订单编号'] = df1['淘宝订单编号'].apply(lambda x:str(x).replace('\t',''))#去除\tdf1['淘宝订单编号'] = df1['淘宝订单编号'].apply(lambda x:str(x).replace('',''))#去除\t

2021-05-15 18:02:57 588

原创 python批量快速合并excel文件(csv和xls）

需要用到两个.py 分别是excel_NAME.py 和jindong3.py导入excel_NAME.py ，其作用为批量读取目录文件的csv或者xls的文件名导入excel_NAME.py：import osimport reimport openpyxlimport pandasimport test_wyimport xlrddef get_one_type_file_list(InputFilePath, FileSuffix): # input: 文件夹路径(

2021-05-06 17:46:23 1090

原创 SQL索引的创建和使用

建立索引的原则：定义主键的数据列一定要建立索引。定义有外键的数据列一定要建立索引。对于经常查询的数据列最好建立索引。对于需要在指定范围内的快速或频繁查询的数据列;经常用在WHERE子句中的数据列。经常出现在关键字order by、group by、distinct后面的字段，建立索引。如果建立的是复合索引，索引的字段顺序要和这些关键字后面的字段顺序一致，否则索引不会被使用。对于那些查询中很少涉及的列，重复值比较多的列不要建立索引。对于定义为text、imag

2021-05-05 13:55:31 8608 2

原创 Python的读取目录下的excel文件及文件名

在用python处理一个目录的excel时候，发现没有读取整个excel的函数在网上搜索了下，发现有如此函数import osimport reimport openpyxlimport pandasimport test_wyimport xlrddef get_one_type_file_list(InputFilePath, FileSuffix): # input: 文件夹路径(当前路径直接写路径名， # 自动去除路径名最前面和最后面多个连续的/ or

2021-04-25 10:40:57 4572

原创 Pandas把dataframe或series转换成list的方法

一、把dataframe转换为list输入多维dataframe：df = pd.DataFrame({'a':[1,3,5,7,4,5,6,4,7,8,9], 'b':[3,5,6,2,4,6,7,8,7,8,9]})把a列的元素转换成list：方法1 df['a'].values.tolist() # 方法2df['a'].tolist()把a列中不重复的元素转换成list：df['a'].drop_duplicates().values.tolist()输入一维datafram

2021-04-25 10:24:13 17035

原创 DataFrame基本操作

1.建立dataframe（1）Dict to Dataframedf = pd.DataFrame({'key1':['a','a','b','b','a'],'key2':['one','two','one','two','one'],'data1':np.random.randn(5),'data2':np.random.randn(5)})df data1 data2 key1 key20 -0.484486 -1.404184 a one1 -1.541437

2021-04-18 14:02:19 1405 2

原创 Maven的基础使用与依赖冲突

maven的仓库使用maven的常用命令maven的依赖范围解决依赖冲突的方法使用maven构建SSM框架

2021-02-13 22:26:17 92

原创 Spring的AOP动态代理

一、基于jdk的动态代理还有cglib为aop底层的原理advice对target的save方法进行增强二、事务中xml的aop配置xml中如何配置三、基于注解的动态代理组件扫描配置类

2021-02-11 23:57:02 81

原创 Spring基于注解的事务控制

需要控制的失误的点开启事务的注解驱动

2021-02-05 00:52:39 83

原创 Spring的基于Xml的事务控制

1、关于编程式事务控制的事务控制器三大对象事务传播行为：事务状态基于Xml的事务控制。1、配置环境事务增强到事务管理器配置事务的植入在impl下需要事务控制的代码配置完成...

2021-02-05 00:26:30 127

原创股票策略的数据分析

样本及样本数据讨论样本选自上上证50加权（IHL9)，上证50 指数是挑选A股市场中最具代表性的50只股票组成，俗称“超级大蓝筹指数”。其中上海证券市场规模大、流动性好的最具代表性的50 只股票组成样本股，以便综合反映上海证券市场最具市场影响力的一批龙头企业的整体状况。上证50 指数自2004 年1 月2 日起正式发布。其目标是建立一个成交活跃、规模较大、主要作为衍生金融工具基础的投资指数。data=name.DATA(150:end);c=name.CLOSE(150:end);h=name.H

2021-01-02 20:45:40 322 1

原创 Python 的excel处理操作

一、创建excel在桌面import pandas as pddf =pd.DataFrame()df.to_excel('C:/Users/Administrator/Desktop/output.xlsx')print("done!")注意要建立pip install openpyxl 包读取excel#在调用read_excel()函数时，添加条件“engine='openpyxl'”，借助openpyxl库来读取xlsx文件。即：read_excel(path,engine

2021-01-02 20:19:29 784 1

原创 Spring 的IOC注入过程。

经历过面试的摧残之后我决定好好学习。挺喜欢和面试官对线的感觉。一、IOC的工厂模式步骤：1、实例化对象2、获取properties的隐藏对象3、实例化容器4、取出配置的key5、遍历然后key获取value放入容器表现层IOC的两种注入方式基于注解xml中id表示根据ID晦气bean，通过class类方式获取id的方法。获取bean的方式1、构造函数注入2、set方法注入3、注入集合...

2021-01-02 00:19:11 377 1

原创 Python 疫情数据的可视化与分析（二）

Python处理数据疫情词云Python 疫情数据的可视化与分析第二弹来袭。上次通过数据的预处理已经将疫情的数据清洗到excel中，详情见https://blog.csdn.net/qq_42695315/article/details/111411789这次将通过处理得到词云。import openpyxlfrom wordcloud import WordCloud# 读取数据wb = openpyxl.load_workbook('data.xlsx')# 获取工作表ws

2020-12-23 01:10:27 5448

原创 SQL刷题 176. 第二高的薪水

编写一个 SQL 查询，获取 Employee 表中第二高的薪水（Salary）。±—±-------+| Id | Salary |±—±-------+| 1 | 100 || 2 | 200 || 3 | 300 |±—±-------+例如上述 Employee 表，SQL查询应该返回 200 作为第二高的薪水。如果不存在第二高的薪水，那么查询应返回 null。±--------------------+| SecondHighestSalary |±

2020-12-20 23:48:34 76

原创 Python 疫情数据的可视化与分析（一）

疫情数据的可视化对疫情地图的数据的抓取与可视化词云显示，采用百度地图数据https://voice.baidu.com/act/newpneumonia/newpneumonia第一弹数据获取：可以打印出url网页数据信息import requestsurl = "https://voice.baidu.com/act/newpneumonia/newpneumonia"response = requests.get(url)print(response.text)获取URL的compon

2020-12-20 00:27:18 11762 6

原创 SQL 刷题 175. 组合两个表

表1: Person±------------±--------+| 列名 | 类型 |±------------±--------+| PersonId | int || FirstName | varchar || LastName | varchar |±------------±--------+PersonId 是上表主键表2: Address±------------±--------+| 列名 | 类型

2020-12-19 18:59:46 85 1

原创 5g手机性能的数据分析,SPSS主成分分析

一、数据前言随着互联网技术的快速发展，5g手机在市场占比越来越大，其市场也逐渐扩大。本文基于国内外主要热销品牌的5g手机，包括有苹果，小米，华为等知名手机50种型号进行性能分析，评价因素包括评分，价格，评论人数，手机内存大小，手机屏幕等因素在网站上爬取相关数据，通过SPSS数据处理软件，先对数据进行处理，在挖掘分析，对手机相关指标进行描述统计，主成分分析，聚类分析，得到手机的影响因子。再对各手机型号进行聚类，得到不同层次的手机，对具体手机在进行评价，本文为广大消费者和手机厂商提供了相关理论依据，对学术界的

2020-12-18 23:12:27 1669

空空如也

空空如也