- 博客(27)
- 收藏
- 关注
原创 Data Source
ContentBusiness DatabaseCapIQThompson ONEWRDSBloombergDatastreamSNLBusiness DatabaseCapIQS&P Capital IQ is the research division of S&P Global, one of the world’s largest providers of ratings, data, research, and the S&P Dow Jones Indices.
2021-11-13 11:17:40
579
原创 Machine_Learning_Regularization
In this chapter, we introduce regularization methods with some hands-on Python codes~Machine_Learning_RegularizationRegularizationLassoRidgeElastic NetLasso: a real caseGridSearchCVLassoCVLassoLarsICSource:RegularizationWhy regularization: in the bias
2021-10-16 11:09:32
261
原创 Perceptrons and single layer neural nets
介绍了ANN,Threshold Perceptron Learning,Sigmoid Perceptron Learning,Perceptron Algorithm和一些定理。
2021-10-10 13:41:33
386
原创 Attention Mechanism
来自University of Waterloo1 Attention Overview1.1 RNN’s challengeLong range dependencies: how to deal withCombine it with some attention mechanismGradient vanishing and explosionLarge number of trainig stepsWe should unroll it for as many steps as ne
2021-10-05 01:10:03
234
原创 神经网络激活函数
激活函数激活函数的作用就是把输入节点的加权和转化后输出。SigmoidSigmoid函数也被称为logistics函数。特点是将实数范围内的数字映射到(0,1)(0, 1)(0,1)之间,定义域内所有点的导数都是非负的。作为神经网络的激活函数时,多用于隐层神经元输出。S(x)=11+ex S′(x)=ex(1+ex)2=S(x)⋅(1−S(x))S(x) = \frac{1}{1+e^x} \\\ \\S'(x) = \frac{e^x}{(1+e^x)^2}=S(x) ·(1-S
2021-06-23 15:29:51
261
原创 python langdetect
基础用法detect 用于检测语言类型。from langdetect import detectdetect("I am a string")当文本模糊时,多次运行detect可能会输出不同的结果。detect_langs用于输出每种可能的语言类型和概率from langdetect import detect_langsdetect_langs("$%^&*()ddd")对于一些较为模糊的文本,可能输出的概率也不同。DetectorFactory可以设定一个种子值:from
2021-06-09 15:01:10
436
原创 云音乐推荐系统网课-1 项目整体介绍
推荐系统的应用场景电商、视频、新闻、社交网络等推荐系统的核心要素用户 user:服务对象冷启动用户 普通用户字段用户ID用户名注册时间年龄性别城市物品和内容 item字段物品ID名称描述品类Category标签tags分享次数事件和语境 event & context事件指的是用户和系统的交互过程语境泛指推荐系统与用户交互时所有相关的背景信息,包括时间、地点、
2021-06-02 23:38:46
329
原创 Hadoop学习笔记:基础
1. Hadoop和谷歌的Mapreduce、GFS技术的关系Hadoop是一个开源的分布式计算平台,为用户提供了系统底层细节透明的分布式基础架构。Hadoop的核心是Mapreduce和HDFS。Mapreduce是谷歌的MapReduce的开源实现,允许用户在不了解分布式系统底层细节的情况下开发并行应用程序。是一种编程模型,用于大规模数据集(1T以上)的并行计算,把输入的数据集分为若干个独立数据块,分发到各个分节点上共同完成计算,最后整合中间结果得到最终结果。HDFS是谷歌的GFS的开源实现,是面
2021-05-15 21:15:07
1275
2
原创 Innodb存储引擎 Ch5 索引与算法
常见索引B+树全文索引哈希索引B+树二叉查找树AVL树(平衡二叉树)是一棵二叉查找树,但是任何节点的两个子树高度差最大为1。B+树 一棵m阶B树是一棵平衡的m路搜索树。最重要的性质是每个非根节点所包含的关键字个数 j 满足:┌m/2┐ - 1 <= j <= m;子树的个数最多可以与关键字一样多。非叶节点存储的是子树里最小的关键字。同时数据节点只存在于叶子节点中,且叶子节点间增加了横向的指针,这样顺序遍历所有数据将变得非常容易。特点高扇出性:B+树的高度一般是2-4层。
2021-05-06 14:28:30
124
原创 Marketing Management Ch1
What is marketingMarketing is a bout identifying and meeting human and social needs.Marketing is the activity, set of institutions, and processes for creating, communicating, delivering and exchanging offerings that have value for customers, clients, par
2021-05-04 01:05:07
2926
原创 InnoDB存储引擎 Ch4 表
表的逻辑结构表的物理结构表空间 Tablespace段 Segment数据段索引段回滚段区 Extent页 Page数据页undo页系统页事务数据页插入缓冲位图页插入缓冲空闲列表页未压缩的二进制大对象页压缩的二进制大对象页行 Row...
2021-04-28 16:27:04
66
原创 Innodb存储引擎 Ch7 事务
1 概述扁平事务Flat Transaction出错时,回滚所有操作。成功完成,约占96%。应用程序要求停止事务,约占3%。回滚。由于外界原因,如超时,强制终止,约占1%。回滚。带有保存点的扁平事务Flat Transactions with Savepoint出错时,回滚到保存点(savepoint)位置。保存点用SAVE WORK函数建立,通知系统记录当下的处理状态。保存点在事务内部是递增的,即便回滚以后,保存点的号码也会根据之前可能已经被回滚的保存点的编号而增长。链事务Chaine
2021-04-28 16:26:23
180
1
原创 Innodb存储引擎 8备份与恢复
分类热备冷备温备:运行中进行,但会影响数据操作,例如加了全局读锁逻辑备份:导出可读文件,例如mysqldump裸文件备份:时间比逻辑备份要短很多 完全备份增量备份日志备份冷备备份内容frm文件共享表空间文件独立表空间文件(*.ibd)重做日志文件配置文件my.cnfmysqldump备份过程将shcema备份到指定文件.sqlmysqldump -u username -p schema_name > e:/yourpath/f
2021-04-06 13:58:40
104
转载 mysql: Lock wait timeout exceeded
报错原因-猜想1:当锁等待超时后innodb引擎报此错误,等待时间过长的语句被回滚(不是整个事务)。如果想让SQL语句等待其他事务更长时间之后完成,你可以增加参数innodb_lock_wait_timeout配置的值。如果有太多长时间运行的有锁的事务,你可以减小这个innodb_lock_wait_timeout的值,在特别繁忙的系统,你可以减小并发。InnoDB事务等待一个行级锁的时间最长时间(单位是秒),超过这个时间就会放弃。默认值是50秒。一个事务A试图访问一行数据,但是这行数据正在被另一个in
2020-11-30 15:38:57
306
原创 MySQL 脏读、幻读和不可重复读
Read Committed含义:读已提交,一个事务只能看到其他并发的已提交的事务所作的修改。特点:不会出现脏读:事务A:修改Table中数据为x,未提交事务B:读取Table中数据,x。事务A:rollback,并将x修改为y,提交。事务B:读取Table中数据,y。即读到了脏数据。存在不可重复读:事务A:读取Table中的数据,x。事务B:将x修改为y,提交。事务A:读取Table中数据,y。即在一个事务中同样的查询返回了不同结果。存在幻读事务A:读取Table
2020-10-10 13:10:26
381
原创 InnoDB存储引擎 3文件
参数查看information_schema下的GLOBAL_VARIABLES查找参数。但是在mysql8.0.21没有这张表格/视图?出错SELECT * FROM global_variables WHERE VARIABLE_NAME LIKE 'innodb_buffer%';成功SHOW VARIABLES LIKE 'innodb_buffer%';+-------------------------------------+----------------+| Variabl
2020-09-21 17:01:21
140
原创 InnoDB存储引擎 Ch1-2简介
第1章数据库:物理操作系统文件或其他形式文件类型的集合。实例:MySQL数据库由后台线程和一个共享内存区组成。MySQL是一个单进程多线程架构的数据库。MySQL最大特点:插件式的表存储引擎。存储引擎是基于表的,不是数据库。第2章 InnoDB存储引擎版本SHOW VARIABLES LIKE 'innodb_version';+----------------+--------+| Variable_name | Value |+----------------+--------+
2020-09-16 16:52:22
166
转载 matlab的containers.Map类型介绍
Map是储存键值对的结构体。键是实数或字符向量,值是标量或非标量数组。定义统一值keySet = {'Jan','Feb','Mar','Apr'};valueSet = [327.2 368.2 197.6 178.4];M = containers.Map(keySet, valueSet);定义非统一值keySet = {'Li','Jones','Sanchez'};testLi = [5.8 7.35];testJones = [27 3.92 6.4 8.21];testSa
2020-09-08 16:25:16
1390
翻译 matlab 数据库常用函数
sqlwrite(conn,tablename,data)sqlwrite(conn,tablename,data,Name,Value)
2020-09-02 14:14:17
1714
翻译 matlab中的类定义classdef
法一不使用文件夹,直接创建和类同名的文件法2使用文件夹需要加上@,并且每个文件夹只包含和文件夹名称相同的类的定义和函数法3打包成为package,需要使用命名空间。package文件夹以+开头命名。...
2020-08-11 22:18:51
3242
原创 matlab 中 @ 的用法
表示函数句柄y = @sing = y(pi) % 即y与sin此时用法相同指向表达式格式:变量名=@(参数列表)函数表达式z = @(x, y) x.*exp(-x^2 - y.^2)
2020-08-11 22:13:37
1689
原创 matlab类property的dependent属性
matlab文档中,将constructor作为初始化类的方法。有的类属性是根据其他属性成员得到的,需要设定Dependent = True并为他声明get方法以初始化。properties (Dependent = True, SetAccess = Private) %GetAccess会为该属性赋值,故Set为private totalendmethods function total = get.total (obj) ind = find (obj.item2 > 0)
2020-08-11 22:12:43
2184
原创 Matlab的table类型介绍
Matlab中,table类型类似R语言dataframe。发现网上没有太多介绍,由于我要做完整的数据处理工作,这个类型是自己比较熟悉的,所以准备扒一遍教程和各种资料。table读取:readtable('abc.csv')table构造:%VariableName 用{ }存放,逗号隔开table(column1, column2, ...., 'VariableNames', column_name)%Size 表示table的行列数:50行3列%VariableType.
2020-08-05 15:00:59
12833
1
原创 MatLab连接MySQL
采用ODBC与MySQL连接后,Database Toolbox中的函数可以实现数据导入、导出、查询等操作。参考自MatLab帮助文档。Connection对象:由database()函数创建连接并保存为数据库连接对象。创建时,matlab自动列出属性。详细properties见文档。conn = database(mysqlServiceName, username, password);conn.message %为空时,则连接成功conn.DataSource %为数据库服务器名
2020-07-29 17:32:11
516
原创 AR模型的R语言实现
本模型存在问题。AIC那边始终计算不对。。可能AIC函数有错?但其他检查后都是对的。能够验证均值回转定理。参数估计+定阶自协方差函数根据首先计算自协方差函数AutoCov<-function(ts,P){ mu0=mean(ts) #拆分数据 a=ts[1:(length(ts)-P)] b=ts[(P+1):length(ts)] c=0 ...
2019-05-20 12:54:44
15286
原创 分析上证综指和恒生指数的相关性和波动性-R
变量:恒生指数(HSI),上证综指(SSEN)开始日期:2000年12月6日结束日期:2019年4月1日样本容量:4087缺失值处理:直接去除老师要求从底层写起。有了一系列愚蠢的轮子。。当然我的代码也不可能不愚蠢了。。事件窗口后面分析还会再加。library(ggplot2)#数据读取和处理DataProcess<-function(){ ...
2019-04-08 23:16:40
2361
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人