对java有感觉-CSDN博客

原创 torch版本_文本预处理；语言模型；循环神经网络基础

-------------------------文本预处理--------------------------- #读入文本 import collections import re def read_time_machine(): with open('/home/kesci/input/timemachine7163/timemachine.txt', 'r') as f: ...

2020-02-14 21:18:45 308

原创 torch版本_线性回归；Softmax与分类模型、多层感知机

-----------------------线性回归------------------------------------ import torch from torch import nn import numpy as np torch.manual_seed(1) print(torch.__version__) torch.set_default_tensor_type('torc...

2020-02-14 21:03:23 331

原创部分mp4不能在google浏览器里面播放需要转码一下

import lombok.extern.slf4j.Slf4j; import ws.schild.jave.*; import java.io.File; import java.util.Date; @Slf4j public static void main(String[] args) { File source = new File("/Users/sunhongjie/...

2019-08-19 17:02:27 1219

原创 datawhale-Task2-iv值特征处理

数据集下载:https://pan.baidu.com/s/1wO9qJRjnrm8uhaSP67K0lw # -*- coding: utf-8 -*- """ @author: Administrator """ import pandas as pd import numpy as np def calc_iv(df, feature, target, pr=False): ...

2019-05-13 22:43:50 249

原创 datawhale数据分析任务1

import pandas as pd from sklearn.impute import SimpleImputer from sklearn.preprocessing import OrdinalEncoder from sklearn.feature_selection import VarianceThreshold from sklearn.feature_selection im...

2019-05-12 17:45:51 237

原创 NLP--Attention，HAN，文本分类

1. 基本的Attention原理。参考翻译任务中的attention。 1.1.我理解attention是对于每个数据进行权重划分。看一下代码就明白了。 with tf.name_scope('attention'): input_shape = _outputs.shape # (batch_size, sequence_length, hidden_size) seq...

2019-03-22 10:15:05 761

原创 BERT学习

1. Transformer的原理。 Transformer 是Seq2Seq的升级版，以前Seq2Seq encoder和decoder都是有CNN模型或者LSTM模型组成，现在就把这些模型替换成多个attention 2. BERT的原理。 2.1.采取新的预训练的目标函数：the “masked language model” (MLM) 随机mask输入中的一些toke...

2019-03-21 21:59:49 297

原创 CNN,RNN,CNNText,RNNText,RCNNText文本分类

1. RNN的结构。循环神经网络的提出背景、优缺点。着重学习RNN的反向传播、RNN出现的问题（梯度问题、长期依赖问题）、BPTT算法。其中每个圆圈可以看作是一个单元，而且每个单元做的事情也是一样的，因此可以折叠呈左半图的样子。用一句话解释RNN，就是一个单元结构重复使用。 RNN是一个序列到序列的模型，假设xt−1,xt,xt+1xt−1,xt,xt+1是一个输入：“我是中国“，那么o...

2019-03-17 13:37:48 3808

原创 NLP卷积，TextCNN学习

1. 卷积运算的定义、动机（稀疏权重、参数共享、等变表示）。一维卷积运算和二维卷积运算。我对卷积的理解是输出值=输入值*某个值如果输入值是一个一维的数据就是一维卷积。比如：输入的数据维度为8，过滤器的维度为5。卷积后输出的数据维度为8−5+1=4 如果输入值是一个二维的数据就是二维卷积。比如：数据维度为14×14，过滤器大小为5×5，二者做卷积，输出的数据维度为10×10（1...

2019-03-14 21:16:29 748

原创 Task6 简单神经网络

1. 文本表示：从one-hot到word2vec。 one-hot ：个人理解为是有0和1两位数字组成的一个向量如果为1的标示此地方就代表一个词或者字。维度自己可以根据数据量的大小定义。 word2vec:是把词和字可以转换成向量的一个方法，要比one-hot好。word2vec可以标示两词语之间的相似性，one-hot就不行一个词就代表一个词。 1.1 词袋模型：离散、高维、稀疏。 ...

2019-03-13 13:41:46 158

原创神经网络介绍，激活函数，正则化

1. 前馈神经网络、网络层数、输入层、隐藏层、输出层、隐藏单元、激活函数的概念。 1.1 前馈网络包括一个输入层和一个输出层，若干隐单元。隐单元可以分层也可以不分层，若分层，则称为多层前馈网络。网络的输入、输出神经元其激活函数一般取为线性函数，而隐单元则为非线性函数。任意的前馈网络,不一定是分层网络或全连接的网络。 1.2网络层数是指神经网络中的层级。 1.3 输入层是指神经网络中的输入参...

2019-03-11 20:33:12 709

原创 GaussianNB,SVM,LDA文本分类

1. 朴素贝叶斯的原理什么是朴素贝叶斯：贝叶斯分类是一类分类算法的总称，这类算法均以贝叶斯定理为基础，故统称为贝叶斯分类。而朴素朴素贝叶斯分类是贝叶斯分类中最简单，也是常见的一种分类方法。贝叶斯公式： P(Y|X)=P(X|Y)P(Y)P(X) P(Y|X)=P(X|Y)P(Y)P(X) X:特征向量 Y:类别先验概率P(X)P(X)：先验概率:是指根据以往经验和分析得到的概率。...

2019-03-09 21:48:26 755

原创 NLP-特征选择

1. TF-IDF原理。 TF-IDF（term frequency–inverse document frequency）是一种用于信息检索与数据挖掘的常用加权技术。TF意思是词频(Term Frequency)，IDF意思是逆文本频率指数(Inverse Document Frequency)。 TFIDF的主要思想是：如果某个词或短语在一篇文章中出现的频率TF高，并且在...

2019-03-07 13:36:03 902

原创 Datawhale《深度学习-NLP》Task1-NLP-召回率、准确率、ROC曲线、AUC、PR曲线学习理解

1.下载数据中文数据集：THUCNews THUCNews数据子集：https://pan.baidu.com/s/1hugrfRu 密码：qfud 2.基于CNN神经网络进行分类 https://github.com/gaussic/text-classification-cnn-rnnGITHUB地址下载完成之后导入pycharm进行模型训练，此代码运行时候需...

2019-03-02 17:40:49 580

转载 eclise卡死现象修改

使用Eclipse编辑jsp、js文件时，经常出现卡死现象，在网上百度了N次，经过N次优化调整后，卡死现象逐步好转，具体那个方法起到作用，不太好讲。将所有用过的方法罗列如下： 1、取消验证 windows–>perferences–>validation 把除了manual 下面的全部点掉，build下只留 classpath dependency Validator

2017-02-24 14:22:39 422

转载 nutch学习、、孤剑之家宝剑锋从磨砺出，梅花香自苦寒来。我欲仗剑走天涯。博客园首页新随笔联系订阅订阅管理随笔 - 771 文章 - 8 评论 - 13

孤剑之家宝剑锋从磨砺出，梅花香自苦寒来。我欲仗剑走天涯。博客园首页新随笔联系订阅管理随笔 - 771 文章 - 8 评论 - 134 trackbacks - 0 2015年7月 > 日一二三四五

2015-07-27 16:44:58 1006

转载模仿百度文库代码没试过。

Hongten 追求卓越，成功就会在不经意间追上你! 博客园首页博问闪存新随笔联系订阅随笔-474 文章-4 评论-495 java开发_模仿百度文库_OpenOffice2PDF_源码下载这几天在研究模仿着做类似于百度文库的东西，在这里给大家分享一下我自己做的东西。由于需要做这样的项目，我查阅

2014-10-09 11:16:19 923

转载 http://hi.baidu.com/xckouy/item/c6b6024fcafc2bac61d7b9d5 java根据模板自动生成文档数据换行操作

分享到一键分享QQ空间新浪微博百度云收藏人人网腾讯微博百度相册开心网个人让懂的人懂不懂的人不懂让世界依旧是世界我甘心我是我自己 2013-04-03 10:44 FreeMarker导出word文件，\n换行无效的问题解决记录目前开发的系统中，用到了freemarker导出画面上的内容到word文档。

2014-03-05 18:54:50 1517

转载 activeMQ文件传输

首页资讯精华论坛问答博客专栏群组更多 ▼ 您还未登录 ! 登录注册点点滴滴的足迹，幻化成漫天的云彩博客微博相册收藏留言关于我 ActiveMQ之三 -- 使用ActiveMQ来传送文件博客分类： Java Component

2014-01-14 17:40:55 1316

转载 activemq持久化设置

.NET框架 C#学习中 posts - 302, comments - 19, trackbacks - 0, articles - 0 导航博客园首页新随笔联系订阅管理公告昵称：kingwangzhen 园龄：4年9个月粉丝：8 关注：6 +加关注 2014年

2014-01-14 17:02:55 1863

转载 poi

POI进行跨行需要用到对象HSSFSheet对象，现在就当我们程序已经定义了一个HSSFSheet对象sheet。跨第1行第1个到第2个单元格的操作为 sheet.addMergedRegion(new Region(0,(short)0,0,(short)1)); 跨第1行第1个到第2行第1个单元格的操作为 sheet.addMergedRegion(new Regio

2012-03-10 18:00:06 701

原创 http://www.erichynds.com/examples/jquery-multiselect/examples.htm

http://www.erichynds.com/examples/jquery-multiselect/examples.htmhttp://www.erichynds.com/examples/jquery-multiselect/examples.htm

2012-03-10 16:15:13 608

转载 hightcharts

官方网站：http://www.highcharts.com/ 配置详解：http://www.highcharts.com/ref/ Jquery Highcharts 参数配置说明 chart： renderTo 图表的页面显示容器 defaultSeriesType 图表的显示类型（line,spline, scatter, splinearea

2012-01-12 23:03:59 827

翻译 Java 图片水印

package com.hmw.picMark; import java.awt.AlphaComposite; import java.awt.Color; import java.awt.Font; import java.awt.Graphics2D; import java.awt.Image; import java.awt.geom.AffineTrans

2011-12-20 23:53:07 643

原创 struts跳转

Java代码 /login/editorlogin.jsp /error.jsp countMessagebyedit.action?id=${bjilist.id} /login/editorlogin.jsp /error.jsp countMessagebyedit.actio...

2011-10-24 23:31:56 83

原创 java.lang.IllegalArgumentException: attempt to create saveOrUpdate event with nu

java.lang.IllegalArgumentException: attempt to create saveOrUpdate event with null entity 2011-05-23 11:11 HTTP Status 500 - --------------------------------------------------------------------...

2011-10-07 22:16:38 261

原创 org.hibernate.hql.ast.QuerySyntaxException: user is not mapped 异常

org.hibernate.hql.ast.QuerySyntaxException: user is not mapped [from user]1、hibernate.cfg.xml少了很多映射.为什么会少呢？因为我的都是拷贝过来的。不是自动生成的。另外 hibernate.cfg.xml，要放在根目录下。把你要映射的都写上去。 2、现象：使用hql="from ...

2011-10-06 17:46:14 180

程序员启示录

这是我在网上找的一份学习资料觉得很好就留下了，希望大家下的看看很好的

2009-04-09 22:31:05 84

原创异常处理

java.io.FileNotFoundException: \WEB-INF\petstore.log (系统找不到指定的路径。) 在log4j的配置文件里加入：#log4j.appender.logfile.File=${petstore.root}/WEB-INF/petstore.log javascript 设置多少秒后自动关闭窗口<div id="info">本窗口...

2009-04-04 10:57:08 99

正则表达式运用到JSP页面

用正则表达式限制只能输入中文：onkeyup="value=value.replace(/[^\u4E00-\u9FA5]/g,'')" onbeforepaste="clipboardData.setData('text',clipboardData.getData('text').replace(/[^\u4E00-\u9FA5]/g,''))" 用正则表达式限制只能输入全角字符： onkey...

2009-03-31 15:16:32 281

Struct2标签

一、写jsp页面的时候，在struts2中，用的是s标记，先引入标记： <%@ taglib prefix="s" uri="/struts-tags"%> 二、 struts2的标签和1是完全不同的。 struts2的标签分为两大类：非UI标志和UI标志 struts1 将标志库按功能分成HTML、Tiles、Logic和Bean等几部分下面就介绍strut2的具体标签： 1、U...

2009-03-30 22:53:56 106