- 博客(80)
- 资源 (10)
- 收藏
- 关注
原创 hive的特殊函数named_struct、inline及特殊类型map<string, array<string>>
named_struct、inline、map
2023-02-13 15:56:44
1239
原创 tensorflow cpu、gpu与python、cuda各版本对应的whl文件
tensorflow cpu、gpu与python、cuda各版本对应的whl文件
2022-08-24 10:42:50
896
原创 英伟达显卡、cuda、cudnn、tensorflow-gpu、torch-gpu版本对应关系
英伟达显卡、cuda、cudnn、tensorflow-gpu、torch-gpu版本对应关系
2022-07-26 11:38:39
2452
转载 unbuntu、windows系统下解决安装了anaconda却无法创建python3.6环境的问题
unbuntu、windows系统下解决安装了anaconda却无法创建python3.6环境的问题
2022-06-28 18:45:02
1338
转载 命名实体识别的语料和代码(部分)
1.用规则做命名实体识别原文:用规则做命名实体识别——NER系列(一)这篇博文就不放出代码了,因为现在基本上不用规则做命名实体识别,当然除非你在某些特定的语料有规律,就完全可以用正则表达式来做。2.用HMM做命名实体识别原文:用隐马尔可夫模型(HMM)做命名实体识别——NER系列(二)代码和语料:https://github.com/lipengfei-558/hmm_ner_organization3.用CRF做命名实体识别原文:用CRF做命名实体识别——NER系列(
2022-04-01 18:40:47
1344
1
原创 pyspark模型训练
1、pyspark启动正常情况pyspark shell的启动成功后的界面:[admin@datacenter4 ~]$ pysparkPython 2.7.5 (default, Nov 16 2020, 22:23:17)[GCC 4.8.5 20150623 (Red Hat 4.8.5-44)] on linux2Type "help", "copyright", "credits" or "license" for more information.Welcome to ...
2022-03-30 17:18:20
3168
转载 sqoop export 数据覆盖更新
一、Sqoop export简介 Sqoop export工具被用来将文件集合从HDFS中导入到关系型数据库中。目标表必须事先已经在数据库中创建好。输入文件根据用户指定的分隔符被读取解析成记录集。Sqoop默认的是将这些操作转换成“INSERT模式”,向目标数据库中注入数据记录。在“更新模式”中,Sqoop将会产生更新语句替换数据库中已经存在的记录。在“调用模式”中,Sqoop会为每个记录产生一个存储过程调用。1、“INSERT模式”:Sqoop默认将每条记录以转换成INSERT语句,添加到数据库表中.
2022-03-23 15:13:26
1414
原创 评分卡:WOE、IV、PSI计算及ROC和KS曲线
公式定义和原理解释见:风控模型—WOE与IV指标的深入理解应用 - 知乎风控模型—群体稳定性指标(PSI)深入理解应用 - 知乎1、WOE和IV延伸:分箱后求 WOE 和 IV1. WOE describes therelationshipbetween a predictive variable and a binary target variable.2. IV measures thestrengthof that relationship.# Autor ch...
2022-03-10 15:59:04
4061
转载 java泛型<T> T和T的用法
<T> T 和T的区别:T是Type的首字母缩写;<T> T 表示“返回值”是一个泛型,传入什么类型,就返回什么类型;而单独的“T”表示限制传入的参数类型。<T> T 的用法这个<T> T表示返回值T的类型是泛型,T是一个占位符,用来告诉编译器,这个东西是先给我留着, 等我编译的时候再告诉你是什么类型。这里的demo只用定义一次,参数类型直接从传递的参数中获取。import org.springframework.util.Collec...
2022-02-10 18:05:36
497
转载 Spring IOC容器在Web容器中是怎样启动的
前言 我们一般都知道怎样使用spring来开发web应用后,但对spring的内部实现机制通常不是很明白。这里从源码角度分析下Spring是怎样启动的。在讲spring启动之前,我们先来看看一个web容器是怎样的启动过程、也认识下ServletContextListener和ContextLoaderListener阅读目录一、java web容器的启动 二、认识ServletContextListener 三、认识ContextLoaderListener 四、Spring ...
2022-02-10 15:48:40
565
转载 浅谈IOC--说清楚IOC是什么
转载自:http://www.cnblogs.com/DebugLZQ/archive/2013/06/05/3107957.htmlhttps://segmentfault.com/a/11900000148034121.IOC的理论背景2.什么是IOC3.IOC也叫依赖注入(DI)4.IOC的优缺点5.IOC容器的技术剖析6.IOC容器的一些产品7.参考博文本文旨在用语言(非代码)说清楚IOC到底是什么,没有什么高深的技术,园中的老牛、大虾们看到这里可以绕行了,以
2022-02-10 13:55:00
340
转载 局部变量为什么是线程安全的
我们一遍一遍重复讲到,多个线程同时访问共享变量时,会导致并发问题,那在Java 语言里,是不是所有的变量都是共享变量呢?工作中我发现不少同学会给方法里的局部变量设置同步,显然这些同学并没有把共享变量说清楚。那么Java 方法里的局部变量是否存在并发问题呢?其实很多人都知道局部变量是不存在数据竞争的,至于原因嘛,就说不清楚了。那它背后的原因到底是什么样的呢?要弄清楚这个,你需要一点编译原理的知识,你知道在CPU 层面,是没有方法概念的。CPU 的眼里只有一条条的指令。编译程序,负责把高级语言里的方法转
2022-01-04 15:18:21
214
原创 docker buildx跨平台镜像生成
注:首先需要在docker.hub网站注册个人账号,以下使用的cf2021docker均为个人docker账号id。step1:由于 Docker 默认的 builder 实例不支持同时指定多个 --platform,我们必须首先创建一个新的 builder 实例。同时由于国内拉取镜像较缓慢,我们可以使用配置了 镜像加速地址 的 dockerpracticesig/buildkit:master 镜像替换官方镜像。# 适用于国内环境(我用的)$ docker buildx create --us
2021-12-27 09:52:34
1811
原创 navicat to mysql存储表情符报错‘\xF0\x9F\x98\x97\xF0\x9F...‘ for column ‘CONTENT‘ at row 1
报错是因为utf8最多支持3个字节(中文),表情符是4个字节所以报错,这里要换成utf8的超集utf8mb4格式。解决步骤如下:step1:查询mysql的字符集编码格式:SHOW VARIABLES WHERE Variable_name LIKE 'character%' OR Variable_name LIKE 'collation%';+--------------------------+--------------------------------------------+
2021-10-11 15:57:27
739
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅