- 博客(15)
- 资源 (113)
- 收藏
- 关注
原创 数据可视化第1篇:数据可视化的介绍
有人说,数据可视化不就是画图嘛,看不出来研究的价值在哪。我原来也天真的以为,数据可视化就是把数据从冰冷的数字转换成图形,顶多就是色彩丰富一些,看起来更酷炫,逼格满满。其实不然,一个好的可视化,能够带给人们不仅仅是视觉上的冲击,还能够揭示蕴含在数据中的规律和道理。以最简单的方式观察数据,帮助用户实现随心所欲的数据可视化探索,即时发现隐藏在数据背后的业务见解。虽然数据可视化通常会让人联想到商业智能与西装革履的分析师,但它通常比您所想象的更具创意并且丰富...
2020-10-03 16:16:15 492
原创 kettle自动化的那些事
kettle自动化的那些事一、kettle介绍 Kettle 是一款国外开源的 ETL 工具,纯 Java 编写,绿色无需安装,数据抽取高效稳定(数据迁移工具)。Kettle 中有两种脚本文件,transformation 和 job,transformation 完成针对数据的基础转换,job 则完成整个工作流的控制。二、ETL介绍 ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程,目的是将企业中的分散、零乱、标准不统一的数据整合到一起,为企业的决策提供分析依据, E..
2020-11-04 10:59:11 846
原创 数据可视化第14篇:安装3.0大数据平台虚拟机前期准备(网络配置全网最详细)
一、虚拟机环境准备1、安装3台新虚拟机,对于初学者不建议克隆虚拟机。克隆虚拟机到是方便,但是总会有一些网络问题。如果虚拟机玩得明白,可以只安装1台新虚拟机,另外再克隆2台虚拟机。2、虚拟机配置要求注意:以上配置,可以根据自己的电脑配置调整,所以我给出的是区间范围。关于操作系统,自己熟悉啥就用啥!如果不会安装linux虚拟机系统的,请参考前面的文章。传送门如下: 1).数据可视化第3篇:安装linux操作系统5系列 ...
2020-10-11 07:21:37 324
原创 数据可视化第13篇:安装linux操作系统7系列
1.前言后续的课程就要对接大数据平台了,hadoop生态圈使用的是最新的3.0系列,虚拟服务器系统,我使用的是centos7.5。2.软硬件准备虚拟机、ISO等相关软件,我已上传到百度网盘,连接地址在下面这篇博客中https://blog.51cto.com/51power/25397523.安装CentOS1.连接光盘右击刚创建的虚拟机,选择设置先选择CD/DVD,再选择使用ISO映像文件,最后选择浏览找到下载好的镜像文件。启动时连接一定要勾选上后确定。2.开启虚拟
2020-10-09 08:31:04 178
原创 数据可视化第12篇:生成千万级数据之PowerDesigner配置并生成数据
引言:工作中,遇到了造测试的需要,本想着自己写批量的insert就可以了。可是数据量太大了,用insert批量太麻烦了。事实表和维度表定义,及测试数据:(1)医疗收入事实表create table project_cost_fact( id int primary key auto_increment, cost_direction_code VARCHAR(20) comment '费用方向编码', hospital_code VARCHAR(20)...
2020-10-08 21:05:12 406
原创 数据可视化第11篇:生成千万级数据之PowerDesigner连接mysql
第一步:打开PD软件;第二步:创建新的Model第三步:创建PDM视图(选择自己要连接的数据库)第四步:连接数据源:通过配置文件连接(配置)连接配置文件列表我们是新安装的PowerDesigner,还没有配置文件,新创建即可编写新创建的配置文件(连接类型、DB类型、mysql中的用户、JDBC驱动类、JDBC连接串、驱动jar包)测试连接(输入mysql中用户对应的密码)连接成功测试连接时,会报连接失败!!!!图片是图片,你
2020-10-08 21:02:24 400 2
原创 数据可视化第10篇:davinci扩展数据源支持
davinci默认的数据源驱动配置文件中,只配置了mysql和oracle。但是jar只有mysql的驱动jar包,所以默认davinci只支持连接mysql数据源。一、修改数据源驱动配置文件(1)进入davinci安装目录中的config文件夹cd $DAVINCI3_HOME/config(2)修改数据源驱动配置模板mv datasource_driver.yml.example datasource_driver.yml(3)编辑数据源驱动,并追加内容(支持kylin...
2020-10-03 16:34:31 2003
原创 数据可视化第9篇:windows安装davinci
1、首先安装mysql(windows安装mysql,网上太多了,我就不上图了)新增系统变量,MYSQL_HOME 变量值为:mysql的安装目录(比如安装在D:\mysql)Path中加入 %MYSQL_HOME%\bin登录mysqlmysql -P 3306 -h localhost -u root -p123456执行命令(创建数据库 davinci3)create databasedavinci3;2、解压davinci-as...
2020-10-03 16:29:57 1084 2
原创 数据可视化第8篇:linux安装davinci之davinci
1、创建目录并解压mkdir -p /root/app/davinciunzip /tmp/davinci-assembly_3.0.1-0.3.1-SNAPSHOT-dist-beta.9.zip -d /root/app/davinci/2、配置环境变量vi /etc/profile#DAVINCI3_HOMEexport DAVINCI3_HOME=/root/app/davinci/export PATH=$PATH:$DAVINCI3_HOME/binvi ~.
2020-10-03 16:27:46 1277 4
原创 数据可视化第7篇:linux安装davinci之mysql
1、前期准备(1)查看MySQL是否安装rpm -qa|grep mysqlmysql-libs-5.1.73-7.el6.x86_64(2)如果安装了MySQL,就先卸载rpm -e --nodeps mysql-libs-5.1.73-7.el6.x86_64(3)解压mysql-libs.zip文件到当前目录cd /tmpunzip mysql-libs.zipcd mysql-libs2、安装MySQL服务器(1)安装MySQL服务端rpm
2020-10-03 16:26:30 319
原创 数据可视化第6篇:linux安装davinci之jdk
1、卸载自带jdkrpm -qa|grep javarpm -e --nodeps tzdata-java-2016c-1.el6.noarchrpm -e --nodeps java-1.7.0-openjdk-1.7.0.99-2.6.5.1.el6.x86_64rpm -e --nodeps java-1.6.0-openjdk-1.6.0.38-1.13.10.4.el6.x86_642、安装jdk 1.8mkdir -p /root/app/jdktar -zx
2020-10-03 16:24:46 165
原创 数据可视化第5篇:安装win7和win10操作系统
很多人不擅长linux操作,觉得在windows下安装软件方便。其实,在windows上安装软件,如果安装失败了,要想卸载干净也是比较麻烦的,因为很多内容都写到了注册表。所以,建在虚拟机中,创建一个win7或者win10的系统,然后在虚拟机中安装davinci。这样你的本机操作系统,不会因为安装了软件而被污染了。在虚拟机中安装davinci,如果操作失败,可以直接把虚拟机中的windows系统删除,大不了重新安装一次!你也可以在虚拟中安装好win7或者win10的时候,打上个快照。如果在虚拟机中...
2020-10-03 16:23:21 276
原创 数据可视化第4篇:安装linux操作系统6系列
上一篇讲解了在新创建的虚拟机中,安装liunx5系统。这一篇详细讲解,在新创建虚拟中安装linux6系统。本文中我使用的是redhat,其实centos也是一模一样的操作。(1)用光盘成功引导系统,会出现下面的界面(直接回车)界面说明:Install or upgrade an existing system:安装或升级现有的系统install system with basic video driver:安装过程中采用 基本的显卡驱动...
2020-10-03 16:22:12 184
原创 数据可视化第3篇:安装linux操作系统5系列
上一篇我们讲解了,在虚拟机软件中新创建一个虚拟机。这一篇我们继续,在新创建的虚拟机中,安装linux操作系统。同样是图文并茂的方式,很好理解上手。(1)编辑安装好的虚拟机(引入ISO)(2)找到本地的ISO文件(3)确定(4)开启虚拟机(5)直接回车(默认图形安装)(6)跳过光盘检查(7)下一步(8)简体中文(或者English也行)(9)选择键盘(10)跳过(11)确认跳过(12)清空虚拟磁盘中所有的数据.
2020-10-03 16:20:01 166
原创 数据可视化第2篇:服务器搭建
很多同学都没有服务器,我们学习使用虚拟机即可,也没必要买服务器。这篇文章带来的是,如何在虚拟机软件中创建虚拟机。(1) 、创建新的虚拟机(2)算定义安装(3)虚拟机类型(4)先不指定ISO盘(5)指定安装的操作系统类型(6)指定虚拟机名称和安装路径(7)指定CPU核心(8)指定内存(根据自己的电脑可以适应调大)(9)设置网络连接模式(10)指定控制器类型(11)创建新的虚拟磁盘(12)指定磁盘类型(13)指定
2020-10-03 16:18:31 351
数据可视化之davinci
2020-10-08
pdfbox_2.0.9史上最全包
2018-09-25
透过SQL Server 2008访问Oracle 10g的配置方法
2012-05-31
C#程序配置报表到SQL Server2005报表服务(SSRS)
2012-05-31
谈JDBC SQLSERVERError establishing socket
2012-05-31
SQL Server使用convert对datetime日期数据进行获取
2012-05-31
Sql Server参数化查询之where in和like实现详解
2012-05-31
SQL Server 索引中include的魅力(具有包含性列的索引)
2012-05-31
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人