码路刺客-CSDN博客

原创数据建模圣经|数据模型资源手册卷3，数据建模最佳实践

《数据模型资源手册卷3》使用一个强大的数据模型模式的数据建模，评估特定与广义模型的优缺点，有助于你改进逻辑和物理模型的质量和完整性。读懂它，如同拥有一位随时在身边指导的专业导师，能助力你在数据建模的道路上不断精进，提升专业技能

2024-11-02 23:06:12 236

原创数据建模圣经|数据模型资源手册卷2，探索数据库逻辑模型设计

《数据模型资源手册卷2》是适合于数据建模人员以外，也能帮助业务经理，业务分析人员和体系结构设计人员，对IT专业人员碰到的各种不同的行业数据处理和集成工作，有一个更高层次的理解。

2024-11-02 23:02:27 182

原创数据建模圣经|数据模型资源手册卷1，探索数据建模之路

《数据模型资源手册卷 1》是数据建模领域的佳作。内容涵盖了数据建模的基础知识、原理与实践方法，无论是初学者还是有经验的工程师都能从中受益。书中提供了大量的实用技巧和最佳实践，有助于读者将理论知识转化为实际操作能力，解决工作中遇到的各种数据建模问题。

2024-11-01 00:48:10 261

原创 Jupyter notebook/nteract/Atom中配置scala交互式编程环境

Jupyter notebook是一款学习和科研的神奇，相信很多小伙伴已经利用它在学术科研、研究开发的道路上收获了便捷易用、可视直观的优点。大部分时候我们都是Jupyter notebook中编写python脚本，其实，可以额外安装相关语言的Kernel，让Jupyter notebook支持交互式执行相关语言代码，本文中介绍配置运行Scala代码的过程。前提条件安装Scala,找到Othe...

2019-04-14 16:49:00 1398

原创 PDI设计转换任务

Pentaho Data Integration(PDI),Kettle是PDI以前的名称.在2006年Kettle加入了开源的BI组织Pentaho,正式命名为PDI, 加入Pentaho后Kettle的发展越来越快了，并有越来越多的人开始关注它了.PDI(Kettle)是一款开源的、元数据驱动的ETL (数据的抽取、转换、加载)工具,是开源 ETL 工具里功能比较强大的一个.PDI官网,最新版...

2019-03-29 15:39:55 726

原创理解Python函数闭包

本文主要介绍什么是闭包，Ptyhon中使用闭包时容易出现的变量问题。闭包闭包指延伸了作用域的函数，其中包含函数定义体中引用、但是不在定义体中定义的非全局变量。函数是不是匿名的没有关系，关键是它能访问定义体之外定义的非全局变量。举个栗子def make_averager(): series = [] def averager(new_value): ...

2019-03-29 15:12:49 471

翻译使用CSS制作火焰燃烧动画

作者：Chalda Pnuzig使用技术：HTML (Pug) / CSS (SCSS)依赖库：-浏览器兼容：Chrome, Edge, Firefox, Opera, Safari源码链接：https://codepen.io/chalda/pen/wRJYmz作者：Jamie Coulter使用技术：HTML / CSS (SCSS)依赖库：-浏览器兼容：Chrome, ...

2019-03-13 17:12:32 1798

翻译 CSS制作水滴波浪效果案例

作者：Nicholas Gratton使用技术：HTML / CSS依赖库：-浏览器兼容：Chrome, Edge, Firefox, Opera, Safari源码链接：https://codepen.io/ngratton/pen/MZKJvr作者：Jhey使用技术：HTML (Pug) / CSS (Stylus)依赖库：-浏览器兼容：Chrome, Firefox, O...

2019-03-13 17:06:27 1734

翻译 11个使用CSS制作产品展示卡片样例

作者：John Mantas使用技术：HTML / CSS (SCSS)是否自适应：否依赖库：-浏览器兼容：Chrome, Edge, Firefox, Opera, Safari源码链接：https://codepen.io/john-mantas/full/bxmrBq作者：George Gedox使用技术：HTML / CSS (SCSS)是否自适应：否依赖库：font...

2019-03-13 16:58:17 13869 1

原创类Jupyter notebook编辑器桌面版nteract

Jupyter notebook是一款学习和科研的神奇，相信很多小伙伴已经利用它在学术科研、研究开发的道路上收获了便捷易用、可视直观的优点。我们使用的Jupyter notebook都是网页形式的，在浏览器中进行操作，保存的文件格式是.ipynb的。似乎在其他编辑器工具中打不开这种格式。有没有不想在网页中的Jupyter notebook编写代码，也可以直接编辑.ipynb格式的文件的方法呢？有...

2019-02-27 14:46:38 4123

原创【Atom】autocomplete-python插件报乱码异常问题

autocomplete-python插件可以帮助在写python代码时给出丰富的提示并且自动补全代码，换电脑重装该插件后发现按下键盘后，atom右上角总弹出autocomplete-python traceback output:的提示，提示信息还是乱码。解决方式是设置Python Executable Paths进入Atom设置Packages,找到该插件，进入Settings在Py...

2019-02-27 14:42:07 1247

原创 Python多个数组合并

Python中多个数组合并为一个数组的方法整理。extend方法该方法可以扩展数组，会改变原始数组。a = [1,2,3,4,7,5,6]b = ['a','b']c = ['h',12,'c']a.extend(b)a.extend(c)print(a)#结果：[1, 2, 3, 4, 7, 5, 6, 'a', 'b', 'h', 12, 'c']直接相加用+将各数组...

2019-02-27 14:39:47 39939

原创 Atom编辑器中使用Hydrogen切换Python虚拟环境

使用Anaconda的集成Python环境，自带的Jupyter代码编辑器很不错，可以进行代码交互运行。后来折腾Atom编辑器，在Atom中安装Hydrogen插件也可以达到交互运行目的，而且在Atom中编写代码体验稍微好点。有时候我们会在自己的项目中创建Python虚拟环境，Hydrogen连接Anaconda中的python内核，如何增加python虚拟环境的内核给Hydrogen使用呢？环...

2019-02-27 14:38:11 2538

原创 Python连接数据库将结果转换为DataFrame(列名和表字段一致)

很多时候，我们用Python处理数据，需要连接到Mysql、Postgresql等数据库，获取表数据，再构建pandas的DataFrame进行进一步处理。但是查询数据库结果集是没有表字段名称的，我们希望构建的DataFrame的列名和表字段一样。直接上代码这里以Postgresql数据库为例，Mysql数据库差不多，其他的自行改造。先封装一个查询类，查询返回的结果是一个字典，head是表列...

2019-02-27 14:23:06 4016

原创 SQL如何实现查找节点依赖

SQL如何运用递归查找有向无环图的节点依赖呢？问题是这样的例如我有以上的两个图，节点b的前置节点是a,节点c的前置节点是b和d，以此类推。给出一个节点，需要找出以此节点为前置节点的所有链条节点。比如给出a，那出来的结果就是a,b,c,d,e,给出f,那出来的结果就是f,g,h,i,j,k。数据准备创建表以及插入数据，多个前置节点用,隔开，注意，使用的是PostgreSQL数据库。-- ...

2019-02-27 14:20:33 506

原创 Atom插件aligner冒号(:)对齐的问题

最近在折腾Atom编辑器，写Python进行交互运行还是很方便的，代码提示什么的比Jupyter也好一些，还可以配置一堆插件，定制自己的开发环境。对于代码整齐性来说，aligner插件是不能错过的。atom-aligner是干什么的呢，就是用来对齐的，比如我们写这样一段变量赋值的程序：var_a =1 #我是变量1b = [1,2,3,4]#我是变量2cccc=(1,2,3)#注释ddd...

2019-02-27 14:07:58 915

原创有趣的404页面设计

作者：Andrew Hani使用技术：HTML / CSS / JavaScript依赖库：jquery.js浏览器兼容：Chrome, Edge, Firefox, Opera, Safari源码链接：https://codepen.io/androhani/pen/deOpMZ作者：Saleh Riaz Qureshi使用技术：HTML / CSS / JavaScript...

2019-02-27 14:02:54 2656

原创常用的JScript代码整理

目录准备遍历文件夹遍历所有文件获取文件MD5值创建Excel文件JScript并不是我们熟知的JavaScript，但是跟JavaScript很像，如果要在Windows环境中做一些自动化工作，比直接写BAT批处理脚本要简单些。JScript是由微软公司开发的活动脚本语言，是微软对ECMAScript规范的实现。JScript最初是随Internet Explorer 3.0于1996年8月...

2019-02-27 13:53:35 915

原创 Aqua Data Studio 执行HiveSql的问题

连接Hive的客户端有很多，Aqua Data Studio是不错的一个，之前用过DbVisualizer，多个Sql语句都是用;结束的，运行没问题，但是到了Aqua里就报错了：&gt;[Error] Script lines: 1-1 -------------------------- Error while compiling statement: FAILED: ParseExc...

2018-07-28 09:55:30 2287 1

原创【Hive】日期从整形转为Date类型

在建表的时候我们常将日期字段设置为INT类型，将诸如20180601这样的数字值来表示日期，这样在做日期比较等操作时没有问题，但是要进行某些日期计算，就要先转成日期类型才能进行计算了，怎么转换呢？数据准备下面在Hive中先建一个表，含有一个INT类型的日期字段，插入两行数据。create table tb (dt INT);insert into tb values (201...

2018-07-28 09:48:46 16734 1

原创 CentOS Hbase-1.2.0 安装配置

本篇介绍在四个节点的集群中安装Hbase，Hbase依赖于zookeeper,Hbase的安装包内自带zookeeper，本篇将配置使用单独安装的zookeeper。最后启动时遇到Master is initializing、error telling master we are up的异常，通过修改hosts文件得以解决。安装环境虚拟机：VMware Workstation 12 ...

2018-01-24 22:07:57 1002

原创 CentOS上zookeeper集群模式安装配置

本篇介绍在四个节点的集群中搭建zookeeper环境，zookeeper可配置三种模式运行：单机模式，伪集群模式，集群模式，本文使用集群模式搭建。安装环境虚拟机：VMware Workstation 12 PlayerLinux版本：CentOS release 6.4 (Final)zookeeper版本：zookeeper-3.4.5-cdh5.7.6.tar.gz集群节点

2018-01-23 15:00:20 504

原创【ORACLE】常用物化视图相关元数据查询语句

对物化视图的状态等信息进行查询，监控和管理时，需要对系统视图进行查询，以下列出了常用的物化视图状态、依赖关联，批量维护时能用到的查询语句，根据具体情况进行适当修改。

2018-01-03 23:23:11 5029

翻译【ORACLE】物化视图相关元数据视图字段说明

当需要对物化视图的状态等信息进行查询，监控和管理时，就要用到相关的系统元数据表了，本文介绍了Oracle物化视图相关的元数据系统视图的表结构，这些视图有：`ALL_VIEWS`,`DBA_MVIEWS`,`USER_MVIEWS`，`ALL_MVIEW_ANALYSIS`，`DBA_MVIEW_ANALYSIS`，`USER_MVIEW_ANALYSIS`，`ALL_MVIEW_AGGREGATES`等。

2017-12-10 15:14:10 3257

原创 Markdown使用table标签创建表格的问题

使用Markdown写东西有时需要插入表格，方式有两种：1.使用Markdown的表格语法2.使用html的<table>标签来创建表格但是某些Markdown编辑器中使用<table>标签会出现表格前有空行的情况。

2017-12-10 14:54:41 4084

原创【ORACLE】物化视图快速刷新限制条件

快速刷新的物化视图创建比较麻烦，限制条件比较多，本文参考Oracle 11g 11.2版本官方文档，总结一般情况、含有联接、含有聚合计算、UNION ALL等情况下的限制条件。

2017-12-06 17:01:09 4007

原创【cmd】IF ELSE 复制(copy)文件问题

cmd中复制文件COPY命令一般都不会有问题，但是如果把COPY放在IF ELSE中可能导致批处理文件无法运行。

2017-11-28 12:21:46 1305

原创 Play Framework 2.5 环境搭建与新建项目（二）

activator ui 方式打开命令行窗口，输入以下命令：activator ui 浏览器中打开一个页面，类似于一个IDE，实际上也是一个网页版的IDE。选择 Seeds->Play Java Seed，在右下角选择项目创建到的文件夹路径，然后点 Create app 完成创建。

2016-09-25 11:39:15 2697

原创 Play Framework 2.5 环境搭建与新建项目（一）

简介Play Framework是啥？引用下百度百科的说法： Play！是一个full-stack（全栈的）Java Web应用框架，包括一个简单的无状态MVC模型，具有Hibernate的对象持续，一个基于Groovy的模板引擎，以及建立一个现代Web应用所需的所有东西。

2016-09-25 11:33:22 4468 2

原创 SSIS中Foreach循环容器处理XML数据

上一篇文章《在SSIS 中使用 Web Service 以及解析XML 数据》中介绍了使用SSIS的WebService控件解析XML数据，最后也提到对于返回的XML数含有数组类型的时候需要一点额外的处理。本示例将介绍在SSIS中用Web服务任务组件调用天气预报Web服务的接口查询城市的天气等信息，因为返回XML格式的数据含有数组，

2016-05-16 20:50:32 1421

原创在SSIS 中使用 Web Service 以及解析XML 数据

本文将演示调用美国一个查询城市编码的Webservice接口，将查询到的信息保存到我们自己数据库的表中。http://www.webservicex.net/uszip.asmx是一个查询美国城市编码信息的Webservice接口，例如我们点击GetInfoByCity方法，输入New York，调用后返回XML格式的文件。

2016-05-16 20:46:42 6608

翻译怎样用CSS做出3D效果的云

介绍本文将介绍如何一步一步制作出一些3D效果的云彩，会用到一些高级的属性，主要是如何通过CSS的3D转换效果来实现。本教程将会分成几个部分，每一部分都会有详细的步骤让你理解HTML,CSS和Javascript都是如何工作的，每一步都有衔接，以及一个链接来测试单个部分的代码效果。

2016-03-15 23:56:29 1085

原创 Pentaho 6.0 安装与启动教程

本文主要介绍了开源BI工具Pentaho 6.0社区版的安装与启动，安装环境为虚拟机+Win server 2008 r2,一起来体验下吧。

2016-03-08 20:30:27 5090 1

转载 Windows Server 2003 IIS6.0+PHP5(FastCGI)+MySQL5环境搭建教程(转载)

准备篇一、环境说明：操作系统：Windows Server 2003 SP2 32位PHP版本：php 5.3.14MySQL版本：MySQL5.5.25二、相关软件下载：1、PHP下载地址：http://windows.php.net/downloads/releases/php-5.3.14-nts-Win32-VC9-x86.zip

2015-10-22 08:38:57 999

原创 SSIS探索之SSIS增量抽取数据

背景：在工作中，我想对业务系统的日志信息进行分析，需要将日志信息抽取到另外一个表里，由于日志表的数据量庞大，我只需要从某一特定时间开始对业务系统产生的日志抽取出来，而且需要每5分钟（假定）进行抽取一次，把在这5分钟内产生的日志信息抽到我的表里面，产生一个增量抽取的效果。

2014-11-15 14:36:14 8595 2

原创 Bootstrap Tour引导向导提示插件只能打开一次的解决方法

http://bootstraptour.com/

2014-05-29 11:38:22 2253

转载 Java获取WEB目录路径

Java取得web工程目录-http://www.javaweb.cc1.可以在servlet的init方法里String path = getServletContext().getRealPath("/");这将获取web项目的全路径例如 :E:\eclipseM9\workspace\tree\tree是我web项目的根目录2.你也可以随时在任意的class里

2014-05-23 09:50:51 976

原创 jdbc连接sybase数据库的问题

问题：开发jsp应用，测试用的sqlserver数据库，

2014-05-07 11:42:06 4030 1

转载 JQuery常用选择器总结

这是看《锋利的jquery》时，整理出来的一些东西，很多方法，需要大家亲自实践一下，才会理解得更加深刻，切莫眼高手低哦……Jquery选择器分类：基本选择器，层次选择器，过滤选择器，表单选择器一、基本选择器：jquery中最常用的选择器，也是最简单的选择器。通过元素id、class和标签名等来查找DOM元素。表-基本选择器选择器描述

2014-03-29 01:49:28 622

转载必须知道的28个HTML5特性、技巧

信息技术瞬息万变。如果你不关心这种变化，所掌握的技术很快就会被淘汰。所以，如果你对HTML5技术的变化感到很突然，就将这篇文章当做敲门砖吧。1. New Doctype 你还在使用令人讨厌的难记的XHTML文档类型声明吗？ http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd>如果还在用，为什么呢？如同D

2014-03-26 00:05:02 2025