E_Noodles-CSDN博客

转载大数据存储单位介绍(TB、PB、EB、ZB、YB有多大)

“大数据”作为时下最火热的IT行业的词汇，随之数据仓库、数据安全、数据分析、数据挖掘等等围绕大数量的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。笔者愚钝，大数据有多大，一直没有清晰的概念，故此简单的科普研究，分享至此：　最小的基本单位是Byte应该没多少人不知道吧，下面先按顺序给出所有单位：Byte、KB、MB、GB、TB、PB、EB、ZB、YB、DB、NB我只知道前五个，估计大多数人都...

2019-09-16 17:07:33 54423 1

转载大数据工程师手册：全面系统的掌握必备知识与工具

如何才能成为一名真正的“全栈（full-stack）”数据科学家？需要了解哪些知识？掌握哪些技能？概括来讲，一名全能型选手要把数据科学过程中从数据存储到把预测模型投入正式生产的每一步都能 hold 住。一般来说，大家在学习过程中更注重机器学习或深度学习技术的理论学习与应用，数据管理方面的知识往往是“事后诸葛亮”；数据科学专业的学生们对如何处理、清洗数据等建模技术关注较多，忽略了如何制作...

2019-09-16 16:50:08 199

原创 hadoop hdfs操作命令

创建一个文件夹${HADOOP_HOME}/bin/hdfs dfs -mkdir /demo1上传本地文件到HDFS上${HADOOP_HOME}/bin/hdfs dfs -put ${HADOOP_HOME}/etc/hadoop/core-site.xml /demo1从HDFS上下载文件到本地${HADOOP_HOME}/bin/hdfs dfs -get...

2019-03-05 12:58:52 264

转载 Linux下挂载window共享文件夹，实现数据异地备份

一、应用说明此种方式可以实现数据库备份文件自动上传至局域网共享机器上。二、相关配置1、Linux系统配置：centos6.82、window系统配置：操作系统： Windows 10IP地址：192.168.0.134共享文件夹： D:\sharetest共享用户名： admin共享用户名密码： admin三、实现方...

2019-02-26 17:33:35 259

原创 linux定时备份oracle

1. 创建备份文件 vi bak.sh#!/bin/bashexport ORACLE_BASE=/home/server/appexport ORACLE_HOME=/home/server/app/server/product/11.2.0/dbhome_1export ORACLE_SID=orcl export ORACLE_TERM=xtermexport PATH=$O...

2019-02-26 16:53:04 1237

原创 linux 自动启动oracle

切换到$ORACLE_HOME/bin目录下，修改文件oratab[root@ST ~]# vi /etc/oratab # This file is used by ORACLE utilities. It is created by root.sh# and updated by either Database Configuration Assistant while cre...

2019-02-22 17:42:49 523

原创定时执行存储过程

SYS开启JOB进程数ALTER SYSTEM SET job_queue_processes = 20;commit;启动JOB系统服务/* 查询:select job,broken,what,interval,t.* from user_jobs t; job job的唯一标识，自动生成的 broken 是否处于运行状态，N;运行；Y:停止 what...

2019-02-21 20:10:35 1132 1

原创 Oracle系统查询很慢或索引慢数据库清理日志

系统查询很慢或索引慢 Enter user-name: conn /as sysdbaEnter password:3、打开数据库SQL> alter database open;alter database open4、查日志SQL> select group#,sequence#,archived,status from v$log; ...

2019-02-21 17:54:08 842

转载行转列

--1.添加测试数据create table tmp asselect 'A1' as a, 'B1' as b from dual union allselect 'A2' as a, 'B2' as b from dual union allselect 'A3' as a, 'B3' as b from dual union allselect 'A4' as a,...

2019-02-21 17:50:59 1520

原创关于索引

--查所有表的索引SELECT T.TABLE_NAME, --表名T.INDEX_NAME, --索引名I.UNIQUENESS, --是否非空I.INDEX_TYPE, --索引类型C.CONSTRAINT_TYPE, --键类型WM_CONCAT(T.COLUMN_NAME) COLS,(CASEWHEN C.CONSTRAINT_TYPE = 'P' OR ...

2019-02-15 12:01:52 194 2

转载 Hbase 与 MongoDB的区别

1.mongodb 基于文档存储，也有数据关联，单条记录的结构可以很复杂，索引也可以设置很多列；还有个二进制文件存储模块，貌似很多公司都在用这个存储图片、文档，很爽；感觉使用MongoDB解决一般的应用都没有啥问题；安全管理方面不是强项；使用过MongoDB，会觉得这个用起来很不错；mongodb的delete会将该行的数据标示为已删除，因为mongodb在删除记录...

2019-02-15 11:59:11 5782

原创 hadoop部署

集群信息如下：主机名 Hadoop角色 Hadoop jps命令结果 Hadoop用户 Hadoop安装目录 master Master slaves NameNode DataNode JobTracker...

2018-11-05 17:17:04 338

转载清除Internet临时文件

清除Internet临时文件RunDll32.exe InetCpl.cpl,ClearMyTracksByProcess 8清除Cookies　　RunDll32.exe InetCpl.cpl,ClearMyTracksByProcess 2清除历史记录　　RunDll32.exe InetCpl.cpl,ClearMyTracksByProcess 1清除表单数据　　Ru...

2018-11-05 17:02:50 1451