- 博客(11)
- 收藏
- 关注
RSS订阅
3原创 yum安装mysql5.7
看了一下别的作者废话很多，yum可正常使用、联网情况下直接3步搞定第一步： wget http://dev.mysql.com/get/mysql57-community-release-el7-8.noarch.rpm第二步：yum localinstall mysql57-community-release-el7-8.noarch.rpm第三步：yum install mysql-community-server安装完成，启动mysql和一些简单配置：第一步：启动
2021-12-13 14:23:40
1519
原创 doris stream_load自动导入数据
编写脚本#!/bin/basha=0for var in $(ls *.csv)do let a++ curl --location-trusted -u root:密码 -H "column_separator:分隔符" -T $var http://地址:端口/api/库/表/_stream_load echo "这是第"$a"次数据导入"done运营场景：脚本一键搞定...
2021-11-29 19:03:30
709
原创 doris be宕机自动重启
1、安装服务监控工具supervisor,yum方式：yum install supervisor2、修改配置文件/etc/supervisor[program:be]command=/opt/module/doris/be/bin/start_be.sh --daemon 启动命令autostart=true autorestart=true startsecs=0 user=root
2021-11-29 18:56:54
792
原创 找出mysql中重复数据
直接上案列1、建表：create table test1( id int, name varchar(10)， age int)2、插入数据：INSERT into test1(id,name,age) VALUES(1,'zhangsan',18);INSERT into test1(id,name,age) VALUES(1,'zhangsan',18);INSERT into test1(id,name,age) VALUES(2,'lisi',22)
2021-11-16 17:15:19
2163
原创 OLAP和OLTP的区别
OLAP：On-Line Analytical Processing：联机事务处理OLTP：On-Line Transaction Processing：联机分析处理数据大小的对比：OLTP处理少量数据，OLAP处理大量数据代表应用：OLAP:HIVEOLTP:MYSQL关系模型上对比：OLTP：关系建模OLAP：维度建模...
2021-11-16 15:27:42
1773
原创 mr和spark的区别
不严谨的说：mr每次计算中间结果需要落盘，spark计算结果存储于内存其实mr、spark都使用到了内存计算、并且都落盘过spark通过DAG对mr进行了一些优化，使得减少了与磁盘的交互，相比于mr有了更优解但是mr每次落盘虽然慢了一些但是相对于spark更为稳定，当数据量很大的时候spark加载数据到内存可能导致OOM，因此mr适合计算较长周期的任务指标...
2021-11-16 15:20:53
503
原创 spark on hive和hive on spark的区别
spark on hive：通过读取hive的元数据，获取到hive的表信息，通过sparkSQL去操作hive中的数据hive on spark：将底层的计算引擎mr替换成了spark，还可以hive on tez。
2021-11-03 12:00:48
758
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人