- 博客(15)
- 收藏
- 关注
RSS订阅原创 Smartbi查询某张表时，可视化查询、sql查询、原生sql查询等都报错
查询某张表时，可视化查询、sql查询、原生sql查询等都报错https://wiki.smartbi.com.cn/pages/viewpage.action?pageId=40436464以我的使用情况来看，就是写sql查询的时候如果as 的字段是以数字开头那么也会报错，报sql语法的错误。但是sql可以查询出数据，那么就是解析字段的问题，还有，如果as 的字段是以数字开头的话，加引号也没有用，我是在字段前加了汉字。希望能给你帮助。...
2020-10-21 19:30:09
1101
原创 kafka的ack机制
0：意味着producer不等待broker同步完成的确认，继续发送下一条(批)信息,虽然提供了最低的延迟。但是却是最弱的持久性，当服务器发生故障时，就很可能发生数据丢失。例如leader已经死亡，producer不知情，还会继续发送消息broker接收不到数据就会数据丢失。1：意味着producer要等待leader成功收到数据并得到确认，才发送下一条message。此选项提供了较好的持久性较低的延迟性。Partition的Leader死亡，follwer尚未复制，数据就会丢失-1: 意味着prod
2020-08-30 20:02:25
456
原创 redis支持的数据类型
string list hash set zset（基本回答） 注意： redis5.x之后加了Stream（流）数据类型，所以5.x之后一共是6种数据类型加分项：另外redis还对这几种数据类型做了扩展，如GEO对位置计算，hyperLogLog做统计，bitmaps：redis底层存储value值都是存储的二进制数据，redis提供bitmaps（位图）可以直接访问或修改底层存储的二进制数据string list hash set zset Stream是数据类型hyperLogLog /ˈh
2020-08-30 19:53:29
133
原创 redis提供的持久化机制
redis 支持rdb和aof两种持久机制,redis4.0后支持混合持久化。rdb是定时的持久机制，宕机有可能会丢失最后一次持久化之后存在数据丢失。aof是基于操作日志追加的持久机制。（基本回答）加分项：1.rdb持久化原理原理是redis会单独创建（fork）一个与当前进程一模一样的子进程来进行持久化，这个子线程的所有数据（变量。环境变量，程序程序计数器等）都和原进程一模一样，会先将数据写入到一个临时文件中，待持久化结束了，再用这个临时文件替换上次持久化好的文件2.他什么时候fork子进程，
2020-08-30 19:48:59
122
原创 Zookeeper选举机制（myid,zxid）
初始化当启动初始化集群的时候，server1的myid为1，zxid为0 server2的myid为2，zxid同样是0，以此类推。此种情况下zxid都是为0。先比较zxid，再比较myid1.服务器1启动，给自己投票，然后发投票信息，由于其它机器还没有启动所以它收不到反馈信息，服务器1的状态一直属于Looking(选举状态)。2.服务器2启动，给自己投票，同时与之前启动的服务器1交换结果，由于服务器2的myid大所以服务器2胜出，但此时投票数没有大于半数，所以两个服务器的状态依然是LOOKIN.
2020-08-30 18:58:24
6253
7
原创 Spark部署 本地安装
1.环境准备安装JDK（1.8+）安装Scala（2.11.8）安装Hadoop-2.60-cdh5.14.22.安装spark1 解压$ tar -zxf /opt/software/spark-2.2.1-bin-2.6.0-cdh5.14.2.tgz -C /opt/modules/修改目录名称：ln -s spark-2.2.1-bin-2.6.0-cdh5.14.2/ spark2.2.12 配置文件名修改：cp conf/spark-env.sh.template conf/s
2020-06-22 20:44:53
161
1
原创 linux 安装scala
链接：https://pan.baidu.com/s/19wCgs7Y5jzdU1fXfOLedpQ提取码：v6olscala安装包1.进入你要解压的目录，解压压缩包tar -zxvf scala-2.11.8.tgz2.修改环境变量添加自己的目录，添加path以:分割，开头$符，指定bin目录3.source环境变量source /etc/profile4.输入scala进入命令行安装完成...
2020-06-22 19:55:05
118
原创 Phoenix介绍及安装
Phoenix介绍：1.针对hbase开发的第三方插件，目前已经贡献给Apache，顶级项目2.Phoenix是构建在Hbase上的一个SQL层可以使用类似于操作mysql的标准sql语句，作为客户端JDBC的驱动对hbase中的数据进行低延迟的交互。3.内部实现为将sql查询语句便以为hbase内部的一系列scan或get操作，（get的底层是scan）4.因为hive关联hbase查询底层为MapReduce，而Phenix底层查询为hbase的API，所以查询速度比hive集成快。Hbase
2020-06-15 12:07:05
431
转载 什么是高可靠性？
在信息技术领域，高可靠性（high reliability）指的是运行时间能够满足预计时间的一个系统或组件。在信息技术领域，高可靠性（high reliability）指的是运行时间能够满足预计时间的一个系统或组件。可靠性可以用“100%可操作性”或者“从未失败”这两种标准来表示。一个被广泛应用但却难以达到的标准是著名的“5个9标准”，就是说工作的可靠性要达到99.999%。由于一个计算机系统或网络由许多部件组成，而且这些部件都要保证高可靠性才能维持正常的操作过程。因此，许多可靠性计划侧重于备份、故障处
2020-06-13 09:32:55
1888
原创 HIVE和HBASE整合（简单易懂）
整合目标：测试HBASE中插入数据，hive中可以查询到测试hive中插入数据，HBASE中可以查询到原料：hadoop,zookeeper,hbase进程全部启动第一步：在hive使用有关HBASE中的jar包，将HBASE中lib下有关hbase-*.jar全部倒入到hive的lib目录下；进入hbase的lib目录下cp ./hbase-*.jar /usr/local/hive/lib第二步：将hive-hbase-handler-2.3.6.jar这个包导入到hive的lib目
2020-06-04 14:01:24
948
1
转载 win10系统重装鼠标右键响应慢怎么办
win10系统重装后，桌面上点击鼠标右键没反应，之后一个小圆圈一直在转，怎么解决呢，下面来分享一下方法工具/原料: 电脑鼠标1.首先排除一些和win10不兼容的软件，名单如下（右侧一列）如果问题仍未解决，请进入后面的步骤：2.打开“运行”窗口，快捷键为win+R；在窗口中输入regedit3.点击确定，进入“注册表编辑器”4. 找到下面的位置：计算机\HKEY_CLASSES_ROOT\Directory\Background\shellex\ContextMenuHandlers（这里
2020-05-23 19:38:11
1696
3
原创 hive设置成本地模式
FAILED: SemanticException [Error 10096]: Dynamic partition strict mode requires at least one static partition column. To turn this off set hive.exec.dynamic.partition.mode=nonstrict在Hive页面 输入语句 set hive.exec.dynamic.partition.mode=nonstrict;之后运行分区表命令。
2020-05-19 19:20:53
407
原创 CentOS 7搭建Hadoop伪分布模式
1.1修改IP地址在虚拟机的命令行中输入下面的命令，修改网卡的配置文件vi /etc/sysconfig/network-scripts/ifcfg-ens33
2020-05-14 16:27:14
513
1
原创 hadoop上zookeeper,hbase,hive,kylin安装指南
点赞有益于世界和平，蟹蟹。链接：https://pan.baidu.com/s/1aE4CwIRG4hZPwlbKcdgv_w提取码：5sxa安装包，百度网盘。其中hbase0.98版本太低，不建议使用。可以使用1.2.6版本。**1.zookeeper安装：上传安装包：解压安装包，创建软连接：**创建软连接是为了方便。配置zookeeper的conf目录下文件：将zoo_sam...
2020-05-04 15:15:19
338
原创 Eclipse中使用hadoop的插件DFS
Eclipse中使用hadoop的插件链接：https://pan.baidu.com/s/19RC7tlEp4XfkmQhzChE3jg提取码：96wy配置文件，自取。第一步：导包将hadoop-eclipse-plugins-XXX.jar包保存到eclipse目录（右键，打开文件所在位置）下的plugins文件夹下：第二步：解压hadoop的压缩文件；解压hadoop的压缩文件，...
2020-05-03 16:49:33
440
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人