- 博客(29)
- 资源 (3)
- 收藏
- 关注
RSS订阅翻译 Apache Druid 中文翻译-集群部署（Clustered deployment）
Apache Druid被设计为作为可水平拓展、容错的集群进行部署。在本文档中，我们将设置一个简单的集群，并讨论如何对其进行进一步配置以满足您的需求。这个简单的集群将具有以下特点：一台部署协调器（Coordinator ）and 统治（Overlord ）进程的master服务器 两台水平拓展、容错的数据服务器运行Historical（历史服务） 和MiddleManager（中间管...
2020-04-01 08:39:17
385
翻译 Apache Druid 中文翻译-单机部署（Single server deployment）
单机部署Druid自带了一组用于单机部署的启动脚本和参考配置：nano-quickstart micro-quickstart small medium large xlarge其中,micro-quickstart的配置规格适合笔记本电脑等小型机器运行，用于快速模拟druid用例。nano-quickstart是规格更小的配置，面向具有1个CPU和4GB内存的计算机。它...
2020-03-31 14:22:50
454
翻译 Apache Druid 中文翻译- 快速开始（Quickstart）
在本快速入门中，我们将下载Druid并将其设置在一台计算机上。完成此初始设置后，集群将准备好加载数据。在开始快速入门之前，阅读常规Druid概述和摄入概述很有帮助，因为本教程将参考这些页面上讨论的概念。先决条件软件你会需要：Java 8（8u92 +） Linux，Mac OS X或其他类似Unix的操作系统（不支持Windows）警告：运行Druid需要Jav...
2020-03-31 11:48:52
596
翻译 Apache Druid 中文翻译- Introduction 简介
什么是Druid？Apache Druid是一个实时分析数据库，旨在对大型数据集进行快速的切片和切分分析（“OLAP”查询）。Druid最常用作数据库，以支持对实时摄取，快速查询性能和高正常运行时间很重要的用例。因此，Druid通常用于为分析应用程序的GUI提供支持，或用作需要快速聚合的高并发API的后端。Druid最适合面向事件的数据。Druid的常见应用领域包括：点击流分析（...
2020-03-31 11:34:01
410
翻译 Apache Druid 中文翻译 - 段（Segments）
SegmentsApache Druid将其索引存储在段文件中，该段文件按时间进行分区。在基本设置中，将为每个时间间隔创建一个段文件，其中时间间隔可在granularitySpec参数中配置segmentGranularity。为了使Druid在繁重的查询负载下正常运行，将段文件的大小裴志伟建议的300MB-700MB范围内很重要。如果你的段文件超过该范围，然后再考虑要么改变时间间隔（ti...
2020-03-30 10:49:51
724
翻译 Apache Druid 中文翻译 - 设计（Design）
设计德鲁伊具有多进程、分布式的架构，并且在设计为云友好且易操作的系统。每种Druid进程类型（指Druid框架之中的各种组件）都可以独立配置和水平扩展，从而为您的集群提供最大的灵活性。这种设计还提高了容错能力：一个组件的故障不会立即影响其他组件。进程和服务器Druid有几种进程类型，简述如下：Coordinator协调器进程管理群集上的数据可用性。 Overlord统治进程...
2020-03-27 15:40:31
520
原创 A HostProvider may not be empty --记一次线上配置问题的来龙去脉和解决方案
起源公元XXX年，新上线的mapreduce任务在线上执行时遇到问题，主要报错如下：A HostProvider may not be empty，根据报错信息，定位到如下代码：org.apache.zookeeper.client.StaticHostProvider#StaticHostProvider，截图如下：转存失败重新上传取消经过判断，发现是zkClient最终...
2020-03-04 10:39:54
3783
原创 confluence中文显示乱码问题
解决方法1：修改数据库默认编码为utf8方法来自：https://blog.csdn.net/lovely_xinyi/article/details/45581883使用时，发现中文有问号，刷新又正常，解决办法：在mysql中输入以下命令：mysql>show variables like 'char%';+------------------------...
2020-02-28 08:33:22
4190
1
原创 Spark中RDD 持久化操作 cache与persist区别
Spark中RDD 持久化操作 cache与persist区别原创小鹅鹅 最后发布于2018-07-02 15:33:13 阅读数 1712 收藏展开环境/背景Spark 2.3.0Scala 2.11Java 1.8在进行RDD操作的时候，我们需要在接下来多个行动中重用同一个RDD，这个时候我们就可以将RDD缓存起来，可以很大程度的节省计算和程序运行时间。接下来可以通过查看...
2020-02-24 17:13:24
370
转载 spark2.4+elasticsearch６.1.1搭建一个推荐系统
spark2.4+elasticsearch６.1.1搭建一个推荐系统目录整体框架 安装相关的组件 elasticsearch安装 spark安装 下载es-hadoop中间件 安装计算向量相似度的elasticsearch插件 运行 结果展示 参考博客本博文详细记录了IBM在网上公布使用spark，elasticsearch搭建一个推荐系统的DEMO。demo...
2020-02-24 09:30:46
487
转载 深度预警：深入理解HBase的系统架构
大数据首席数据师2018.12.24 17:26:54字数 4,738阅读 155https://www.jianshu.com/p/ecf849648cd0HBase的构成物理上来说，HBase是由三种类型的服务器以主从模式构成的。这三种服务器分别是：Region server，HBase HMaster，ZooKeeper。其中Region server负...
2020-02-24 09:28:50
218
原创 Kafka界面管理工具-kafkamanager
在上一篇文章《Linux安装Kafka》中，已经介绍了如何在Linux安装Kafka，以及Kafka的启动/关闭和创建发话题并产生消息和消费消息。这篇文章就介绍介绍Kafka管理界面(kafka-manager)的安装和使用kafka-manager 是雅虎开源的apache-kafka管理工具，是用Scala写，所以在web页面进行操作即可。♛ 1 下载下载地址：https://gi...
2020-02-24 09:27:33
4795
原创 logback的layout以及encode相关配置
logback官方文档地址http://logback.qos.ch/manual/layouts.html<?xml version="1.0" encoding="UTF-8"?><configuration xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:noNam...
2019-10-25 09:39:21
2374
原创 ElasticSearch
https://my.oschina.net/pangyangyang/blog/361753https://blog.csdn.net/paditang/article/details/78802799
2018-03-28 16:01:48
134
原创 spring cloud gateway 源码解析
http://www.iocoder.cn/Spring-Cloud-Gateway/build-debugging-environment/
2018-03-22 16:52:16
760
翻译 How Spring Boot Autoconfiguration Magic Works
https://dzone.com/articles/how-springboot-autoconfiguration-magic-works
2018-03-02 09:16:50
174
原创 架构组件横向对比
服务发现及注册 ：zk：eureka :consul http://mp.blog.csdn.net/postedit/79259137服务框架 ： dubbo ：springcloud 网关 ： zuul ： spring gateway : Docker Swarm Mode链路追踪 ：Spring Cloud Sleuth权限认证：jwthttp://blog.csdn.net
2018-02-05 14:36:14
329
转载 为什么不应该使用ZooKeeper做服务发现
本文作者通过ZooKeeper与Eureka作为 Service发现服务（注：WebServices 体系中的UDDI就是个发现服务）的优劣对比，分享了Knewton在云计算平台部署服务的经验。本文虽然略显偏激，但是看得出Knewton在云平台方 面是非常有经验的，这篇文章从实践角度出发分别从云平台特点、CAP原理以及运维三个方面对比了ZooKeeper与Eureka两个系统作为发布服务的 优
2018-02-05 13:38:21
156
原创 bug
===> 收到客户端请求! 请求链路:[id: 0xdaf33d65, /192.168.1.150:61544 => /192.168.1.150:40544] 消息体:headers: [s=/biz/dsp-prs-mdm/app, m=decorationOrder.updateOrderStatusForSchduler, caller=/biz/dsp-ps-psm/app, t=0,
2018-01-29 17:34:52
163
原创 spring-cloud学习BUG
1、com.sun.jersey.api.client.ClientHandlerException: java.net.ConnectException: Connection refused: connect或者com.netflix.discovery.shared.transport.TransportException: Cannot execute request on any
2018-01-27 12:22:17
175
原创 org.springframework.beans.factory.NoSuchBeanDefinitionException: No qualifying bean of type [com.wei
今天在测试代码的时候发现出了这个异常，经检查，发现是因为mapper.xml配置文件之中配置错误，有可能是由于语法错误。暂时先写这么多，先改代码去了。
2016-08-04 20:19:04
839
原创 java.sql.SQLException: Parameter index out of range (1 > number of parameters, which is 0).
写like语句的时候 一般都会写成 like '% %'在mybatis里面写就是应该是 like '%${name} %' 而不是 '%#{name} %' ${name} 是不带单引号的，而#{name} 是带单引号的
2016-08-01 10:07:10
975
原创 mybatis整合springmvc时的错误org.apache.ibatis.binding.BindingException: Invalid bound statement (not found
今天在调试mybatis，新增一个搜索功能的时候报了一个这个错误 rg.springframework.web.util.NestedServletException: Request processing failed; nested exception is org.apache.ibatis.binding.BindingException: Invalid bound statemen
2016-07-31 10:24:58
3379
原创 mybatis+SpringMVC环境搭建
今天初次接触了MyBatis这种半ORM框架，在学习之中有很多的体会，于是乎写下这篇博客，方便自己日后复习，有需要的同学也可以学习学习，互帮互助。所有的项目文件已经上传，有需要的可以下载。和所有的框架一样，在项目之中使用一个框架的第一步大概就是导入jar 包。MyBatis是个轻量级的框架，需要的jar包也很少。在本工程之中与MyBatis相关的包只有三个mybatis-3.2.7.jar 、
2016-07-28 16:57:43
292
转载 SpringMVC非注解的处理器适配器-HandlerAdapter
本文的目的是了解处理器适配器，所以我们先来了解一下适配器都有什么：HandlerAdapter 接口实现： HttpRequestHandlerAdapter ： 要求handler实现HttpRequestHandler接口，该接口的方法为 void handl
2016-07-27 15:32:22
4782
原创 非注解的SpringMVC的映射器
SpringMVC之中的的HandlerMapping处理器映射器能根据请求的url找到对应的Handler处理器以及Interceptor拦截器，将他们封装在HandlerExcutionChain对象之中并返回给前端控制器。我们可以在classpash之中的springMVC.xml之中配置我们的处理器映射器，只要配置在你的xml配置文件之中即可。 一个xml文件之中可以存
2016-07-27 14:45:13
259
原创 SpringMVC的初始配置
Spring MVC属于SpringFrameWork的后续产品，已经融合在Spring Web Flow里面。Spring 框架提供了构建 Web 应用程序的全功能 MVC 模块。使用 Spring 可插入的 MVC 架构，从而在使用Spring进行WEB开发时，可以选择使用Spring的SpringMVC框架或集成其他MVC开发框架，如Struts1，Struts2等。相信学到Spri
2016-07-27 11:40:53
268
原创 什么叫SSH框架
ssh 是java程序员使用的最多的三个框架，这三个框架如果按照从前台到后台的层次来划分的话，第一个应该是Struts。之所以要把Struts划分为前台框架，是因为Struts跟前台打的交道最多。不管是前台往后台传值还是后台往前台传值，基本上都是通过Struts实现。Struts还能管理业务的流转，将视图和业务逻辑解耦，使得程序的耦合度降低。第二个是Spring，但我不准备先讲
2016-07-27 11:37:48
821
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人