这里写自定义目录标题
数据处理工具汇总
分布式消息中间件TubeMQ, 分布式 HTAP 数据库 TBase, 以及企业级容器平台 TKEStak和基于OpenJDK8的 Tencent Kona JDK.
pandas:数据分析类库。Python数据处理包
pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务而创建的。Pandas 纳入了大量库和一些标准的数据模型,提供了高效地操作大型数据集所需的工具。pandas提供了大量能使我们快速便捷地处理数据的函数和方法。你很快就会发现,它是使Python成为强大而高效的数据分析环境的重要因素之一。
Pandas最初被作为金融数据分析工具而开发出来,因此,pandas为时间序列分析提供了很好的支持。 Pandas的名称来自于面板数据(panel data)和python数据分析(data analysis)。panel data是经济学中关于多维数据集的一个术语,在Pandas中也提供了panel的数据类型。
https://www.zhihu.com/topic/20043072/hot
Spark
Spark详解01概览|Spark部署|执行原理概览Job 例子https://cloud.tencent.com/developer/article/1085726
Spark详解04Shuffle 过程Shuffle 过程
QueryEngine
QueryEngine 是百度大数据部门QueryEngine团队开发的一个高可用的类SQL 计算服务。该服务旨在开发并为用户提供一个高级的数据处理语言及服务,使得用户可以简单、方便、灵活地表达自己的数据处理逻辑。目前QueryEngine支持两个后端,一个是基于开源社区版Hive0.8.0重构的厂版Hive,一个是基于C++自研的Wing[QueryEngine引擎之Wing],两者在使用上并无差别,并且高度兼容HQL(SQL),但却不受限于HQL与SQL的声明式语法。在效率与可维护性上,Wing具有更大的优势。QueryEngine 目前支持交互式和批处理两种使用方式。在交互式下,用户输入一个语句,就解释执行一个语句并返回结果;在批处理模式下,用户将自己的程序逻辑写在一个文件中,通过客户端提交给服务,服务会保证整个程序逻辑的执行。
目前QueryEngine的主要特点包括但不限于:
- 高可用的服务:QueryEngine服务中没有单点,任何单台机器的失效都不会导致服务停止。
- 高可靠的服务:客户端只要成功提交Session,一个Session可能包含多个执行语句,之后,无论客户端是否正常,连接是否断开,服务端都保证完成该Session的执行。
- 多后端存储支持:QueryEngine可以访问不同的HDFS、不同的存储系统上的数据(目前支持AFS(即将)、HDFS、DDBS、MySQL服务器),并支持多种、多个存储系统上的数据的混合运算。
- 接口与Hive高度兼容:现有的HQL代码可以不加修改地执行在QueryEngine上。也支持HQL的插件结构,支持用户自定义函数、SerDe,为新的存储系统自定义StorageHandler。
- 支持变量、临时表:支持变量、临时表的创建,在出现复杂处理逻辑的情况下,避免深度嵌套的SQL,提供更灵活、清晰的语法支持。
QueryEngine包含的子工程:
Magi、Hive、Wing[QueryEngine引擎之Wing]、Flume[QueryEngine引擎后端之Flume]、Pingo
新的改变
我们对Markdown编辑器进行了一些功能拓展与语法支持,除了标准的Markdown编辑器功能,我们增加了如下几点新功能,帮助你用它写博客:
- 全新的界面设计 ,将会带来全新的写作体验;
- 在创作中心设置你喜爱的代码高亮样式,Markdown 将代码片显示选择的高亮样式 进行展示;
- 增加了 图片拖拽 功能,你可以将本地的图片直接拖拽到编辑区域直接展示;
- 全新的 KaTeX数学公式 语法;
- 增加了支持甘特图的mermaid语法1 功能;
- 增加了 多屏幕编辑 Markdown文章功能;
- 增加了 焦点写作模式、预览模式、简洁写作模式、左右区域同步滚轮设置 等功能,功能按钮位于编辑区域与预览区域中间;
- 增加了 检查列表 功能。
功能快捷键
撤销:Ctrl/Command + Z
重做:Ctrl/Command + Y
加粗:Ctrl/Command + B
斜体:Ctrl/Command + I
标题:Ctrl/Command + Shift + H
无序列表:Ctrl/Command + Shift + U
有序列表:Ctrl/Command + Shift + O
检查列表:Ctrl/Command + Shift + C
插入代码:Ctrl/Command + Shift + K
插入链接:Ctrl/Command + Shift + L
插入图片:Ctrl/Command + Shift + G
查找:Ctrl/Command + F
替换:Ctrl/Command + G
合理的创建标题,有助于目录的生成
直接输入1次#,并按下space后,将生成1级标题。
输入2次#,并按下space后,将生成2级标题。
以此类推,我们支持6级标题。有助于使用TOC
语法后生成一个完美的目录。
如何改变文本的样式
强调文本 强调文本
加粗文本 加粗文本
标记文本
删除文本
引用文本
H2O is是液体。
210 运算结果是 1024.
插入链接与图片
链接: link.
图片:
带尺寸的图片:
居中的图片:
居中并且带尺寸的图片:
当然,我们为了让用户更加便捷,我们增加了图片拖拽功能。
如何插入一段漂亮的代码片
去博客设置页面,选择一款你喜欢的代码片高亮样式,下面展示同样高亮的 代码片
.
// An highlighted block
var foo = 'bar';
生成一个适合你的列表
- 项目
- 项目
- 项目
- 项目
- 项目1
- 项目2
- 项目3
- 计划任务
- 完成任务
创建一个表格
一个简单的表格是这么创建的:
项目 | Value |
---|---|
电脑 | $1600 |
手机 | $12 |
导管 | $1 |
设定内容居中、居左、居右
使用:---------:
居中
使用:----------
居左
使用----------:
居右
第一列 | 第二列 | 第三列 |
---|---|---|
第一列文本居中 | 第二列文本居右 | 第三列文本居左 |
SmartyPants
SmartyPants将ASCII标点字符转换为“智能”印刷标点HTML实体。例如:
TYPE | ASCII | HTML |
---|---|---|
Single backticks | 'Isn't this fun?' |
‘Isn’t this fun?’ |
Quotes | "Isn't this fun?" |
“Isn’t this fun?” |
Dashes | -- is en-dash, --- is em-dash |
– is en- |