weixin_53083884的博客

链接：https://pan.baidu.com/s/1FcyWEMCkkAxMUybFapOhAA?--来自百度网盘超级会员V3的分享。

如果出现以下错误，需要进入bios界面，不同电脑进入界面的方式不一样。1、关机后，按住开机键和f10，进入如下界面（语言在主菜单里面）2、选择先进和下面的系统选项，勾选VTx和VTd。3、按f10保存重启。

链接：https://pan.baidu.com/s/1cHPiioQsQluWQQtP5CC_aA?pwd=yyds提取码：yyds--来自百度网盘超级会员V3的分享。

内网穿透是一种可以让外部网络与内部网络建立连接的技术，它可以帮助我们在外部网络上访问内部网络资源，也可以让内部网络中的服务在外部网络上运行。

Apache Superset 是一个现代的数据探索和可视化平台。它功能强大且十分易用，可对接各种数据源，包括很多现代的引擎，拥有丰富的图表展示形式，并且支持自定义仪表盘。

昨天是统计的一个用户启动一次，就记录一次，将启动时间变为了时间段。

action行为种类：INSTALL("01", "install","安装"),LAUNCH("02", "launch","启动"),LOGIN("03", "login","登录"),REGISTER("04", "register","注册"),INTERACTIVE("05", "interactive","交互行为"),EXIT("06", "exit","退出"),PAGE_ENTER_H5("07", "page_enter_h5","网页页面进入"),

1、业务数据业务数据往往产生于事务型过程处理，所以一般存储在关系型数据库中，如mysql、oracle业务数据源：用户基本信息、商品分类信息、商品信息、店铺信息、订单数据、订单支付信息、活动信息、物流信息等2、埋点数据埋点日志相对业务数据是用于数据分析、挖掘需求，一般以日志形式存储于日志文件中，随后通过采集落地分布式存储介质中如hdfs、hbase用户行为日志：用户浏览、用户点评、用户关注、用户搜索、用户投诉、用户咨询3、外部数据。

【代码】python--爬虫图片练习--（lol皮肤下载）

本篇主要对爬虫图片进行练习，需要用到requests库，用于从给定的斗鱼直播平台中获取图片数据，并将这些图片保存到本地目录的directory中。

ps:在命令行或者pycharm中的终端进行安装pip install beautifulsoup4 #用于解析HTML和XML文档，帮助您从网页中提取所需的数据。pip install xlwt # 用于创建和操作Excel文件。

【代码】python--贪吃蛇小游戏。

ps：下面代码的音乐部分需要自己指定本地音乐地址。用python实现绽放烟花的效果。

【代码】python--圣诞树。

DataX是阿里巴巴开源的一个异构数据源离线同步工具，可以实现包括关系型数据库（如MySQL、Oracle等）、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。它致力于解决数据孤岛问题，帮助企业更好地管理和利用数据资产。

创建目录，存放Prometheus 拉取过来的数据，我们这里选择local storage。# 至此Prometheus就可以正常工作了。# 创建目录，放置Prometheus。# 启动Prometheus。

ps：账号密码均为azkaban。

azkaban实现邮箱、电话、短信、微信报警服务

Azkaban是由Linkedin公司推出的一个批量工作流任务调度器，主要用于在一个工作流内以一个特定的顺序运行一组工作和流程，它的配置是通过简单的key:value对的方式，通过配置中的dependencies 来设置依赖关系。Azkaban使用job配置文件建立任务之间的依赖关系，并提供一个易于使用的web用户界面维护和跟踪你的工作流。Azkaban是一个开源的数据管道和任务调度系统，用于协调和管理大规模数据处理任务，通常用于处理大规模数据处理任务、数据管道和工作流程。

sqoop的基本介绍以及安装使用