- 博客(4)
- 资源 (3)
- 收藏
- 关注
原创 【Great Expectations】问题记录
创建了file data context。所以初始化时会找到路径,直接初始化为FileDataContext,而不是教程中的EphemeralDataContext,故而找不到方法。最近在看数据质量工具,网上看了比较,Qualitis、datacleaner、great_expectations中,感觉gx比较符合。例子中给的网址访问比较慢,一直以为是因为这个原因。中文介绍的文章比较少,记录一下出现的问题。原来是因为自己先通过命令行的方式。
2023-04-07 13:49:03 303 1
原创 DolphinScheduler 3.0.0-alpha 安装问题
记录DolphinScheduler 3.0.0-alpha 安装问题1. 确认免密登录2.修改的dolphinscheduler_env.sh,需要同步拷贝到按照官方文档安装Dophin伪集群时出现了一些问题及注意事项,特此记录官方安装链接1. 确认免密登录切换至 dolphinscheduler用户后判断免密是否成果ssh localhost2.修改的dolphinscheduler_env.sh,需要同步拷贝到<bin|alert-server|api-server|master-s
2022-05-25 16:22:08 1068
原创 基于minio及tus断点续传及断点下载解决方案
本篇主要用来说明基于minio文件存储的断点续传及断点下载的解决方案1.断点续传断点续传功能采用Tus+Minio结构,其中Minio作为文件存储服务器,提供文件存储功能。Tus是开源的断点续传的框架,用于连接Minio并提供统一的接口供客户端连接。服务端由go编写,客户端提供多种语言,如js、java、androidtus及minio, docker-compose.yml文件:version: '3.3'services: minio-server: image: min
2020-08-03 16:26:02 6690 8
原创 1. 6.824 MIT 分布式课程 mapreduce 学习
1. 学习资料MIT 6.824 课程地址:http://nil.csail.mit.edu/6.824/2020/schedule.htmlMap Reduce 论文:http://nil.csail.mit.edu/6.824/2020/papers/mapreduce.pdf理解Map Reduce时参考的一些文章:https://highlyscalable.wordpre...
2020-04-29 15:07:25 361
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人