- 博客(13)
- 收藏
- 关注
原创 Net8+IdentityServer4+MySQL+Grant扩展(不同场景下的认证需求)
如果RP发送AuthN请求的时候携带max_age的参数,则此Claim是必须的。它与认证服务器,可以是同一台服务器,也可以是不同的服务器。+ ID Token是一个安全令牌,是一个授权服务器提供的包含用户信息(由一组Cliams构成以及其他辅助的Cliams)的JWT格式的数据结构。nonce:RP发送请求的时候提供的随机字符串,用来减缓重放攻击,也可以来关联ID Token和RP本身的Session信息。+ OIDC是一个基于OAuth2协议的身份认证标准协议,解决的问题是用户认证,而不关心授权。
2024-04-19 17:20:05
769
2
原创 VUE cascader 异步加载 获取选中value&label 编辑回显处理
VUE cascader 异步加载 获取选中value&label 编辑回显处理
2022-06-24 10:32:52
1724
原创 Zookeeper & Kafka & Debezium & Spark 实时数据同步方案在实际项目中的使用
这个标题取的,专业但不利于传播,哈哈。好了,进入正题 。我们在搞一个大数据平台的时候,数据从哪些来?一般也无非以下几个来源:1)自己的业务系统,可能是MySQL或其他各种DB;2)埋点;3)爬虫;4)其他数据源,如比你买了鲸准数据,海鹰数据等等;这么多的数据怎么进入我们的数仓(Hive/Hbase/ClickHouse......)这个时候我们就需要CDC了。可以理解为数据抽取?数据实时同步(增量、全量)?都可以。随你。接下来我们就说一下从0到1搭建一套CDC,并让他跑起来。...
2022-01-14 09:56:35
1636
原创 基于ClickHouse的数仓在实际项目中的使用
文章的背景学习clickhouse的过程中,除了看官网,另外就是在网上看相关的文章,后来感觉大同小异,很难解决我们真实项目中的实际问题。所以,想总结一下最近的心得体会分享出来,与大家共勉。标题在不怎么好定义,本来想写“ClickHouse实战操作”又怕一个章节写不了那么多的内容,也担心自己现在知识储备不够。干脆就叫入门操作吧。内容规划集群搭建 为什么要说这个,其实网上的文章很多了,在我看来一部分来自官网,一部分讲的也不怎么清楚,可能按某个文章的搞法最后看起来集群是跑起来了,但也不知道为什么
2022-01-13 12:01:53
1313
原创 SparkStreaming & Kafka & ClickHouse
网上关于Spark 读写 clickhouse的文章不少,但我认为适用你的可能还真不多。看看本文是否能给你开启一个新思路?一、Spark消费Kafka后写入Clickhouse注意,clickhouse集群部署?kafka集群部署?Spark消费Kafka的CDC过程 怎么实现?怎么实现一次性语义?等不在本文的讨论范围。本文主要想给出一种写clickhouse的一种方式。二、参考代码......这里省略了部分无关代码val topic = "testdbserver.cdc_test_
2022-01-11 18:01:23
1884
原创 Hadoop集群搭建超详细说明
最近随着公司业务的发展,在一波重构中技术层面主要的目标是双中台建设,由是就有了本文。#数据中台##1、环境准备###1.1、前置条件####Linuxwget#####rpm安装下载wget的RPM包:http://mirrors.163.com/centos/6.8/os/x86_64/Packages/wget-1.12-8.el6.x86_64.rpm执行rpm-ivhwget-1.12-8.el6.x86_64.rpm...
2021-09-07 16:59:27
4825
1
原创 MySQL5.7.27主从同步配置详细记录
接下来准备写MySQL自身的主从同步机制结合Mycat实现读写分离,可能包括的内容:Mycat集群,MySQL一主多从,读写分离,以后再搞多主多从,在这里吐槽一下,技术适合当下的就是最好的,最简单的就是最稳定的,MySQL一般是单表达到800万数据就要考虑数据拆分,多如牛毛的一些个小公司到死可能都没有那么多业务数据,倒是面试时天天谈大数据,高并发,数据库集群,简直CD。如果一切正常,那么可以测试了,在主库上创建一个数据库,可以看到马上同步到从库上了,继续建表,添加测试数据,发现从库同步正常。
2019-10-28 11:19:02
590
1
原创 记录.NetCore如何使用MyCat
随着.NetCore的发展,最近我们也顺利的服务化、容器化了,生产环境全部跑在Linux了,下一步准备Devops。但随着数据量的逐渐增多和所处行业的业务性质,个别服务对应的数据库开始进行开始做分布式数据库了。前期也做过简单的技术调研,比如efcore读写分离、新生命团队的开源中间件XCode、以前有些服务基于CQRS开发的做一个小改动使之支持读写分离、MyCat中间件等,最终我们选用MyCat在...
2019-10-10 15:02:05
1685
2
原创 关于使用jquery.form.js上传文件同时提交表单的方法
很久没有写webform了,最近在改一个很久很久以前的一个CMS系统,遇到上传文件同时提交表单的功能,由于不想对现有现目的代码结构作过多的改动,依然沿续使用Jquery来上传文件并提交表单。具体操作如下: 1.引入两个JS文件2.HTML部分如下:
2017-06-15 16:44:57
3505
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人