oTianQing1234的博客

原创 MongoDB不同压缩算法的影响

1.基本信息版本3.4.5测试 zlib 和snappy4.2支持zetc没有测试2.过程数据大小：fieldcount=8fieldlength=250db.createCollection( "usertable", {storageEngine:{wiredTiger:{configString:'block_compressor=zlib'}}} );YCSB Client 0.17.0Loading workload...Starting tes

原创 python-kafka接收不到消息

问题：使用python-kafka 消费者不能订阅到生成的消息比如：import jsonfrom kafka import KafkaConsumerconsumer = KafkaConsumer('top_canal_test',group_id=None,bootstrap_servers=['10.211.55.6:9092'],auto_offset_reset='earliest')for msg in consumer: recv = "%s:%d:%d: k

原创 MySQL恢复部分表步骤

1.解压xbstream -x -C /tmp/test < test.xbstream2.应用日志innobackupex --defaults-file=/tmp/cashier_pay_order/backup-my.cnf --apply-log --export --user=root -S /var/lib/mysql/mysql3366.sock /tmp/test3.还原库创建相同表结构4.discard表空间alter table test discard t

原创 Django2登入demo说明rest_framework基本使用

1.rest_framework配置1.安装：pip install djangorestframework2.setting配置增加：'rest_framework',在user-> urls.py添加类视图：from django.conf.urls import urlfrom apps.user.views import UserLoginurlpatterns = [ url(r'^user/login',UserLogin.as_vi..

原创 django1-基础配置

django项目初始化配置：1.项目结构增加apps目录----主要使目录结构更加清晰在setting中增加：sys.path.insert(0,os.path.join(BASE_DIR,'apps'))2.目前新建了两个appspython manage.py startapp user --用户管理模块python manage.py startapp meta --元数据管理模块3.添加apps到setting在 INSTALLED_APPS中添加注册apps：

原创 数据管理上的一些问题

原创 HJ101 输入整型数组和排序标识，对其元素按照升序或降序进行排序

a = input()lista=[]lista=[int(i) for i in (input().split())]c = int(input())listb=[]if c==0: listb=sorted(lista,reverse=False)else: listb=sorted(lista,reverse=True)print(" ".join(str(i) for i in listb))

原创 HJ58 输入n个整数，输出其中最小的k个

这比一些其他的字符串排序就是要注意下对应的类型转化的时候while True: try: lista = [] listb =[] a,b = input().split() lista =[int(i) for i in input().split()] listb = sorted(lista) print(' '.join(str(i) for i in (listb[:int(b)...

原创 HJ14 字符串排序

a = int(input())lista=[]for i in range(a): lista.append(str(input().strip()))for i in sorted(lista): print(i)

原创 HJ13 句子逆序

a = input()lista = list(a.split(" "))[::-1]print(" ".join(lista))

原创 HJ10 字符个数统计

a = input()lista = list(set(list(a[::1])))print(len(lista))

原创 HJ9 提取不重复的整数

a = input()lista = list(a[::-1])listb = []for i in lista: if i not in listb: listb.append(i)print("".join(listb))

原创 HJ8 合并表记录

dic = {}a = int(input())for a in range(a): lista =str(input()).split(" ") a,b = int(lista[0]),int(lista[1]) if a not in dic: dic[a] = b else: dic[a] = dic[a] + bfor k,v in sorted(dic.items()): print(f'{k} {v}')...

原创 HJ4 字符串分隔

while True: try: a = input() for i in range(0,len(a),8): print(a[i:i+8].ljust(8,'0')) except: break

原创 HJ3 明明的随机数

这题里面的疑惑就是要不要两个list一期去重排序，如果不需要就放内层就好了。listc=[]while True: try: n = int(input()) lista=[] for i in range(n): lista.append(int(input())) setb = set(lista) for i in sorted(setb): lis...

原创 华为HJ2 计算某字符出现次数

a = input()b = input()num =0for i in range(len(a)): if b.lower() == a[i].lower(): num = num + 1print(num)

原创 算法HJ1 字符串最后一个单词的长度

a = input()lista = a.split()print(len(lista[len(lista)-1]))

原创 starrocks-drois(1)

原创 数据库选型

原创 关于分库分表

原创 django0-vscode搭建django开发环境

之前都是使用pycharm，不过确实为了找pro版本 lisence很痛苦，觉得转vscode，现在感觉vscode要一统天下的趋势。（纯属自己瞎说，是个运维人员，正在自学python等）就是简单笔记而已。1.安装python和vscode安装就跳过了2.新建新建项目：django-admin startproject pymusk新建venv环境： python3 -m venv venv3.配置运行环境commend shift +p输入刚刚创建venv虚拟环境

原创 MySQL checkpoint

总体什么是检查点?检查点 = lsn的位置检查点就是描述的是当天的lsn之前的数据全部写入了数据文件，比如lsn=1000000，则下次恢复数据只要从这个lsn的点是扫描redo log，进行前滚和回滚主要的目的是 减少实例恢复的时间。我们进行show engine innodb status\G 看到关于lsn的信息LOGLog sequence number 1045356087105 --内存中即redo log buffer中的记录的最大lsnLog

原创 git的基本使用

运维之前都是依赖工具的提交，命令不会，大概记录了下：1.克隆，从线上克隆到本地目录例如: git clone xxxxxxx.com/xxxx2.提交一个文件git add xxx.textgit commit xxx.txt -m "备注"git push origin master3.查看历史提交记录git loggit blame file4.对比现实add后工作区文件的不同git diff a.txt4.合并到本地：git pull o

原创 mysql体系之redo

什么是redo？redo log是重做日志，是wal（Write ahead log）的基础.mysql在innodb buffer中修改的数据并不会实时刷新到磁盘，这就全部都是随机的io，性能很差，但是这时候需要redo来保证数据的持久化。主要的作用：1.将随机刷盘转化为顺序刷盘，提高性能2.crash recovery： 当故障发生导致内存数据丢失后，InnoDB会在重启时，通过重放REDO，将Page恢复到崩溃前的状态这也是和普通的文件系统最大的区别redo对我们来说最

转载 阿里月报目录 方便查询

方便查询，点赞????20212021/12PostgreSQL · 引擎特性 · PostgreSQL 14 新特性浅析02MySQL · 引擎特性· InnoDB之UNDO LOG介绍03PolarDB · 引擎特性 · Nonblock add column04PolarDB · 引擎特性 · B-tree 并发控制优化2021/11PolarDB · 引擎特性· 闪回查询让历史随时可见MySQL · 周边工具 · MySQL InnoDB inno_space 工具介绍MySQL

原创 MySQL文件系统总1

总体结构数据文件（space file）图来源于https://github.com/jeremycole/innodb_diagramspage 0,1,3 是预留的pagepage0 FSP_HDR 描叙tablespace的基本信息和extend的基本信息page1 insert buffer bitmap的基本信息page2 是inode pagepage3 index page 真实的数据信息每256M都会有一个XDES页（page）file header (38)[

原创 MySQL体系结构总

接下来花一个月时间总结下MySQL的知识结构，自己监督自己，这是个总目录会在这边一直更新。Go ahead！！