lg4546的专栏

最近研究了一下Midjourney,感觉这个AI大模型生成的图片还是很惊艳的，所以就买了账号，账号可以多人公用，我先记录一下使用心得，在最后会把账号信息公布出来，有想尝试的可以免费使用。仅限我的付费会员。sref即风格一致性/风格迁移，这个功能可以帮助大家在制作的过程中让自己的图片风格保持一致性，将画面统一，轻松复制风格。不在需要复杂关键词、上传我们先要的复刻风格的图片，在输入关键词，选择v6模型开始绘画，就可以得到风格一致的图片。二、 Style Reference 使用介绍。

postgresql数据库漏洞修复 方案, 大的版本升级方案

Flinkcdc 实时同步PG数据库表

superset2.0 的安装 ,注意python的版本,和里面组件的版本

linux 挖矿病毒 , cpu 占用比较大 lVlgd 进程 , crontab 定时执行

jimureport 接入token验证,全部代码开源

flink 的 job 任务 到 prometheus 里监控预警

bert 训练模型 用 http方式提供服务

关于词性标记动词，形容词（4种）：VA，VC，VE，VV1、谓词性形容词：VA谓词性形容词大致上相当于英语中的形容词和中文语法中、文学作品里的静态动词。我们的谓词性形容词包括两类：第一类：没有宾语且能被“很”修饰的谓语。第二类：源自第一类的、通过重叠（如红彤彤）或者通过名词加形容词模式意味着“像N一样A”（如雪白）的谓语。这个类型的谓词性形容词没有宾语，但是有一些不能被“很”修饰，因为这些词的强调意思已经内嵌在词内了。注意：当集合（VA）中的一个词修饰名词但没有用“的”，那么它被标注

1 电脑应该具备java的环境,并已经配置好java的环境变量2 下载 CoreNLP的包文件下载地址:Overview - CoreNLPNLP Processing In Javahttps://stanfordnlp.github.io/CoreNLP/ 下载语言包:用到那个下载哪个,我下载了中文 和 英文包.下载地址:https://search.maven.org/remotecontent?filepath=edu/stanford/nlp/stanford-coren.

Hprose是一个高性能的远程对象服务引擎。它是一个现代的、轻量级的、跨语言的、跨平台的、面向对象的、高性能的、远程动态通信中间件。它不仅易于使用，而且功能强大。你只需要一点时间来学习，就可以用它轻松构建跨语言跨平台分布式应用系统。Hprose支持多种编程语言，例如：AAuto Quicker ActionScript ASP C++ Dart Delphi/Free Pascal dotNET(C#, Visual Basic...) Golang Java Jav...

用intellij 开发python程序,需要安装python的包,例如下面的import hproseimport fasttextimport jieba但是经常会失败.报错如下Installing packages failed: Installing packages: error occurred. Details...怎么办?可以直接在intellij系统安装就可以然后弹出 Manage Python Packages然后安装就可以了...

1 搭建starRocks 只有一台机器按照官方网站 提供语句 , 创建 明细模型表CREATE TABLE IF NOT EXISTS detail ( event_time DATETIME NOT NULL COMMENT "datetime of event", event_type INT NOT NULL COMMENT "type of event", user_id INT COMMENT "id of user" device_code IN...

vim /data/azkaban/exec/job/test.shshell脚本内容,#!/bin/bashset -econfigfile="$1"while read -r line ; doeval "$line"done < $configfilepath=dataname=ads_ub_pv_uv_ip_cntsed "s/yesterday/$yesterday/g" /$path/azkaban/exec/job/$name.sql > /$path/.

clickhouse的存储引擎设计的思想进行了详细解读，本章将向读者完整地介绍clickhouse存储引擎的存储模型及工作机制。文件组织在大部分的DBMS中，数据库本质上就是一个由各种子目录和文件组成的文件目录，clickhouse当然也不例外。clickhouse默认数据目录在/var/lib/clickhouse/data目录中。所有的数据库都会在该目录中创建一个子文件夹。下图展示了clickhouse对数据文件的组织。clickhouse 目录结构每一个数据库都会在clickhou

前面介绍了clickhouse通过block和lsm来减少磁盘读取的数据量。严谨的逻辑应该时clickhouse通过lsm算法来实现数据预排序，从而减少了磁盘读取的数据量，本章番外主要为读者介绍什么是LSM算法，对LSM算法已经有了解的读者可以跳过本章。LSM算法最早出现在1991年的ACM期刊上，之后其思想在各大大数据存储系统中被广泛使用，例如LevelDB,HBase,Cassandra……LSM算法由于适应的场景不同，存在很多的变体，clickhouse也使用lsm算来实现其预排序的功能，本文将着

第二章已经向读者说明了，影响olap查询速度的瓶颈其实是在磁盘。并且也给出了两种具备代表性的优化方案，分别是分布式和列存。之后大部分的olap数据库都采用了类似的架构，那么凭什么clickhouse能从这些olap数据库中脱颖而出摘得桂冠呢？从本章开始，本系列将逐渐向读者展示clickhouse的精妙设计。Block + LSM其实本节的标题也可以换成批处理+预排序。clickhouse通过block的设计来实现批处理，通过lsm算法来实现预排序。我们分别来分析一下，这个组合对查询速度的影响。首

在正式开始clickhouse探秘前，我们先抛出一个问题：影响OLAP查询速度的是什么？是优秀的算法么？不可否认，算法对查询性能的影响非常大，但到了现阶段通用的算法基本上已经能够达到很高的性能了。因此，在现阶段，制约着大数据OLAP查询速度的已经不再是算法了。那么这个问题的答案是什么呢？实践是检验整理的唯一标准，我们来做个实验看一下。实验我们写一段代码来模拟数据库执行SELECT max(id) From tbl_a这句语句。如果不考虑前面的sql解析过程，可以简单抽象成两个步骤：从磁盘中读取数

clickhouse在处理数据时按照block为单位进行压缩，之后写入磁盘数据文件中。这样可以减少数据量的大小减少磁盘io时间。但是，如果没有索引，则意味着每次查询时都需要读取所有的数据，即使通过压缩已经降低了6.2倍的数据量，这依然要花费很多的磁盘IO。此时索引就出现了，可以再次帮助我们减少查询时需要读取的数据量。在介绍clickhouse的索引之前，我们先回顾一下关系型数据库MySQL中常用的索引技术——B+树。B+树算法超出本文内容，在这里不做深入讨论，我们主要分析下MySQL使用B+树的目的和B

superset 最新版本配置 地图的时候,可能不显示数据,具体什么原因呢?superset里的地图用的是 iso3166-2 编码,所以你要想让superset的地图数据展示出来,需要用他的编码保存数据,比如 CN-63 对应的是 河北 等.是因为 superset 的各个省市的编码跟数据库里定义的不一样导致的,查找 地图的geojson文件,路径是在:data/anaconda3/lib/python3.7/site-packages/superset/static/asset.

一、列式存储与行存将每一行的数据连续存储不同，列存将每一列的数据连续存储相比于行式存储，列式存储在分析场景下有着许多优良的特性。1）分析场景中往往需要读大量行但是少数几个列。在行存模式下，数据按行连续存储，所有列的数据都存储在一个block中，不参与计算的列在IO时也要全部读出，读取操作被严重放大。而列存模式下，只需要读取参与计算的列即可，极大的减低了IO cost，加速了查询。2）同一列中的数据属于同一类型，压缩效果显著。列存往往有着高达十倍甚至更高的压缩比，节省了大量的存储空间，降低了存储成本

一、clickhouse为什么如此快1）优秀的代码，对性能的极致追求clickhouse是CPP编写的，代码中大量使用了CPP最新的特性来对查询进行加速。2）优秀的执行引擎以及存储引擎clickhouse是基于列式存储的，使用了向量化的执行引擎，利用SIMD指令进行处理加速，同时使用LLVM加快函数编译执行，当然了Presto也大量的使用了这样的特性。3）稀疏索引相比于传统基于HDFS的OLAP引擎，clickhouse不仅有基于分区的过滤，还有基于列级别的稀疏索引，这样在进行条件查

superset 最新版本配置中国地图的时候,可能不显示数据,具体什么原因呢?是因为 superset 的各个省市的编码跟数据库里定义的不一样导致的,查找 地图的geojson文件,路径是在:data/anaconda3/lib/python3.7/site-packages/superset/static/assets/下的65d35076af8ab2eac6355ea6f4932f54.geojson 文件,编辑文件发现:{"type": "FeatureCollection".

superset最近的更新颇为频繁，还增加了对es的支持，必须升级一把。升级的方法也比较简单，现在测试环境试验，官方的文档有说明：按照网上提供的 升级教程 升级。cd ~# 停止运行killall -9 gunicorn# 激活虚拟环境. ./superset/bin/activatepip install superset --upgradesuperset db upgradesuperset init我升级完后会报错。superset initINFO:root

flink 1.12是不支持jdbc连接clickhouse的,需要修改flink的源码,我把我2天的研究跑通记录下来供大家参考.查遍了网上所有资料,没有一次能成功的,网上的资料千篇一律.我总结一下踩的坑有这么几点:flink 源码下载 ,源码编译clickhouse 不支持远程连接,需要修改配置文件flink缺失jar包,需要依赖好多包成功图:可以直接展示查询结果:操作步骤:1 flink 源码编译源码下载地址:https://archive.ap...

第一种方法：数据库种保存的ip地址段，归属地的数据结构如下：要求查询ip地址：66.249.79.3的归属地信息。一，用函数方式。函数原理就是将ip转换成数值，66*256^3+249*256^2+79*256^1+3*256^0 = …………在数据库种执行以下函数：create or replace function inet_aton(ip text) returns int8 as $$declare v int; res int8 := 0; .

最新 全球 ip地址 归属地 字典表 (202108)