xuelangqingkong的专栏

(假设我们的逻辑卷位置是 /dev/mapper/buntu--vg-lv_data)

解决方法，直接在 ./lawyer-llama/model/sft_lora_model/adapter_config.json 中去掉对应的 key 即可。文件夹中的 data 路径下有一些 alpaca 格式的指令集（其中能直接用的只有 judical_examination_v2.json ）这里是 transformers 版本过低的问题，直接升级下 transformers。由于由于有了数据，下一步就是准备LoRA 调试的参数和配置。在设定的 LoRA 模型输出目录下，能看到输出的文件。

(nouveau 是一个开源的图形驱动程序，用于支持 NVIDIA 显卡. 然而，nouveau 驱动程序可能会在某些情况下导致问题，例如在某些 NVIDIA 显卡上可能会出现冻结或崩溃的情况。由于我们需要安装的 stable diffusion 需要的 11.8 版本，和当前的12.2版本不兼容，所以这里我们需要重新安装。运行 download.sh 时需要上面第一步申请的URL 链接才可以，例如我这边的是下面的链接。如果使用的是 miniconda，则在新建环境的时候需要注明 python 版本。

修改数据路径 sudo vim /etc/postgresql/14/main/postgresql.conf。比如说我们这里得到的输出路径为 /var/lib/postgresql/14/main。当新建用户之后发现不能直接使用 conda 的命令，则可以使用以下命令。同步 postgresql 数据并备份原有数据。确认当前 postgres 的数据路径。停止 postgresql。重启 postgresql。确认没有问题后删除备份数据。

embedding 是 NLP 学习中必须要了解的一个模块，主要是将有限的词、字转换为神经网络或者深度学习网络可以接受的向量，即字符-> 向量。Pytorch 的 nn.embedding 是一个非常有意思的函数，最近了解了一下，并做了一个例子说下使用方法。这一这里的0，1000 是一个左包含，右又不包含的区间，对应的的[0, 1000) 的区间，其实就是从 0-999。首先我们假设词库有1000个单词，每个单词用一个10维向量表示，则可以设定。这相当于做了一个接口，具体的输入输出案例我们这边做一个例子。

这里的需求是之前将 postgresql 11 安装到了默认的磁盘下，但是由于数据的扩张，发现默认磁盘的容量到达了上线，同时发现还有一个 200G 的数据磁盘一直没有使用磁盘的挂在路径是在 /mnt/ 下，所以这里需要将数据库的 data 迁移到挂载路径下面。

一次性安装 Anaconda 和 Python 3.10

我这边使用的是Gitlab 官方的托管。

端口开放可自定义设置，但请避免设置正在使用的端口。Note: 注意这里的 -Xms84m -Xmx512m 配置不要配置过大，否则会出现内存或者空间不足的错误。作为一个数据库，配置密码是必须的，但是 elasticsearch 容器的配置稍微有点复杂。Docker 在一段时间之后会出现占用磁盘空间太大的问题，所以需要清理，输入以下两个命令。这里唯一需要指出的是由于当前使用的 docker 是 20.10.21 版本。但是当前的 docker compose 版本的文件格式应该为。

但是centos7 yum 能安装的最高版本的 python 是 3.6.8，所以需要自己安装，这里参考上面的链接的文章，最后能够成功安装。由于安装 jupyterlab 需要 3.7+ 以上的 python 版本，所以这里需要安装 python3.7。

这两天需要做一个爬虫程序，所以用到了一段Go语言写的代码。接下来，尝试在 Centos7 上安装和运行 Go 程序。

用 nodejs 做一个落地页，所以尝试着在github上找了一些开源代码，然后用 nginx 做反向代理。

Twitter 数据分析总结

4步将 venv 环境添加到 Jupyter Notebook 内核中 (Windows10)

首先，进入到 CoreNLP 的下载页Overview - CoreNLP这里我们首先下载 CoreNLP 的英文版本，也就是基础版本​​​​​​https://nlp.stanford.edu/software/stanford-corenlp-latest.zip解压，放到文件夹中 PATH1 中然后，返回 CoreNLP 主页，然后下载中文工具包https://search.maven.org/remotecontent?filepath=edu/stanford/nlp/st

查看MariaDB 的状态systemctl status mariadb.service新建用户mysql -u root -p<输入秘密>create user 用户名@localhost identified by '密码';新建数据库并将权限赋值给用户CREATE DATABASE zhaopin;GRANT ALL ON zhaopin.* to 用户@'localhost' IDENTIFIED BY '数据库访问密码';使用数据库use

在使用 Selenium 进行数据处理的过程中，发现了一些问题：selenium.common.exceptions.WebDriverException: Message: chrome not reachableWebDriverException: Message: unknown error: DevToolsActivePort file doesn't exist首先确认我们的 ChromeDriver 和已经安装的 Chromium的版本匹配没有问题chromiu..

整个问题的背景描述：在一台服务器A上，有数据库 Adb, 数据表 Adt, 数据库拥有者 Auser, 数据库密码 Aps在另一台服务器B上，有数据库 Bdb, 数据库拥有者 Buser, 我们想在 Bdb 中新建一个数据表Bdt, 同时 Bdt 中的数据来自 Adt.环境前提假设在 服务器B 上，已经安装了 postgresql 和postgres_fdw， 在服务器 A 上，已经安装了 postgresql ，同时允许外部数据库访问（如果不知道怎么做，可以翻看之前我的博客）数据迁..

问题场景：在 windows 上已经安装了 Postgresql ， 需要使用 Windows 上面的 PgAdmin GUI 访问在 Linux 上面的 Postgresql 服务器。主要参考这篇文章https://www.netiq.com/documentation/identity-manager-47/setup_windows/data/connecting-to-a-remote-postgresql-database.html1. Linux Postgresql 数据源服.

命令行\l ： 显示数据库\du ： 显示用户列表\conninfo　 ：显示现在的连接、数据库、用户名，或者用 【SELECT current_database();】\c 数据库名 ： 切换到某数据库\d 数据表名 ： 显示数据表的结构和数据类型创建新的用户CREATE USER 用户名WITH PASSWORD '密码';ALTER USER 用户名WITH SUPERUSER CREATEDB CR...