lqqqqqqqqqqqq的博客

原创 visio2019的安装

visio2019镜像下载安装完成后：英文路径下，ANSI编码，建立bat，运行激活：@echo offtitle Activate Microsoft Visio 2019&cls&echo ============================================================================&echo #Visio: Activating Microsoft software products for FREE witho

原创 强化学习中状态值函数的求解＜强化学习深入浅出P39＞

原创 numpy/pandas学习笔记

np.flatten()将矩阵返回为一列np.clip(a,2,5)将矩阵a掐头去尾，小于2的变为2，大于5的变为5np.vstack/np.hstack （(a,b)）将a,b进行纵向/横向合并np.newaxis在某个方向新增一个维度，用途诸如将行向量转化为列向量用法：a[:,np.newaxis]能够生成列向量np.concatenate实现多个array合并，维度由参数axis决定np.split(A，分成几块，axis=)/np.array_slipt(A，分成几块，a

原创 强化学习学习笔记

强化学习无标签状态与行为的映射强化学习符号定义Rt：t时刻的奖励函数值St：t时刻的状态At：t时刻的行为马尔可夫过程马尔可夫过程：在目前已知状态下，未来的演变不依赖于过去的演变马尔可夫性质：每一个状态的转移只依赖于其之前的那一个状态马尔可夫假设：假设这个模型的每个状态都只依赖于之前的状态强化学习相关算法K-摇臂赌博机：探索-利用 困境贪心算法：寻找当前状态下的最优解（只图眼前利益最大化）ε-贪心算法：以ε探索，以1-ε利用Softmax算法：k按照Boltzmann分布有模型

原创 c语言学习笔记

将一个数正负按位与 则能得到最后一个1如6与-6 ：0110 && 1010 = 0010任何数与自身异或，得到零任何数与零异或，得到自身所以i = i ^ jj = i ^ ji = i ^ j则交换i与j

原创 数据结构学习笔记

顺序存储：在内存中按顺序存储链式存储：逻辑上相邻的元素在物理位置上可不相邻，通过指针表示索引存储：建立附加索引表散列存储（哈希存储）：根据关键词计算出元素存储地址后三个被称为非顺序存储，数据元素在物理上离散算法：包括有穷性、确定性、可行性、输入、输出T(n)时间复杂度S(n)空间复杂度顺序表的实现：静态分配、动态分配...

原创 计算机组成原理笔记（一）

存储器：内存中：存储体；MAR 存储地址寄存器；MDR 存储数据寄存器存储体：由存储单元构成（存储字、存储字长、存储元（能存1bit）），对应一个地址信息MAR的位数，反映了存储单元的个数MDR的位数，即每个存储单元能放的位数（bit）总容量 = 存储单元个数*存储字长 bit （若是字节则为 B）运算器ACC：累加器，存放操作数/运算结果MQ：乘商寄存器，存放操作数/运算结果（乘除运算时）X：通用操作数寄存器，存放操作数ALU：算术逻辑单元，实现算术运算、逻辑运算（最为重要）控制器

原创 关于正则表达式的学习

正则表达式：找到匹配的信息import re 导入模块re.search(A,B)在B中寻找A，返回一个re.match对象，其包括span区间，match匹配项re.findall(A,B)在B中寻找所有A，返回一个list，其中A：r’a|b’，表示a及bre.split(A,B)在B中寻找所有A，返回一个list，其中A：r’[,;]’，表示以，；分割re.compile(A)编译A，接下来用compiled.search(B)的形式来使用r’xxx’xxx[ab]xxx表示x

原创 python日常学习笔记

np.unique([数组])能够挑选出独一无二的数组，比如[1,2,3,3,4,5,4]，就是[1,2,3,4,5]，加上return_index=True，除数组外，多返回数组在原数组的第一个索引，[0，1，2，4，5]；加上return_inverse=True，多返回全部索引，[0，1，2，2，3，4，3]np.where可以输入三个参数，第一个是条件，第二个是条件True的结果，第三个条件是False的结果，例子是A=[1到10]，np.where(a<5,a,10a)，就会输出[1,

原创 一个老鼠走迷宫问题的python解法

今天在查找马尔科夫链的过程中，在网上看到一个有意思的问题，于是用python将其做了实现和改进，题目如下：如下图所示的迷宫共有9个格子，相邻格子有门相通，9号格子就是迷宫出口. 整个迷宫将会在5分钟后坍塌.1号格子有一只老鼠，这只老鼠以每分钟一格的速度在迷宫里乱窜（它通过各扇门的机会均等）。求此老鼠在迷宫坍塌之前逃生的概率。如果这只老鼠速度提高一倍，则老鼠在迷宫坍塌之前逃生的概率能增加多少？题目中可以看空间1为入口，空间9为出口，思路上既可以用迭代的方法，也可以用矩阵形式来编写 。先是基于马尔

原创 ssh的两种登录方式

密码登录：A通过ssh连接服务器B时：#mermaid-svg-Ld5J6De6bYuytrax .label{font-family:'trebuchet ms', verdana, arial;font-family:var(--mermaid-font-family);fill:#333;color:#333}#mermaid-svg-Ld5J6De6bYuytrax .label text{fill:#333}#mermaid-svg-Ld5J6De6bYuytrax .node rect,#m

原创 我最近常用到的一些命令

我最近常用到的一些命令：cmd/powershell下停止远程桌面服务：net stop termservice开启远程桌面服务：net start termservice添加新用户：net user <user> <passwd> /add将新用户添加到管理员组：net localgroup administrators <user> /add...

原创 关于几种shell的几个坑

关于几种shell的几个坑Linux中：通过useradd添加用户时，如果设置好密码直接切过去，会发现只有一个$符号，之后输入命令都会提示无法找到，是由于此时建立新用户的默认shell为sh，此时应当vim /etc/passwd，找到对应用户名，将句末的bin/sh改为bin/bash即可MacOS中：通过sudo passwd root 给root账户设定密码后，通过su root切换到root后，会呈现出sh-3.2# 的状态，此时按照Linux的方法是没有效果的。可直接输入zsh进入zsh中