- 博客(346)
- 资源 (23)
- 收藏
- 关注
RSS订阅
原创 Pandas数据处理笔记_Markdown版
引言:自从熟练了Markdown的语法后,写啥文档都好方便啊~一发不可收拾了.这两天又用到了pandas,翻出来之前做的笔记添加新内容的时候明显感觉很难受啊有木有,奈何CSDN也没有提供富文本编辑器生成的老博文直接转Markdown的功能,只好再一段一段的手工改一遍吧,之前那篇笔记就存档了,不再更新.以后都在这个里面追加记录新知识. -2019.11.12读取CSV/Excel文件指定数据类...
2019-11-12 18:44:54
1306
1
原创 Amazon Lambda 转 Container Image 方式部署
对于从 Lambda Console通过创建的函数, 可以直接在浏览器中编辑代码和调试, 非常方便. 不过由于 Lambda 函数 Quota 限制 Console 编辑器最大 3MB, 包含 Layer 和自定义 Runtim 后最大 250MB, 并且此限制不支持提限, 因此当函数体量较大时就不适合了. 而 Container Image 方式最大支持 10GB (包含 Layer 和自定义 Runtime), 可以满足更高的需求.
2023-10-27 14:58:59
223
原创 Python 轻量 ORM peewee 上手
有时候需要用 Python 直接操作数据库, 手工撸 SQL 倒也不是不能行, 但是总觉得有点背离了的初心, 习惯了SQLAlchemy的直接操作后, 就变懒了. 但是对于比较简单的数据库操作场景, 再跑一套SQLAlchemy又显得有些臃肿, 这次上手轻量 Python ORM 选手peewee。
2023-10-21 02:21:27
340
原创 Next.js 入门笔记
之前初步体验了 React 的魅力, 又看文档理解了一下useState和useEffectuseState用来声明在组件中使用并且需要修改的变量useEffect用来对useState声明的变量进行初始化赋值可能理解的不太准确, 不过大概差不多是这么个意思. 但是再往后看路由什么的就头大了, 还得手动添加各种其他的 package 进行实现, 显然不符合 OOBE 的体验. 逛了一圈发现基于 React 做的另外一个更 “高级” 的框架 Next.js, 来个快速入门做一下笔记.
2023-10-05 23:22:13
756
原创 AWS Lambda Golang HelloWorld 快速入门
以下测试基于 WSL2 Ubuntu 22.04 环境来到 Lambda 控制台, 创建新的函数, Runtime 选择Go 1.x选择前面编译并打包的main.zipTest, 欧耶~报错了!返回 Code 标签页, 看到默认的 Handler 设置的是hello, 这和我们写的入口函数名称不匹配, 是导致测试失败的原因.Edit 修改 Handler 为main再次 Test, succeeded!
2023-10-01 23:43:10
2292
1
原创 React 入门笔记
国庆值班把假期拆了个稀碎, 正好不用去看人潮人海, 趁机会赶个晚集入门一下都火这么久的 React 前端技术. 话说其实 n 年前也了解过一丢丢来着, 当时看到一上来就用 JS 写 DOM 的套路直接就给吓退了, 扭头还去看 Vue 了🤣, 现在从市场份额来看, 确实 React 还是占有率更高加上单位现在也都在推 CloudScape 做项目, 有必要再试一试了.本次入门主要围绕 React 前端开发的环境准备和基本功能实现, 后端用。
2023-10-01 01:21:25
447
原创 TM/GM 使用 MutationObserver 检查页面元素加载完成
在 TamperMonkey 中经常需要在等待页面加载所有(或特定)元素后再去进行操作, 以前用的方法是通过。循环每隔一段时间检查一下 DOM 是否可以通过。拿到. 下面分享使用原生的。接口方式实现, 效率更高.
2023-09-26 10:28:44
127
原创 使用 multiprocessing 多进程处理批量数据
创建进程池, 传入的参数是要要使用的 CPU 内核数量, 直接用。可以直接将处理后的结果拼接成一个 list 对象。可以拿到当前硬件配置所有的 CPU 内核数.
2023-09-09 20:47:12
484
原创 Python Asyncio 调用 CPU 多核工作
Python 的 Asyncio 适合异步处理 IO 密集型的事务, 比如 HTTP 请求, 磁盘读写, 数据库操作等场景. 如果使用传统的顺序执行代码, 需要等待每次 IO 事务进行完成后才可以继续后面的代码. 通过在定义函数时添加修饰词async可以将其设置为异步函数, 后续配合 Asyncio 可以实现多线程并行提高代码的运行效率.
2023-09-09 16:42:14
235
原创 PVE 8.0.4 配置记录
七夕收到了媳妇送的礼物 Beelink SER 5 PRO (Ryzen 5700U), 记录打造成私人服务器的过程.先在 BIOS 中开启 VT-d 虚拟化功能, 然后将主机的一个网口接入当前网络(主路由 192.168.1.1)进行 PVE 环境安装配置, 后面会在 PVE 中启动 OpenWRT 替代主路由.
2023-08-28 20:24:40
781
原创 AWS SDK 3.x for .NET Framework 4.0 可行性测试
为了应对日益增长的网络安全挑战, 越来越多的互联网厂商已经陆续开始或者已经彻底停止了对 SSL 3 / TLS 1.0 / TLS1.1 等上古加密算法的支持. 而对于一些同样拥有悠久历史的和 AWS 服务相关联的应用程序, 是否可以通过仅更新 SDK 版本的方式来适应新的环境. 本文将以 Windows Server 2008 R2 + .NET Framework 4.0 作为基础环境, 使用 VB.NET 和最新版本 AWS SDK 尝试开发一个能够访问 S3 存储桶的 WinForm 应用进行可行性
2023-08-20 19:48:06
905
原创 浅尝 xen 虚拟化
之前分享过使用 `oVirt` 部署私有虚拟化环境, `oVirt` 是基于 `KVM` 虚拟化开发了一系列的管理工具, 以 Web Console /CLI 的方式交付使用. 今天记录和分享的是在 VMware Workstation 中使用 Alpine 作为基础操作系统部署 `xen` 虚拟化环境的简单测试.
2023-06-11 00:57:01
1323
原创 AD 实现多 DC + 多 ADFS 高可用部署
规划中的两台 ADFS 服务器 FQDN 分别为 adfs1.alian.com 和 adfs2.alian.com, 我们后面会使用负载均衡将他们两个做成高可用, 对外提供访问的域名将会是 adfs.alian.com, 所以我们颁发证书时要制定的对象也应该是 adfs.alian.com。安装完成后系统会自动重启, 重启后第一次进入系统由于需要初始化相关设置, 时间会略长, 大概 5 分钟左右, 进入系统后可以在服务器管理器中看到多出了。右键点击 证书模板 - 新建 - 要颁发的证书模板, 选择。
2023-05-17 04:05:14
759
原创 PowerShell 学习笔记 - 管道/Pipeline
使用符号连接的多个命令之间可以从左向右传递上一个命令输出的结果, 例如下面命令可以将获取到的结果对象传递给右侧的管道语法虽然没有限制可以连接的命令数量, 不过通常不建议超过 5 个, 否则会极大降低代码的可读性。
2023-05-16 00:20:50
157
原创 创建自定义 Debian Live ISO 镜像
为了简化操作稍微魔改了一下, 移除了 UEFI 支持, 仅支持 BIOS 传统模式引导, 如需 UEFI 引导请参考原文.最终实现效果是生成一个可以引导的 ISO 镜像, 其中包含了预装好的 Docker, vim, openssh-server 等应用.
2023-05-06 00:31:25
951
2
原创 Lambda Python 创建和使用 Layer
由于 Python 代码中需要用到第三方的库, 在 Lambda 中可以通过创建自定义层(Layer)的方式来将这些依赖提供给 Lambda 运行环境.下面演示创建一个包含第三方库requests的层, 以及如何在 Lambda 中调用。
2022-12-23 16:32:49
1029
转载 MTR工具使用说明与结果分析
当客户端访问目标服务器或负载均衡，使用ping命令测试出现丢包或不通时，可以通过MTR等工具进行链路测试来判断问题来源。本文先介绍了MTR工具的基本原理，然后对测试结果进行分析，以及对测试步骤进行了说明。
2022-12-14 20:46:31
4169
原创 CentOS 7实例配置使用SSM远程管理
安装Amazon SSM Agent在大多数情况下，会在以下 Amazon Machine Images（AMIs）将默认预装 SSM Agent1：Amazon LinuxAmazon Linux 2Amazon Linux 2 ECS 优化基础 AMIsSUSE Linux Enterprise Server (SLES) 12 和 15Ubuntu Server 16.04、18.04 和 20.04CentOS默认并不安装SSM Agent, 需要在实例中通过下面命令手工安装:s
2022-04-20 20:17:24
1229
原创 AWS托管AD + Yearning配置LDAP认证登录
AWS托管AD配置具体创建过程不再赘述, 这里使用我之前创建好的一个AD, 主要是记录下来AD的两个DNS地址, 可以从控制台中查看到EC2实例配置先使用Amazon Linux 2 AMI启动一台新的实例, 主要的服务都在这台实例上完成, SSH连上以后进行下面操作# 懒得装docker了, 直接本地装mariadbsudo amazon-linux-extras install mariadb10.5# 开启mariadb服务sudo systemctl enable mariadb -
2022-04-17 14:32:08
1720
原创 使用Windows自带的性能监视器记录网络性能实时/历史数据
右键点击开始按钮 > 运行 > perfmon在打开的"性能监视器"左侧功能菜单进入: 性能 - 监视工具 - 性能监视器右键点击默认的计数器"%Processor Time" - 删除所有计数器点击顶部绿色的+图标添加计数器展开"Network Interface", 分别选择以下指标, "选定对象的实例"选择当前的网卡:Bytes Received/secBytes Sent/secBytes Total/sec点击"添加"按钮后完成监测指标的选择..
2022-04-11 15:21:05
8639
3
原创 自动配置SSM Agent使用Windows Server系统相同代理
虽然官方文档中提供了较为详细的PowerShell代码块配置SSM Agent使用代理, 不过需要手工进行设置代理的hostname和port, 对于已经在Windows Server系统中配置过代理的实例, 我们可以直接通过PowerShell获取当前的系统代理配置, 然后传给SSM Agent对应的注册表键完成设置.获取Windows系统代理配置以Windows Server 2022为例, 打开Windows设置(Windows Settings) - 网络和Internet(Network &a
2022-03-30 01:43:44
443
原创 使用Python自动修改AWS安全组规则允许当前电脑访问
背景介绍AWS云服务安全的最佳实践是为AWS中的EC2实例配置最小范围的安全组访问范围, 所以通常会设置仅允许某些来自互联网的IP地址访问, 但是家里的宽带会经常更换公网IP, 从家里访问实例每次都要手工修改安全组的规则, 很不方便, 还是那句话: 人生苦短, 我用Python, 下面搞起来~实现代码代码逻辑很简单, 主要就两步:获取当前电脑的互联网IP修改指定的安全组规则import requestsfrom datetime import datetimeimport boto3f
2022-03-19 03:33:55
4151
1
原创 EC2实例挂载使用EFS操作步骤
本文详细记录一下如何使用Systems Manager为EC2实例挂载EFS存储参考官方文档: 使用 EFS 挂载帮助程序挂载文件系统https://docs.amazonaws.cn/efs/latest/ug/efs-mount-helper.html准备IAM权限EC2实例想要挂载EFS是需要相关权限的, 如果当前的EC2实例已经分配过了IAM角色(实例配置文件), 那么需要先修改关联的IAM角色, 增加托管策略.检查当前实例关联的IAM角色访问EC2控制台: https://co
2022-03-17 14:20:24
1915
1
龙芯版Linux运行PyCharm所需的fsnotifier-mips64
2020-12-13
龙芯版Linux中运行PyCharm所需的libpty.so
2020-12-13
龙芯PyCharm fsnotifier源码
2020-11-30
webmin_1.960_all.deb
2020-10-25
OpenArk64.exe BUILD 202009022306
2020-09-07
解决WSL2与Proxifier冲突的工具
2020-06-01
IC解密复制软件.zip
2020-05-15
frp_0.31.2_64位Windows和Linux_2020.2.5发布
2020-02-06
frp_0.31.1_windows_amd64实现内网穿透.zip
2020-01-21
VMware-ESXi-6.7.0-8169922-depot.z01(2/2)
2019-08-21
VMware-ESXi-6.7.0-8169922-depot.zip(1/2)
2019-08-21
binaries.tar.gz
2019-06-10
HTTrack Website Copier网站整站下载工具-超好用
2018-04-13
HSQLDB快速上手实录
2012-09-12
JBoss Administration and Development 2nd
2009-03-31
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人