- 博客(108)
- 资源 (24)
- 收藏
- 关注
原创 Puppeteer 中的 iFrame使用(包括多重嵌套)指南
开发人员经常会遇到带有内嵌 iframe 的网页,其中包含重要信息。弹出窗口、交互式表单、广告和动态内容通常包含在这些 iframe 中。要访问和提取这些关键数据,开发人员需要知道如何导航、操作和与这些 iframe 交互。Puppeteer为网页抓取任务提供了强大的解决方案。这里将引导您完成在 Puppeteer 中有效处理 iframe 的过程。
2024-06-05 12:10:55 1295
原创 云原生 微服务 restapi devops相关的一些概念说明(持续更新中)
云原生是一种构建和运行应用程序的方法,是一套技术体系和方法论。它是一种在云计算环境中构建、部署和管理现代应用程序的软件方法。云原生应用程序是基于微服务架构的,采用开源堆栈(K8S+Docker)进行容器化,借助敏捷方法、DevOps支持持续迭代和运维自动化,利用云平台设施实现弹性伸缩、动态调度、优化资源利用率。
2024-01-09 10:39:55 998
原创 Failed to launch the browser process! undefinedy以及Failed to load Chrome DLL from puppeteer错误的处理
很有可能是因为你的puppeteer版本过高,对应chromium无法在该windows机器版本上运行,您可以试一下自己机器所能支持的chrome最高版本,然后查看与之对应的puppeteer最高版本,可以通过这个。
2024-01-08 12:00:25 1307
原创 国产ToolLLM的课代表---OpenBMB机构(清华NLP)旗下ToolBench的安装部署与运行(附各种填坑说明)
ToolBench的安装部署与运行,够详细,且附新人学习的各种填坑说明
2023-12-19 16:02:13 1575
原创 ToolLLM model 以及LangChain AutoGPT Xagent在调用外部工具Tools的表现对比浅析
文章主要谈及主流ToolLLM以及高口碑Agent技术的一些对比,框架先上,内容还在不断丰富与更新。
2023-12-15 12:53:12 1023 1
原创 pycharm中如何去除波浪线的设置
pycharm中,碰到恼人的红绿波浪线,打开’file-settings’,然后,参照如图设置,去除’effects’选项:
2023-12-13 10:43:22 897
原创 node express pm2 让node的应用一直在启动状态
node本身是一个进程的应用,它的特点就是所有方法都是串行一次执行, express的服务有时碰到异常,会导致整个node进程直接跳出,当node结合express作为远程服务使用时,需要一个守护进程,不能让服务掉线,那么可以通过PM2这个工具来实现安装 PM2// npmnpm install -g pm2pm2的常用命令格式pm2 start app.js // 启动nodeJs应用,进程的默认名称为文件名apppm2 start app.js--name mynode // 启动nod
2022-05-25 15:44:43 493
原创 elasticsearc reindex操作遭遇java.security.AccessControlException: access denied suppressAccessChecks 错误
错误现象及分析elasticsearc 7.5.1版本其他操作正常,但进行 reindex操作时,遭遇java.security.AccessControlException: access denied suppressAccessChecks的错误,其原因是elastic运行时使用的jdk版本对代码权限的授予进行了限制解决方案若要解除该限制,可以到jdk的安装目录,比如说 /usr/java/jdk1.8.0_311 下,找到其目录下的jre/lib/securit/java.policy 文件,
2022-05-19 18:59:15 747
原创 navigation failed because browser has disconnected puppeteer 问题分析与解决
问题原因分析puppeteer 出现这个错误,大概率是因为你前面使用了 page.goto() 方法,而未等待该方法把url对应页面加载完全,而后又想使用 broswer.close() 来关闭浏览器之时,此前尚且在加载的元素无法和浏览器建立连接所致解决思路方案1, 加入 await 关键字等待页面元素加载完全,此后关闭浏览器,自然就不会出现异常await page.goto("https://mywebsite.com/")可是以上方法,可能造成的问题是,你不得不等待无关元素全部在页面中加载
2022-05-17 20:43:32 2411
原创 nvm node 简易安装与使用
可以使用node的管理工具NVM来安装node,更加方便进行node版本的切换.nvm下载下载地址https://github.com/coreybutler/nvm-windows/releasesnode安装nvm install 16.12.0# 使用某个版本的nodenvm use v16.12.0# 查看当前使用的node版本node -v node 命令的使用# 启动***.js文件node ***.js...
2022-05-17 16:26:19 188
原创 MySQL 保存 emoji 表情出错 Incorrect string value: ‘\xF0\x9F\x8C\xB9‘
问题原因出现以上问题它就是数据库的字符集设置问题:mysql的utf8只支持 1 到 3 个字节,Emoji表情占4个字节,超过了mysql的utf8最大支持长度解决方式改字符集为 utf8mb4注意: 资料显示,utf8mb4的最低mysql版本支持版本为5.5.3+,若不是,请升级到较新版本不需要重启,不需要改mysql配置文件,不需要改jdbc数据库连接文件参数,只消执行下面三局SQL语句# 修改数据库字符集编码ALTER DATABASE `db_test_name` CHARACT
2022-04-29 10:51:49 1266
原创 js中与‘‘相区别的模板字符串` `的使用方法
`是ES6 中新增的语法字符串,用反引号(``)标识,它可以当作普通字符串使用,也可以用来定义多行字符串,或者在字符串中嵌入变量。比较常用有两个场景一是字符串中嵌入变量let paySignStr=`${appId}\n${timeStamp}\n${nonceStr}\n${pPackage}\n`;//需要加签的字段拼接二是换行的字符串,举个例子,私钥证书的字符串是不能直接复制,然后用’'来引用的,但是用``就可以做到直接引用const privateKey =`-----BEGIN PR
2022-04-19 21:09:12 6005
原创 反序列化失败although at least one Creator existsno delegate- or property-based Creator 异常
标题所指问题也可能是 @Builder @NoArgsConstructor 冲突以上问题出现的原因是Entity上加上 @Builder ,会默认为类加上全参构造函数,且提供以建造器模式构造对象的方法。而 @NoArgsConstructor 注解生成无参构造函数以便使用new Obj()方式创建对象,很多框架中都需要反射调用无参构造函数。但是如果显式声明了 @NoArgsConstructor ,lombok就不会生成全参构造函数,而@Builder中会用到全参构造函数,所以冲突。以上问题的解决
2022-04-19 20:55:03 5484
原创 vue router当前页面刷新后回到首页
在App.vue中直接写入以下代码在created钩子函数中判断当前路由地址是否在首页home,如果不在则替换为home页面created() { if (this.$router.path !== "/home") this.$router.replace("home") }
2022-01-21 15:16:33 3453 1
原创 Elasticsearch的单条插入批量插入及根据条件删除记录的操作转java代码示例
Elasticsearch的部分操作(单条插入批量插入及根据条件删除记录),转java代码的示例如下: /** 批量插入多条记录到ES中(client即为RestHighLevelClient的一个实例,此处不在具体展示其创建过程) * @param dataList * @param indexName */ public void writeDataToES(List<Map<String, Object>> dataList, String indexName)
2021-12-27 10:56:01 2325
原创 手机浏览器页面如何调试,请用vconsole
发现手机端的浏览器页面和在电脑端浏览器开发者模式模拟的手机,显示效果不大一致,应该怎样调试呢,可以试着加入vconsole代码。通过vConsole.js 重写console方法,实现了类似于微信小程序的移动端调试效果。具体使用方法如下<!DOCTYPE html><html><head> <meta charset="utf-8"> <title>demo.html</title> <scrip
2021-10-28 10:29:17 1849
原创 Elasticsearch词频统计实现
IK分词器 & pinyin分词器的安装ES的安装目录下执行./bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.2.0/elasticsearch-analysis-ik-7.2.0.zip若是离线安装可以使用下列命令cd plugins/mkdir ikmkdir pinyinunzip ../plugin-zips/el
2021-08-06 16:17:57 1236
原创 Java的Synchronized锁机制-对象锁和类锁区别
Java的synchronized锁机制synchronized (this)加synchronized的方法两个线程访问该类同一个方法该对象加锁的需等待,不加锁不等待加锁的需等待,不加锁不等待两个线程访问该类不同的方法改对象加锁的方法需等待,不加锁不等待加锁的同是静态和非静态时等待,不同时不等待;不加锁的不等待类锁-静态方法锁和非静态方法锁的示例package com.test.sych;/**测试类级别锁,如果锁只是加在非静态方法名称上,这个锁是在方法级
2021-07-27 16:50:16 241
原创 Quasar 的介绍及安装使用
为什么需要quasarQuasar(发音为/ˈkweɪ.zɑɹ/)是基于MIT许可的开源Vue.js框架,Web开发人员可以快速创建具有多种功能的响应式++网站/应用程序,其运用范围包括:SPA(单页应用程序)SSR(服务器端渲染应用程序)(+可选的PWA客户端接管)BEX(浏览器扩展)移动应用(Android,iOS等)多平台桌面应用程序(使用Electron)Quasar的座右铭是:一站式所有平台,即一次性编写代码,并同时将其部署为网站,移动应用程序和应用程序。 一个适用于所有代码的代码
2021-04-20 17:23:43 9000 1
原创 为什么需要webpack 作用是什么
想要理解为什么要使用 webpack,我们先回顾下历史,在打包工具出现之前,我们是如何在 web 中使用 JavaScript 的,然后就能窥探webpack要解决的问题是什么,可以从两方面来看传统的方式有什么问题一是浏览器中运行 JavaScript 的方式的效率问题我们知道有两种方式在浏览器上执行js第一种方式,引用一些脚本来存放每个功能;此解决方案有个问题,如果文件比较多,比如有10个文件则需要发送十次http请求来加载,因为文件之中有函数的相互引用,则如果因为网络原因其中一个文件未加载成功,
2021-03-25 10:10:46 1322
原创 删除elasticsearch中重复数据记录的方法
根据查询条件删除特定的记录POST /hk_tm_info_v1/_delete_by_query{ "query": { "bool": { "must_not": [ { "exists": { "field": "app_date" } } ] } }}查询条件难以避开重复的话,可以使用java代码来对查询到结果进行处理,需要删除的数据加入到data
2021-03-07 22:22:48 955
原创 elasticsearch的数据某字段批量去空格及更新操作
用script脚本语法,操作通过的ES版本7.2# 正常文本替换POST /full_tm_info/_update_by_query{ "query": { "term": { "term_id": { "value": "035-2179" } } }, "script": { "lang": "painless", "source": "ctx._source.notes_cn='这一措辞于2008年11月11
2021-03-07 22:21:23 971
原创 搜索elasticsearch的数据条数大于10000的情况解决
默认情况下当用elasticsearch进行深度分页查询时的size-from大于10000的时候,就会报错“”### kibana里执行PUT /us_tm_info_v1/_settings{ "index.max_result_window": "20000"}第二种方式在config/elasticsearch.yml文件中的最后加上index.max_result_window: 100000000这种方法要注意在最前面加上空格声明:文章由作者本人的亲历及经验总结,属个人
2021-03-07 22:19:47 1639 2
原创 elasticsearch 匹配发音相同单词的方案
匹配拼写不同但发音相同的单词。像“邮件”和“男性”,我们可以在Elasticsearch中如何进行这样的匹配呢?这就需要用到analysis-phonetic这个语音分析插件,可以使用插件管理器安裝此插件:ES中安装analysis-phonetic插件[root@ecs-bs bin]# ./elasticsearch-plugin install analysis-phoneticfuture versions of Elasticsearch will require Java 11; you
2021-03-07 22:18:25 955
原创 大数据-elasticsearch-csv文件的高效导入
本节主要对于100M以上的csv大数据文件高效导入到es中提供一种解决方案.fastcsvFastCSV是基于Java语言的超快速和简单的CSV库,RFC 4180兼容,项目许可为Apache2.0版.该项目的性能与opencsv及 Super CSV等项目基准测试相比,有如下参考(来自FastCSV项目的自主测试,本人并未验证):[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-wfzT8Z3C-1615126373613)(http://res.limuqiao.
2021-03-07 22:14:36 2174 2
原创 大数据-elasticsearch-kibana安装
Kibana能提供搜索、查看和与存储在 Elasticsearch 索引中的数据进行交互的功能,开发人员用以执行高级数据分析,并在各种图表、表格和地图中可视化数据,本节主要引导在centos下如何安装Kibana下载如果你的centos可以访问外网的话,推荐直接在linux中下载,执行如下命令:wget https://artifacts.elastic.co/downloads/kibana/kibana-7.4.0-x86_64.rpm上面的那个kibana版本可以更改成你自己es对应的.
2021-03-07 22:10:44 141
原创 大数据-elasticsearch-安装
本节主要引导在centos下如何安装Elasticsearch[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-78M2G2FS-1615125595406)(http://res.limuqiao.com/images?imageName=tech.Tech-bigdata-elasticsearch-install-home.jpg)]Elasticsearch运行需要 Java 8 环境,在安装Elasticsearch之前先安装好JDK.下载如果你的linu.
2021-03-07 22:01:16 150
原创 java读取目录下最新修改的文件--注意int值的取值范围
java读取目录下最新修改的文件--注意int值的取值范围读取文件的修改时间,一般情况下,可能比较容易写出类似以下的代码,请注意看代码中的注释分析这个有bug的代码不要直接使用File path=new File("文件夹地址");//列出该目录下所有文件和文件夹File[] files = path.listFiles();//按照目录中文件最后修改日期实现倒序排序Arrays.sort(files, new Comparator<File>() { @Override
2020-11-11 11:17:13 715 1
原创 一文填千坑--Arduino Nano(atmega328p)对ESP8266的烧写
文章目录关于该项目元件准备项目步骤配置ESP8266在Arduino的运行环境实物连线编写Arduino的代码烧写代码运行代码及调试效果现在物联网平台很多,类似Yeelink,乐为物联,Bylnk(为microduino量身打造,更易上手),借助它们提供的APP和接口可以快速地实现在手机端接收远程硬件信息。但别人的框架总是固定的,接口也是有限的,在样式和功能上有一定局限性,没法做到完全满足需求的...
2018-12-17 23:23:55 11506
原创 3d打印利器FreeCAD入门教程之三----3d文字雕刻篇
文章目录本节内容利用ShapString工具雕刻文字的过程创建基本形状使用‘Draft’工作台的‘Shape String’工具来插入文本创建3D效果的文本插入定位用的sketch图形在3D空间里给3D文本进行定位创建雕刻的文本本节内容讲述3D打印中的模型,如何添加文字的雕刻效果,及FreeCAD的相关ShapeString, extrude等工具的应用技巧利用ShapString工具雕刻文...
2018-12-10 19:04:44 8426
原创 Arduino练习教程-入门版OTTO机器人自己做
文章目录OTTO机器人是什么元件准备组装躯体部位鸵机的安装双腿安装到躯体上腿部鸵机的安装双脚安装到腿部头部的组装线路连接合上头部代码上传效果演示OTTO机器人是什么OTTO是完全开源的,任何人都可以做的交互式机器人. 她与Arduino控制系统兼容,其主要外观材料可以直接3d打印而来, 甚至可以说她是为培养孩子们学习机器人的热情而建造的。 OTTO的灵感来源于另一个称为Zowi的两足机器人。...
2018-12-07 19:05:37 13458 6
原创 node.js的server可以用localhost访问,却为什么IP访问不了
文章目录问题概述问题背景及描述问题分析及解决过程成功解决方案问题概述node.js的server启动后,hellow world可以用localhost访问到,换了IP为什么访问不了? 问题背景及描述使用了NodeJS上的Demo代码,启动了一个webserver,用localhost或127.0.0.1能够访问到,但是换成ip地址就一直访问不到,代码如下:const http = ...
2018-12-07 18:50:58 24558 8
原创 3d打印利器FreeCAD入门教程之二----乐高积木块建模操作篇
文章目录本节内容建模是要干什么乐高(Lego)组件建模的过程乐高立方体的生成乐高立方体的挖空乐高立方体上面八个点的生成本节内容解释什么是建模,通过乐高积木块的建模过程来带你熟悉PartDisign工作台中常用的诸如创建Sketch,External Geometry导入边缘线,建立约束,PAD,Extrude,Linear Pattern等常用操作建模是要干什么3D打印产生的是真实世界的物...
2018-12-07 10:29:14 9282 1
原创 3d打印利器FreeCAD入门教程之一----基础操作篇
3d打印利器FreeCAD入门教程之一----基础操作篇FreeCAD是什么概要介绍在3D空间中导航在零件设计工作台和素描工作台中工作FreeCAD是什么FreeCAD是一种通用的3D CAD建模软件,来自法国Matra Datavision公司,是完全开源(GPL的LGPL许可证)易于学习和掌握的常用3d打印建模的工具。需要该软件可以自行从这里进行下载并安装使用,本文写作时,0.18版本即将...
2018-12-07 08:35:28 34123 3
原创 APR-util not found pcre-config for libpcre not found. 错误解决方法
安装Apache/httpd是可能会出现标题错误,下载对应软件包安装:http://archive.apache.org/dist/apr/apr-1.5.1.tar.gzhttp://archive.apache.org/dist/apr/apr-util-1.5.1.tar.gz http://jaist.dl.sourceforge.net/project/pcre/pcre
2015-06-02 22:17:31 4576
原创 php连接mysql提示Call to undefined function mysql_connect() 或 ZenCart MySQL支持问题的解决
安装Zencart,进行环境检测是,出现如下提示:MySQL支持 = OFF或者使用如下PHP代码连接mysql提示Call to undefined function mysql_connect()<?php if (mysql_connect('localhost', 'root', 'pass') == false ) { ech
2015-05-28 12:07:42 21908
原创 LoadModule php5_module 参数和 PHPIniDir参数导致apache不能启动和出错的
症状:LoadModule php5_module 参数和 PHPIniDir参数导致apache不能启动, 去掉后又能正常启动出错的是这两行(在apache的httpd.conf配置文件中)LoadModule php5_module “C:/www/php54/php5apache2_2.dll”PHPIniDir “C:/www/php54″在Serv
2015-05-27 12:32:00 6887
winmerge-2.16.4-x64-exe.zip
2020-01-30
Microsoft Visual C++ 2019 Redistributable windows X86
2019-11-21
Greenshot-INSTALLER1.2.10 超小超轻便好用截屏软件
2019-11-21
Canon i4760/4700 废墨清零软件
2011-11-22
TopStyle Pro V4.0.0.
2010-04-22
一套蓝色的文章管理系统界面精美模板
2010-04-19
desktops 桌面切换工具
2008-09-09
RegexBuddy(V2.05)
2008-07-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人