- 博客(537)
- 资源 (31)
- 收藏
- 关注
RSS订阅原创 从零开发短视频电商 AWS OpenSearch Service开发环境申请以及Java客户端介绍
快速的在AWS上申请一个低成本的Opensearch service用于开发阶段的联调测试，对步骤做了详细的记录和截图，同时还介绍了多种方式用java去连接opensearch去操作数据和索引
2023-12-08 17:26:36
2395
1
原创 从零开发短视频电商 在AWS SageMaker已创建的模型列表中进行部署
4.点击 “创建端点” 选项或者点击 “创建端点配置” 选项都可以进行部署。2.在 SageMaker 控制台的左侧导航栏中，选择 “模型” 选项。3.在模型列表中，找到您要部署的模型。1.导航到 SageMaker 控制台。5.在配置端点页面，您需要指定。选择创建端点进去后还是会进行。6.继续在配置端点页面，指定。9.去端点处查看启动情况。
2023-12-07 16:57:59
913
原创 从零开发短视频电商 Jmeter压测示例模板详解(无认证场景)
你可以设置一个基础定时器和一个随机范围，以便每个请求之间有一些随机的等待时间，通常添加在需要模拟用户请求之间的时间间隔的位置，常见的情况是将定时器添加在HTTP请求之前，以模拟用户在执行不同操作之间的停顿。响应断言是最常用的一种断言方法，主要是对响应结果中的文本内容进行断言，比如响应结果是否包含指定的值，或者是否等于指定的值。请注意，在进行实际的性能测试时，由于监听器会占用一些资源，建议在测试结束后禁用或删除不需要的监听器，以避免影响测试性能。常用的断言类型，它们分别用于验证不同方面的请求响应。
2023-12-06 22:50:55
1057
原创 从零开发短视频电商 JMH压测真实示例DEMO
Dead-Code Elimination (DCE) ，即死码消除，编译器非常聪明，有的代码没啥用，就在编译器被消除了，但这给我做基准测试带了一些麻烦，比如上面的代码中，baseline 和 measureWrong 有着相同的性能，因为编译器觉得 measureWrong这段代码执行后没有任何影响，为了效率，就直接消除掉这段代码，但是如果加上return语句，就不会在编译期被去掉，这是我们在写基准测试时需要注意的点。如果你的初始化操作，是和方法相关的，那最好使用 Invocation 级别。
2023-12-06 15:57:56
517
原创 IntelliJ IDEA 智能（AI）编码工具插件
是一个建立在尖端AI技术上的代码加速工具包，通过与编辑器的轻松集成，它可以让使用者专注于成为最好的软件开发人员，而不仅仅是搬砖者。通义灵码是阿里推出的基于通义大模型，提供代码智能生成、研发智能问答能力的人工智能编码助手，经过海量优秀开源代码数据训练，可根据当前代码文件及跨文件的上下文，为你生成行级/函数级代码、单元测试、代码注释等等。代码建议：根据代码上下文提供代码片段、函数甚至完整的类，从而提供相关且上下文准确的建议。它支持自动化例行任务、AI 驱动的代码完成、实时代码分析和键入时的错误检查。
2023-12-05 09:22:32
3459
原创 从零搭建开发脚手架 使用JMH对Java中的某个方法或代码块做性能测试
声明一个public方法为基准测试方法。生命在类上，该类下的所有被@Benchmark注解的方法都会执行。可以用在类上和方法上。
2023-12-02 16:45:44
1125
原创 从零开发短视频电商 在AWS上用SageMaker部署开源模型并用Java SDK调用
这里有很多源Huggingface，TensorFlow，PyTorch等，其内置了很多热门模型。使用AWS ApiGateway + AWS Lambda。以下内容都在 sagemaker studio里。，选择针对单个用户设置即可，然后等个几分钟。然后到aws上自己去注册就行了。这里包含了很多Java SDK调用示例。注册AWS账号，并且绑定信用卡。1.登录后在控制台中搜索。，等待5-10分钟即可。在studio中配置。
2023-12-01 17:53:06
1207
1
原创 从零开发短视频电商 OpenSearch k-NN插件
k-NN 插件引入了自定义数据类型knn_vector，它允许用户将其 k-NN 向量提取到 OpenSearch 索引中并执行不同类型的 k-NN 搜索。knn_vector字段是高度可配置的，可以服务于许多不同的 k-NN 工作负载。Mapping映射参数必需的默认可更新描述nametruen/afalse最近邻方法的标识符。hnsw、ivf（需要训练），一般都是选hnswspace_typefalsel2false用于计算向量之间距离的向量空间类型。
2023-11-29 15:08:53
1140
原创 Windows IDEA Python开发环境安装+爬虫示例
通过使用网络爬虫，我们可以获取大量的数据，从而进行数据分析、数据挖掘等应用。网站注册，要安装一个第三方库，必须先知道该库的名称，可以在官网或者pypi上搜索，比如Pillow的名称叫。虚拟环境为您的Python包提供了一个干净的工作空间，以便您安装的库不会与为其他项目安装的库发生冲突。1.有两个版本的 Python，分别是 Python 3.x 和 Python 2.x，是一种标准的做法，以确保每个开发者或部署环境都使用相同的依赖版本。在你的项目目录下，运行以下命令，将当前虚拟环境的依赖导出到。
2023-11-24 15:23:05
2669
3
原创 如何系列 如何玩转远程调用之OpenFegin+SpringBoot（非Cloud）
市面上都是 Spring Cloud + openfeign想搞个Spring（boot） + openfeignGithubFeign 10.x 及更高版本基于 Java 8 构建，应该适用于 Java 9、10 和 11。对于需要 JDK 6 兼容性的用户，请使用 Feign 9.x功能图架构图依赖
2023-10-24 17:02:17
483
原创 可观测性-Metrics-WebClient异步Http远程Call
您可以通过设置属性来自定义名称。默认情况下，生成的指标名称为。自定义标签，提供一个实现自。
2023-10-18 17:10:48
641
原创 如何系统 如何进行SQL监控-执行SQL分析打印
p6spy 是一个用于 Java 应用程序的数据库监控工具，它可以拦截和记录应用程序与数据库之间的 SQL 查询语句和操作，以帮助开发人员进行性能分析、调试和监控。数据库监控工具：p6spy 主要用于监控数据库操作，它可以记录应用程序与数据库之间的所有 SQL 查询、更新、删除等操作，以便开发人员进行分析和调试。透明代理：p6spy 以透明代理的方式工作，开发人员无需修改应用程序代码。它实现了 JDBC（Java Database Connectivity）的代理，通过这种方式拦截数据库操作。日志记录。
2023-10-18 15:05:03
576
原创 踩坑笔记 NFS坑-2个pod读写文件延迟问题
尽管上述解决方案可以在一定程度上减轻NFS文件同步延迟问题，但它们仍然需要处理许多复杂的技术细节。然而，有一种更简单和可行的方法，可以彻底摆脱NFS的问题，那就是使用云对象存储服务（如OSS，对象存储服务）。
2023-10-13 11:06:34
1418
原创 如何系列 如何使用ff4j实现功能迭代
FF4J，Java的功能切换（Feature Flipping for Java），是一个用Java编写的功能切换（Feature Toggle）提案。功能切换（也称为功能翻转、功能标志或功能位）是程序或应用程序在运行时启用和禁用功能的能力。切换可以通过编程方式、通过Web控制台、通过API、通过命令行甚至通过JMX来操作。源代码包括多条路径，根据标志/功能的值来执行或不执行。一个功能代表了一个潜在地跨越应用程序的各个层级，从用户界面到数据访问的业务逻辑。因此，为了实现功能切换机制，我们必须在每个层级中提供
2023-10-07 17:17:52
490
原创 踩坑笔记 MySQL分页排序查询（Order by limit）导致数据丢失和重复
在执行查询时，MySQL会根据查询优化器的决策来确定数据的检索顺序，如果没有明确的排序规则，结果集的顺序可能会随机，这可能会让人感到困惑。分页查询排序后的数据，是一个非常常见的业务场景；但当使用不唯一的字段排序时，分两页查询的数据可能出现数据重复和丢失的错觉。这个优先队列的本质和Java中的堆一样的，可以根据limit的条数维护一个堆。以后的版本都会有，严格的说这并不算一个问题，MySQL官方对。如果没有唯一字段，联合索引构成的联合唯一索引也行。一张很屌的图，来自牛逼的 ALEX XU。
2023-10-03 19:43:27
2171
1
原创 如何系列 如何使用OpenCV进行图像操作
OpenCV (Open Source Computer Vision Library) 是一个计算机视觉和机器学习的开源库，其提供了丰富的图像处理和计算机视觉算法。OpenCV 最初是为 C++ 编写的，但现在也支持 Java 编程语言。你就认为是个增强版的ps工具图像读取和显示：OpenCV 可以读取多种图像格式，并提供图像显示的功能。图像处理：OpenCV 提供了各种图像处理工具，包括滤波、增强、色彩转换、几何变换等。特征检测与描述。
2023-09-28 14:33:04
615
原创 从零搭建开发脚手架 顺应潮流开启升级 - SpringBoot 从2.x 升级到3.x
之前的SpringBoot starter插件自动注册原理是依赖。移除Druid连接池（当前不支持SpringBoot3）升级JDK 8 -> JDK17。组件，可以在项目某个模块的。
2023-09-26 15:20:36
515
原创 IntelliJ IDEA - Maven 在控制台Maven编译正常，但是在IDEA中不正常，表现不一致
IDEA内置了一套绑定的Maven，我们在Windows控制台编译Maven项目时，使用的是环境变量中配置的JDK和MavenHome，这就是不一致的原因。一个Maven项目，当导入到IDEA后，无法在IDEA中正常的编译和下载jar依赖，类似下面的截图。在IDEA中就是PowerShell执行，需要引号。更改IDEA中MAVEN和JDK的配置。执行后看日志第一行的变化。设置–>项目设置–>
2023-09-20 14:14:20
857
原创 从零开发短视频电商 使用Spring WebClient发起远程Http调用
让我们从一个对客户端发送的 HTTP GET 请求进行计数的过滤器开始。我们将定义的第二个过滤器将版本号附加到请求 URL 路径。我们利用*ClientRequest.from()*方法从当前请求对象创建一个新的请求对象并设置修改后的 URL。.build();WebClient 默认使用 Project Reactor 提供的线程池来执行异步操作。但是，你可以根据应用程序的需求进行自定义线程池配置。调度器（Schedulers）：WebClient 使用调度器来管理线程，例如。
2023-09-13 13:44:59
862
原创 图解系列 图解直播推拉流流程
HLS协议规定，视频的封装格式是TS（Transport Stream），除了TS视频文件本身，还定义了用来控制播放的M3U8文件（文本文件）。HLS协议的工作原理是把整个视频流分割成一个个小的TS格式视频文件来传输，在开始一个流媒体会话时，客户端会先下载一个包含TS文件URL地址的M3U8文件（相当于一个播放列表），给客户端用于下载TS文件。在 CDN Origin 设置时，添加自定义 Header 字段及值，源站对请求中的字段检查，若不含有该 Header 字段及值，则返回错误码。
2023-09-08 15:10:20
808
原创 从零开发短视频电商 自动化测试SikuliX-编程方式
来执行基本的 UI 操作。让我们看一下与 Sikuli 进行 UI 交互的一些重要方法。Sikuli 可能会识别不同的对象，因此在这种情况下我们可以使用 Pattern 类来唯一地标识对象。Screen类包含用于屏幕元素上所有常用操作的预定义方法，如单击、双击、向文本框提供输入、悬停等。因此，如果可能的话，将查找操作限制在较小的区域对象（例如。Sikuli 使用图像进行对象识别，因此，每个方法都将至少接受一个参数作为图像文件的路径。，因此类 Region 的所有方法都可用于 Screen 对象。
2023-09-07 14:02:10
448
原创 图解系列 图解Kafka之Producer
它会连接bootstrap.servers参数指定的所有Broker，Producer启动时会发起与这些Broker的连接。因此，如果你为这个参数指定了1000个Broker连接信息，那么很遗憾，你的Producer启动时会首先创建与这1000个Broker的TCP连接。指定bootstrap.servers，地址的格式为。指定acks配置，默认值是all(版本3.x)在消息发送的过程中，涉及到了两个线程——指定Key和Value的序列化方式。线程中创建了一个双端队列。
2023-09-06 14:42:17
661
原创 从零开发短视频电商 自动化测试WebUI端到端测试-Playwright
chi_sim.traineddata（中文简体）、eng.traineddata（英文）、jpn.traineddata（日文）三个语言库，存放在 resources 的 data 目录下（如下图所示，osd.traineddata 与页面分割模式有关，这里也一并下载了）默认情况下，测试以无头方式运行，这意味着运行测试时不会打开浏览器窗口，并且结果将在终端中看到。然后，下载对应的语言资源，可以手动下载设置也可以使用jar包内置的资源。，获取验证码图片的方式，可以直接定位到img元素，对元素截图即可。
2023-08-18 14:24:23
722
1
原创 如何系列 如何使用Resilience4j提高应用弹性和容错
官网Github是一个轻量级容错库，灵感来自 Netflix Hystrix，但专为函数式编程而设计。提供装饰器，以通过断路器、速率限制器、重试或舱壁增强任何功能接口、lambda 表达式或方法引用。您可以在任何函数式接口、lambda 表达式或方法引用上堆叠多个装饰器。断路器模式（Circuit Breaker）当操作连续失败时快速失败或执行默认操作，Resilience4j实现了断路器模式，它可以在系统出现故障时自动切换到开启状态，阻止请求继续发送到故障的组件。
2023-08-10 10:20:55
527
原创 如何系列 如何实现主线程等待子线程超时(多种解决方案)
在某些情况下，我们希望执行一个任务，但不能无限期地等待其完成，而是需要在一定的时间范围内获取任务的结果或决定任务超时并进行相应的处理。方法，我们等待任务的执行结果，最多等待5秒钟。注意，任务的实际执行时间是3秒，因此在5秒的超时时间内，任务可以正常完成。这样，主线程可以等待任务的结果，但如果任务在规定的时间内没有完成，主线程会继续执行其他操作。方法的参数表示最多等待的时间（毫秒），如果在该时间内任务线程没有执行完毕，主线程会继续执行。方法在主线程中等待任务完成，并在超时时间内唤醒主线程。
2023-08-04 09:18:43
837
原创 图解系列 非对称加密应用场景
非对称加密使用一对密钥，分别是公钥（public key）和私钥（private key）。加密场景 公钥加密、私钥解密：这种场景适用于保护数据的机密性，并确保只有特定接收方（私钥持有者）能够解密和查看数据。一个典型的应用是在SSL/TLS协议中用于安全地传输敏感数据，如网银交易、密码登录等。加签验签场景 私钥加密、公钥解密：这种场景适用于数字签名的应用。发送方使用私钥对数据进行签名，接收方通过使用发送方的公钥来验证签名的真实性和数据的完整性，确保数据没有被篡改，并且确保是由私钥持有者发送的。总结：
2023-08-03 15:37:29
1377
原创 图解系列 DNS查找过程和DNS缓存
可查看源码InetAddress 和 InetAddressCachePolicyjava dns解析缓存之源码解析如果打开Java中的DNS缓存将不会失效。否则，可访问的DNS解析缺省缓存30秒，不可访问的DNS解析缺省缓存10秒。关于(域名缓存时间)，给出“对于多条A记录是采用什么策略返回IP的结论：在缓存有效期内，取到的IP永远是缓存中全部A记录的第一条，并没有轮循之类的策略。缓存失效之后重新进行DNS解析，因为每次域名解析返回的A记录顺序会发生变化(
2023-08-02 14:42:49
2860
1
原创 从零开发短视频电商 单元测试（TestNG）
官网TestNG是一个基于 Java 的开源测试框架。该框架受到 JUnit 和 NUnit 的启发，但引入了一些新功能，使其更强大且更易于使用。您可以在测试实施期间创建 HTML 报告。它具有分组测试、注释、参数化等功能，有助于更快地创建测试。TestNG的核心特性在任意大小的线程池中运行测试，并提供各种可用策略（所有方法都在自己的线程中，每个测试类一个线程等等）。测试您的代码是否是线程安全的。灵活的测试配置。支持数据驱动测试（使用支持参数。强大的执行模型（不再是TestSuite。
2023-07-18 22:00:01
1686
2
原创 炫技亮点 使用Optional类优化代码，提升可读性和简化空值处理
Optional 是 Java 8 中引入的一个类，它的主要目的是解决空值处理的问题。Optional 可以包装一个值，这个值可以是 null，也可以是非 null。通过使用 Optional，我们可以避免显式的空值判断，从而简化代码逻辑。存在值的状态，表示对象不为空。空值状态，表示对象为空。
2023-07-11 21:34:27
286
原创 从零开发短视频电商 Jmeter基础介绍和使用心得
是性能测试中向服务器发送请求，记录响应信息、响应时间的最小单元，如：HTTP Request Sampler、FTP Request Sample、TCP Request Sample、JDBC Request Sampler等，每一种不同类型的sampler 可以根据设置的参数向服务器发出不同类型的请求，也可以使用 Java 类型的请求进行自定义编写。：运行脚本成功后生成的html图形化报告的绝对路径，如果不需要此结果，删除“-e -o /usr/laker/result/WebReport”
2023-07-10 20:59:59
612
原创 从零开发短视频电商 使用nimbus-jose-jwt进行对称签名和非对称签名的JWT实现
JSON Web Token（JWT）是一种开放标准（RFC 7519），它定义了一种紧凑且自包含的方式，用于安全地在各方之间传输信息，其格式为JSON对象。这些信息可以被验证和信任，因为它们是数字签名的。JWT可以使用对称算法（使用HMAC算法）或非对称算法（使用RSA或ECDSA的公钥/私钥）对进行签名。尽管JWT可以加密以实现机密性(JWK)，但我们更多使用的是签名令牌（JWS）。签名令牌可以验证声明的完整性，而加密令牌则隐藏这些声明，不让其他方看到。
2023-07-05 21:56:51
969
原创 可观测性-Metrics-Spring Websocket监控
介绍：DistributionSummary用于计算一组值的分布统计信息，如平均值、最大值、最小值和百分位数等。适用场景：适用于度量一组值的分布情况，如请求响应时间、响应大小等。测量响应大小分布示例// 记录响应大小 summary . record(2048);// 记录响应大小 summary . record(512);// 记录响应大小 // 获取统计结果 long count = summary . count();
2023-06-29 13:49:30
1764
原创 炫技亮点 Spring Websocket idle check原理
Spring Websocket 是基于 WebSocket 协议的实现，它提供了一种在客户端和服务器之间实时双向通信的方式。其中，idle check（空闲检查）是一种机制，用于检测 WebSocket 连接的空闲状态。连接丢失检查是一种检测与另一个端点的连接是否丢失的功能，例如由于wifi或移动数据信号丢失。检测是双向的，因此服务器可以检测到丢失的客户端，而客户端可以检测到与服务器的连接丢失。Java_websocket提供了主动发送Ping消息的机制，原理在下面有。即等于每10秒check一次。
2023-06-28 10:58:16
1237
原创 炫技亮点 Websocket集群解决方案汇总
WebSocket的连接在不同的服务器之间是无法共享的，因此无法将WebSocket的Session存储在共享的存储中。通过将消息发送到中间件，然后再将消息广播给订阅的服务器，类似于广播的方式，只要订阅了消息，就能接收到消息的通知。例如，在一个WebSocket集群中，当一个客户端连接到节点A时，而其他节点（B、C）不知道这个连接存在，当节点B收到一条消息并尝试将其推送给该客户端时，它会失败，因为它不知道该客户端连接到了节点A。在集群中的每个服务节点上发送群发消息，以确保消息能够覆盖到所有连接的客户端。
2023-06-26 17:24:52
4730
6
原创 如何系列 如何在单机和集群环境保证代码线程安全
线程安全是程序设计中的术语，指某个函数函数库在多线程环境中被调用时，能够正确地处理多个线程之间的公用变量，使程序功能正确完成。以上来自维基百科举个例子来说明线程安全的重要性。假设有一个电影院播放一场电影，座位总数为10个。如果没有线程安全的保护措施，当多个人同时抢购电影票时，可能会出现剩余座位数大于0的情况，导致售出过多的票，不符合预期。示例代码System . out . println("抱歉，" + user + "，剩余票数不足！");return;
2023-06-24 21:08:23
775
原创 如何系列 如何使用SikuliX执行自动化任务
SikuliX（西库里）可自动执行在运行Windows，Mac或某些Linux / Unix的台式计算机屏幕上看到的所有内容。它使用OpenCV提供的图像识别功能来识别GUI组件。在无法轻松访问GUI内部或要操作的应用程序或网页的源代码的情况下，这非常方便。SikuliX支持脚本语言Python语言级别2.7（由Jython支持）支持运行RobotFramework文本脚本Ruby语言级别1.9和2.0（由JRuby支持）JavaScript（由Java脚本引擎支持）
2023-06-21 15:26:03
6831
2
原创 从零开发短视频电商 Jmeter插件安装和常用插件
下载地址：https://jmeter-plugins.org/install/Install/：主要显示平均响应时间，活动线程数，成功/失败交易数等。：监控服务器硬件，如CPU，内存，硬盘读写速度等。：主要显示吞吐量，连接时间，每秒的点击数等。: websocket请求插件。目录，重启JMeter。
2023-06-16 14:54:30
1653
mysql-installer-community-5.7.43.0 Windows 安装包
2024-05-24
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人