- 博客(655)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 LocalStorage封装
本文不讲解基础api，主要教你如何优雅的Storage工具类如何封装(支持前缀key、加密存储、过期时间，ts封装等)。真实存储大小/存储统计、如何监听、同源问题与同源窗口通信。
2024-07-21 22:27:58
664
原创 SpringBoot 最大连接数及最大并发数是多少
Spring Boot 是一个基于 Spring 框架的快速开发框架，它本身并不直接管理数据库连接或网络连接的最大连接数和最大并发数。这些参数通常由底层的基础设施和组件来控制，例如数据库连接池，例如Web容器连接设置，操作系统底层或者防火墙等INFRA配置。
2024-07-21 22:23:07
1086
原创 国内访问Docker Hub慢问题解决方法
在国内访问Docker Hub时可能会遇到一些困难，但幸运的是，有多种解决方案可以帮助你顺利下载Docker镜像。：你可以通过配置Docker的daemon.json文件来使用国内镜像源，比如DaoCloud、网易云、Docker 镜像代理、百度云、南京大学镜像站等。这些镜像源通常对外免费，可以显著提高拉取速度 2。：例如华为云、腾讯云等，它们提供了镜像加速服务，你可以通过修改Docker配置文件来使用这些加速服务
2024-07-21 22:15:52
841
原创 DataBricks Best Practice for Delta Lake
本文介绍了使用 Delta Lake 时的最佳做法。Databricks 建议使用预测性优化。请参阅。使用 liquid 聚类分析优化数据跳过。Spark 缓存。提高 Delta Lake 合并的性能。管理数据时效性
2024-07-16 01:00:07
970
原创 DataBricks之Unity Catalog Best Practice
本文档提供有关使用 Unity Catalog 和 Delta Shareing 满足数据治理需求的建议。Unity Catalog 是 Databricks 平台数据和 AI 的细化治理解决方案。它通过提供一个集中管理和审核数据访问的位置，来帮助简化数据的安全性和治理。Delta Sharing 是一个安全的数据共享平台，可用于与组织外的用户共享 Azure Databricks 中的数据。它使用 Unity Catalog 来管理和审核共享行为。
2024-07-16 00:55:47
731
原创 Databricks中的DBFS（Databricks File System）和对象存储（Object Storage）
在Databricks中，DBFS（Databricks File System）和对象存储（如Amazon S3、Azure Blob Storage等）是两种主要的数据存储选项。：在Databricks中，路径用于指定数据存储的位置。例如，在读取数据时，你需要提供一个路径来告诉Databricks数据的位置。例如，在读取数据时，你可能需要指定数据是来自DBFS还是来自连接的对象存储。在实际使用中，你需要根据你的数据存储选项和Databricks配置来确定正确的路径和参数。
2024-07-14 21:51:38
343
原创 Databricks Layer
Databricks 中的 Bronze-Silver-Gold 层级是数据湖架构中数据组织和处理的一种方法，它允许数据从原始状态逐步转化为对业务决策有用的形式。这种分层方法有助于数据的可管理性、可扩展性和可维护性，同时也支持数据的快速摄取和灵活的分析需求。Databricks 提供了工具和功能来支持这种分层方法，包括数据管道的构建、数据转换和数据访问等。通过这种方式，组织可以确保数据在整个生命周期中保持高质量和高可用性。
2024-07-14 21:41:59
995
原创 Qlik Sense May 2024 (Client-Managed) now available!
the next version of our client-managed analytics offering, Qlik Sense May 2024. This version includes improvements primarily focused on visualizations, connectivity, and the ability to preload apps.
2024-07-07 23:45:40
806
原创 SpringBoot的SmartLifecycle生命周期接口
在SpringBoot的应用中，我们通常会利用@PostConstruct和@PreDestroy注解，然而还有更好用的SmartLifecycle 。Spring Boot 的 SmartLifecycle 是 Spring 框架中的一种生命周期接口，它扩展了 Lifecycle 接口。Lifecycle 接口允许你控制一个组件的生命周期，例如启动和停止。而 SmartLifecycle 接口则在此基础上提供了更智能的控制，它能够处理多个 SmartLifecycle 实例的自动排序和依赖管理。
2024-07-07 23:28:56
842
原创 SpringBoot使用Spark的DataFrame API
Apache Spark是一个开源的分布式计算系统，它提供了一个快速和通用的集群计算平台。Spark 能够处理大规模数据，支持多种编程语言，如Scala、Java和Python，并且具有多种高级功能，包括SQL查询、机器学习、图处理和实时数据流处理。Spark是一个功能强大且灵活的计算平台，适用于各种大数据处理场景。通过其丰富的API和组件，Spark能够满足从批处理到实时处理、从数据处理到机器学习的多种需求。
2024-06-30 01:49:55
1078
原创 Spark查询当前用户下所有账号的余额，如果当天没有余额则使用最近的余额
在使用Apache Spark进行数据分析时，你可能会处理一个包含用户账户和余额信息的数据集。函数在这里用于填充当天没有记录的余额，它会返回每个账号组内最后一个非空的余额值。如果你想要使用最近的非当天的余额，可能需要更复杂的逻辑来确定这个"最近"的值。请注意，这个示例假设你的数据集中的日期字段是字符串格式，并且当天没有余额的记录是。在实际应用中，你可能需要根据你的数据源和格式进行调整。：确保你有一个包含用户ID、账号ID、日期和余额的数据集。：使用Spark的DataFrame API读取数据集。
2024-06-30 01:42:34
397
原创 架构设计之RBAC基于角色的访问控制设计
RBAC（Role-Based Access Control，基于角色的访问控制）是一种常见的权限管理模型，它通过定义角色来分配权限，然后将角色分配给用户。
2024-06-29 14:42:33
896
原创 spring-boot-starter-json配置对象属性为空不显示
在Spring Boot中使用spring-boot-starter-json（通常是通过jackson实现的）时，如果你希望在序列化对象时，如果某个属性为空，则不显示该属性，你可以使用@JsonInclude注解来实现这一点。
2024-06-27 23:48:58
1273
2
原创 SpringBoot脚手架MySpringBootAPI(PgSQL+Druid+MyBatisPlus+Lombok)
SpringBoot脚手架《MySpringBootAPI》，基于SpringBoot+Druid+PgSQL+MyBatisPlus+FastJSON+Lombok，其他的请自行添加和配置。
2024-06-27 23:24:00
1186
原创 Java用文件流mask文本文件某些特定字段
在Java中，如果你想要掩码（mask）文本文件中的某些特定字段，你可以按照以下步骤进行：读取文本文件内容。找到并识别需要掩码的字段。用特定的掩码字符（如星号*）替换这些字段。将修改后的内容写回文件或输出到控制台。
2024-06-21 22:41:50
550
原创 Java中将文件转换为Base64编码的字节码
在Java中，将文件转换为Base64编码的字节码通常涉及以下步骤：读取文件内容到字节数组。使用java.util.Base64类对字节数组进行编码。
2024-06-21 22:34:37
401
原创 Qlik Sense - QIX performance log
The following fields are specific to the QIX performance log for the QES:
2024-06-16 17:49:17
887
原创 Qlik Cockpit - Qlik Sense Log Analyzing Tool
Qlik提供了QlikCockpit在所有最近安装的QlikSense企业版或者QlikView上，这个工具旨在帮助分析QlikSense（和QlikView）日志文件，提供友好的日志数据格式化功能，也提供了过滤和搜索功能。
2024-06-16 17:47:04
868
原创 Qlik Sense Scheduler Service - Task Execution log
The following fields are specific to the Task execution log for the QSS:
2024-06-16 17:42:22
280
原创 Building A Simple CRUD API With Next.Js 13
Building A Simple CRUD API With Next.Js 13
2024-06-16 16:22:43
1141
原创 TypeScript入门
TypeScript 是一种由微软开发的自由和开源的编程语言，它是 JavaScript 的一个超集，扩展了 JavaScript 的语法。
2024-06-16 16:14:41
1004
原创 Qlik Sense Security integration - Security Rules and Section Access
ProxiesStreamsUsersEnginesExtensionsSchedulersAppendixWhatWhereRequestScenario123420StreamAppSummaryandandRule nameConditionActionsAllAllReadStream_*ReadandorApp*AllReadApp_*Z_Root_ALLall。
2024-05-28 00:32:36
791
原创 Qlik Sense Available resource filters
The following tables list the resource objects and the resource filters that can be used to target them.Information noteThe lists are not complete, they only display the most common examples of resource filters. For a source of all available repository ser
2024-05-28 00:27:02
721
原创 Reducing the size of QVDs
Some benefits of studies and techniques– Reduction in the size of QVDs undergoing transformation for storage;– Standardization of data;– Encourage the development to know better the data that is working;– Decrease cardinality, thus gaining performance
2024-05-28 00:20:35
863
原创 Qlik Sense Static Content Cache Policy
Is there a reason why Qlik Sense applications load lightning fast when you have just a few dashboards in the server and, as the number of applications and users grow, the same app needs 15 seconds, sometimes 1 minute to load? How painful and boring is that
2024-05-27 23:58:06
1372
原创 Energy measurement and calculation
Power usage effectiveness - data centre energy efficiencyEnergy proportionality - the relationship between power used, and percentage of resource utilisationStatic power draw - electricity use in an idle state
2024-05-27 23:40:35
282
原创 GCP BigQuery 之存储/分析/管理
BigQuery 提供管理任务以及可帮助您完成这些任务的 BigQuery 功能。管理资源，例如项目、数据集和表。保护资源，以便访问权限仅限于需要它的主账号。管理工作负载，例如作业、查询和计算容量（预留）。监控资源，包括配额、作业和计算使用情况。优化工作负载以获得最佳性能，同时控制费用。对错误消息、结算问题和配额进行问题排查。本
2024-05-20 23:29:46
905
原创 SimbaODBC for BigQuery
Simba ODBC for BigQuery驱动程序旨在帮助用户将 BigQuery 的强大功能与现有工具和基础架构进行结合。BigQuery 的一些功能（包括高性能存储集成和预留管理）只能通过BigQuery API提供。 这些驱动程序只能与 BigQuery 搭配使用，不能与任何其他产品或服务搭配使用。您可以使用这些驱动程序，而无需任何额外的许可要求，但不能将驱动程序重新分发为应用的一部分。
2024-05-20 23:23:57
762
原创 GCP谷歌云有什么数据库类型，该怎么选择
在选择GCP的数据仓库服务时，您应考虑您的具体需求，比如数据规模、查询复杂性、以及是否需要与特定的GCP服务集成。如果您的应用更适合NoSQL数据库，并且需要与App Engine一起使用，那么Google Cloud Datastore可能是一个更好的选择。此外，可以参考GCP的官方文档和社区资源，以获取更多关于每种数据库服务的详细信息和最佳实践。Google BigQuery 是 Google Cloud Platform（GCP）的一部分，它是一个完全托管的数据仓库服务，旨在处理和分析大量数据。
2024-05-13 22:50:48
900
1
原创 GCP谷歌云总结
Google Cloud 资源层次结构与传统操作系统中的文件系统类似，能够以分层方式组织和管理实体。每项资源有且仅有一个父项。为避免业务计算实例受到外界的攻击，GCP提供了多种措施，包括检测恶意流量引到DDoS、防火墙、API GateWay、NAT等。通过NAT，内网机器可以访问外网资源，但是外网无法访问内网机器。
2024-05-13 22:36:14
1213
原创 Lambok用法之@onX@Delegate@Cleanup@Singular@Builder@With
例如onConstructor,oMethod, 和onParam允许你在生成的代码中注入自定义的注解。一个常见的用例是结合 Spring 的@Autowired。@Delegate可以让你的类使用其他类的方法，而不需要自己写代码。@Cleanup可以自动管理输入输出流等各种需要释放的资源，确保安全地调用close方法。@Builder让你的类支持链式构造，而@Singular让集合类型字段可以更方便的维护。@With允许你创建一个新的对象，该对象是当前对象的副本，但某些字段的值已被更改。
2024-05-12 23:48:22
944
原创 Qlik Sense :使用智能搜索Smart Search
智能搜索是 Qlik Sense 中的全局搜索工具，可让您从应用程序中的任何工作表搜索应用程序中的整个数据集。可通过点击从工作表中的选择项栏使用智能搜索。通过智能搜索字段，您可以从任何工作表搜索您的应用程序中的完整数据集。信息注释智能搜索仅支持文本搜索。不支持引号之外的搜索运算符如果您单击应用选择下方的结果，结果会消失，并应用选择。如果您分析工作表上的数据，则可使用智能搜索。数据结构帮助您查找关联并在自己的数据中进行选择。
2024-05-12 23:44:04
1348
原创 nginx: [emerg] invalid number of arguments in “alias“ directive in D:\nginx
最近在配置一个nginx的配置，但是reload的时候遇到了以下报错。nginx: [emerg] invalid number of arguments in "alias" directive in D:\nginx/conf/nginx.conf:113 。 关于斜杠的使用：在不同操作系统中，路径分隔符不同。通常，Windows 下使用反斜杠\\，Linux 下使用正斜杠/。如果路径中包含空格或中文字符，也可能导致 Nginx 启动失败。修复之后，程序可以正常运行！！！
2024-05-09 00:06:41
709
原创 Nginx配置/.well-known/pki-validation/
当你需要在Nginx上配置.well-known/pki-validation/时，这通常是为了支持SSL证书的自动续订或其他验证目的。在你的网站根目录下创建一个名为.well-known的目录，然后在.well-known目录下再创建一个名为pki-validation的子目录。这个目录结构将用于存放验证文件。之后配置Nginx并验证
2024-05-09 00:06:38
1357
原创 IT养生知识之：子午流注
子午流注是中医圣贤发现的一种规律，中医认为人体中十二条经脉对应着每日的十二个时辰，由于时辰在变，因而不同的经脉中的气血在不同的时辰也有盛有衰。阳出了问题，阴也会出问题，反之同样。肺主气，肺气弱的在这个时间段就会醒，还会咳嗽，有些肺气不足的还会心慌，小孩感冒咳嗽的在这个点也会咳醒。胃经是人体正面很长的一条经脉，胃疼是胃经的问题，其实膝盖疼也是胃病，脚面疼也是属于胃经病，这些地方都是胃经循行路线。三焦分为上焦、中焦、下焦，上焦指的是心肺，中焦指的是脾胃，下焦指的是肝肾，三焦与体内各部位的气有关。
2024-05-07 00:20:14
1052
原创 记一次IT开发者重装系统之旅
去年年底补了一个零刻SER5 MAX R7-5800H，不玩游戏的话，基本是很足够的。然后系统的话，没来得及重装，之前用的是2019年装的Windows11，加入了Insider View预览版本，Win11给人的感觉还是不成熟稳定，经历过很多有问题的补丁和大版本，但是UI方便有蛮多惊喜。但是一开机就占用了6-8G内存是我不想看到的，C盘也日益膨胀。于是想装一下Win10，稳定，少BUG，省内存和空间，更少花里胡哨才是最真实的。开发者定位：杂食，JAVA+Node.JS+BI+架构
2024-05-06 09:00:00
464
原创 Qlik Sense Enterprise Manager
Qlik Sense Enterprise Manager是一个用于管理和监控Qlik Sense部署的工具。它提供了一种集中式的管理界面，使管理员能够轻松地管理和维护Qlik Sense环境。以下是一些Qlik Sense Enterprise Manager的主要用途：用户和权限管理：通过Enterprise Manager，管理员可以创建和管理用户帐户、分配角色和权限，以及控制对Qlik Sense应用程序的访问。
2024-05-06 08:45:00
649
原创 Elasticsearch中对文章进行索引和查重
要在Elasticsearch中对文章进行索引和查重，可以按照以下步骤操作：安装Elasticsearch并启动服务。安装Python的Elasticsearch客户端库，可以使用命令进行安装。编写Python代码，使用Elasticsearch客户端库对文章进行索引和查重。在more_like_this查询中指定了要比较的字段，设置了最小词频和最大查询词数
2024-04-29 23:41:36
619
2
原创 使用ULID而不是UUID
ULID（Universally Unique Lexicographically Sortable Identifier）是一种新型的唯一标识符，由Alizain Feerasta在2016年提出。不同于传统的UUID，ULID设计时考虑了排序的需求。具体来说，一个ULID通常由26个字符组成，这些字符分为两部分：时间戳信息和随机序列。这样的结构不仅保证了标识符的全局唯一性，还赋予了它们天然的可排序属性。
2024-04-29 23:34:26
519
Qlik Sense : 条形图练习资源（Interpreting-BarCharts）
2024-02-16
Qlik Sense May 2023 WITH CONNECTION ISSUE FIX
2024-01-03
itisscg.zip
2021-05-20
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人