项目总结：每隔5分钟从数据库拉取数据转为Json格式通过WebService从客户端传送至服务端

最新推荐文章于 2021-09-16 19:56:45 发布
最新推荐文章于 2021-09-16 19:56:45 发布
阅读量1k 收藏 2
点赞数
文章标签： Java Spring 定时器 JdbcTemplate WebService
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/aliyacl/article/details/83573545
版权
这是一个使用Spring+Quartz定时器每5分钟从数据库（包含MySQL和Oracle）中拉取数据，转换为JSON格式并通过WebService发送到服务端的项目总结。项目涉及定时任务配置、JdbcTemplate查询、数据转换和RPC服务调用。
摘要由CSDN通过智能技术生成

   第一次接手需求写的小项目，过程也有点坎坷，以此记录总结编码过程中遇到的问题。

   项目背景：本次写的是一个小模块，主要为客户端，作用是每隔5分钟从数据库拉取数据传送至服务端。本次项目采用的是spring3+Quartz+JdbcTemplate+JSONArray+RPCService。以下分为几个模块详述。

   项目思路：将本次需求分为三个模块：定时器+查询数据+客户端发送。

   一、定时器

由于本项目整体采用的spring的框架，所以本次定时器采用的是Spring+Quartz的模式。Quartz配合cron表达式，能够执行每隔一段时间/定点执行等强大的定时功能。好了，我们来看定时器的编写。Quartz分为配置+任务方法两块，配置在spring的xml文件中编写，具体的任务写在具体类的execute方法中。

首先，我们创建一个spring的配置文件：applicationContext.xml，在里面写好定时器的要执行的任务、触发器等内容；

applicationContext.xml

Task.java

以上Quartz的编写就完成了，接下来是运行中可能出现的问题：

1.无法执行定时器任务

1）可能整个项目是个Web项目，需要Tomcat启动后载入spring容器才能执行定时器任务；

2）可能需要需要先启动其他方法才能执行定时器任务；

3）可能IDEA的Server配置有问题，打开Run/DebugConfigurations，TomcatServer-Deployment,将下面war exploded文件改为External Source下项目target的项目.war文件；

2.定时器多次执行

最低0.47元/天 解锁文章
aliyacl
关注
Spring Cloud Alibaba Dubbo 服务调用
程序员光剑
07-29 1113
1.Dubbo 是阿里巴巴集团开源的一款高性能优秀的服务框架。它提供了三大核心能力：远程服务调用、服务注册与发现、分布式协作，使得微服务开发简单易用，服务之间可以互相依赖，为企业级应用提供了坚实的基础。而Spring Cloud Alibaba 是基于Spring Boot 和 Spring Cloud 提供的流行微服务框架，其目的是让用户更加方便地使用阿里巴巴中间件产品，如Dubbo、RocketMQ等。
eureka理论总结
许诗宇的博客
02-26 6790
目录 Eureka是什么 Eureka基本架构 三大角色 自我保护模式 eureka与zookeeper的区别 Eureka是什么 Eureka是Netflix的一个子模块，也是核心模块之一。Eureka是一个基于REST的服务，用于定位服务，以实现云端中间层服务发现和故障转移。 服务注册与发现对于微服务架构来说是非常重要的，有了服务发现与注册，只需要使用服务的标识符，就可以访问到...
python从数据库中拉数据做报表发邮件
09-13
一个完整的azkaban的调度示例，从mysql中表中拉取数据，组装成html，然后以邮件的方式发出来，只要对应修改里面的邮件、表、数据库配置就可以了，时间紧，没有全部写成配置的形式，但愿不用太多的学习成本
webservice与mysql数据库_WebService实现数据库操作
weixin_39568653的博客
01-27 517
1.数据库连接：[WebMethod]public string InsertPoint(stringdata){//解决跨域问题//Context.Response.AddHeader("Access-Control-Allow-Origin", "*");string database = "Data Source=.;Initial Catalog=test;Persist Security...
C#开发的WebService使用JSON格式传递数据+Ajax测试
weixin_34240520的博客
11-12 1395
[C#] WebService 使用 JSON 格式傳遞筆記 + JQuery 測試 0 2 因為一些因素，必須改寫WebService，很傳統，但是很多公司還在用.. 因為XML 的關係，不想讓他傳遞資料的時候過度肥大，所以我必須要盡量乾淨的JSON.. 於是開始我的改寫旅程.. 0 2 首先，網路上好多好多好多文件，可能因為狀況不同，測試過許多也讓我搞混很多次.. 最後...
数据库中生成JSON数据的存储过程
07-31
在存储过程根据指定的表指定的列中生成JSON
php怎样在网页上调用数据库里面的表而不是转到数据库,请问下如何能把数据库中的数据转化成json格式然后在网页中调用，不用php...
weixin_32661683的博客
03-11 70
publicStringresultSetToJson(ResultSetrs)throwsSQLException,JSONException{//json数组JSONArrayarray=newJSONArray();//获取列数ResultSetMetaDatametaData=rs.getMetaData();intcolumnCount=metaData...
vue 调用webservice_开发环境Vue访问后端接口教程(前后端分离开发,端口不同下跨域访问)...
weixin_39586649的博客
12-18 1741
原理:开发环境下的跨域:在node.js上实现请求转发,vue前端通过axios请求到node.js上,node.js将请求转发到后端,反之.响应也是,先到node.js上,然后转发vue-cil项目上.需要在根目录下新建文件vue.config.js.vue.config.js:vue.config.js是一个可选的配置文件，如果项目的 (和package.json同级的) 根目录中存在这...
知识点总结130
chen782079048的博客
06-02 3910
php 题常识总结
用WebService实现对数据库进行操作(添加+删除+修改)
08-30
用WebService实现对数据库进行操作(添加+删除+修改)
Json 结合 WebService 读取并显示数据
09-07
Json 结合 WebService 读取并显示数据
C#静态/动态调用webservice（JSON参数传递）
nil_shen的博客
10-15 8303
背景： 这边需要用C#call一个webservice的接口，推过去的参数以JSON的格式传递过去。 说实话，接口写了很多，全部是封装好的，直接调用，把对象传进去就好了，所有要写个从无到有的，有点蒙蔽，智能百度自己查了。 1.接口调用地址验证 拿到人家的接口，首先要验证接口是否正确。 在浏览器中输入该地址：返回结果如下，正常返回，能看到里面所有方法 2.验证调用方法是否正确 刚开始我用postman，按照百度，输入request地址，选择post方式，在Headers中配置“Content-Type”等
C#中将JSON直接插入到数据库中
yzx99的专栏
02-18 3144
之前有整理过一个方法，把JSON串转为对象： 引用：System.Runtime.Serialization.dll /// <summary> /// JSON字符串 转换成对象 /// </summary> /// <typeparam name="T">要转成的 对象类型</typeparam> /// <param name="sJsonString">要转化的 JSON字符串</param> /// <returns
从数据库取数据返回json格式
低调的嚣张
04-27 9871
从数据库取数据返回json格式1.做一个dao层,放回conn,提供所有人调用.1.1配置context.xml&lt;Context&gt; &lt;Resource name="jdbc/mysql" auth="Container"          type="javax.sql.DataSource"          maxActive="100"          maxI...
数据库中查询出来的数据转换成json格式
qq_36464698的博客
07-18 1万+
//需要两个jar包，一个连接接数据库(mysql-connection-java-5.1.7-bin.jar)，一个关于json（json.jar），网上一搜就找到了， import java.sql.Connection; import java.sql.DriverManager; import java.sql.ResultSet; import java.sql.ResultSe
nifi之将提取出来的Mysql数据库数据转换成json格式（2）
guijianchouxyz的博客
09-16 1216
nifi之将提取出来的Mysql数据库数据转换成json格式 为什么要转化成json格式，主要是因为处理器从数据库里面提取出来的数据都是avro格式的，不是非常的友好，再者就是好多的处理器都是通过json格式的数据转换的，所以说通过转化成json，更加方便我们后期的数据转化和存储 选择处理器 ConvertAvroToJson处理器 接上一篇，小编把处理器选错了 更改处理器 删除连接关系 这个基础是在消息队列里面没有数据的情况下进行的，也就是上下游处理器不是处于启动状态 删除处理器 重新添加Con
WebService返回文本JSON数据格式
热门推荐
milijiangjun的博客
06-08 2万+
WebService返回的格式都是xmlMarkup&lt;?xml version="1.0" encoding="utf-8"?&gt;&lt;string xmlns=""&gt;Hello World&lt;/string&gt;在前段js处理时需要先解析xmlJavaScript$.parseXML(xmlstr).find("string").text();处理起来费
es数据json格式拉取到hive
最新发布
07-25
要将从Elasticsearch获取的数据以JSON格式导入到Hive，可以按照以下步骤进行操作： 1. 使用Elasticsearch提供的API（如Search API）获取数据。将数据以JSON格式返回。 2. 将获取的JSON数据保存到一个文件中，例如，可以使用Python编写一个脚本来获取数据并将其保存为JSON文件。 3. 将保存的JSON文件上传到HDFS上的一个临时目录。 4. 在Hive中创建一个外部表，定义表的结构和JSON文件中的字段对应关系。可以使用`CREATE EXTERNAL TABLE`语句来创建外部表。 示例： ``` CREATE EXTERNAL TABLE my_table ( field1 STRING, field2 INT, ... ) ROW FORMAT SERDE 'org.apache.hive.hcatalog.data.JsonSerDe' LOCATION '/path/to/json/files'; ``` 这里假设你已经将JSON文件上传到了`/path/to/json/files`目录下。 5. 执行Hive查询，将数据从外部表加载到Hive表中。可以使用`INSERT INTO`语句来执行插入操作。 示例： ``` INSERT INTO hive_table SELECT field1, field2, ... FROM my_table; ``` 这里的`hive_table`是你在Hive中创建的目标表。 这样就可以将Elasticsearch中的数据以JSON格式导入到Hive中了。请根据你的实际情况调整上述步骤中的细节。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值