Xml解析及导入数据图总结

大型XML数据的解析以及由XML数据转换到数据库数据探索
                    一下将分两点介绍:1、大型XML的解析,2、XML数据存储到数据库
             1、大型XML的解析
              解析Xml的方法包括如下几种:                  
             1)、DOM4J

2)、JDOM

3)、DOM

4)、SAX

5)、自己编写适合的解析器

DOM4J,JDOM,DOM解析:

优点:容易使用,容易上手,对数据的处理简单

缺点:不能用于解析大型的XML

分析:由于这三种解析器实现的方法都是要把整个XML文件加载到系统中,顾这容易使得出现内存溢出的现象。所以这样解析的方法占用很大的内存,在解析大型的XML数据中不建议使用

SAX解析

优点:容易使用,容易上手,能解析大型的XML文件

缺点:数据的处理比较麻烦

分析:SAX解析是通过加载文件的一部分进行解析,而不是把整个文件加载到内存中,占用内存少,顾它可用于解析大型的XML。也是解析大型的XML中常用的解析器。

自己编写适合的解析器

优点:不需要对数据进行处理

缺点:实现齐全的功能较难

分析:这种方法是更觉XML文档的结构进行解析,需要对XML文档的结构有一定的了解,通过IO流将XML的文档内容以字符形式读入内存,在更觉字符的类型进行判断XML的内容

2、XML数据转换到数据库数据

       由于在将XML文件中的数据信息添加到数据库中,需要执行很多次的insert操作,顾需要进行很多次的数据库的访问,访问数据库也得需要占用程序的时间,在解析大型XML数据时,就要对数据库进行非常多的访问,一般大型的XML文件至少要进行100W次的insert操作。

那么怎样减少在将数据插入数据库的时候占用更少的时间呢?

      通过交流发现在java里面对数据库的操作有批处理的方法,于是可以将本来要向数据库提交很多次的操作,将它们添加到批处理的队列中,在解析玩XML文件后再进行一次性的提交,这样就减少了多次提交信息到数据库而造成访问数据库的时间。

这种批处理的方法也是在实际操作中经常用到的。



  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值