前言
最近一个项目上有这样一个需求,需要定期增量获取网页中的新闻信息,由于新闻列表页面中有分页,且每一页的url也不一致,但是url中由于页数相关的编码,比如第2300页的url中有编码00002300,这时候可以通过url来抓取新闻内容(可参考通过.net core定时抓取网页内容),但是新的问题出现了,由于是增量抓取,我需要知道我上次获取的最后一条数据的标记,这个项目中我使用页数和日期两个关键字来作为增量获取的条件;
有点儿罗嗦哈,别着急,还没有结束,哈哈,那么我需要把这两个变量存储到一个xml文件中,每次我可以对这个文件中的变量进行读取和修改;
好了,重点来了,这一篇文章就是如何在.net core中读取和配置xml文件
实现方案
1、创建一个xml文件(ServiceConfig.xml),并且初始化两个变量
<?xml version="1.0" encoding="utf-8"?>
<!DOCTYPE Root[
<!ELEMENT Root ANY>
<!ELEMENT CurrentPage ANY>
<!ELEMENT CurrentDate ANY>
<!ATTLIST Root id ID #REQUIRED>
]>
<Root id="noderoot">
<CurrentPage>1</CurrentPage>
<CurrentDate>2020-01-01</CurrentDate>
</Root>
2、创建一个操作xml文件的类(RandUXML.cs)
using System;
using System.IO;
using System.Xml;
namespace CNPCNewsAcquireService
{
public class RandUXML
{
/// <summary>
/// 设置XML文件
/// </summary>
/// <param name="tagName"></param>
/// <param name="value"></param>
public static void Write(string tagName, string value)
{
XmlDocument doc = new XmlDocument();
//获得配置文件的全路径
var directorypath = Directory.GetCurrentDirectory();
string strFileName = directorypath + "\\ServiceConfig.xml";
doc.Load(strFileName);
XmlNode node = doc.GetElementById("noderoot");
XmlNodeList nodes = node.ChildNodes;
for (int i = 0; i < nodes.Count; i++)
{
if (nodes[i].Name.Equals(tagName))
{
nodes[i].InnerText = value;
}
}
try
{
//保存上面的修改
doc.Save(strFileName);
}
catch (Exception e)
{
throw e;
}
}
/// <summary>
/// 读取XML文件的值
/// </summary>
/// <param name="tagName"></param>
/// <returns></returns>
public static string Read(string tagName)
{
string value = "";
try
{
XmlDocument doc = new XmlDocument();
// 获得配置文件的全路径
var directorypath = Directory.GetCurrentDirectory();
string strFileName = directorypath + "\\ServiceConfig.xml";
doc.Load(strFileName);
XmlNode node = doc.GetElementById("noderoot");
XmlNodeList nodes = node.ChildNodes;
for (int i = 0; i < nodes.Count; i++)
{
if (nodes[i].Name.Equals(tagName))
{
value = nodes[i].InnerText;
}
}
}
catch (Exception e)
{
value= e.Message;
}
return value;
}
}
}
3、在代码中调用读取和设置方法
RandUXML.Write("CurrentPage", "234566");
RandUXML.Write("CurrentDate", "2020-09-09");
执行成功后,XML文件已经设置为最新的值