using System;
using System.Linq;
using System.Collections.Generic;
namespace 外汇牌价抓取程序
{
public class 上海浦发
{
//上海浦发银行外汇牌价网址
private static string url = 网站地址.上海浦发.ToString();
/// <summary>
/// 抓取上海浦发银行外汇牌价信息
/// </summary>
/// <returns>信息列表</returns>
public 数据项实体[] 抓取()
{
//结果列表
List<数据项实体> list = new List<数据项实体>();
//获得页面的HTML形式的表示
System.Net.WebClient webClient = new System.Net.WebClient();
webClient.Encoding = System.Text.Encoding.UTF8;
string html = webClient.DownloadString(url);
SmartDocument smartTag = new SmartDocument(html);
List<SmartTag> allTags = new List<SmartTag>();
GetAllTags(smartTag, allTags);
//************有一个条件时*************//
var linqOne = from tag in allTags.ToArray()
where (tag.Name == "tr") && (tag.TagType == SmartTagType.Open) && (tag.ChildTags[0].FirstChild != null && (tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "美元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "英镑" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "日元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "欧元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "香港"))
select new 数据项实体()
{
数据来源 = "上海浦发银行",
货币名称 = tag.ChildTags[0].FirstChild == null ? "" : tag.ChildTags[0].FirstChild.Value.Substring(1, 2),
现汇买入价 = Convert.ToDecimal(tag.ChildTags[4].FirstChild == null ? "0.0000" : tag.ChildTags[4].FirstChild.Value),
现钞买入价 = Convert.ToDecimal(tag.ChildTags[8].FirstChild == null ? "0.0000" : tag.ChildTags[8].FirstChild.Value),
卖出价 = Convert.ToDecimal(tag.ChildTags[10].FirstChild == null ? "0.0000" : tag.ChildTags[10].FirstChild.Value),
抓取日期 = DateTime.Now,
发布日期 = DateTime.Now
};
//************有二个条件时*************//
var linqTwo = from tag in allTags.ToArray()
where (tag.Name == "tr") && (tag.TagType == SmartTagType.Open) && (tag.ChildTags[0].FirstChild != null && (tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "美元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "英镑" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "日元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "欧元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "香港"))
select tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "日元" ?
new 数据项实体()
{
数据来源 = "上海浦发银行",
货币名称 = tag.ChildTags[0].FirstChild == null ? "" : tag.ChildTags[0].FirstChild.Value.Substring(1, 2),
现汇买入价 = Convert.ToDecimal(tag.ChildTags[4].FirstChild == null ? "0.0000" : tag.ChildTags[4].FirstChild.Value) / 100,
现钞买入价 = Convert.ToDecimal(tag.ChildTags[8].FirstChild == null ? "0.0000" : tag.ChildTags[8].FirstChild.Value) / 100,
卖出价 = Convert.ToDecimal(tag.ChildTags[10].FirstChild == null ? "0.0000" : tag.ChildTags[10].FirstChild.Value) / 100,
抓取日期 = DateTime.Now,
发布日期 = DateTime.Now
}
: new 数据项实体()
{
数据来源 = "上海浦发银行",
货币名称 = tag.ChildTags[0].FirstChild == null ? "" : tag.ChildTags[0].FirstChild.Value.Substring(1, 2),
现汇买入价 = Convert.ToDecimal(tag.ChildTags[4].FirstChild == null ? "0.0000" : tag.ChildTags[4].FirstChild.Value),
现钞买入价 = Convert.ToDecimal(tag.ChildTags[8].FirstChild == null ? "0.0000" : tag.ChildTags[8].FirstChild.Value),
卖出价 = Convert.ToDecimal(tag.ChildTags[10].FirstChild == null ? "0.0000" : tag.ChildTags[10].FirstChild.Value),
抓取日期 = DateTime.Now,
发布日期 = DateTime.Now
};
//************有两个以上条件时*************//
var linq = from tag in allTags.ToArray()
where (tag.Name == "tr") && (tag.TagType == SmartTagType.Open) && (tag.ChildTags[0].FirstChild != null && (tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "美元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "英镑" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "日元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "欧元" || tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "香港"))
select (new Func<数据项实体>(delegate
{
if (tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "日元")
{
return new 数据项实体()
{
数据来源 = "上海浦发银行",
货币名称 = tag.ChildTags[0].FirstChild == null ? "" : tag.ChildTags[0].FirstChild.Value.Substring(1, 2),
现汇买入价 = Convert.ToDecimal(tag.ChildTags[4].FirstChild == null ? "0.0000" : tag.ChildTags[4].FirstChild.Value) / 100,
现钞买入价 = Convert.ToDecimal(tag.ChildTags[8].FirstChild == null ? "0.0000" : tag.ChildTags[8].FirstChild.Value) / 100,
卖出价 = Convert.ToDecimal(tag.ChildTags[10].FirstChild == null ? "0.0000" : tag.ChildTags[10].FirstChild.Value) / 100,
抓取日期 = DateTime.Now,
发布日期 = DateTime.Now
};
}
else if (tag.ChildTags[0].FirstChild.Value.Substring(1, 2) == "法元")
{
return new 数据项实体()
{
数据来源 = "上海浦发银行",
货币名称 = tag.ChildTags[0].FirstChild == null ? "" : tag.ChildTags[0].FirstChild.Value.Substring(1, 2),
现汇买入价 = Convert.ToDecimal(tag.ChildTags[4].FirstChild == null ? "0.0000" : tag.ChildTags[4].FirstChild.Value) / 100,
现钞买入价 = Convert.ToDecimal(tag.ChildTags[8].FirstChild == null ? "0.0000" : tag.ChildTags[8].FirstChild.Value) / 100,
卖出价 = Convert.ToDecimal(tag.ChildTags[10].FirstChild == null ? "0.0000" : tag.ChildTags[10].FirstChild.Value) / 100,
抓取日期 = DateTime.Now,
发布日期 = DateTime.Now
};
}
else
{
return new 数据项实体()
{
数据来源 = "上海浦发银行",
货币名称 = tag.ChildTags[0].FirstChild == null ? "" : tag.ChildTags[0].FirstChild.Value.Substring(1, 2),
现汇买入价 = Convert.ToDecimal(tag.ChildTags[4].FirstChild == null ? "0.0000" : tag.ChildTags[4].FirstChild.Value),
现钞买入价 = Convert.ToDecimal(tag.ChildTags[8].FirstChild == null ? "0.0000" : tag.ChildTags[8].FirstChild.Value),
卖出价 = Convert.ToDecimal(tag.ChildTags[10].FirstChild == null ? "0.0000" : tag.ChildTags[10].FirstChild.Value),
抓取日期 = DateTime.Now,
发布日期 = DateTime.Now
};
}
}))();
return linq.ToArray();
}
public 数据项实体 Get(SmartTag tag)
{
return new 数据项实体();
}
/// <summary>
/// 递归获取所有的当前DOM的标签
/// </summary>
/// <param name="smartTag">要遍历的标签</param>
/// <param name="allTags">当前标签的所有子标签</param>
private void GetAllTags(SmartTag smartTag, List<SmartTag> allTags)
{
allTags.Add(smartTag);
if (smartTag.HasChildTags == false)
{
return;
}
else
{
for (int i = 0; i < smartTag.ChildTags.Count; i++)
{
GetAllTags(smartTag.ChildTags[i], allTags);
}
}
}
}
}