创新项目实训(七)
前言
我们组打算搭建一个国内旅游比价网站,
而我负责的部份是各大订酒店网站的数据获取及整理
主要参考版上的经验分享+自己的修改理解
小白0经验入门记录、边爬边学习ing
有错误或更好的建议都可以指教讨论
python 存入 database(去哪儿)
因为会定期更新数据,为了不重复存储数据,需要对数据库做判定
再决定是要新增还是修改数据
replace into
1.如果发现表中已经有此行数据(根据主键或者唯一索引判断)
则先删除此行数据后再插入新的数据。
2.否则,直接插入新数据。
def InsertInfo(City_name,Hotel_name_,star):
try:
mycursor.execute("replace into hotel_info values ('{}','{}','{}')".format(City_name,Hotel_name_,star))
mydb.commit()
print('插入数据成功')
except:
mydb.rollback()
print(City_name,Hotel_name_,star)
print("插入数据失败")
这里比较麻烦的是因为Hotel_Web表里没有主键或唯一索引,
没法直接使用replace into,
所以用判断语句,如果数据库里已经有数据就更新,没有就新增
def InsertWeb(Hotel_name,Web_name,star,price,score,count):
serch_sql = "select * from hotel_web where hotel_name ='%s' and web_name ='%s'" % (Hotel_name, Web_name)
mycursor.execute(serch_sql)
if mycursor.fetchall():
try:
sql ="update hotel_web set price =%s,star ='%s' where hotel_name ='%s' and web_name ='%s'"% (price, star, Hotel_name, Web_name)
mycursor.execute(sql)
mydb.commit()
print('更新数据成功')
except:
mydb.rollback()
print(sql)
print("更新数据失败")
else:
try:
sql = "insert into hotel_web values ( '%s','%s','%s',%s,%s,%s)" % (Hotel_name,Web_name,star,price,score,count)
mycursor.execute(sql)
mydb.commit()
print('插入数据成功')
except:
mydb.rollback()
#print(sql)
print("插入数据失败")
这里数据传参要多注意一些,容易报错