python数据分析
李笙诗
java进阶中
展开
-
使用selenium和第三方浏览器插件驱动完成搜狐网页信息爬取
from selenium import webdriverdriver = webdriver.Chrome('chromedriver.exe')#引入驱动driver.get('https://sohu.com')#选定url#print(driver.page_source)#打印网页#print(driver.current_url)#打印网址#eles = driver.find_elements_by_class_name('txt')#多对象必须使用elements#eles =原创 2021-05-20 14:29:34 · 326 阅读 · 0 评论 -
scarpy框架下爬虫程序的各启动方法
1.通过命令行启动此处需使用win+r打开cmdscrapy craw1 demo12.使用脚本文件from scrapy.cmdline import executeexecute(["scrapy","crawl","demo1"])其中demo1为定义后的爬虫名3.使用框架来运行爬虫from demo.spiders.demo1 import Demo1Spiderfrom scrapy.crawler import CrawlerProcessprocess = Crawle原创 2021-03-25 14:45:12 · 454 阅读 · 1 评论 -
python数据分析学习-jupyter
jupyter学习使用jupyter可以直接在网页端使用各种支持code和markdown并且jupyter支持调用图标显示输出但是好像没法用```+java的方法插入代码没法像下边这样public static hello{ public static void main{ System.out.println() }}可能是因为安装的是本地的python anconda3 发行版所以不带java环境jupyter的实用性在于可以直接数据可视化或许原创 2021-03-04 09:57:12 · 245 阅读 · 1 评论