使用python统计前十访问量并以柱状图显示(windows下)

本文介绍了在Windows操作系统中,使用Python3.6.2和matplotlib库解析Nginx的access.log日志,统计访问量前10的数据,并绘制柱状图的过程。详细内容包括环境配置、matplotlib库的安装以及完整代码展示。
摘要由CSDN通过智能技术生成

1、环境

windows下安装好
python3.6.2
nginx的访问日志access.log

2、安装图片库 matlotlib

使用清华镜像 pip安装matplotlib图库,它的依赖包也会自动安装好,我的环境python3是和python2共存的,所以3以pyhton3和pip3区别

pip3 install matplotlib==3.1.0 -i https://pypi.tuna.tsinghua.edu.cn/simple/

3、完全代码如下

top10.py

# -*- coding: utf-8 -*-
import matplotlib.pyplot as plt
# 定义存放日志地址
nginx_file = 'E:\\doc\\access.log'
# 定义空字典,后面要存放IP:数量键对值
ip = {}
# 筛选nginx日志中的目标IP
with open(nginx_file) as f:
    for i in f.readlines():
        s_ip = i.strip().split()[0]
        lengh = len(ip.keys())
        if s_ip in ip.keys():
            ip[s_ip] = ip[s_ip] + 1
        else:
            ip[s_ip] = 1
# 以IP出现的次数排序返
  • 4
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
### 回答1: 程序设计思路: 1. 导入所需库:requests、beautifulsoup4、pyecharts。 2. 使用requests库访问QQ音乐热歌榜页面,获取页面源代码。 3. 使用beautifulsoup4库解析页面源代码,获取热歌榜100名歌曲的歌名、歌手和专辑。 4. 使用pyecharts库绘制柱状图,将热歌榜100名歌曲的播放量作为y轴数据,歌名作为x轴数据,生成柱状图并保存。 代码如下: ### 回答2: 程序设计思路: 1. 首先需要使用Python的爬虫库(如requests、beautifulsoup、selenium等)发送HTTP请求,获取QQ音乐热门歌曲的页面HTML源代码。 2. 使用正则表达式或者网页解析库(如beautifulsoup、lxml等)解析HTML源代码,提取出热门歌曲的信息(如歌曲名称、歌手、排名等)。 3. 将提取到的热门歌曲信息存储到一个列表或字典中。 4. 使用数据可视化库(如matplotlib、seaborn等)绘制柱状图,将热门歌曲的排名和歌曲名称作为横纵坐标进行可视化分析。 5. 通过调整柱状图的颜色、坐标轴显示等参数,使得图形更加清晰美观。 6. 运行程序,得到QQ音乐热门歌曲100名的柱状图可视化分析结果。 以下是示例程序代码: import requests from bs4 import BeautifulSoup import matplotlib.pyplot as plt # 爬取QQ音乐热门歌曲的页面HTML源代码 url = 'https://y.qq.com/portal/toplist.html' headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'} response = requests.get(url, headers=headers) html = response.text # 使用beautifulsoup解析HTML源代码,提取热门歌曲信息 soup = BeautifulSoup(html, 'lxml') songs = soup.find_all('li', class_='js_song') # 将热门歌曲信息存储到字典中 top_songs = {} for song in songs: rank = song.find(class_='top_num').get_text() name = song.find(class_='js_song').get('title') top_songs[rank] = name # 提取100名热门歌曲 top100_songs = dict(list(top_songs.items())[:100]) # 提取歌曲排名和歌曲名称 ranks = list(top100_songs.keys()) names = list(top100_songs.values()) # 绘制柱状图 plt.bar(ranks, names) plt.xlabel('Rank') plt.ylabel('Song Name') plt.title('Top 100 Popular Songs on QQ Music') plt.xticks(rotation=90) # 旋转横坐标标签,避免重叠 plt.tight_layout() # 自动调整图像边缘,避免标签被裁剪 plt.show() ### 回答3: 程序设计思路: 1. 导入必要的库和模块,如requests、BeautifulSoup、matplotlib等。 2. 发起HTTP请求,从QQ音乐热门歌曲榜单页面获取网页源代码。 3. 使用BeautifulSoup库解析网页源代码,提取出热门歌曲的相关信息,如歌曲名称、歌手名称等。 4. 将热门歌曲的相关信息保存到列表或字典中。 5. 根据热门歌曲的播放量、下载量等指标,对热门歌曲进行排序。 6. 取100首热门歌曲,将其歌曲名称和播放量分别保存到两个列表中。 7. 使用matplotlib库绘制柱状图,将歌曲名称作为x轴,播放量作为y轴。 8. 设置图表标题和标签,添加适当的颜色和样式,展示柱状图。 9. 输出柱状图可视化分析结果。 示例代码: ```python import requests from bs4 import BeautifulSoup import matplotlib.pyplot as plt def get_top_songs(): url = 'https://y.qq.com/w/toplist.html?ADTAG=myqq' response = requests.get(url) soup = BeautifulSoup(response.text, 'html.parser') song_list = soup.find_all('div', class_='songlist__item') top_songs = [] for song in song_list: rank = int(song.find('span', class_='songlist__ranking_num').text) title = song.find('span', class_='songlist__songname_txt').text artist = song.find('span', class_='songlist__artist').text top_songs.append({'rank': rank, 'title': title, 'artist': artist}) return top_songs def plot_top_songs(top_songs): titles = [song['title'] for song in top_songs[:100]] plays = [song['rank'] for song in top_songs[:100]] plt.bar(titles, plays) plt.xticks(rotation=90) plt.xlabel('歌曲名称') plt.ylabel('播放量') plt.title('QQ音乐热门歌曲100名播放量') plt.show() if __name__ == '__main__': top_songs = get_top_songs() plot_top_songs(top_songs) ``` 该程序首先通过发送HTTP请求,获取QQ音乐热门歌曲榜单页面的网页源代码。然后使用BeautifulSoup库解析网页源代码,提取出歌曲的排名、名称、歌手等信息。根据歌曲的播放量进行排序,取100首热门歌曲,并将其名称和播放量保存到两个列表中。最后,使用matplotlib库绘制柱状图,展示热门歌曲的播放量情况。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

冰河长歌

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值