来源:早起Python
作者:刘早起
本文将基于东京奥运会奖牌榜数据,使用 pandas 进行数据分析可视化实战(文末可以下载数据与源码)
首先是奥运会奖牌数据的获取,虽然有很多接口提供数据,但是通过奥运会官网拿到的数据自然是最可靠的
通过对东京奥运会官网奖牌榜的页面分析,发现其表格在前端是通过 嵌入的,所以可以使用 pandas.read_html() 轻松读取
之后再读取本地分日奖牌数据并将国家ID进行匹配
注意到上面的 df1 列名并没有完整,所以可以使用 rename 函数修改指定列的名称
既然 df2 有时间列,为了方便后面分析,自然要检查一下其类型
可以看到,获奖时间列虽然没有缺失值但其并不是pandas支持的时间类型。
好在修改列属性并不是什么困难的事情,一行代码轻松搞定(7-12)
通过观察可以发现,df2并没有 国家名称 列,但是其与 df1 有一个共同列 国家id
为了给 df2 新增一列 国家名称 列,一个自然的想法就是通过 国家id 列将两个数据框进行合并,在 pandas 中实现,也不是什么困难的事情
现在 df2 就调整的差不多了(由于源数据问题,部分获奖时间与真实时间有一定误差),下面开始进行分析
下面对 df2 进行一些统计分析,计算每个国家的奖牌总数(也就是出现次数),并查看奖牌数前5名,结果可以用 df1 进行验证
看完国家奖牌排行,接下来计算获得奖牌最多的运动员(注意:仅统计单人项目)
这里无需使用分组功能,只需要按照运动员姓名列进行频率统计即可。
下面筛选出全部乒乓球的获奖信息,这里的筛选有多种写法,你能写出几种?
现在查看各国在各项目上的奖牌详情,下面是通过透视得到的答案,但你会使用使用数据分组功能吗?
在上一题的基础上,查询中国队的获奖牌详情,注意是查询而不是筛选,所以使用上上一题的方法将会报错
如何将上一题的结果进一步突出展示,可以使用 pandas 中的 style
上面说到,df2 的获奖时间部分并不准确(主要体现在小时上),所以我们干脆将时间精确到天,这里可以使用 map 对一整列进行操作
接下来,让我们统计每天产生的奖牌总数
可以看到,最后一天产生的奖牌数量最多
再来查看不同项目在不同国家的分布情况,同样也可以使用分组功能实现
接下来让我们计算中国每日总奖牌数量,你能想到该如何实现吗?
最后,计算前十名各国每日奖牌数量统计,注意:对于第一天没有数据的国家用0填充,其余时间的缺失值用上一日数据填充。
这看似简单的问题,涉及的 pandas 操作还真不少!
首先制作奖牌排行榜
上图使用 matplotlib 制作,看起来不错,但代码量也确实不少
接下来使用 pyecharts 绘制上一题奖牌榜各奖牌的细分
使用 pyecharts 的好处就是使用封装好的方法,代码量相对较少
现在进一步绘制中国队的奖牌分布
同样使用 pyecharts ,实际行代码搞定
现在绘制奖牌分布的热力地图
使用 pyecharts 绘制,绘图代码不多,但是调整国家中英文映射字典是一件痛苦的事情
最后绘制每日奖牌榜前十奖牌数量的动态图,使用 matplotlib 或 pyecharts 均得不到较好的效果,所以这里使用另一个第三方库 bar_chart_race 进行绘制
以上就是基于 2020年东京奥运会 数据进行的一系列数据分析可视化流程,基本涉及到利用 Pandas 进行数据分析的主要操作,是一份不可多得的简单易懂、利于探索的数据集。
df1 = pd.read_html("https://olympics.com/tokyo-2020/olympic-games/zh/results/all-sports/medal-standings.htm")[0]
df2 = pd.read_csv("东京奥运会奖牌分日数据.csv")
修改列名
df1.rename(columns={'Unnamed: 2':'金牌数', 'Unnamed: 3':'银牌数', 'Unnamed: 4':'铜牌数'},inplace=True)
数据类型查看与修改
df2.info()
df2['获奖时间'] = pd.to_datetime(df2['获奖时间'])
数据合并
temp = pd.merge(df1,df2,on = '国家id') #先合并 temp['获奖时间'] = pd.to_datetime(temp['获奖时间'])#修改类型 temp = temp.sort_values(by=['获奖时间','奖牌类型'], ascending=True, ignore_index=True)#排序,和df2一样 df2['国家'] = temp['国家奥委会']#赋值
数据分组
数据统计
数据筛选
数据透视
pd.pivot_table(df2,values = ['奖牌类型'],index = ['国家','运动类别'],aggfunc = 'count')
数据查询
result.query("国家 == ['中国']")
个性化查看
(result.query("国家 == ['中国']")
.style
.bar(subset=['奖牌类型'],color='skyblue'))
数据格式化
def time_format(x): return x.strftime("%m月%d日")
df2['获奖时间'] = df2['获奖时间'].map(time_format)
分组统计
df2.groupby("获奖时间")['国家'].count().sort_values()
数据透视
pd.pivot_table(df2,values = ['奖牌类型'],index = ['运动类别','国家'],aggfunc = 'count')
数据计算
pd.pivot_table(df2,values = ['奖牌类型'],index = ['获奖时间','国家'],aggfunc = 'count').query("国家 == ['中国']").cumsum()
数据计算
data = pd.pivot_table(df2,values = ['奖牌类型'],index = ['获奖时间','国家'],aggfunc = 'count').query("国家 == ['美国', '中国', '日本', '英国', 'ROC', '澳大利亚', '荷兰', '法国', '德国', '意大利']") data = data.unstack() data.columns = data.columns.get_level_values(1) data.columns.name = None data = data.cumsum() data = data.fillna(axis=0,method='ffill').fillna(0) data
条形图
堆叠图
环形图
地图
动态图
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
持证人简介: CDA持证人刘凌峰,CDA L1持证人,微软认证讲师(MCT)金山办公最有价值专家(KVP),工信部高级项目管理师,拥有 ...
2025-04-15持证人简介:CDA持证人黄葛英,ICF国际教练联盟认证教练,前字节跳动销售主管,拥有丰富的行业经验。在实际生活中,我们可能会 ...
2025-04-14在 Python 编程学习与实践中,Anaconda 是一款极为重要的工具。它作为一个开源的 Python 发行版本,集成了众多常用的科学计算库 ...
2025-04-14随着大数据时代的深入发展,数据运营成为企业不可或缺的岗位之一。这个职位的核心是通过收集、整理和分析数据,帮助企业做出科 ...
2025-04-11持证人简介:CDA持证人黄葛英,ICF国际教练联盟认证教练,前字节跳动销售主管,拥有丰富的行业经验。 本次分享我将以教培行业为 ...
2025-04-11近日《2025中国城市长租市场发展蓝皮书》(下称《蓝皮书》)正式发布。《蓝皮书》指出,当前我国城市住房正经历从“增量扩张”向 ...
2025-04-10在数字化时代的浪潮中,数据已经成为企业决策和运营的核心。每一位客户,每一次交易,都承载着丰富的信息和价值。 如何在海量客 ...
2025-04-09数据是数字化的基础。随着工业4.0的推进,企业生产运作过程中的在线数据变得更加丰富;而互联网、新零售等C端应用的丰富多彩,产 ...
2025-04-094月7日,美国关税政策对全球金融市场的冲击仍在肆虐,周一亚市早盘,美股股指、原油期货、加密货币、贵金属等资产齐齐重挫,市场 ...
2025-04-08背景 3月26日,科技圈迎来一则重磅消息,苹果公司宣布向浙江大学捐赠 3000 万元人民币,用于支持编程教育。 这一举措并非偶然, ...
2025-04-07在当今数据驱动的时代,数据分析能力备受青睐,数据分析能力频繁出现在岗位需求的描述中,不分岗位的任职要求中,会特意标出“熟 ...
2025-04-03在当今数字化时代,数据分析师的重要性与日俱增。但许多人在踏上这条职业道路时,往往充满疑惑: 如何成为一名数据分析师?成为 ...
2025-04-02最近我发现一个绝招,用DeepSeek AI处理Excel数据简直太爽了!处理速度嘎嘎快! 平常一整天的表格处理工作,现在只要三步就能搞 ...
2025-04-01你是否被统计学复杂的理论和晦涩的公式劝退过?别担心,“山有木兮:统计学极简入门(Python)” 将为你一一化解这些难题。课程 ...
2025-03-31在电商、零售、甚至内容付费业务中,你真的了解你的客户吗? 有些客户下了一两次单就消失了,有些人每个月都回购,有些人曾经是 ...
2025-03-31在数字化浪潮中,数据驱动决策已成为企业发展的核心竞争力,数据分析人才的需求持续飙升。世界经济论坛发布的《未来就业报告》, ...
2025-03-28你有没有遇到过这样的情况?流量进来了,转化率却不高,辛辛苦苦拉来的用户,最后大部分都悄无声息地离开了,这时候漏斗分析就非 ...
2025-03-27TensorFlow Datasets(TFDS)是一个用于下载、管理和预处理机器学习数据集的库。它提供了易于使用的API,允许用户从现有集合中 ...
2025-03-26"不谋全局者,不足谋一域。"在数据驱动的商业时代,战略级数据分析能力已成为职场核心竞争力。《CDA二级教材:商业策略数据分析 ...
2025-03-26当你在某宝刷到【猜你喜欢】时,当抖音精准推来你的梦中情猫时,当美团外卖弹窗刚好是你想吃的火锅店…… 恭喜你,你正在被用户 ...
2025-03-26