业界动态
手把手教你采集京东销售数据并做简单的数据分析和可视化
2024-11-11 09:46

手把手教你采集京东销售数据并做简单的数据分析和可视化

身着白衣,心有锦缎。

手把手教你采集京东销售数据并做简单的数据分析和可视化_数据分析

    随着移动支付的普及,电商网站不断涌现,由于电商网站产品太多,由用户产生的评论数据就更多了,这次我们以京东为例,针对某一单品的评论数据进行数据采集,并且做简单数据分析。

    这个是某一手机页面的详情页,对应着手机的各种参数以及用户评论信息,页面URL是

手把手教你采集京东销售数据并做简单的数据分析和可视化_数据挖掘_02

然后通过分析找到评论数据对应的数据接口,如下图所示:

手把手教你采集京东销售数据并做简单的数据分析和可视化_python_03

它的请求url:

注意看到这两个关键参数     1. productId: 每个商品有一个id     2. page: 对应的评论分页

对评论数据的url发起请求:

json.cn 打开json数据(我们的评论数据是以json形式与页面进行交互传输的),如下图所示:

手把手教你采集京东销售数据并做简单的数据分析和可视化_列表_04

分析可知,评论url中对应十条评论数据,对于每一条评论数据,我们需要获取3条数 据,contents,color,size(注意到上图的maxsize,100,也就是100*10=1000条评论)。

1.导入相关库

2.获取评论数据

3.获取最大页数(也可以不写)

4.提取数据

5.用于将爬取到的数据存储到Excel中

6.运行程序

手把手教你采集京东销售数据并做简单的数据分析和可视化_python_05

1.简单配置

手把手教你采集京东销售数据并做简单的数据分析和可视化_python_06

2.手机颜色数量对比

手把手教你采集京东销售数据并做简单的数据分析和可视化_python_07

可以看出用户购买的手机白色和黑色的机型比较多.占据了60%多。3.评论词云展示1)先要提取评论数据

2)词云展示 

注意: 这里我们不能使用encoding='uth-8',会报出一个错误:

所以我们需要改成 gbk。

最后得到的效果图,如下图所示:

手把手教你采集京东销售数据并做简单的数据分析和可视化_数据挖掘_08

    以上就是本篇文章【手把手教你采集京东销售数据并做简单的数据分析和可视化】的全部内容了,欢迎阅览 ! 文章地址:http://fabua.ksxb.net/news/362.html 
     文章      相关文章      动态      同类文章      热门文章      栏目首页      网站地图      返回首页 海之东岸资讯移动站 http://fabua.ksxb.net/mobile/ , 查看更多   
最新文章
明确0到2级辅助驾驶系统 “人机共驾”法律属性
公安部交通管理局局长王强7月23日在国新办举行的“高质量完成‘十四五’规划”系列主题新闻发布会上表示,为进一步加强规范管理
iPhone 17系列价格曝光:仅一款不涨价 Pro版更具性价比
【TechWeb】近段时间以来,全新iPhone 17系列尤为吸引外界的目光,而根据供应链最新爆料,iPhone 17系列距离亮相仅剩差不多一个
管庄回收茅台酒!管庄茅台酒回收!
137=1888=0048 回收茅台礼盒15年 30年 50年 80年茅台礼盒回收洋酒系列 回收路易十三,轩尼诗,拉菲,拉图,马爹利,人头马
北京到陶乐物流专线价格,货到付款
长胜物流24 小时服/务热线:||长途搬家|家电托运|电脑托运|液晶电视托运|冰箱托运|洗衣机托运|行李托运|电动车托运|摩托车托运|
解读Solana最新技术路线图:锚定“互联网资本市场”,打造链上华尔街
昨天 Solana 宣布了新的路线图。本质上,由于各链改进都已进入深水区,导致确实有些名词堆砌的情况,我试着用大家可以理解的方式
国泰海通发布新一代全AI智能APP灵犀
央广网北京7月26日消息(记者樊瑞)当前,人工智能技术正加速重构证券行业服务业态,加快发展新一代人工智能是推动证券行业高质
新加坡地道特色平价美食,好吃不踩雷
新加坡太多美食了~亚坤-咖椰吐司$5左右,这是我在新加坡吃的第一顿早餐。不知道好不好吃,但看着一大早就好多人排队,那就没错
上海UPS蓄电池回收
上海UPS回收,UPS电源回收,UPS电池回收:上海APC不间断电源回收,UPS主机回收,机房设备回收,回收UPS设备,UPS蓄电池回收,UPS
云边端协同:虚拟电厂的“神经网”革命
上海某高校586台空调在50秒内无感降负300kW,精度96.57%;重庆虚拟电厂调度17MW可调资源,延迟压缩至100ms级——这组数据的背后
高金食品与远方好物达成战略合作,让高品质“真黑猪”走进千家万户的餐桌
中国黑猪看四川,四川黑猪看高金。高金食品正用“真黑猪”,破局本土黑猪市场占有率困境,开创中国黑猪产业新篇章。7月23日,在