最近‘张同学’在DY实在是太火了,忍不住用Python分析了一下他的dy评论数据,相信有朝一日我也能够爆火起来

Python垃圾分类查询|基于文本生成字典|简单查询界面 小小白的一个简单的垃圾分类查询小程序 引言 你是什么垃圾?最近垃圾分类问题真是让人头疼。一杯喝剩的奶茶从珍珠到盖子都要做不同的处理,珍珠是湿垃圾,剩的液体倒入下水道,杯子冲洗干净…篮球属于什么垃圾?骨头属于什么垃圾?脑海中浮现出一系列的问题。我就想利用程序查询解决这些问题,即输入待查物品名称,得到分类结果,干垃圾、湿垃圾、有害垃圾还是可回收垃圾。本人小小白不会神经网络贝叶斯之类的,就用的简单文... 阅读详情

最近抖音张同学突然火了,两个月涨粉一千多万。

今天这篇文章,我抓取了张同学的视频的评论数据,想从文本分析的角度,挖掘一下大家对张同学感兴趣的点。

张同学 10.4号开始发视频,视频的点赞量一直很高,11.17 号的视频达到了顶峰,收获 250w 个赞,之后关注量也开启了暴涨。

图片

所以挖掘 11.17 号视频的评论,更有助于我们达成目的。

1. 抓取数据

抖音出了 web 版,抓取数据方便了很多。

图片

抓评论

滑到网页评论区,在浏览器网络请求里过滤包含comment的请求,不断刷新评论就可以看到评论的接口。

有了接口,就可以写 Python 程序模拟请求,获取评论数据。

请求数据要设置一定间隔,避免过大请求,影响别人服务

抓取评论数据有两点需要注意:

  • 有时候接口可能返回空数据,因此需要多试几次,一般过了人工滑动验证后的接口基本可用

  • 不同页面之间的数据可能会重复,所以需要跳页请求

2. EDA

11.17 号的视频有 12w 条评论,我只抓取了 1w 多条。

超星滑块验证码逆向分析:从图像识别到轨迹模拟的完整实战 验证码作为网络安全的基础防线,其核心原理是通过人机交互差异来区分真实用户与自动化程序。在Web安全与自动化测试领域,逆向分析验证码的实现逻辑,是理解客户端安全攻防的关键技术实践。以常见的滑块验证码为例,其技术价值在于通过前端混淆、加密传输和行为轨迹分析,构建动态防御体系。应用场景广泛,涉及自动化登录、数据采集及安全审计等。本文以超星滑块验证码为具体案例,深入剖析了图像识别算法(如OpenCV模板匹配)在缺口定位中的应用,并详细解读了如何通过模拟人类拖动轨迹(包含加速、减速与随机抖动)来绕过行为检测。整个过程 阅读详情

相关推荐

基于Python数据分析

下面来介绍一下基于Python数据分析,主要介绍数据分析的概念、数据分析流程、Python优点、经常使用模块的用途以及使用Python进行数据分析的学习方法及步骤;python随着大数据和人工智能时代的到来,网络和信息技术开始渗透到人类平常生活的方方面面,产生的数据量也呈现指数级增加的态势,同时现有数据的量级已经远远超过了目前人力所能处理的范畴。在此背景下,数据分析成为数据科学领域中一个全新的研究课题。

weixin_68789096的博客 2050

Python自动化办公(面向2020, Python3.7,不断更新ing)

<p><img src="https://img-bss.csdnimg.cn/202302040511121663.png" alt="python自动化办公" /></p> <p><img src="https://img-bss.csdnimg.cn/202302040511448319.png" alt="python自动化办公" /></p>

Python实战项目6:实现微博评论分析

本文介绍如何使用Python对微博评论数据进行分析。首先看一下评论数据的结构和字段,如下图:字段有微博的发布时间、微博内容、认证类型、所属ip地址等。

lyccomcn的博客 2059

Python分析同学dy评论数据

大家好,我是辰哥~最近抖音同学突然了,两个月涨粉一千多万。今天这篇文章,我抓取了同学的视频的评论数据,想从文本分析的角度,挖掘一下大家对同学感兴趣的点。同学 10.4号开始发视频...

公众号:Python研究者 1115

提高EDA(探索性数据分析)效率的 3 个简单工具

数据对于当今的每个行业都很重要,几乎每家公司都在收集数据并使用它们来做出数据驱动的业务决策。在这个过程中最重要的步骤之一是分析数据。有许多专门用于数据可视化的 python 库。例如 Matplotlib、Seaborn 等,但是他们只提供了图标的功能,如果我们需要进行EDA则需要手动编写代码。在本文中将介绍3个工具,这些工具可以使我们的探索性数据分析几乎自动化。 1、pandas_profiling pandas_profiling可以扩展DataFrame 的功能,通过使用 df.profile_re

deephub 3984

爬虫+数据清洗+可视化分析】用Python分析哔哩哔哩“狂飙”的评论数据

马哥原创:用python分析哔哩哔哩关于"狂飙"的上千条评论数据。 一、爬虫 requests 发送请求 json 解析接口数据 pandas 保存csv文件 二、可视化分析 IP属地分析-柱形图 评论时间分析-折线图 点赞数分布-直方图 评论内容-情感分布饼图 评论内容-词云图 并分析得出一系列相应结论。

马哥的专栏 6311

刚接触编程的同学可以看看的几个编程练习(python实现)(四)

本大白最近带一只小白入手编程,想法是在练习中学习,所以弄了几个题目。其中不少是经典的练习题,在很多编程入门书籍中都有出现;有的题涉及到一点数据结构的理念。在这里分享出来,刚接触编程的同学可以和我们一起做一做(无论学的是哪种语言都可以看一看,思路是通用的。这里我们学的是python),也欢迎大家指正。 19. 整数重排 有时需要用到整数1-n的随机排列,如决定出场顺序等。 整数1-n的排列,共...

yxzypx的博客 305

手机python下载安装教程,python手机版下载官方

adb是安卓的一种组件,也可以直接在安卓当中使用,通过python使用的adb的操作,打个比方,a会吃饭,要吃饭,然后b叫a用嘴巴吃饭,这样吃,然后a就这样吃饭了。这里介绍一个软件—qpython3,集成了python3解释器,既可以命令行运行python,还可以编辑源文件后运行,支持代码高亮、语法检查等功能,下面我简单介绍一下这个软件的安装和使用:下载qpython3,直接在手机应用中搜索就行,如下,大概也就12兆左右,直接点击下载安装就行:?我最常用的就是「编辑器」,其次是「终端」,其他的很少...

阿发狗伪原创 2149

python官网下载步骤手机-手机python下载

广告关闭2017年12月,云+社区对外发布,从最开始的技术博客到现在拥有多个社区产品。未来,我们一起乘风破浪,创造无限可能。说明: python 2python 3都支持。 示例代码 说明: 所有示例代码仅作参考,无法直接编译和运行,需根据实际情况进行修改。 准备必要参数# 短信应用 sdk appidappid = 1400009099 # sdk appid 以1400开头#短信应用 sdk ...

weixin_37988176的博客 1229

AI辅助开发实战:用Anaconda Prompt高效创建与管理Python环境

基于山引擎豆包大模型,从零搭建一个实时语音通话应用。它不是简单的问答,而是需要你亲手打通 ASR(语音识别)→ LLM(大脑思考)→ TTS(语音合成)的完整 WebSocket 链路。对于想要掌握 AI 原生应用架构的同学来说,这是个绝佳的练手项目。架构理解:掌握实时语音应用的完整技术链路(ASR→LLM→TTS)技能提升:学会申请、配置与调用山引擎AI服务定制能力:通过代码修改自定义角色性格与音色,实现“从使用到创造”从0到1构建生产级别应用,脱离Demo,点击打开。

2600_94959802的博客 534

Anaconda Prompt高效卸载Python包的完整指南:从基础命令到依赖关系管理

基于山引擎豆包大模型,从零搭建一个实时语音通话应用。它不是简单的问答,而是需要你亲手打通 ASR(语音识别)→ LLM(大脑思考)→ TTS(语音合成)的完整 WebSocket 链路。对于想要掌握 AI 原生应用架构的同学来说,这是个绝佳的练手项目。架构理解:掌握实时语音应用的完整技术链路(ASR→LLM→TTS)技能提升:学会申请、配置与调用山引擎AI服务定制能力:通过代码修改自定义角色性格与音色,实现“从使用到创造”从0到1构建生产级别应用,脱离Demo,点击打开。

2600_94960063的博客 274

python爬各平台评论数据分析——数据采集、评论情绪分析、新闻热度

新闻热点、各平台评论、点赞等等、情绪分析

Strive_LiJiaLe的博客 2万+

Python|Pyppeteer实现获取抖音评论数据并自动下载(24)

本文是该专栏的第24篇,结合优质项目案例持续分享Pyppeteer的干货知识。本文以抖音视频的评论数据为例,通过pyppeteer实现登录抖音,获取指定视频的评论数据,并实现将评论数据进行自动下载保存。对pyppeteer不熟悉的同学,可往前查看本专栏前面介绍的pyppeteer知识点。废话不多说,具体细节部分以及详细思路逻辑,跟着笔者直接往下看正文内容。(附带完整代码)

Python进阶专栏《爬虫实战进阶》,《Pyppeteer从入门到精通》原创作者 2964

采集抖音一级评论python代码

通过今天的分享,我们一步步实现了用 Python 抖音一级评论的采集代码。从前期的环境搭建、库的安装,到代码的编写、调试,再到解决常见问题和注意事项,每一个环节都充满了挑战,但也正是这些挑战让我们不断成长和进步。在这个过程中,我们深入了解了如何使用DrissionPage库来控制浏览器,模拟用户操作,以及如何通过监听网络请求获取所需的数据。同时,也学会了如何处理可能出现的各种问题,如数据包捕获失败、数据提取错误等,以及如何遵守网站规则,避免触发反采集机制。

m0_68521667的博客 2841

抖音自动评论点赞脚本(win11+python

移动应用测试学习

小月肖的博客 8948

python基于Python+django的电影评论数据分析系统-计算机毕业设计

近年来,随着互联网的蓬勃发展,企事业单位对信息的管理提出了更高的要求。以传统的管理方式已无法满足现代人们的需求。为了迎合时代需求,优化管理效率,各种各样的管理系统应运而生,随着各行业的不断发展,电影评论数据分析系统也逐渐进入了信息化的进程。这个系统的设计主要包括系统页面的设计和方便用户互动的后端数据库,而前端软件的开发则需要良好的数据处理能力、友好的界面和易用的功能。数据要被工作人员通过界面操作传输至数据库中。

qq_1262330535的博客 476
上一篇: 每当我夜深人静的时候下载小电影,总是会卡在百分之九十九,这是正义的制裁么?
下一篇: 分享20个Python技巧,一看就会的那种
老贡讲Python
博客等级 码龄5年 509粉丝 129原创
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值