⭐ Must Read: tags/eeeceaa - สรุปดราม่าล่าสุด

python

[Python BeautifulSoup Threading] 多线程漫画爬虫

漫画爬虫简介爬取公开漫画资源，下载完成后打包成Zip发送至手机指定文件夹。涉及组件第三方包依赖selenium（对应的webdriver需要自行安装）tqdm手机端termux（通过ssh与电脑通信）comicscreen（本地漫画阅读软件）脚本缺点没有写搜索功能，多个来源没有整合非异步爬虫，效率不高，写来玩儿的，能满足我的需求爬虫没有使用xpath、css选择...

娄夏
2020-02-18 10:23:04

 4172

#selenium #python
【计算机毕设选题】机器视觉 opencv 深度学习驾驶人脸疲劳检测系统 -python

🔥 这两年开始毕业设计和毕业答辩的要求和难度不断提升，传统的毕设题目缺少创新和亮点，往往达不到毕业答辩的要求，这两年不断有学弟学妹告诉学长自己做的项目系统达不到老师的要求。为了大家能够顺利以及最少的精力通过毕设，学长分享优质毕业设计项目，今天要分享的是🚩机器视觉 opencv 深度学习驾驶人脸疲劳检测系统🥇学长这里给一个题目综合评分(每项满分5分)难度系数：3分工作量：3分创新点：4分。

fawubio_A
2024-03-02 12:09:25

 1191

 25

#python #算法
Python爬虫JS逆向工程高级教程

本教程深入讲解了Python爬虫中JS逆向工程的核心技术，涵盖AES、RSA、MD5等加密算法的破解方法。主要内容包括：1.浏览器调试技术：使用Chrome开发者工具进行代码分析、断点调试和网络请求捕获；2.加密算法原理：详解对称加密（AES）、非对称加密（RSA）和消息摘要（MD5/SHA）的实现方式；3.实战案例：通过电商订单系统、Canvas指纹系统和WebGL加密系统三个典型案例，演示如何

 ZTLJQ
2025-08-15 09:35:14

 2519

 22

#python #算法 #机器学习 +2
Python爬虫：通过requests.get()方法获取网站源码

方法常用参数requests.get()url=* , headers=*其中url参数传入的必须为一个字符串类型（str）headers参数传入的必须为一个字典格式（dict），这个参数的传入内容就是反反爬的关键

 阿P的哲学
2022-01-18 08:43:26

 1138

#python #爬虫 #开发语言
【启发式算法】Dynamic A*（D*）算法详细介绍（Python）

本文介绍了动态A*（D*）路径规划算法及其Python实现。D算法是A的改进版本，适用于动态环境中机器人路径规划，能够通过增量更新高效处理障碍物变化。文章详细阐述了D的工作原理，包括反向搜索、局部更新和优先队列机制，并提供了完整的Python代码实现，包含地图建模、状态处理和动画可视化功能。该算法广泛应用于机器人导航、自动驾驶和无人机领域，具有实时性强、计算效率高等优点，但也存在实现复杂、内存消耗

 不去幼儿园
2025-06-30 14:42:19

 3863

 94

#人工智能 #算法 #机器学习 +2
菜鸟的Django+MongoDB搭建简单爬虫显示网站踩坑心得

本文基于《Django企业开发实战》一书和网络资料，拼拼凑凑，做了简单的网站实现，大致把前后端+数据库方面的内容结合爬虫代码做通了。不得不说，Django和MongoDB是真的不搭配，强烈建议不要使用。开始：conda环境本文在Ubuntu18.04LTS系统上，使用anaconda搭建虚拟环境，python版本为3.6.10，主要库版本为django(1.11.4)，mongoengine(0.

白夜繁华尽
2020-09-16 16:32:01

 2050

 2

#django #python #数据库 +2
chatgpt赋能python：Python如何调用父类的属性？

子类可以继承父类的属性和方法。在Python中，继承父类属性的方法有super()函数和调用父类名。我们通常需要在子类中使用父类的属性是因为需要增加新的属性或方法而不改变父类的原代码。在使用Python的过程中，继承是一个非常重要的概念，能够让我们更好的组织和管理代码。同时，子类使用父类的属性也是一个应用广泛的技巧，在实际开发过程中经常会涉及到。本文由chatgpt生成，文章没有在chatgpt生

 turensu
2023-06-28 04:25:32

 389

#python #开发语言
处理json文件，并将数据汇总至Excel表格

从scores.jason文件中读取学生信息,输出学生的学号，姓名，各科成绩，平均分, 各科标准差。

Jonina Beyang
2024-04-12 23:55:18

 621

 1

#python
【爬虫进阶】爬虫概述基础篇（回炉重造）

爬虫概述爬虫概要1. 爬虫的概念2. 爬虫的作用3. 爬虫的分类3.1 根据被爬取网站的数量不同，可以分为：3.2 根据是否以获取数据为目的，可以分为：3.3 根据url地址和对应的页面内容是否改变，数据增量爬虫可以分为：4. 爬虫的流程5. http协议5.1 http以及https的概念和区别5.2 爬虫特别关注的请求头和响应头5.2.1 特别关注的请求头字段5.2.2 特别关注的响应头字段5

chaser
2021-08-17 10:33:58

 1163

 3

#爬虫 #python
Python爬虫之多进程介绍

Python爬虫之多进程介绍1 进程介绍2 进程间的通信2.1 进程队列使用2.2 进程间不共享全局变量2.3 进程间的通信3 进程池间的通信1 进程介绍（1）概念进程是正在执行的程序。程序：没有执行的代码，是⼀个静态的。1）进程是一个具有一定独立功能的程序在一个数据集上的一次动态执行的过程，是操作系统进行资源分配和调度的一个独立单位，是应用程序运行的载体。2）多线程就是开启多个线程，每个线程之间

 Claire_chen_jia
2020-06-13 11:30:07

 1039

 1

#python
python 爬虫爬取图片二进制数据

import requests#发送网络请求response = requests.get(‘https://www.baidu.com/img/bd_logo1.png?where=super’)print(response.content)#打印二进制数据with open(‘百度logo.png’, ‘wb’) as f:#通过open()函数将二进制数据写入本地文件f.write(resp

戴上微笑
2020-11-29 23:27:41

 1045

#python #爬虫
python自动化运维第一步-利用psutil模块获取服务器信息

python获取服务器硬件信息脚本

 逐流·
2022-09-19 18:07:50

 858

#python #运维
推荐17款最好用的跨浏览器测试工具

市面上有很多不同的浏览器，每种浏览器都有数百万用户。因此，在构建一个网站或 Web 应用程序时，就需要测试它与不同浏览器的兼容性。最好、最方便的方法是使用跨浏览器检查工具。如果你正在寻找解决方案，可以看看下面这些可靠且全面的跨浏览器检查工具。这些工具提供了不同的功能，并满足了检查网站兼容性方面的需求。往下读，你就会知道哪一个最适合你。BrowserShots地址：http://browsersho

测试界的飘柔
2022-05-10 14:21:47

 4549

 3

#测试工具 #python #chrome
使用爬虫爬取结构化数据百度学术

一、非结构化文本的爬取微博上有一篇关于“#学校里的男生有多温柔#”的话题，点进去一看感觉评论很真实，于是想把评论给爬下来看一看，并生成词云。刚开始思路是通过网页端微博爬取，通过开发者工具查看分析后，发现并没有看到相关评论。百度搜索之后得知web做了一些反爬虫策略，不太容易爬取（踩了相当时间的坑）。但是微博手机端相对容易些，于是转战手机端获取该评论链接，然后使用谷歌浏览器登录该链接，一阵分析后，发现

 bullnfresh
2022-04-10 08:56:10

 7233

 11

#big data #其他 #python +2
go-python3初体验

go-python3

Nobitaxi
2023-04-27 14:29:04

 728

 1

#golang #python #开发语言
python爬虫汽车之家全车型及基本参数入数据库（截止50524个数据）（详解）

文章目录免责声明一、总体思路二、需要使用的库三、具体实施(1)页面1:(2)页面2：在售页面停售页面1.第一种方向2.第二种方向四.基本参数写入数据库五.总结免责声明本人新手小白，看到网...

Python研究者
2020-10-09 18:50:54

 782

#python #java #大数据 +1
python+requests的接口自动化测试框架实例详解教程

Python是一种简单易学、功能强大的编程语言，广泛应用于各种软件开发和测试场景中。requests是Python中流行的HTTP库，支持发送HTTP请求和处理HTTP响应，它也是开发API自动化测试框架的重要组件之一。在本文中，我们将介绍如何使用Python和requests构建一个简单的接口自动化测试框架，并通过实例来详细说明其具体实现方法。Python和requests是构建接口自动化测试框

 测试小婉
2023-04-16 21:06:33

 2228

#python #面试 #职场和发展
Python爬虫练习笔记——爬取一本小说并保存为txt文件

最近竟然开始磕起了黄晓明和尹正的CP！！！但是万恶的爱某艺不好好更新剧集，居然搞起了超前点映…WTF？？？有什么是我这个贫穷而又尊贵的VIP用户不能看的？？？于是我决定开始看小说了！找个网站把小说爬下来慢慢看吧~先物色一个投缘的小说网站吧就它了！第一步：分析网页首先需要了解要爬取网站的页面，查看网页源代码。然后根据网页源代码的结构，想好代码的步骤和思路。在网页开发者模式中查看...

高大宝呀
2020-04-17 12:46:58

 1.5w

 25

#python #爬虫
Python图像处理常用库与安装

Python图像处理常用库与安装1.Pillow该库包含基本的图像处理功能，包括点操作、使用一组内置卷积内核进行过滤以及颜色空间转换。使用说明文档：https://pillow.readthedocs.io/en/3.1.x/index.html官网：https://pillow.readthedocs.io/en/stable/installation.html安装提示：Pillow和PIL不能

 Matilda55555
2020-08-25 16:11:32

 2183

#python
使用Plotly.js创建交互式图表，第3部分：条形图

在上一个教程中，您学习了如何在Plotly.js中创建折线图。可以使用一组属性来控制折线图的各个方面，例如要绘制的数据以及连接绘制点的线条的形状或颜色。 Plotly.js允许您以类似方式创建条形图。在本教程中，您将学习如何使用Plotly.js创建各种条形图。我还将讨论如何使用特定属性控制这些图表的外观，例如条形颜色和宽度。在继续之前，我想提一下，您还可以使用Chart.j...

cunjie3951
2020-06-16 21:04:10

 1024

#python #java #数据可视化 +2
【Django】在Pycharm中创建django项目和app

本文讲解了如何在Pycharm中创建django项目和app。

暗里有风
2024-08-22 10:04:21

 1852

 16

#django #pycharm #python
[借助DeepEval包，轻松进行LLM单元测试和性能评估]

DeepEval简化了LLM的测试流程，通过自定义和跟踪不同的性能指标来提高模型可靠性。如需进一步学习，建议查看DeepEval的官方文档和GitHub仓库。

ppoojjj
2024-09-23 13:59:49

 602

 4

#python #开发语言 #分布式
django解决自定义用户验证模型类时报错--django.db.migrations.exceptions.InconsistentMigrationHistory

Django解决自定义用户模型报错（django.db.migrations.exceptions.InconsistentMigrationHistory: Migration admin.0001_initial is applied before its dependency users.0001_initial on database 'default'.）

simpleyako
2022-07-29 18:36:30

 1181

 5

#django #数据库 #python
Python基于PyTorch实现BP神经网络ANN分类模型项目实战

Python基于PyTorch实现BP神经网络ANN分类模型项目实战

 胖哥真不错
2022-12-28 15:36:59

 4612

 3

#python
机器学习中统计概率分布大全（Python代码）

在平时的科研中，我们经常使用统计概率的相关知识来帮助我们进行城市研究。因此，掌握一定的统计概率相关知识非常有必要。本文将讨论我们经常遇到的概率分布，希望能从概念层面帮助大家建立总体认知。本文件涉及的概念包括：随机变量(Random Variable)密度函数(Density Functions)伯努利分布(Bernoulli Distribution)二项式分布(Binomial Distribu

Sim1480
2023-07-24 08:48:04

 337

#机器学习 #python #概率论 +2
Django后端开发学习笔记（1）Django基本概念

目录0. 学习参考1. Django整体结构2. 主要部分2.1 将请求发送到正确的视图 (urls.py)2.2 处理请求 (views.py)2.3 定义数据模型 (models.py)2.4 呈现数据 (HTML 模版)3. 创建网站框架3.1 使用django-admin工具创建工程的文件夹，基本的文件模板和工程管理脚本（manage.py）。3.2 用manage.py 创建一个或多个应

 梆子井欢喜坨
2021-07-20 16:43:09

 3192

 6

#python #django #后端
BackTrader：性能优化之多股策略速度优化

前言：谈及BackTrader的回测速度优化，最常见的说法是从底层使用numpy等计算库来替换，但这种优化无疑非常新手不友好。因此本文着眼于如何最简单的优化多股情况下回测慢这一情况。考虑测试效率，本文使用100支股票回测。经过测试，优化后策略执行速度提升38%（62->38.4）。策略描述：前一天非一字涨停的股票进入候选池。第二天10~11点若涨幅大于4%买入。持仓股在14:30时若未涨停卖

 他人已歌
2021-08-19 17:44:02

 3507

 1

#python
基于JAVA实现的WEB端UI自动化 -自动化测试简单介绍

软件测试领域技术不断创新手工测试重复性工作量较大技术革新，通过使用工具或者脚本代码让计算机帮助测试人员完成一些简单操作

 自动化测试学习官
2023-10-18 14:39:22

 1001

#java #前端 #ui +1
Python爬虫：教你如何使用Python解析HAR请求文件（附源码）

Har文件是HTTP Archive的缩写，它是一个格式化的文件，包含了HTTP请求和响应的所有信息，对于我们来说，我们就可以通过解析这些请求获取到其中的请求头、请求方法、请求参数、响应内容。当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。Python所有方向的技术点做的整理

 程序员晓晓
2023-11-04 10:02:00

 4254

#python #爬虫 #开发语言
chatgpt赋能python：如何在一个Python中调用另一个Python

本文由chatgpt生成，文章没有在chatgpt生成的基础上进行任何的修改。以上只是chatgpt能力的冰山一角。作为通用的Aigc大模型，只是展现它原本的实力。对于颠覆工作方式的ChatGPT，应该选择拥抱而不是抗拒，未来属于“会用”AI的人。🧡AI职场汇报智能办公文案写作效率提升教程 🧡专注于AI+职场+办公方向。下图是课程的整体大纲下图是AI职场汇报智能办公文案写作效率提升教程中用到的

 laingziwei
2023-07-01 05:50:38

 326

#python #人工智能
禁忌搜索算法完整指南（python）

在实际生活中，很多问题都可以转化为优化问题，比如生产调度、物流配送、旅行商问题等等。对于这些问题，我们需要找到一个最优解或者接近最优解的解。然而，传统的一些优化算法，如贪心算法、动态规划等，往往只能找到局部最优解，而不能保证全局最优解。这时候，我们需要一些更强大的算法来帮助我们解决问题，禁忌搜索算法就是其中一种。

三块多内饰
2025-02-13 10:13:36

 3507

 15

#python #算法
scrapy漫画爬虫-漫客栈

目标爬取漫客栈上的免费漫画思路使用scrapy进行爬取，写个pipeline进行存储到数据库，去重以及下载保存。spider部分每个漫画的信息都存储在了div中，先获取一个div_list,然后再遍历进行需要的信息的收集。div_list = response.xpath("//div[@class='cate-comic-list clearfix']/div")for div i...

fread丶
2019-09-10 22:58:41

 615

#爬虫 #python
网络爬虫_网络爬虫的盗亦有道

一、网络爬虫的尺寸1.爬取网页玩转网页　　小规模，数据量小　　爬取速度不敏感　　Requests库　　使用比例：>90%2.爬取网站爬取系列网站　　中规模，数据规模较大　　爬取速度敏感　　Scrapy库3.爬取全网　　大规模，搜索引擎　　爬取速度关键　　定制开发二、网络爬虫引发的问题1.网络爬虫的性能骚扰　　Web服务器默认接收人类访问　　受...

bangshijian6100
2019-08-12 10:59:00

 371

#爬虫 #python
Python爬虫——简单爬取（从网站上爬取一本小说）

从笔下文学网站爬取一本名为《剑来》的小说，作者为烽火戏诸侯网站网址如下：https://www.bxwxorg.com/①通过查看网页源码找规律（在此之前请弄清楚网站允许爬取的部分，就该网站而言，没有限制）②编写代码，实现功能import requestsfrom bs4 import BeautifulSoup# 引入BS库def text_save(filename, data):# 定义函数

 Hiraethlxl
2020-07-28 09:47:47

 5642

 6

#python #爬虫
【计算机毕设选题】基于情感分析的网络舆情热点分析系统

🔥 这两年开始毕业设计和毕业答辩的要求和难度不断提升，传统的毕设题目缺少创新和亮点，往往达不到毕业答辩的要求，这两年不断有学弟学妹告诉学长自己做的项目系统达不到老师的要求。为了大家能够顺利以及最少的精力通过毕设，学长分享优质毕业设计项目，今天要分享的是🚩基于情感分析的网络舆情热点分析系统🥇学长这里给一个题目综合评分(每项满分5分)难度系数：3分工作量：5分创新点：3分界面美化：5分数据可视化

 fawubio_A
2024-02-21 11:54:14

 1244

 8

#python #算法
SCI一区梯度优化算法，原理详解，MATLAB代码免费获取

基于梯度的优化算法（Gradient-based optimizer，GBO）是一种元启发式的数学优化算法。该算法受基于梯度的牛顿方法的启发，使用两个主要算子：梯度搜索规则（GSR）和局部逃逸算子（LEO）以及一组向量来探索搜索空间。GSR采用基于梯度的方法来增强搜索趋势，加快收敛速度，以获得更好的搜索空间中的位置。LEO使得所提出的GBO能够逃离局部最优。该成果于2020年发表在计算机领域一区S

今天吃饺子
2024-06-12 09:11:00

 1190

 27

#算法 #matlab #python +1
指派问题（匈牙利算法）

问题描述：在生活中经常遇到这样的问题，某单位需完成n项任务，恰好有n个人可承担这些任务。由于每人的专长不同，各人完成任务不同(或所费时间)，效率也不同。于是产生应指派哪个人去完成哪项任务，使完成n项任务的总效率最高(或所需总时间最小)。这类问题称为指派问题或分派问题。指派问题也是0-1规划，线性规划用到的是官网scipy.optimize库函数。示例： cost matr...

anyi6536
2018-07-10 09:52:00

 1289

#java #python
01-为什么要学爬虫-python小白爬虫入门教程

学习目的以及需求需求来自于：抓取的某个网站或者某个应用的内容，提取有用的价值实现手段模拟用户在浏览器或者应用(app)上的操作，实现自动化的程序爬虫应用场景（利用爬虫能做什么？）大家最熟悉的应用场景抢票神器（360抢票器）投票神器（微信朋友圈投票）企业应用场景咨询报告：拉勾网招聘职位数据分析报告2019年中国外卖O2O行业发展报告2019年中国在线出境游市场研究报告..

曾亲桂林
2020-09-18 22:17:52

 1.5w

 52

#python
掌握嵌入式编程：构建智能设备的第一步

随着智能设备的普及，嵌入式编程成为了现代工程师和开发者必须掌握的重要技能。无论是智能家居、工业自动化还是医疗设备，嵌入式系统的应用无处不在。本文将探讨嵌入式编程的基础知识、学习路径、常用工具，以及在实际项目中的应用实例，以帮助读者快速掌握这一领域的核心技能。

jamison_1
2024-10-27 11:13:25

 1323

 12

#python #c++#嵌入式硬件
5分钟让你实现一个Python+Selenium的自动化测试框架（超详细~）

Selenium是一个基于浏览器的自动化测试工具，它提供了一种跨平台、跨浏览器的端到端的web自动化解决方案。Selenium主要包括三部分：Selenium IDE、Selenium WebDriver 和Selenium Grid。Selenium IDE：Firefox的一个扩展，它可以进行录制回放，并把录制的操作以多种语言（例如java、python等）的形式导出成测试用例。Seleniu

测试大圣
2023-09-09 14:16:53

 480

#python #测试工具 #面试 +2
Python接口自动化测试 ---Allure报告使用详解

这一节主要是记录的内容以及用法，怎么让他生成一个完整的想要的报告。allure生成的报告和其他五花八门的报告对比了一下，它的可读性是最好、最直观的。这不仅仅是我想要的效果，也是很多小伙伴想要的结果，毕竟这是给领导看，而且也算是自己老大成果的汇总。关于怎么安装的，自行搜索。

心软小念
2024-11-15 21:11:01

 1181

 19

#python #开发语言
Java后端开发实践-项目模板

本文来源：http://r6d.cn/Jz79整理出一套公共性的项目模板，旨在尽量多地包含日常开发所需，减少开发者的重复性工作以及提供一些最佳实践。1. 从写好README开始一个好的R...

Java笔记虾
2020-11-29 12:45:00

 2012

 2

#java #大数据 #编程语言 +2
零基础如何学习自动化测试

今天我就在这里讲下如何学习自动化

 程序员阿沐
2020-09-04 17:23:11

 4471

 5

#python #编程语言
新闻类爬虫库：Newspaper

newspaper库是一个主要用来提取新闻内容及分析的Python爬虫框架。此库适合抓取新闻网页。操作简单易学，即使对完全没了解过爬虫的初学者也非常的友好，简单学习就能轻易上手，除此之外，使用过程你不需要考虑HTTP Header、IP代理，也不需要考虑网页解析，网页源代码架构等问题。我们以https://www.wired.com/为例，进行演示。获取新闻import new...

软件质量保障
2021-02-12 15:06:00

 695

#爬虫 #python #开发语言
python爬虫-Xpath的使用

选取id属性为"idname"的所有div节点。

浪漫予月亮
2024-03-18 17:37:21

 716

 9

#python #爬虫 #前端
大致总结从事 Python 后端开发工程师学习路线、学习重点和学习资源

大致总结我从事 Python 后端开发工程师学习路线、学习重点和学习资源

 weixin_48232453
2024-07-09 10:03:51

 5319

 30

#python #学习 #开发语言
需求工程python爬虫时遇到的一系列问题及解决

今天完成了python爬虫作业，但并不是一帆风顺，在写的过程中还是遇到了很多问题：#基本问题关于包的引入，python的确是个非常灵活的语言，主要体现在他强大的包上，要实现某个功能，基本上调用几个包就能实现一些用传统语言编写很麻烦的功能，非常方便。关于python的编码，我用的是pycharm，感觉编码方式的调整很奇怪，我用utf-8竟然识别不了中文，希望大佬指点，个人也没去深究，因为已经有了一些

 望年阁
2021-10-29 13:11:44

 481

 1

#python #爬虫 #pycharm
【机器学习】采集数据、特征工程、建立模型、应用四个阶段的详解（图文解释超详细）

【机器学习】采集数据、特征工程、建立模型、应用四个阶段的详解（图文解释超详细）

showswoller
2022-12-15 21:20:46

 5663

 15

#人工智能 #python #聚类 +1
【Python网络爬虫笔记】6- 网络爬虫中的Requests库

是一个用 Python 语言编写的、简洁且功能强大的 HTTP 库。它允许开发者方便地发送各种 HTTP 请求，如 GET、POST、PUT、DELETE 等，并且可以轻松地处理请求的响应。这个库在 Python 生态系统中被广泛使用，无论是简单的网页数据获取，还是复杂的网络服务交互场景都能发挥作用。

zi__you
2024-11-30 20:04:57

 1126

 12

#python #爬虫