爬取网页时遇到tbody标签怎么办？

原创 已于 2023-11-02 08:55:42 修改 · 2.3k 阅读 · 5
于 2020-04-29 18:34:24 首次发布
本文介绍在网页爬取过程中遇到tbody标签时的处理方法，通过实例演示如何调整XPath表达式，去除tbody标签以成功获取数据，适用于Python爬虫开发者。

爬取网页时遇到tbody标签怎么办？

tbody标签是什么？

tbody标签表示表格主体，用于组合HTML表格的主体内容。通常情况下，该标签与thead和tfoot结合起来使用。其中，thead用于对HTML表格中的表头内容进行分组，而tfoot则用于对HTML表格中的表注内容进行分组。例如：
在这里插入图片描述

在爬取网页时遇到tbody怎么办？

实例说明，在XPATH中包含了tbody标签导致没有返回结果

测试网站是http://www.dsjyj.com.cn/CN/volumn/current.shtml
爬取目标为下图红色圈出部分
在这里插入图片描述
右键选择复制XPath
在这里插入图片描述
/html/body/table/tbody/tr[2]/td/table/tbody/tr/td[2]/table/tbody/tr

标签
#python #xpath
最低0.47元/天 解锁文章
「HTML和CSS入门指南」tbody 标签详解
a451319296的博客
06-05 2380
tbody 标签是一个重要的标签，在 HTML 中用于标识表格的主体部分。使用 tbody 标签可以帮助您提高表格的可读性和理解性。在使用 tbody 标签时，请注意选择正确的属性和方法、提供适当的标签、描述文本和无障碍功能，并避免兼容性问题。
VTK-9.5.0 1D2D3DWidget实现灰度图+深度图+3D点云显示(可轻松集成到自己的项目)
最新发布
Qt历险记，专注Qt技术，三年医疗设备研发经验，1年机器视觉研发经验，半年柔性传感研发经验。
02-05 353
VTK1D2D3DWidget是一个基于Qt和VTK开发的3D点云可视化工具，支持RGB和深度点云数据的显示与处理。主要功能包括点云加载、可视化、保存为PLY格式文件，以及背景颜色、点间隔、坐标轴显示等参数的自定义设置。该工具采用模块化设计，核心组件包括主窗口管理类、VTK渲染组件和自定义鼠标交互样式，依赖Qt5+和VTK9.5.0库实现跨平台支持。项目提供完整的源码和构建指南，适用于点云数据的快速展示与分析。
TBODY的使用方法和意义
weixin_43831584的博客
10-03 5847
TBODY 元素内包含的有效标签有： TD TH TR TBODY 元素会为全部表格自动定义，就算表格没有显式定义 TBODY 元素。 table 对象及其相关的元素有独立的表格对象模型，这与常规对象模型所采用的方法有很大不同。 此元素在 Microsoft? Internet Explorer 3.0 的 HTML 中可用，在 Internet Explorer 4.0 的脚本中可用。 此元素不会被渲染。 此元素需要关闭标签。 tbody定义表格的主体 在table中thead,tfoot以及tbody可
2025全国自然保护区矢量数据shp数据下载
2025全国自然保护区矢量数据shp数据-表格数据下载
表格标签(合并单元格，列表结构标签thead， tbody，有序列表ol，无序列表dl )
qq_45405176的博客
05-24 1756
表格用法： < table >< /table >是用于表格的标签。 < tr >< /tr>标签用于定义表格中的行，必须嵌套在< table >< /table >标签中 < td>< /td>用于定义表格中的单元格，必须嵌套在< tr>< /tr >标签中。 字母td指表格数据（table data），即数据单元格的内容。 < th >< /th >用于定义表
TBODY标签的作用介绍
05-14 4484
第一：tbody是在html中成对出现的标签，即和。它应用到表格，用于整体规划表格的行列属性。应用这个标签的一个优点是，我们只要对tbody标签的属性进行修改，就能对表格的整行单元格的属性进行修改，从而剩去了逐一修改单元格属性的麻烦。 第二：TBODY是指定行作为表格的主体，通常用于分块下载大表格，在表格嵌套多且数据量大时尤其有用。可以控制表格分行下载，从而提高下载速度。（网页的打开是先表格的的内
xpath解析含有tbody标签的数据
西门一刀的博客
06-29 777
xpath解析含有tbody标签的数据
关于python使用xpath爬取网页内容返回值为空列表的解决方法
jiaboboyu的博客
09-16 1562
1、首先看看你的这段代码中是否有 "tbody"存在 ，把"tbody"去掉。
关于python爬虫的几个问题，请知道的讲解一下！！
weixin_41730416的博客
05-30 1678
今天在爬一个iP网站时候遇到了问题 网站链接：https://www.xicidaili.com/nt/ 首先可以确定用requests访问是成功的 这个是遍历table标签版本的代码 结果如下图 以列表形式的返回值，但是在这个列表中第一个元素是一个空列表，请问如何在for循环中设定从第二个元素开始循环，从而跨过这个空列表元素。 这是因为，接下来需要把有内容的列表元素（列表中的...
Python爬虫报错（属性报错）：AttributeError: ‘NoneType‘ object has no attribute ‘children‘
weixin_52916289的博客
01-20 1830
Python爬虫报错（属性错误）：AttributeError: 'NoneType' object has no attribute 'children'，加入erllib3模块，关闭ssl警告。
xpath解析网页中tbody问题
热门推荐
小猪佩奇工作室
07-25 1万+
在爬取网页中表格数据时使用xpath解析会出现的问题
scrapy关于tbody标签的问题
白菜猪肉炖粉条
02-05 3074
今天在爬取网页时，当爬取表格(table) 的内容时，发现用 xpath helper 获取正常，程序却解析不到。 原因是：浏览器会在table标签下添加tbody 在chrome、火狐测试都有这个情况。出现这种原因是因为浏览器会对html文本进行一定的规范化 下图这个是xpath heper 获取的 下图是源码查看到的 对比发现，审查元素中多了tbody标签 解决方法
Xpath关于tbody标签的问题
weixin_42575593的博客
10-16 1721
今天在爬取网页时，当爬取表格(table) 的内容时，发现用 xpath helper 获取正常，程序却解析不到。 原因是：浏览器会在table标签下添加tbody 在chrome、火狐测试都有这个情况。出现这种原因是因为浏览器会对html文本进行一定的规范化 下图这个是xpath heper 获取的 下图是源码查看到的 对比发现，审查元素中多了tbody标签 解决方法：使用...
Scrapy匹配xpath时tbody标签的问题
春华秋实
05-06 3057
问题描述 今天学习Scrapy的使用，在用xpath匹配元素的时候，发现老是出错，后来发现是标签上有文章。 问题分析 我使用Chrome的元素审查和查看网页源代码对网页进行分析，得出xpath，但是Chrome会对网页源码进行加工，在标签中，如果源码中没有写标签，在元素审查和查看网页源代码中还是会将强行添加上。 当然，若源代码中没有，而我们信任Chrome而把它添进xpath的话，是不会匹
为什么用xpath爬取标签是空的_Python爬虫入门 | 4 爬取豆瓣TOP250图书信息
weixin_39940913的博客
12-12 568
先来看看页面长啥样的:https://book.douban.com/top250?start=25我们将要爬取哪些信息：书名、链接、评分、一句话评价……1. 爬取单个信息我们先来尝试爬取书名，利用之前的套路，还是先复制书名的xpath：得到第一本书《追风筝的人》的书名xpath如下：//*[@id="content"]/div/div[1]/div/table[1]/tbody/tr/td[2]...
【Java爬虫】使用Jsoup爬取网页<table>表格的分页信息
小七的博客
09-15 3199
爬取网站：https://flights.ctrip.com/actualtime/arrive-sha.p1/ 爬取上海浦东机场的航班信息 技术：使用Jsoup技术 jsoup 是一款Java 的HTML解析器，可直接解析某个URL地址、HTML文本内容。它提供了一套非常省力的API，可通过DOM，CSS以及类似于jQuery的操作方法来取出和操作数据。参考Jsoup官方文档 Jsoup_Do...
bs4爬取的时候有两个标签相同_利用Python爬取OPGG上英雄联盟英雄胜率及选取率信息！...
weixin_39935388的博客
12-09 200
一、分析网站内容本次爬取网站为opgg，网址为：” http://www.op.gg/champion/statistics ”由网站界面可以看出，右侧有英雄的详细信息，以Garen为例，胜率为53.84%，选取率为16.99%，常用位置为上单现对网页源代码进行分析(右键鼠标在菜单中即可找到查看网页源代码)。通过查找“53.84%”快速定位Garen所在位置由代码可看出，英雄名、胜率及选取率都在t...
【Python技巧】爬虫网站，lxml中的etree不能定位到信息内容，原因是chrome阅览器自动添加tbody标签
weixin_49340599的博客
12-13 1275
当我在爬虫某报刊列表名称的时候发现，lxml中的etree解析response.text，得到的结果是一个空列表，具体问题如下：首先通过chrome定位要爬取列表位置： 根据上图，我们可知，xpath为：根据xpath位置制作python代码： 最终得不到任何结果，返回一个空字符串，反复监察chrome阅览器中定位没有问题，于是我分析获取的html，发现chrome显示的和服务器返回的html是不同的。服务器返回的html中，没有tbody这一类，但咱们用xpath判断位置的时候添加了这一类。 二、原
Python用xpath爬取数据返回空列表解决 python爬虫，关于使用xpath写爬虫获取不到内容， 获取到空列表的解决方案
weixin_45437533的博客
11-26 1万+
可能的情况： 1、url的问题 2、xpath路径问题 3、网页标签class，id属性等一定要注意看后面有没有空格 关于xpath路径问题 之前在做的爬虫都是用的xpath去获取内容，又想偷懒，所以就直接在源码那里直接复制路径， 然后就很容易踩雷了（我算是踩了很多坑了，不知道有没有小伙伴和我一样踩过这样的坑）： 此时可能会得到如下路径： /html/body/div[2]/div[6]/table/tbody/tr[6]/td[1]/a/span 然后跑开始爬虫，结果...
xpath获取标签的属性值_现学活用的XPath爬取豆瓣音乐
weixin_39667509的博客
11-20 500
前两篇主要给大家介绍了的xpath的基础知识，以及的xpath的常用操作，按照计划，今天是的xpath的最后一篇文章，给大家介绍一个用的xpath爬取豆瓣音乐的实战项目。学以致用，方能让我们快速掌握XPath的语法功能。爬取目标本次我们需要爬取豆瓣音乐前250条，打开豆瓣音乐：https ：//http://music.douban.com/top250 。爬取的内容有：音乐标题音乐评分与评价人数...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

ALittleHigh

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值