Selenium 爬网页的问题, css selector

2020-08-11 11:38:17 +08:00
 j0shfan
大佬们,我想爬个网页练练手,现在碰到问题了,目标无法被 CSS 选择器选中,麻烦看下问题出在哪里
网页是这样的
<ul>
<type=1><start=1>
<li><a href="Papers/XXX.pdf">Preface</a></li>
<li><a href="Papers/XXX.pdf">Chapter 1</a></li>

使用 find_element_by_css_selector 可以选中到 ul 这里
但是再往下 type=1 start=1 怎样都无法选中( ul > type=1 > start=1 )
想问下问题出在哪里
1749 次点击
所在节点    Python
6 条回复
yejianmail
2020-08-11 13:15:38 +08:00
不行就试试 xpath 选择器吧
jeeyong
2020-08-11 13:22:23 +08:00
type=1 这个不是元素就是个空标签 属性是 type 值=1
你非得选这个
试试 find
j0shfan
2020-08-11 13:35:16 +08:00
@yejianmail 一样选不中,捂脸
j0shfan
2020-08-11 14:00:44 +08:00
@jeeyong 实际我想批量选的是 a href 后面那个文件的连接。
请问 find 是个什么概念,是 find_element(s)吗
tikazyq
2020-08-11 14:03:43 +08:00
用 puppeteer,直接 js 操作,比 selenium 简单很多
jeeyong
2020-08-11 21:55:50 +08:00
不是...之前回复的时候再打 pubg...
你这<type=1>是什么标签啊?
没有这种标签啊...这个根本写错了吧..
还是你爬取的场景遇到这种情况了?

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/697312

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX