V2EX › 蜘蛛
 |
求大佬解决一下一个问题 PHP • SEoSean • 2024 年 11 月 27 日 • 最后回复来自 a570295535 | 5 |
 |
家里进了一只超级大蜘蛛，怎么办？ 问与答 • tool2dx • 2024 年 8 月 20 日 • 最后回复来自 baizhu | 106 |
 |
求助：怎么让必应恢复收录
1 站长 • Deshun • 2024 年 11 月 14 日 • 最后回复来自 raywu
|
12 |
 |
这里有百度的人吗，为什么百度蜘蛛不按照他的规定来经常用一些没有反向解析的 ip 爬我的网站，并且收录我们的拦截页面
1 问与答 • wushenlun • 2023 年 8 月 31 日 • 最后回复来自 AoEiuV020JP
|
1 |
 |
用 claude 做一下小学三年级奥数题 OpenAI • su100 • 2023 年 8 月 1 日 • 最后回复来自 SchneeHertz | 10 |
 |
帮助 ChatGPT 开发了一个手机 web 版的蜘蛛纸牌🕷️
1 分享创造 • wovfeng • 2023 年 5 月 12 日 • 最后回复来自 wovfeng
|
9 |
 |
113.24.224.*和 113.24.225.*到底是不是百度的蜘蛛？ 问与答 • herozzm • 2023 年 4 月 30 日 • 最后回复来自 kdwnil | 5 |
 |
想养蜘蛛，有养过的大佬吗？ 宠物 • shineonme • 2022 年 10 月 19 日 • 最后回复来自 Lotii | 19 |
 |
有偿找人写个简单的爬虫 Python • ggmm123zbc • 2022 年 9 月 6 日 • 最后回复来自 runningman | 5 |
 |
关于搜索引擎蜘蛛问题 问与答 • Tianyan • 2022 年 5 月 14 日 • 最后回复来自 billlee | 7 |
 |
蜘蛛侠观感非常一般 电影 • ltltfuture • 2022 年 1 月 5 日 • 最后回复来自 docage | 37 |
 |
体验了开源的离线语音识别模型 wenetspeech，准确度很高。分享一些使用心得。
1 分享发现 • jifengg • 2022 年 1 月 19 日 • 最后回复来自 canwushuang
|
9 |
 |
蜘蛛纸牌 mac 端
1 分享创造 • theonebing • 2023 年 11 月 13 日 • 最后回复来自 GabrielleBellamy
|
10 |
 |
大佬们，怎么搞个设备当 IP 地址池和小灰机呀？ 问与答 • dtgxx • 2020 年 11 月 21 日 |
 |
为了给公司的产品做 SEO，自己写了个网站蜘蛛日志分析工具 分享创造 • kwklover • 2020 年 11 月 8 日 • 最后回复来自 yanzhiling2001 | 4 |
 |
为什么老是有一些百度爬虫的 ip 访问公司的网站，但是没有 referer 请求头 全球工单系统 • ShutTheFu2kUP • 2020 年 10 月 16 日 • 最后回复来自 ShutTheFu2kUP | 20 |
 |
SEO 的角度来说，是不是只让蜘蛛爬 html 就行了，没必要让其爬 css 和 js 文件？ 问与答 • ioioioioioioi • 2020 年 6 月 1 日 • 最后回复来自 OhYee | 4 |
 |
大蜘蛛杀毒软件，软购商城 1 年最终仅需 28 元！ 推广 • mkAPSGO • 2020 年 5 月 25 日 • 最后回复来自 mmdsun | 16 |
 |
为什么总有人扫我的网站，难道我动了谁的奶酪？ 程序员 • tianshiyeben • 2020 年 5 月 20 日 • 最后回复来自 tianshiyeben | 33 |
 |
V 站有昆虫专家吗，家里突然来了个蜘蛛是什么种类帮忙看看 问与答 • klh • 2020 年 5 月 15 日 • 最后回复来自 firesd | 28 |
 |
宝塔和 cnzz 的统计哪个更真实？ 问与答 • piqq • 2020 年 4 月 29 日 • 最后回复来自 ragnaroks | 8 |
 |
蜘蛛是如何发现网络上的网站/域名的？ 站长 • yitd • 2020 年 4 月 7 日 • 最后回复来自 dream7758522 | 12 |
 |
不懂就问！搜索引擎 cdn 回源可以得到源站真实 ip 吗？ CDN • lp7631010 • 2019 年 12 月 12 日 • 最后回复来自 lp7631010 | 3 |
 |
家里发现蜘蛛，求识别（有蜘蛛图，慎点）
3 问与答 • rock_cloud • 2019 年 10 月 24 日 • 最后回复来自 wolf1981
|
29 |
 |
Flask-Babel 让网站多语言之后,SEO 咋办? Python • luckyc • 2019 年 7 月 22 日 • 最后回复来自 FantasyPupil | 6 |
 |
有 UP 的没有？ B 站观测站了解一下
1 分享创造 • zhshch • 2019 年 10 月 9 日 • 最后回复来自 waibunleung
|
14 |
 |
各位站长大佬，有遇过“百度蜘蛛”的“攻击“么？ 问与答 • MODA1995 • 2019 年 4 月 14 日 • 最后回复来自 billytom | 13 |
 |
求助，如何判断用户是自己输入网址访问还是通过搜索引擎搜索结果跳转进来的？ 问与答 • botian • 2019 年 3 月 23 日 • 最后回复来自 misaka19000 | 7 |
 |
有没有什么办法可以控制蜘蛛或同一个 IP 链接网址的时间？ CentOS • MrMike • 2019 年 3 月 20 日 • 最后回复来自 MrMike | 1 |
|
关站三天，撸了一个 reddit（雾
1 分享创造 • zhshch • 2019 年 2 月 19 日 • 最后回复来自 hv3s1
|
20 |
 |
网站被墙或者域名 dns 被污染是靠的什么呢， https 的网站，屏蔽全部搜索引擎蜘蛛有点作用吗 问与答 • ybyqiji • 2019 年 2 月 3 日 • 最后回复来自 frylkrttj | 17 |
 |
百度蜘蛛诊断工具只抓取静态内容？ 搜索引擎优化 • meso5533 • 2019 年 5 月 24 日 • 最后回复来自 opengps | 3 |
 |
又来个爬虫小偏方:修改 referer 绕开访问控制 Python • yuanrenxue • 2018 年 12 月 21 日 • 最后回复来自 tumbzzc | 38 |
 |
单页应用 SPA 做 SEO 优化的一种新奇方案 分享创造 • litpen • 2018 年 12 月 5 日 • 最后回复来自 kisnows | 12 |
 |
急！这是什么蜘蛛？是否有毒？这个房间会不会还有它的后代？ 问与答 • szz • 2018 年 10 月 29 日 • 最后回复来自 flowfire | 8 |
 |
域名被 DNS 污染 DNS • cha222554 • 2019 年 10 月 7 日 • 最后回复来自 ccpzqq | 6 |
|
蜘蛛代理 api|高纯度{高可用}代理服务器列表 Python • zhshch • 2018 年 10 月 15 日 • 最后回复来自 wxx123 | 9 |
 |
有 20 几个网站日志，每天要查询百度蜘蛛数量，怎么能够快速的一次查出蜘蛛数量 问与答 • nepiedg • 2018 年 9 月 30 日 • 最后回复来自 nepiedg | 3 |
 |
fail2ban 可以防采集么 问与答 • glouhao • 2018 年 8 月 30 日 |
 |
[SEO] 求大神。我网站的源码看着像是乱码一样。会影响收录吗？ 问与答 • LanAiFaZuo • 2018 年 6 月 15 日 • 最后回复来自 xschaoya | 61 |
 |
百度蜘蛛日志分析工具-处理黑站一句话木马
1 分享创造 • apiziliao • 2020 年 10 月 30 日 • 最后回复来自 kwklover
|
5 |
 |
在纷杂的世界里，你是否在寻找一种高效获取优质资讯的方式？ 程序员 • Jaeger • 2018 年 3 月 19 日 • 最后回复来自 so1n | 7 |
 |
为啥搜狗的蜘蛛那么变态？ 服务器 • acoldfox • 2018 年 2 月 13 日 • 最后回复来自 acoldfox | 4 |
|
小白用云锁防采集发现的一些疑惑 分享发现 • ybyqiji • 2017 年 12 月 9 日 • 最后回复来自 ybyqiji | 3 |
 |
打算把 360 换掉，求款杀软或者安全软件搭配大蜘蛛 问与答 • chocolatesir • 2017 年 10 月 25 日 • 最后回复来自 ctsed | 74 |
 |
京东云屏蔽了神马搜索蜘蛛，阿里妈妈的验证请求？ 站长 • koodai • 2017 年 11 月 21 日 • 最后回复来自 zhaixiaohu | 3 |
 |
请教养猫的 v 友家里纱窗是怎么解决的 问与答 • yangxuan8282 • 2017 年 7 月 15 日 • 最后回复来自 suduo1987 | 12 |
 |
大蜘蛛 8 块一年升级版和直接买的区别是？ 优惠信息 • BlackBerry • 2017 年 5 月 16 日 • 最后回复来自 xrui | 6 |
 |
突然想到一种简单的反爬虫方法，大家觉得可行性如何？
1 程序员 • alwayshere • 2020 年 3 月 10 日 • 最后回复来自 pyengwoei
|
58 |
 |
总能看到一些 webshell，蜘蛛， DNS 劫持，可以从哪里开始学起呢？ 问与答 • bluecrown • 2017 年 3 月 16 日 • 最后回复来自 bk201 | 14 |
 |
未公开的域名被蜘蛛爬，到底是哪一环出了问题？ 问与答 • CloudnuY • 2016 年 12 月 6 日 • 最后回复来自 CloudnuY | 10 |
 |
蜘蛛纸牌 for iOS iOS • xycool • 2016 年 11 月 25 日 • 最后回复来自 aborigine | 7 |
|
大家知道怎么鉴别 Internet Archive 的蜘蛛 IP 吗？ 需要把它们的 IP 加入白名单。 问与答 • ioioioioioioi • 2016 年 11 月 14 日 • 最后回复来自 vibbow | 1 |
|
请问，这时百度蜘蛛吗： http://whatismyipaddress.com/ip/63.243.252.188 问与答 • ioioioioioioi • 2016 年 11 月 9 日 • 最后回复来自 fengxing | 4 |
 |
这是神马的蜘蛛吗： http://whatismyipaddress.com/ip/42.156.137.55 问与答 • aaa0009 • 2016 年 10 月 12 日 |
|
大家是如何验证百度蜘蛛是百度蜘蛛的，而不是冒充的？ 问与答 • aaa0009 • 2016 年 8 月 11 日 • 最后回复来自 julyclyde | 15 |
|
百度蜘蛛域名为何不给反向验证？ 问与答 • aaa0009 • 2016 年 8 月 10 日 |
|
哪里有所有搜索引擎蜘蛛的 hostname 问与答 • aaa0009 • 2016 年 8 月 9 日 |
|
假设我自己有个 ip，是否可以通过某种手段，让 php gethostbyaddr 返回百度蜘蛛域名，比如 baiduspider-180-76-15-153.crawl.baidu.com
1 问与答 • aaa0009 • 2016 年 8 月 10 日 • 最后回复来自 aaa0009
|
8 |
 |
三层交换机设置有单 ip 网速 500KB 的限制，现有一个海蜘蛛软路由，但是海蜘蛛里的单 wan 多 ip 的功能和负载均衡并不能叠加网速，是什么原因？ 问与答 • yinjiayi • 2016 年 6 月 7 日 |
 |
是百度蜘蛛抽风了吗? 求 V 友解答! 搜索引擎优化 • wujunze • 2016 年 3 月 27 日 • 最后回复来自 wujunze | 15 |
 |
能不能只对蜘蛛做 301 跳转？ 然后正常用户访问没有影响 这样会不会传递权重呢？ 站长 • a20840946 • 2016 年 2 月 26 日 • 最后回复来自 lichifeng | 2 |
 |
我买一个 C 的 IP 用来抓取数据。现在一般检索蜘蛛的是只会封单个 IP 把？ 问与答 • xiaoyu9527 • 2015 年 9 月 23 日 • 最后回复来自 ericFork | 2 |
 |
有哪些 VPS 能让你随便搭蜘蛛/爬虫 做抓取的？ VPS • DiffView • 2015 年 9 月 16 日 • 最后回复来自 Bryan8 | 11 |
 |
HTTP 转 HTTPS 要注意哪些东西 HTTP • phithon • 2015 年 6 月 1 日 • 最后回复来自 phithon | 14 |
 |
屏蔽 360 蜘蛛的方法 Apache • Hello1995 • 2015 年 5 月 11 日 • 最后回复来自 Hello1995 | 1 |
 |
关于 wordpress 内置的 is_robots()函数 WordPress • GASALA • 2015 年 4 月 20 日 • 最后回复来自 ryd994 | 4 |
 |
有种想搞个软路由来玩玩的想法求推荐一下 可以刷 openwrt 海蜘蛛 等，可玩性比较高的 路由器 • jeromeli • 2015 年 4 月 14 日 |
 |
听说联通网厅 App 被 Google 报警...然后...
2 问与答 • KillAd • 2015 年 3 月 15 日 • 最后回复来自 thidnh
|
15 |
 |
Nginx 针对百度蜘蛛使用 http 问与答 • ii0x208 • 2015 年 2 月 25 日 |
 |
如何屏蔽搜索引擎蜘蛛 问与答 • Gce • 2015 年 1 月 20 日 • 最后回复来自 kimmykuang | 15 |
 |
百度蜘蛛改计算了吗？ 搜索引擎优化 • Ladyson • 2015 年 1 月 16 日 • 最后回复来自 vex911 | 4 |
 |
皮皮书屋 502 了? 问与答 • halfer53 • 2014 年 10 月 27 日 • 最后回复来自 dingyaguang117 | 4 |
 |
应老大@Livid 请求，放出蜘蛛捕食视频 宠物 • sneezry • 2014 年 10 月 27 日 • 最后回复来自 Vicia | 23 |
|
我的宠物蜘蛛成功带上高铁啦！ 宠物 • sneezry • 2014 年 7 月 2 日 • 最后回复来自 airzope | 24 |
 |
昨晚上的梦真是我这辈子最恐怖的体验 梦 • peartail • 2014 年 6 月 30 日 • 最后回复来自 lm902 | 44 |
 |
BudgetVM 有用这家 vps 的么？好像屏蔽了百度蜘蛛 问与答 • simapple • 2014 年 5 月 27 日 • 最后回复来自 lazycat | 8 |
 |
Nginx.conf屏蔽搜索引擎蜘蛛,一些蜘蛛根本不回来流量但是抓取的太多了 浪费网站流量，想只让百度和谷歌的蜘蛛访问，别的蜘蛛来的话 直接跳转到大网站比如百度。 NGINX • soho176 • 2013 年 5 月 31 日 • 最后回复来自 revlis7 | 4 |
 |
怎么判断是真Google的蜘蛛还是伪造user-agent的蜘蛛。 问与答 • liuxurong • 2013 年 3 月 3 日 • 最后回复来自 liuxurong | 12 |
 |
拉帮结派：网易三区蜘蛛王国的同学请进 World of Warcraft • Mak • 2011 年 4 月 19 日 • 最后回复来自 qiaoka | 21 |
Select Language