发现有一个网站一直在爬取l站的帖子

运营反馈
查看原帖
zhaoxuya
zhaoxuya 楼主
#1

闲的没事干让grok查一下我的域名结果给我的其中一个结果正是我在l站发的帖子,但是却是在另一个网站上发现了,然后我就进去看,发现那边一直在同步l站的帖子,包括很多l站专属词“ldc”“佬友”等,并且我那个帖子属于一级贴,普通爬虫应该爬不到的吧


:heart:6:distorted_face:2
jack007jack007
zhong_little严查!
这作者sorry是在学银魂吗
alacrity还有这种的
fantasticjoe有内鬼!
TOPIC OWNER
10楼层
9回复
8用户
zhaoxuya IKUNHOME leeking lezishen abao
IKUNHOME
IKUNHOME
#2

我去,网站发出来看看???有点东西 :distorted_face: :distorted_face: :distorted_face:

leeking
leeking
#3

l站不好爬啊 动不动就验证是不是人类 尝试了抓包 结果什么也干不了

1个回复
zhaoxuya
zhaoxuya 楼主

我有时候刷帖子刷到一半都403让重新过cf验证 :melting_face:

TOPIC OWNER
↓ 跳到帖子
nic
#4

之前就有人提过这个网站了,别理他,也别发出来给他流量

1个回复
zhaoxuya
zhaoxuya 楼主

怪不得去年十月份的帖子在里面都能找到一样的,主要是我感觉他这样爬,对服务器也是一种很大的压力

TOPIC OWNER
↓ 跳到帖子
lezishen
lezishen
#5

@neo 建议升级防止抓包防止爬虫得机制

:laughing:1
zhaoxuya
zhaoxuya 楼主 ↶ @nic
#6

怪不得去年十月份的帖子在里面都能找到一样的,主要是我感觉他这样爬,对服务器也是一种很大的压力

TOPIC OWNER
zhaoxuya
zhaoxuya 楼主 ↶ @leeking
#7

我有时候刷帖子刷到一半都403让重新过cf验证 :melting_face:

TOPIC OWNER
abao
abao
#8

是无等级帖吗?无等级帖就没啥办法了,只能说让它搬,别给它吃黑流量和关注。


真是LV1帖吗?那这个确实得查一查。

I-was-hereLV1帖
TechnologyStar
TechnologyStar
#9

这不是那个啥啥啥啥智库吗,之前一直在爬虫

trader
trader
#10

爬L站的帖子干什么用的?博流量的吗,L2-L3的帖子怎么爬呢