为了治一治社区里那些引战的串子，我搞了个B站评论采集工具

asoul吧

tid:108641106972026/07/13 10:42:39

1539487 21 538 0

楼主：甘雨露翛然入形帕鲁最后回复：业障除

2026/07/13 19:16:40

1楼

pid:1537170769562026/07/13 10:42:39

甘雨露翛然

入形帕鲁

兄弟们，我是鸣潮玩家，最近社区里串子越来越多，带节奏的、反串的、滑坡的，看得人血压高

。忍不了，我就想能不能搞点数据自己分析一下，看看哪些账号、哪些言论是惯犯，顺便也帮同好整理一些评论素材，正好暑假我也有空就开始瞎捣鼓。
然后我就用AI（没错，大部分代码都是AI生成的，我就是个缝合怪）搓了一个叫BiliSpider的小工具，主要功能就是爬B站评论，支持按UP主批量拉，还能一级二级评论都存下来，本地SQLite，自带去重。
这是gui

本来只是自己用，后来想着大家一起玩更效率，就加了一套JSONL数据协作流程——有人爬过的数据导出来，别人导进去就能合并，不用重复爬。具体怎么操作我就不贴了，反正命令什么的都写在了项目README里，自己去看就行。
项目地址丢这儿：网页链接
我就盯着暗区里的UP主爬，这是爬出来的数据库转明文后的.jsonl示例（这玩意现在十几万条评论就4Mb了，估计之后会变得很大）

工具目前支持扫码登录、查用户视频、爬评论、导入导出、数据校验、简单GUI这些，适合做课程作业、数据分析，或者像我一样想揪串子留档的。
但是！我现在有个很慌的问题：我完全不知道这个工具算不算违反B站协议，毕竟爬虫这东西灰色地带，我也没深入研究过，能做到这个地步完全就是站在前人和ai的肩膀上。虽然代码里加了延时和随机抖动，但万一被阿姨盯上，我自己用用倒还好，如果推广出来大家用，会不会害了别人？所以各位老哥用之前自己掂量，最好看看B站用户协议，如果觉得有问题就千万别用，我也只是写着玩，真不想惹麻烦。
另外再次强调：代码大部分是AI写的，我只是把各段拼起来调了调，你们别指望我技术多牛，有问题欢迎提issue，但别喷我，我也在学。
最后，频率千万别太高，我试过1.5秒+1秒抖动感觉还稳，我已经爬一夜了，没事，但别作死。再往上加到时候你号被封了别来找我

。仅供个人学习和研究用，别拿去搞商业或者攻击平台，咱就图个乐。
有愿意一起攒数据集，或者想帮忙看看协议问题的，欢迎来GitHub聊聊，PR、issue都行。如果这玩意儿真有问题，我随时删库跑路
溜了溜了。

4楼3条

pid:1537170969172026/07/13 10:49:09

甘雨露翛然

入形帕鲁

终于蓝了
项目地址：

网页链接

5楼

pid:1537171159722026/07/13 10:55:22

讯号x

6楼

pid:1537171167142026/07/13 10:55:36

Mant0ka

终极大贝蛋

帮顶

7楼

pid:1537171266962026/07/13 10:58:52

小红点之2

8楼

pid:1537171311852026/07/13 11:00:20

gfujhk7

认真绯雪

11楼

pid:1537171415652026/07/13 11:03:45

幻响

12楼

pid:1537171422802026/07/13 11:04:00

galgame高手L

shamabuoke

我超，nb

13楼

pid:1537171501052026/07/13 11:06:37

七牧渔舟

小小渔舟

小红点

14楼

pid:1537171544322026/07/13 11:08:04

ELAINA_1_

ElaiNA

15楼

pid:1537171544382026/07/13 11:08:04

MY_GO

我去，真牛逼

16楼

pid:1537171614122026/07/13 11:10:22

Life丶凌云

女漂毒唯

顶顶顶

17楼

pid:1537171615862026/07/13 11:10:25

噼噼啪啪323

索拉里斯✨救济猎人

mua一个

18楼

pid:1537171634292026/07/13 11:11:01

冬槿

优质kg，比吧里只会复制粘贴的ak87强多了

19楼

pid:1537171943432026/07/13 11:21:01

铁血贝兵717

20楼1条

pid:1537172018672026/07/13 11:23:25

海虹苗

怎么爬的

甘雨露翛然入形帕鲁
spid:1537172067792026/07/13 11:25:00
伪装呗，将机器的请求伪装成人的请求完成数据采集

21楼

pid:1537172091502026/07/13 11:25:47

The語And夢

DDD

22楼

pid:1537172229322026/07/13 11:30:11

Rinko🍺

23楼

pid:1537172374522026/07/13 11:34:52

sb百度jb夸克

！！！536

支持群友

捏

24楼

pid:1537172444032026/07/13 11:37:10

奥特爆炸

初音未来RMB

nb比那些只会骗别人小红点的a87好太多了

25楼

pid:1537172486432026/07/13 11:38:38

焱留痕

風靈鈺綉🍁

给你优质小红点

26楼

pid:1537172553512026/07/13 11:40:56

雪绪の12月

A吧正资产

27楼

pid:1537172667582026/07/13 11:44:53

life2333333sb

千咲爱池繁

28楼

pid:1537172760982026/07/13 11:48:10

三十年份的咸鱼

定

29楼

pid:1537172795852026/07/13 11:49:24

jojop66

jojop

我草，nb，虽然我看不懂

30楼

pid:1537172850592026/07/13 11:51:18

旧世之约

且风吟

牛逼

31楼

pid:1537173441072026/07/13 12:12:05

奶由软糖布丁

奶由速冻仔

伊冯那边来的，1秒1个基本是安全的，爬一晚上没问题就是没问题

32楼

pid:1537173568022026/07/13 12:16:38

浮生梦千秋

桓惠0I7

au做人真可以

33楼

pid:1537173644652026/07/13 12:19:25

Dzcaqcz

34楼

pid:1537173679572026/07/13 12:20:39

泠风逆起

望公期

有点太nbl哥们，感觉和你们呆一块显得我很废物

35楼

pid:1537173745522026/07/13 12:22:53

木里木里111

牛逼

36楼

pid:1537173907082026/07/13 12:28:25

贴吧用户_J1aVMPM

可以的

37楼2条

pid:1537173978822026/07/13 12:30:49

在下49

贴吧用户_GGJ13VR

请问这个怎么学，我比较想学习技术，大佬有学习路径吗

甘雨露翛然入形帕鲁
spid:1537174018992026/07/13 12:32:12
我和AI学的

在下49 贴吧用户_GGJ13VR
spid:1537174048622026/07/13 12:33:15
回复
入形帕鲁
:请问什么ai
，我是真心想学，主要是不知道和ai怎么对话，流程是啥

38楼

pid:1537173988672026/07/13 12:31:10

我是氼8丷

芙宁娜·德·艾吧

啵阿

39楼

pid:1537174232592026/07/13 12:39:39

polaris_sk

小红点

40楼

pid:1537174236152026/07/13 12:39:47

吳澤濤TAo

小小泽～

41楼

pid:1537174257402026/07/13 12:40:31

转角遇到疯乞丐

看不懂，给你小红点

42楼

pid:1537174264432026/07/13 12:40:45

死灵天神

连研发科技都学会了吗kg宝宝

43楼

pid:1537174273062026/07/13 12:41:02

弓箭手准备犯箭

满星ლ

好厚米牛逼，你是这个

44楼

pid:1537174280262026/07/13 12:41:16

yaruilinlang

南巷离殇

帮顶

45楼

pid:1537174419872026/07/13 12:46:14

秧秧今天写什么

46楼

pid:1537174456332026/07/13 12:47:31

舞月三霜

坐看烟云◎

？！强强！？高技术力作

47楼

pid:1537174473342026/07/13 12:48:06

信教吗？

48楼

pid:1537174519152026/07/13 12:49:44

盯盯呤呤

盯着你这玩意

49楼5条

pid:1537174545542026/07/13 12:50:41

盯盯呤呤

盯着你这玩意

可以去三度吧和爆吧也宣传一下

甘雨露翛然入形帕鲁
spid:1537174580452026/07/13 12:51:56
是吗，我没怎么用过贴吧，我把帖子也发到那边

贴吧用户_5E2CtXV
spid:1537174823342026/07/13 13:00:49
回复
入形帕鲁
:那边是暗区别搞

甘雨露翛然入形帕鲁
spid:1537174853212026/07/13 13:01:48
回复
贴吧用户_5E2CtXV
:晚了，怎么办

WNP
spid:1537174910492026/07/13 13:03:48
回复
入形帕鲁
:没事儿，鸣的暗区是我见过最弱的

盯盯呤呤盯着你这玩意
spid:1537175093872026/07/13 13:10:26
回复
入形帕鲁
:也不用太担心，三度那边是护鸣的，主要就是骂和挂带节奏的，爆吧大部分时间都是在正常发帖，只有外部节奏太大了才会骂那些带节奏的

50楼

pid:1537174577612026/07/13 12:51:50

要叫我隐官大人

地狱王子豪

51楼

pid:1537174579572026/07/13 12:51:55

kjdguv

别被人盯上了

52楼

pid:1537174620882026/07/13 12:53:24

飘血红芒

幻想乡的剑仙▫

a吧正资产

53楼

pid:1537174730202026/07/13 12:57:22

8ge233

帮🔝

54楼

pid:1537174767712026/07/13 12:58:48

旅月昼

55楼

pid:1537174808242026/07/13 13:00:16

贴吧用户_5E2CtXV

别被人盯上了，注意一下吧

56楼

pid:1537174884072026/07/13 13:02:52

yoo_SAkura

秋焙半盏

伟大

57楼

pid:1537175112102026/07/13 13:11:07

秋日限定9

viper1236

nb，先mark

58楼1条

pid:1537175135132026/07/13 13:11:57

time一碗泡面

时间差不多咯。。

做工具不是这样的，你应该先攻击隔壁社区用机器人搞黑产然后去工信部举报，然后再发帖说自己打算搞个工具维护社区但需要吧友赞助买token

甘雨露翛然入形帕鲁
spid:1537175185822026/07/13 13:13:48
学到了（😘） [图片]

59楼

pid:1537175164242026/07/13 13:13:02

S·A·Rㄧ軍軍

蘑菇菌º

太强了，给你小红点

60楼

pid:1537175189882026/07/13 13:13:57

kjhgubv

我去

61楼

pid:1537175228612026/07/13 13:15:25

day寄寄子

高木可爱捏😋

62楼2条

pid:1537175261322026/07/13 13:16:41

愿以一生伴xy

樋口円香单推人

好厚米，搬帖去哔站，让战狂们看到

甘雨露翛然入形帕鲁
spid:1537175307612026/07/13 13:18:26
这玩意毕竟是爬的B站，不敢在那边发

愿以一生伴xy 樋口円香单推人
spid:1537175699552026/07/13 13:32:40
回复
入形帕鲁
:嗷，也对，我欠考虑了

63楼

pid:1537175341172026/07/13 13:19:43

枝江唯一的区

64楼

pid:1537175414602026/07/13 13:22:22

xiazai专用小号

冬熊夏猫

65楼

pid:1537175458122026/07/13 13:23:59

burntfish

萌萌哒鱼鱼🎃

66楼

pid:1537175463542026/07/13 13:24:12

MMD小怪兽岁月

MMD小怪兽

动手党nb

67楼

pid:1537175471832026/07/13 13:24:29

deusmachina

万花筒轮舞曲

68楼

pid:1537175518352026/07/13 13:26:11

丨流光灬

au太厉害了

69楼

pid:1537175579632026/07/13 13:28:26

EneikenNoroshi

向晚大魔王

啵阿

70楼

pid:1537175591662026/07/13 13:28:51

771278593

电学咖º

学到真东西了

71楼

pid:1537175644262026/07/13 13:30:42

sdsdaxz

能动手尽量别叭叭

牛批

72楼

pid:1537175645302026/07/13 13:30:45

冥途のナミダ

正资产大佬

73楼

pid:1537175687262026/07/13 13:32:13

天海一线S

牛🐮

74楼

pid:1537175714032026/07/13 13:33:11

剑鸻2

贴吧用户_QKJ5bMW

啵阿

75楼

pid:1537175785012026/07/13 13:35:38

無婲

76楼

pid:1537175814442026/07/13 13:36:43

大爱合法萝莉

嘉然爱吃饭

77楼2条

pid:1537175820252026/07/13 13:36:55

下的恶

这周日达妮娅

好厚米，链接在哪

甘雨露翛然入形帕鲁
spid:1537175876842026/07/13 13:38:57
在4楼，刚开始一直不蓝

下的恶这周日达妮娅
spid:1537175895682026/07/13 13:39:38
回复
入形帕鲁
:看到了

78楼

pid:1537175847032026/07/13 13:37:53

Kuwakasa

协奏曲二号机

我去牛皮

79楼

pid:1537176004192026/07/13 13:43:39

奥林比蕥

奥林比雅

顶！A8正资产，所以这个应该叫甚么，A搜？

80楼

pid:1537176043812026/07/13 13:45:07

千古风S

给你优质小红点

81楼

pid:1537176109662026/07/13 13:47:25

若问人间借白首

相思绕

正资产 kg！

82楼

pid:1537176196242026/07/13 13:50:26

江东小坝王

83楼

pid:1537176242222026/07/13 13:52:03

SVSYSVSY

正资产大佬

84楼

pid:1537176331652026/07/13 13:55:16

wyi196

w196

85楼

pid:1537176443632026/07/13 13:59:18

永夜中的守望者

ლ哔哩吧啦

86楼

pid:1537176519652026/07/13 14:02:01

Riven丶18

隐墨痕

牛逼兄弟

87楼

pid:1537176640892026/07/13 14:06:17

山中迷了路

柒壹安千

88楼

pid:1537176717012026/07/13 14:09:06

时隙蚍蜉

牛批

89楼1条

pid:1537176764052026/07/13 14:10:48

vantiyglory

ufgbcbg

别让也够发现了鸣潮社区被寄生的相当严重

甘雨露翛然入形帕鲁
spid:1537176800642026/07/13 14:12:06
这个谁都能用，我开源本来就是为了这个，哪家社区都能拿来抓串子