爱意满满的作品展示区。
vilicvane

写了个 V2EX 爆贴爬虫,避免错过群体吃瓜事件

  •  1
     
  •   vilicvane ·
    vilicvane · Mar 29, 2022 · 7171 views
    This topic created in 1689 days ago, the information mentioned may be changed or developed.

    订阅地址 https://www.dingshao.cn/share/channel/FzFypN


    爬虫逻辑:

    • 每五分钟检查一次“全部”帖子列表,推送新增评论达到条件的帖子。
    • 爆贴筛选条件:5 分钟 10 个评论,或 10 分钟 15 个评论,或 30 分钟 20 个评论。

    最近几天爬到的爆贴有:

    • [问与答] 外包公司有个职位去香港,值得去吗( 3 月 29 日,今天)
    • [硬件] 游戏本还是 switch ( 3 月 28 日)
    • [职场话题] 奇葩人接受 Offer 后拖了 28 天然后说不来了( 3 月 24 日)

    脚本源码 https://github.com/digshare-scripts/v2ex-trending/blob/main/src/script.ts

    20 replies  •  2022-03-29 20:20:59 +08:00
    Tink
    Tink
    Mar 29, 2022 via Android
    1
    这个时间是根据帖子上面的 x 分钟前吗
    jr55475f112iz2tu
    jr55475f112iz2tu
    Mar 29, 2022
    2
    这和 V2EX 自己的 “今日热议主题” 有什么差别吗...
    vilicvane
    vilicvane
    OP
    Mar 29, 2022
    3
    @Tink 不是,是计算了每段时间的评论变化数量~
    @czfy 一方面是今日热议通常不够热,另一个是没有推送。我是想比如哪天又爆出了一个职场大瓜的时候第一时间知道。
    madlifer
    madlifer
    Mar 29, 2022❤️1
    4
    抓住了老万
    xiaocongcong
    xiaocongcong
    Mar 29, 2022
    5
    V2 上真正有料的瓜活不过 5 分钟的,其他不重要的瓜去看热搜就好啦,根本不会错过。
    NVDA
    NVDA
    Mar 29, 2022 via iPhone
    6
    不如爬爬水深火热
    vilicvane
    vilicvane
    OP
    Mar 29, 2022
    7
    @xiaocongcong 啊,不是有评论不能删帖的吗。
    vilicvane
    vilicvane
    OP
    Mar 29, 2022
    8
    @Mirage09 这是个梗吗?没有理解。
    NVDA
    NVDA
    Mar 29, 2022 via iPhone❤️1
    9
    @vilic
    hhh 不是梗,单纯不理解为什么最近好几个 pandemic 相关的贴子都进了水深火热
    也许管理员不想看到人间疾苦吧
    xiaocongcong
    xiaocongcong
    Mar 29, 2022
    10
    @Mirage09 网控现在不能发关于任何负面的东西,讨论都不行
    licsber
    licsber
    Mar 29, 2022❤️1
    11
    @vilic #8 水深火热是 v2 的隐藏节点
    @Mirage09 #9 很显然 OP 不知道水深火热的意思
    xiaocongcong
    xiaocongcong
    Mar 29, 2022
    12
    @vilic 有幸回过两贴,还是不讨论这些了
    vilicvane
    vilicvane
    OP
    Mar 29, 2022
    14
    @Mirage09 @drush 原来如此,谢谢了,好吧看来我混 V2EX 还是太水了。
    vilicvane
    vilicvane
    OP
    Mar 29, 2022
    15
    @Licsber 是的,见笑了哈哈。
    rain423
    rain423
    Mar 29, 2022❤️1
    16
    有 nga 的爆贴备份吗?
    vilicvane
    vilicvane
    OP
    Mar 29, 2022
    17
    @rain423 有道理,我加个 TODO 。
    PerFectTime
    PerFectTime
    Mar 29, 2022
    18
    然而并不是不能删帖,全凭喜好
    pengtdyd
    pengtdyd
    Mar 29, 2022
    19
    今日热议主题 不是有这个吗,为啥要花时间做无用功
    vilicvane
    vilicvane
    OP
    Mar 29, 2022
    20
    @PerFectTime 🤔
    @pengtdyd 我平时水 V2EX 的时间不多,更多是想有热点的时候推给我。今日热议对我来说太多了,而且不是主动推送的。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2385 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 47ms · UTC 00:20 · PVG 08:20 · LAX 16:20 · JFK 19:20
    ♥ Do have faith in what you're doing.