爱意满满的作品展示区。
jiezhi

将某美剧网站所有下载链接保存下来了,需要自取

  •  1
     
  •   jiezhi ·
    Jiezhi · May 10, 2016 · 6589 views
    This topic created in 3830 days ago, the information mentioned may be changed or developed.

    最近在追《疑犯追踪》,发现在美剧网站上一个一个复制链接下载到网盘很是繁琐,索性写了个脚本直接将下载链接以 csv 格式保存下来以便批量下载。

    既然都动手了,那就干脆再将网站上所有美剧的下载链接爬了下来以备不时之需,大概 380 个页面,当然这些只适合追老剧。

    如果有需要可以直接下载我抓下来的:(点击去下载)

    脚本也放Github了

    16 replies  •  2016-05-11 10:30:55 +08:00
    Hansee
    Hansee
    May 10, 2016 via iPhone
    1
    Tks!
    slixurd
    slixurd
    May 10, 2016
    2
    我都是直接写 js ,然后扔到控制台跑一下
    不过如果有好几季就得手动跑好几次
    copy($($("body").find("a")).map(function(){if(/magnet/.test($(this).attr("href")))return ($(this).attr("href"))}).get().join("\n"))
    jiezhi
    jiezhi
    OP
    May 10, 2016
    3
    @slixurd 原理都一样啦,哪怕在网页源码里直接用正则也可以,但每次还得去手写一遍,干脆直接都抓下来再说了(:
    realpg
    realpg
    May 10, 2016
    4
    为啥我看 POI 之前你不搞这个……
    strwei
    strwei
    May 10, 2016
    5
    右键,本页所有磁力链接用迅雷下载
    jiezhi
    jiezhi
    OP
    May 10, 2016
    6
    @strwei 我是用妖妖舞网盘看的
    jiezhi
    jiezhi
    OP
    May 10, 2016
    7
    @realpg 你要看其他的美剧还有机会的
    mahone3297
    mahone3297
    May 10, 2016
    8
    这么说,我之前也写了个。。。这个站是还可以
    https://github.com/mahone3297/hades/tree/master/src/python/scrapy/cn163
    mahone3297
    mahone3297
    May 10, 2016
    9
    lz ,你的代码只是一个页面,要爬所有数据,还需要再写个脚本
    jiezhi
    jiezhi
    OP
    May 10, 2016
    10
    @mahone3297 我的那个页面应该是网站可追溯的第一篇帖子了,所以抓取完后再递归抓取其下一页即可,该网站没有死链的话。
    4679kun
    4679kun
    May 10, 2016 via Android
    11
    一行 shell 命令

    curl -s "http://cn163.net/archives/58/" | sed 's/ /\n/g' | sed 's/>/\n/g' | sed 's/</\n/g' | grep "ed2k" | sed 's/\"//g' | sed 's/href=//g' | sed 's/data-ke-src=//g' | uniq | grep "HDrip"
    jiezhi
    jiezhi
    OP
    May 10, 2016 via iPhone
    12
    @4679kun 你这还得加上对迅雷和磁力链接的支持😊
    4679kun
    4679kun
    May 10, 2016 via Android
    13
    @jiezhi 把命令中的 ed2k 替换成 magnet 不就行了
    gamecreating
    gamecreating
    May 10, 2016
    14
    CN163 ...这博客不错
    ziyuan
    ziyuan
    May 10, 2016
    15
    CN163 ...这博客不错+1
    MozzieCN
    MozzieCN
    May 11, 2016
    16
    CN163 ...这博客不错+1
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   5523 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 50ms · UTC 02:59 · PVG 10:59 · LAX 18:59 · JFK 21:59
    ♥ Do have faith in what you're doing.