Home Sign Up Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
sunfishlu
V2EX  ›  程序员

请问各位大佬有没有办法获取搜索引擎收录某网站的所有页面？

  •   
  •   sunfishlu · May 18, 2020 via iPhone · 3159 views
    This topic created in 2371 days ago, the information mentioned may be changed or developed.
  • 请问
  • 收录
  • 大佬
  • 搜索引擎
    8 replies
    mzlogin
    mzlogin
    May 18, 2020 via Android
    1
    你要的是搜索 site:xxxx.com 的效果吗？(逃
    sunfishlu
    sunfishlu
    OP
    May 18, 2020 via iPhone
    2
    @mzlogin 不是，这个搜索有限制，最多显示 100 页。
    soy
    soy
    May 18, 2020 via Android
    3
    入职搜索引擎公司 然后对所有收录的网页数据跑个 MapReduce （逃
    kaiki
    kaiki
    May 18, 2020
    4
    @soy 要不直接入职这个网站的公司吧，这样应该更方便点
    Tianao
    Tianao
    May 18, 2020 via iPhone
    5
    进搜索引擎站长工具 /站长后台。
    Mutoo
    Mutoo
    May 18, 2020
    6
    如果网站有 sitemap.xml 直接遍历即可。
    TimePPT
    TimePPT
    May 18, 2020 via Android
    7
    如果是比较大的站，搜索引擎前台根本不会全放出来。这个跟搜索效率工程实现相关。
    sunfishlu
    sunfishlu
    OP
    May 18, 2020 via iPhone
    8
    @soy 我自己的网站被黑了，备份也没了。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1085 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 23:19 · PVG 07:19 · LAX 15:19 · JFK 18:19
    ♥ Do have faith in what you're doing.