如何利用搜索到的单一链接，而找到全部的资源？？

显示全部楼层 · 发表于 2017-7-14 18:51:15

本帖最后由 17999s 于 2017-7-14 18:54 编辑

不知道该如何描述更准确，
就用搜索（比如百度）,搜到一个链接，这样：xx.xx.xx/abc/变量1/变量2.txt
点击能直接下载，

我想既然搜索能搜到，说明搜索工具的蜘蛛爬虫爬到了，但是由于链接是IP而不是域名，没办法使用site的方式来查找
再就是由于是绝对路径，网页快照也无效
然后由于是双变量，列表量是巨大的，不可行。

想请教的是，在大概知道有多少资源的前提下，如何更有效的利用这个搜索找到全部的资源？

显示全部楼层 · 发表于 2017-7-14 20:19:56

变量名多长，有没有规律，太长就没指望了。蜘蛛能爬到是因为有地方引用了那个链接

显示全部楼层 · 发表于 2017-7-14 21:11:42

黑暗的背叛者发表于 2017-7-14 20:19
变量名多长，有没有规律，太长就没指望了。蜘蛛能爬到是因为有地方引用了那个链接

变量名太长，基本算是无规律，不指望穷

“蜘蛛能爬到是因为有地方引用了那个链接”，原来是这么回事，我还以为是蜘蛛能直接抓到呢，
通过变换方法能搜索到五六条链接，需要的大约有五六十条，
还以为能有更好的搜索方法呢
好吧，不想它了。
多谢回复

显示全部楼层 · 发表于 2017-7-15 16:56:00

xx.xx.xx/abc/
这个目录是开放的吗？

显示全部楼层 · 发表于 2017-7-16 09:52:11

mifanu 发表于 2017-7-15 16:56
xx.xx.xx/abc/
这个目录是开放的吗？

该目录禁止访问!

[网络] 如何利用搜索到的单一链接，而找到全部的资源？？