← 返回列表

部分Tor2Web的历史数据( OpenData )

单站 ZLabs 发布 Tue, 29 May 2018 10:23:00 +0800 入库 2026-11-18T03:08:02

原创 Python 2018-05-29 10:23

先看历史文章 / The Dark Web /

关于Tor2Web的OpenData,可以查看之前写的一篇The Dark Web(点我查看文章)。

一直能收到读者留言问我去哪里找更早的OpenData数据,根据Tor2Web的说法是,OpenData只保留前一天的访问记录,不会存储更久的数据,所以我把我抓到的一部分历史数据放出来供有兴趣的读者参考 —— 相信应该有人抓的比我更完整,但目前我还没有找到。

关于数据,有几点说明:

(1)本次提供的数据从2017-04-07至2018-05-28(接口是yesterday,所以,其实28日数据是29日抓的);

(2)因为数据是自动抓取,而且抓取脚本对数据的完整性几乎没做什么校验,因此不能保证数据的完整性;

(3)接口有时候会抽,所以中间难免会有几天的数据丢失( hidden_services 内容为空);

(4)此处数据只提供OpenData官方标准接口抓到的数据,文章里提到的两个非标准接口数据并不稳定外加统计上有点问题,就不提供下载了;

(5)数据提供仅此一次、不再持续更新,后面有兴趣的读者可以根据文章中提供的地址自己去持续抓取分析;

(6)数据都是抓到的原始格式,很容易理解也很容易解析,稍有基础的一眼就能看懂,如果一眼看不懂的话,就多看几眼,尽量别问我,因为我很少登录所以每次登录上来,都看到很多留言是过期无法回复的状态。

[ DownLoad ]

http://n7kr.com/eqt5g4fuenphqinx/OpenData_Piz0n.tgz

最后,再次提示。Tor2Web并非完整的暗网流量,也并非监控暗网的最佳手段,仅可用于参考,无法作为强力的数据依据。

原文链接:https://mp.weixin.qq.com/s?__biz=MzA3MTEwNDE1NA==&mid=2649432070&idx=1&sn=94fa8064330f47edefb434b242b0cb6f