dht爬虫终于有眉目了

| 2013-10-05 20:48:30 | 12 COMMENT
从看了小虾的博文以后就也想写一个爬虫，一直写到现在才有点眉目。。其中还参考了http://codemacro.com上写的思路，不过有很多功能还没涉及到。 已经实现的功能，创建一个节点，能在dht网络中友好的生存并获取info_hash，好多技巧还没用到。实现插入数据库中，现在直接访问django写的应用（主要也是测试功能，两个功能分开了还没合到一起，直接用django的orm肯定要快好多），然后我在django里边写了下载种子文件和解析种子文件信息的功能。发现有许多hash找不到种子，下载不下来，后面还要在看一下怎么生成种子文件。分析种子信息的代码是从网上找的，然后修改了一下。 一个节点可能有点偏，不计算重复，开始时平均一分钟2个，计算重复一份钟一个。 前段时间又想到以前看群里讨论的关于p2p的应用，想自己实现一下，正好现在对协议了解了。不准备用 python写了，再看一个新语言折腾一下。

上一篇:
下一篇:

相关文章：

Categories: 博客记录

12 Responses so far.

    • 0X55AA 2014-01-21 09:35:08 说：

      好 过几天我传网上， 等放假吧，现在没时间

    dis 2014-02-04 16:52:16 说：

    说好的呢.

    回复
    • 0X55AA 2014-01-21 09:35:08 说：

      好 过几天我传网上， 等放假吧，现在没时间

    RR 2014-01-31 12:55:45 说：

    同求看了 小虾的博客同研究

    回复
  3. sou-pian 2015-06-10 21:40:40 说：

    磁力搜索网站：www.sou-pian.com

    回复
    • sou-pian 2015-06-10 21:40:40 说：

      磁力搜索网站：www.sou-pian.com

    0X55AA 2015-06-15 11:34:47 说：

    http://bajiaoxiyu.com/ 二三百万的资源了

    回复
    • RR 2014-01-31 12:55:45 说：

      同求看了 小虾的博客同研究

    0X55AA 2014-02-08 16:47:03 说：

    https://github.com/0x55aa/python_dht

    回复
    • dis 2014-02-04 16:52:16 说：

      说好的呢.

    0X55AA 2014-02-08 16:48:46 说：

    https://github.com/0x55aa/python_dht 刚上传的0 0现在都 上班了。我修改了很多东西，不一定合理，你看有用的就学习一下吧，下载bt文件的我没做好，分析的写完了。放在与web页面一起的应用了，那个很简单就不上传了

    回复
  7. aaa 2014-04-22 16:25:19 说：

    alert("test");

    回复
  8. dis 2014-01-17 13:33:24 说：

    最近也研究，求份python——dht源码参考,谢谢你

    回复
  9. good 2015-11-24 10:52:08 说：

    只是一个空白页了。。。

    回复
    • good 2015-11-24 10:52:08 说：

      只是一个空白页了。。。

    good 2015-11-24 10:52:39 说：

    此网址 http://bajiaoxiyu.com/

    回复
    • good 2015-11-24 10:52:39 说：

      此网址 http://bajiaoxiyu.com/

    0X55AA 2015-11-24 16:22:58 说：

    关了，国外版权审核太严重，有些mp3的分享违反版权了。

    回复
    • dis 2014-01-17 13:33:24 说：

      最近也研究，求份python——dht源码参考,谢谢你

    0X55AA 2014-01-21 09:35:08 说：

    好 过几天我传网上， 等放假吧，现在没时间

    回复

Leave a Reply