Metadata-Version: 1.1
Name: SiteMiner
Version: 0.1.1
Summary: crawl a site and find out all link http status code
Home-page: https://github.com/yangsibai/SiteMiner
Author: massimo
Author-email: yangsibai@gmail.com
License: MIT
Description: SiteMiner
        
        爬取网站内所有链接，输出 markdown 文件。
        
        Get start
        
        Install
        
            pip install SiteMiner
        
        Useage
        
            import Miner
        
            miner = Miner("http://sibo.me")
            miner.run()
            print "done!"
        
        说明
        
        输出文件按照 Http 状态码分组，每个链接下面用一个列表来存放所有包含该链接的页面地址。
        
Keywords: http status site error
Platform: UNKNOWN
Classifier: Development Status :: 3 - Alpha
Classifier: Topic :: Internet :: WWW/HTTP
Classifier: License :: OSI Approved :: MIT License
