webspider

一只C#写的多线程网页爬虫

用法

第一次启动

输入要爬的网站，和线程数量，然后它就会开始爬
一开始的速度可能有点慢，可关掉线程优化加快速度
假若觉得爬够了，记得关闭前输入save将抓到的链接保存起来
他们将保存成序列化的XUrl和String的List
XUrl可以在SpiderStandard中找到其源码，可以直接引用SpiderStandard.dll编写储存链接的拓展
SpiderStandard包含序列化和反序列化的方法（这是帮运来的~（小声bb）

之后的运行

直接输入线程数量就好了

设置

输入help查看相关设置的命令
目前默认的设置没法更改，每次启动需要自行配置