开发搜索引擎爬虫程序的网页下载程序，如何不堵塞tcp

[alineo]

用java做了个爬虫程序，没搞清楚http1.0和http1.1，如何利用持续链接或者socket下载等手段，不让Ip端口用完，而且下载速度要快，我要下载的都是生成好的某一个网站的所有url的。