1.3-1.4网页数据抓取

1.3网页数据抓取工具：Linux：curl，通常无法使用使用headless浏览器，通过命令行的形式抓取网页,让管理员无法看出是在爬取数据还是在访问数据，但是短时间内同一个ip大量访问也会引起怀疑需要大量的ipfrom selenium import webdriverchrome_options = webdriver.ChromeOptions()chrome_options.headless = Truechrome = webdriver.Chrome( chrome_optio