Python中点击网页中的link (非selenium方法)

[marshallzh]

我使用selenium的webdriver 点击链接，具体代码如下。

    url = '.......' #my link
    profile = webdriver.FirefoxProfile()
    profile.set_preference('browser.download.folderList', 2) # custom location
    profile.set_preference('browser.download.manager.showWhenStarting', False)
    profile.set_preference('browser.download.dir', os.getcwd() + '/tmp-csv/')
    profile.set_preference('browser.helperApps.neverAsk.saveToDisk', 'text/csv')
    
    browser = webdriver.Firefox(profile)
    browser.get(url)
    browser.find_element_by_class_name('downloadLink').click()

这段代码的作用是，打开一个link，然后找到其中的一个 downloadLink 标签，下载内容为csv文件。
这段代码在运行的时候是没有问题的，但是每次会打开一个browser，然后实际的渲染出link来。

我的问题是，有没有一种方法，可以不实际打开浏览器，而是模拟出这个操作，然后下载csv文件？
（从而这段代码在服务器端运行，即使没有安装firefox，也是可以工作的。）谢谢。

[屎克螂]

1.urlib2通过url取到页面内容 2.内容用正则或者其它方法 得到下载csv文件url 3.下载