urllib

0热度

1回答

如何使用python语言中的urllib来保存包含网页内容的网页，以便它可以脱机查看？目前我使用下面的代码： import urllib.request driver.webdriver.Chrome() driver.get("http://www.yahoo.com") urllib.request.urlretrieve("http://www.yahoo.com", C:\\Use

1热度

1回答

使用BeautifulSoup获取隐形网页信息

我想从网站“https://www.estimize.com/jpm/fq3-2016#chart=table”获取一些信息，以更准确地获取所有单个估算值，它们位于页面底部。但它只显示前30个，然后你应该手动按下“显示全部”按钮来获得另外30个等等。这里是我到目前为止的代码： from urllib import urlopen from bs4 import BeautifulSoup h

0热度

1回答

试图使用urllib与标题，但我一直得到这个错误：TypeError：一个浮动是必需的。我正在使用python 3.4

我一直在尝试使用自定义标头发送请求，但是python不停地给出这个错误消息，我会发生什么错误？这里是我的代码与蟒蛇充分反应起来：代码 import urllib.request import urllib.parse url = 'https://nytimes.com/' user_agent = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64)'

0热度

1回答

本地HTML文件刮擦Urllib和BeautifulSoup

我对python非常陌生，并且已经从头开始研究以下代码两周来抓取本地文件。大概有将近一百个小时，我可以尽可能多地学习Python，版本，导入包如lxml，bs4，请求，urllib，os，glob等等。我毫无希望地停留在第一部分中，在一个目录中获取12,000个具有奇怪名称的HTML文件，以加载和分析BeautifulSoup。我想将所有这些数据都放到一个csv文件中，或者只是为了输出，所以我可

3热度

1回答

的urllib：直接下载链接

的Python 3可能需要使用的urllib做到这一点获取文件的名称，我需要知道如何发送到直接下载链接的请求，并获得名字它试图保存的文件。（作为一个例子，从CurseForge一个KSP MOD：https://kerbal.curseforge.com/projects/mechjeb/files/2355387/download）当然，文件ID（2355387）将被改变。它可以来自任何项

1热度

1回答

入门上次修改文件的日期使用的urlopen不工作

from six.moves.urllib.request import urlopen, urlretrieve, urlrequest conn = urlopen('ftp://ftp.cdc.noaa.gov/Datasets/ncep.reanalysis.dailyavgs/surface/lftx.sfc.2017.nc', timeout=20) last_modified

0热度

2回答

使用urllib获取网站会导致HTTP 405错误

我在学习beautifulsoup，并试图编写一个小脚本在荷兰房地产网站上查找房屋。当我试图让网站的内容，我立即得到一个HTTP405错误： File "funda.py", line 2, in <module> html = urlopen("http://www.funda.nl") File "<folders>request.py", line 223, in url

1热度

2回答

如何通过urllib获取内容，当链接将重定向到另一个？

我试图使用urllib从这个URL获取内容：“https://blockexplorer.com/block-index/0”。但是，当浏览器加载此链接时，它将重定向到另一个链接“https://blockexplorer.com/block/000000000019d6689c085ae165831e934ff763ae46a2a6c172b3f1b60a8ce26f”。这里是我的代码： im

0热度

1回答

使用urlretrieve后关闭ftp连接

from six.moves.urllib.request import urlopen, urlretrieve urlretrieve('ftp://ftp.cdc.noaa.gov/Datasets/ncep.reanalysis.dailyavgs/surface/air.sig995.1949.nc', filename='C:\\desktop\\') 使用urlretriev

0热度

1回答

数据废弃使用的urllib

我想从这个link 一些数据来获得开盘价从上面的链接我使用下面的代码 import urllib from urllib.request import urlopen symbols=['KEL', 'BYCO'] def keystats(): try: response = urllib.request.urlopen('http://www.scstrade.c