rcurl

如何在 RCurl 中设置密码 ECDHE-RSA-AES256-GCM-SHA384

使用 RCurl getURL() 下载数据时出现类似错误 SSL routines:SSL23_GET_SERVER_HELLO:sslv3 alert handshake failure 据我所知,这可能与 curl 选项中的 ssl.cipher.list 选项有关。 如果是这样,我如何将 ECDHE-RSA-AES256-GCM-SHA384 设置为密码? 对我来说 curlO... »

检查R中是否存在URL

我想遍历一个 URL 列表,我想知道这些 URL 是否存在。 RCurl 提供url.exists() 函数。但是,输出似乎不正确,因为例如它说 amazon.com 没有注册(它这样做是因为 url.exists()-function 没有返回 200 范围内的值,在这种情况下amazon.com 是 405(“方法不允许”)。 我还尝试了httr 包提供的HEAD() 和GET()。但有... »

R - 在网站上发送搜索请求

我有一个小问题,涉及在网站上发布搜索请求并使用 R 包 rvest 和 httr 显示结果...我只想运行一个搜索名称“Acer campestre”,并且只勾选框“仅匹配整个单词”。这是我的代码: library(httr) library(rvest) col = POST(url="http://www.catalogueoflife.org/col", encode... »

R 为相同的 Google 搜索 URL 显示不同的 HTML(与网络浏览器相比)

目标 我想使用 R 下载 Google 搜索网页的 HTML,如网络浏览器中所示。 问题 当我使用来自网络浏览器的完全相同的 URL 在 R 中下载 Google 搜索网页 HTML 时,我注意到 R 下载的 HTML 与网络浏览器 HTML 不同,例如对于高级 Google 搜索 URL,日期参数在 R 读取的 HTML 中被忽略,而在 Web 浏览器中则保留。 示例 我在网络浏览... »

将 cURL API 转换为 R 请求

我正在尝试在 R 中创建一个使用 API 的脚本。在标准cURL 格式中,请求如下所示: curl --request GET \ --url https://api.test.com/v4/Questions/54949 \ --header 'Accept: application/json' \ --header 'Authorization: Basic XX... »

R - 如何使用 rvest 或 rcurl 点击网页

我想从this webpage下载数据 使用rvest可以轻松抓取数据。 代码可能是这样的: library(rvest) library(pipeR) url <- "http://www.tradingeconomics.com/" css <- "#ctl00_ContentPlaceHolder1_defaultUC1_CurrencyMatrixAllCount... »

devtools::install_github() - 忽略 SSL 证书验证失败

我正在尝试让 devtools::install_github() 在 Windows 7 上的公司代理后面工作。 到目前为止,我必须执行以下操作: > library(httr) > library(devtools) > set_config(use_proxy("123.123.123.123",8080)) > devtools::install_github(... »

R web 抓取包无法读取所有 url 表

我正在尝试从以下链接中抓取一些表格: 'https://www.pro-football-reference.com/boxscores/201209050nyg.htm' 从尝试多种方法/包中可以看出,我认为 R 无法读取整个 url。以下是我所做的一些尝试: a <- getURL(url) tabs <- readHTMLTable(a, stringsAsFactors = ... »

无法使用 R 和 R 包 RCurl 和 RHTMLForms 验证 HTML 表单

我正在尝试使用 R 从这个巴西网站提取能源/水数据:http://www.ons.org.br/historico/energia_natural_afluente.aspx 没关系尝试访问该网站的英文版,因为该链接在英文版中不存在... 很明显,有html表格可供选择:“Região ou Bacia”(地区或盆地)、“Unidade de medida”(计量单位)和“Período”。我... »

在 RCurl 中创建 C 级文件句柄,用于写入下载的文件

在 RCurl 中定义了一个函数和一个类 CFILE 以使用 C 级文件句柄。来自手册: 目的是能够将这些作为选项传递给 libcurl,以便它可以读取或写入文件。我们也可以使用 R 连接来执行此操作,并指定操作这些连接的回调函数。但是对于大文件,使用 C 级 FILE 句柄可能会明显更快。 没有与下载相关的示例,所以我尝试了: library(RCurl) u = "http://... »

带有 getURL 和 RCurl 错误的 R API 连接(Localytics)

我正在尝试通过他们的 API (https://api.localytics.com/docs#query) 从移动分析服务 Localytics 获取数据。特别是我想在 R 中翻译以下 cURL 命令: curl --get 'https://api.localytics.com/v1/query' \ --user 'API_KEY:API_SECRET' \ --data 'app_... »

使用 RCurl 在 R 向量中获取网站目录列表

我正在尝试获取网站目录中的文件列表。有没有一种类似于本地目录列表的 dir() 或 list.files() 命令的方法?我可以使用 RCurl 连接到网站(我需要它,因为我需要通过 HTTPS 进行 SSL 连接): library(RCurl) text=getURL(*some https website* ,ssl.verifypeer = FALSE ,dirlistonly ... »

尝试使用 RCurl 获取产品价格

我正在取消网站上某些产品的价格。在 Python 中,我使用 urllib2 没有问题,但是当我尝试在 R 中使用 RCurl 时,我无法下载源代码。 我必须将源代码与产品代码一起粘贴,然后我才能知道价格。一个产品的路径是:http://www.americanas.com.br/produto/code_of_product。 实际上,我无法使用 RCurl 下载产品的源代码。当我尝试例如 ... »

RCurl 和自签名证书问题

我在获取 RCurl 函数 getURL 以访问使用自签名证书的服务器上的 HTTPS URL 时遇到问题。我在 Mac OS X 10.9.2 上运行 R 3.0.2。 我已阅读有关该主题的FAQ 和curl page。所以这就是我的立场: 我已将证书副本保存到磁盘 (~/cert.pem)。 我已经能够使用这个相同的文件通过 python-requests 和“验证”选项连接到服务器,并... »

使用 Rcurl 从 Import.io API 中检索 R 中的数据?

我正在尝试从 import.io 'connector' API 检索数据。 基本上,我已经针对给定网站的结构训练了提取器,我想使用这种方法从 R 中导入数据: 1) 从 API 中检索 Json 结果 2) 将每个查询结果保存到给定的数据帧中 我的计划是使用 RCurl 来查询 API 链接: https://api.import.io/store/connector/9128b4e0-9a... »

将 RCurl 与带有嵌入式空值的 ftp 服务器一起使用

我已经解决这个问题几天了,即使在联系了网站管理员之后,我也没有解决它。 我想在不使用 R 以外的任何软件的情况下自动从 ftp 服务器下载特定文件。 userpwd = "MyUserName:MyPassword" url <- "ftp://arthurhou.pps.eosdis.nasa.gov/gpmdata/2014/04/01/imerg/3B-HHR.MS.MRG.3I... »