Googlesheets 配额限制问题 - 可能无法使用 API 密钥

如何解决Googlesheets 配额限制问题 - 可能无法使用 API 密钥

我们目前正在使用 Google 表格进行 crowd forecasts for Covid-19 case and death numbers 的研究项目。

使用 Google 表格是为了方便，但我们经常遇到配额限制问题 - 即使我们拥有的用户数量应该远低于 Google 允许的数量。

我试图通过设置一个新的 google 帐户并创建一个可供阅读的工作表来创建一个可重现的示例。

我尝试的第一件事（没有对 google 帐户进行任何更改）是这样的：

library(googledrive)
library(googlesheets4)

# Google sheets authentification -----------------------------------------------
options(gargle_oauth_cache = ".secrets")
drive_auth(cache = ".secrets",email = "iamatestotest@gmail.com")
gs4_auth(token = drive_token())

sheet_id <- "1Z2O5Mce_haceWfduLenJQP-hddXF9biY_4Ydob_psyQ"

n_tries <- 50

for (i in 1:n_tries) {
  data <- read_sheet(ss = sheet_id)
  Sys.sleep(0.5)
  print(i)
}

据我所知，我应该能够每分钟发出大约 300 个读取请求，但我通常无法让循环运行超过 30-34 个。

因为我不确定 300 个请求是否随时可用，所以我去了 https://console.cloud.google.com，创建了一个新的测试项目（不确定为什么需要）并明确激活 googlesheets API 并创建了一些凭据。我创建了一个 API 密钥以及一个 OAuth 2.0 客户端 ID（尽管我承认有点迷失了它的作用以及如何使用它）。

我接下来尝试通过运行使用我的 api 密钥登录

drive_deauth()
drive_auth_configure(api_key = "thisismyapikey")
gs4_auth(token = drive_api_key())

但这也没有让我超过 33 岁。我还查看了 google 控制台，但也看不到任何流量 - 所以不确定我的 API 密钥是否得到实际使用？

我认为这是因为我无法以预期的方式实际使用 API。任何在设置/增加配额方面的帮助将不胜感激。如果这对我有帮助，我很乐意授予对测试帐户的访问权限 - 只需给我留言。

解决方法

通过一些 kind help from very friendly people，我想我大致明白了这一点，确实是我未能正确使用 API。

为什么我的方法失败了

当您使用 googlesheets4 及其任何开箱即用的功能时，系统会要求您授权 tidyverse API OAuth 应用程序（您使用 Google 凭据登录并授予 OAuth 应用程序访问权限）。这意味着您通过 tidyverse OAuth 应用程序发出所有请求，世界上使用此功能的所有其他用户也是如此。这非常好，因为它开箱即用，但如果其他人同时使用该软件包，则会遇到限制。与其他人共享这个配额意味着我遇到了不可预测的限制。

如何更改设置以使其正常工作

有几件事可以帮助缓解/解决问题。

使用 googlesheets4 的 devtools 版本（devtools::install_github("tidyverse/googlesheets4")。这个 googlesheets4 的开发版本又依赖于 gargle 的开发版本，该软件包管理google 身份验证。gargle 的开发版本具有重试功能，如果请求失败，它会自动重试您的请求。这应该可以解决大部分问题。
获取您自己的 OAuth 应用程序/谷歌服务帐户。 这使您可以自行管理身份验证过程。因此，您不必与世界各地的其他用户共享您的配额。要设置您自己的 OAuth 应用程序/谷歌服务帐户，您可以执行以下操作（我在这里重点介绍谷歌服务帐户，因为这在实践中要容易得多）。

登录https://console.cloud.google.com/。您将被要求创建一个项目。您可以在左侧“Google Cloud Platform”旁边看到您的项目。
在搜索栏中键入“API 和服务”，按“启用 API 和服务”并搜索工作表。启用此 API。
返回搜索栏并输入“凭据”
按“创建凭据”并选择服务帐户。服务帐户可让您以编程方式访问 API。给它一个名称和描述。您应该可以跳过可选部分。创建服务帐户并返回凭据概述。您可能需要刷新页面或稍等片刻。
点击您的服务帐户（它看起来像一个非常神秘的电子邮件地址）并转到“密钥”标签。
点击“添加密钥”并创建一个新密钥。作为密钥类型，选择 JSON。
下载该密钥并将其存储在安全的地方。这应该被视为密码和用户名的组合！
现在要在 googlesheets4 中实际使用您的密钥，您可以运行 `gs4_auth(path = "path-to-your-service-account.JSON")
为了能够访问您的 Google 表格，您需要授予您的服务帐户权限。转到您的 Google 表格，按共享（就像您将它与任何其他用户共享一样）并输入这个神秘的服务帐户电子邮件（它应该看起来像“1234@something.iam.gserviceaccount.com”。一切都应该有效现在无需在任何地方登录。如果您之前尝试过其他操作，我建议您重新启动 R 会话。
利润。

您现在还应该能够在 google 控制台仪表板中跟踪 API 请求。

请注意，每个用户每分钟仍有 60 个请求的限制，因此您无法获得 300 个完整的请求，但也许可以创建多个服务帐户并平衡这些帐户之间的负载。但是没有其他人的要求干扰你的要求是一个很大的进步！

Google 表示这是一项安全措施。尝试通过添加他们的电子邮件来分享