自动化https请求的最简单方法

Question

自动化https请求的最简单方法

3

我需要自动化提交大量请求到基于云的数据库接口(Intelex)，但没有批量提交某些操作的方式，但只要经过身份验证的用户尝试打开网页链接，就可以提交单个请求。因此，要使用给定GUID恢复记录，我只需打开页面“https://.../restore/[GUID]”。网页将加载并显示现在已恢复的记录，但实际上我甚至不需要它完成加载 - 只需请求页面足以使服务器执行该操作。我预计如果我以太快的速度发送它们，服务器要么会将我踢出，要么会放弃一些请求，但是处理它们的速度与我在新浏览器选项卡中导航和打开链接的速度相同(大约每秒1个)。

什么是提交这些请求到几千个Web地址的最简单方法？

- AnAdverb

2个回答

网页内容由stack overflow 提供, 点击上面的

可以查看英文原文，
原文链接

- Ole Tange · Answer 1

假设 guid.txt 包含：

[GUID]
[GUID]
[GUID]
:
[GUID]

然后你可以运行：

cat guid.txt | parallel --delay 1s wget https://.../restore/{}

要自动找到最佳的--delay，请使用以下方法：

cat guid.txt |
  parallel --retries 5 --delay 1sauto wget https://.../restore/{}

（需要 GNU Parallel 版本 20210122）。

- Alexey R. · Answer 2

我可以看到几种方法。每一种都非常简单。

将URL的变量部分存储在文件中。然后使用类似CURL的工具，并循环遍历文件内容，在每次迭代中使用构建的URL调用CURL。如果您使用的是Linux，可以像这样做：在Bash中循环遍历文件内容，对于Windows，请查看此帖子：如何使用Windows批处理文件循环遍历文本文件中的每一行？
使用JMeter工具（jMeter循环遍历CSV中的所有值）。这甚至可以让您并行查询。