firebase - 我用于获取 URL 的 Firebase 云功能导致机器人检测到

Question

我正在尝试使用 node-fetch 从我的云功能向外部 URL 发出简单的 GET 请求。当用户粘贴链接时，我发出此请求以检索社交媒体共享标签以填充标题、描述和图像。一些网站似乎在响应机器人消息。有没有解决的办法？

到目前为止，我已经确保请求的来源来自我的域，而不是一些奇怪的云服务器。我还尝试在标题中定义基于浏览器的用户代理，但运气不佳。

关于我可以检查的其他事情的任何想法？

标签： firebasehttprequestfetch-apinode-fetch