首页 > 解决方案 > C++ libcurl 缓存数据响应

问题描述

我为此使用 curl lib 和 easy_curl 扩展。我现在将省略代码,因为我认为没有必要解释这个问题。我正在使用 c++ 和 curl lib 来从服务器检索序列化的谷歌原型。序列化的 protobuff 包含一个整数和一个静态对象数组。编译后的 protobuff 看起来像

typedef struct _ExperimentRunner_ExperimentList_RES {
    int32_t pollFrequency;
    pb_size_t activeExperiments_count;
    ExperimentRunner_ExperimentInfo activeExperiments[5];
/* @@protoc_insertion_point(struct:ExperimentRunner_ExperimentList_RES) */
} ExperimentRunner_ExperimentList_RES;

测试后一切正常,并且从服务器检索到 protobuff 并正确解析。获取请求是针对数据而不是来自服务器的文件。

代码的设置方式是在每个轮询频率检索实验列表。问题是以下场景

  1. app 启动并检索实验列表,目前有一个条目
  2. 从服务器数据库中删除条目等待应用程序重新轮询服务器
  3. 该应用程序看到服务器响应仍然包含已删除的条目。我通过从命令行执行 curl 确认已将其删除

curl 库似乎存在问题,缓存来自服务器的数据结果,然后在我发出请求时返回它。因为当我重新启动应用程序时,它会获得正确的数据。我已经实现了 CURLOPT_DEBUGFUNCTION 并在我知道服务器已从数据库中删除旧数据时看到请求返回的旧数据。有什么建议可能会导致这种情况的选项或缓存吗?

标签: cachinglibcurlprotocol-buffers

解决方案


由于误解了 curl lib 的工作原理(我认为),这最终成为我的转储错误。我正在使用 CURLOPT_WRITEFUNCTION 来捕获 char 数组中的数据。我没有在请求之间完全清除这个 buff,因为我假设 curllib 会用“\0”终止新接收的数据,从而使旧数据无效。但我认为这个假设是不正确的。一旦我在下一个请求之前清除了整个缓冲区,一切都很好。下面是incase的数据采集功能

size_t CURL_RECIEVE_DATA_BUFF(void *buffer, size_t size, size_t nmemb, void *userp)
{
    CURL_DATA_BUFF* curlData = (CURL_DATA_BUFF*)userp;
    if (curlData)
    {
        if (curlData->amountWriten >= curlData->maxSize) {
            LogIt.Add(Error, "%s:%s Server sending more data than expected, max is: %d bytes\n", __FILE__, __FUNCTION__, curlData->maxSize);
            return 0;
        }
        memcpy(&(curlData->buff[curlData->amountWriten]), buffer, size * nmemb);
        curlData->amountWriten += size * nmemb;
        return size * nmemb;
    }
    return 0;
}

推荐阅读