c++ - 使用 ReadFile 时,一半的读取缓冲区损坏
问题描述
与 ReadFile 一起使用的一半缓冲区已损坏。无论缓冲区的大小如何,其中一半都具有相同的损坏字符。我已经寻找任何可能导致读取提前停止的东西,等等。如果我增加缓冲区的大小,我会看到更多的文件,所以它不会在文件的特定部分失败。
Visual Studio 2019。Windows 10。
#define MAXBUFFERSIZE 1024
DWORD bufferSize = MAXBUFFERSIZE;
_int64 fileRemaining;
HANDLE hFile;
DWORD dwBytesRead = 0;
//OVERLAPPED ol = { 0 };
LARGE_INTEGER dwPosition;
TCHAR* buffer;
hFile = CreateFile(
inputFilePath, // file to open
GENERIC_READ, // open for reading
FILE_SHARE_READ, // share for reading
NULL, // default security
OPEN_EXISTING, // existing file only
FILE_ATTRIBUTE_NORMAL, // normal file | FILE_FLAG_OVERLAPPED
NULL); // no attr. template
if (hFile == INVALID_HANDLE_VALUE)
{
DisplayErrorBox((LPWSTR)L"CreateFile");
return 0;
}
LARGE_INTEGER size;
GetFileSizeEx(hFile, &size);
_int64 fileSize = (__int64)size.QuadPart;
double gigabytes = fileSize * 9.3132e-10;
sendToReportWindow(L"file size: %lld bytes \(%.1f gigabytes\)\n", fileSize, gigabytes);
if(fileSize > MAXBUFFERSIZE)
{
buffer = new TCHAR[MAXBUFFERSIZE];
}
else
{
buffer = new TCHAR[fileSize];
}
fileRemaining = fileSize;
sendToReportWindow(L"file remaining: %lld bytes\n", fileRemaining);
while (fileRemaining) // outer loop. while file remaining, read file chunk to buffer
{
sendToReportWindow(L"fileRemaining:%d\n", fileRemaining);
if (bufferSize > fileRemaining) // as fileremaining gets smaller as file is processed, it eventually is smaller than the buffer
bufferSize = fileRemaining;
if (FALSE == ReadFile(hFile, buffer, bufferSize, &dwBytesRead, NULL))
{
sendToReportWindow(L"file read failed\n");
CloseHandle(hFile);
return 0;
}
fileRemaining -= bufferSize;
// bunch of commented out code (verified that it does not cause the corruption)
}
delete [] buffer;
调试器 html 视图(1024 字节缓冲区)。这表明文件可能不是损坏的来源。
杂项说明:有人告诉我,内存映射文件并没有提供优势,因为我是按顺序处理文件的。这种方法的另一个优点是,当我在 WARC 文件中检测到特定的和重复出现的标签时,我可以向前跳过约 500 个字节并恢复处理。这提高了速度。
解决方案
原因是你使用了 type 的缓冲区数组,而 typeTCHAR
的大小TCHAR
是 2 个字节。所以调用ReadFile函数时设置的bufferSize实际上每2个字节填充到buffer数组中。
但是缓冲区的实际大小是sizeof(TCHAR) * fileSize
,所以你看到的缓冲区数组的一半是“损坏的”
推荐阅读
- rest - 使用机器人框架和 REST 上传带有 Post 请求的 zip 文件
- c# - 我应该在哪里过滤微服务架构模式中的 MS 级外部服务响应?
- powershell - 如何使用powershell运行cmd命令
- javascript - 使用节点中嵌套对象的字符串文字进行 JSON 解析
- javascript - 如何确定使用 JavaScript 进行电子邮件混淆是否有效?
- python-3.x - TypeError:“PngImageFile”对象不可迭代
- java - 硒 moveToElement() 到硒
- django - 如何在我的序列化程序中创建一个字段以避免“TypeError:无法解压缩不可迭代的地址对象”错误?
- python-3.x - 如何使用 np.column_stack 将具有不同列维度(相同行维度)的 4 个向量压缩到 Python 中的变量中?
- perl - 手动安装 Perl 模块的问题