c# - 如果行/行不是以 c# 中已建立的字符开头,则跳过或删除 CSV 文件中的行/行
问题描述
这是我的 CSV 文件
该文件是从外部资源提供的,并使用管道分隔符以 csv 格式保存,对此我必须工作
||||||||||||||||||||||||||||||||||||||||||||||||||
|Table1|||||||||||||||||||||||||||||||||||||||||||||||||
||||||||||||||||||||||||||||||||||||||||||||||||||
N|IDI |TEST|START DATE HOUR |CAUSE|KIND|NUMB|NAMES|
1|10704| |21/07/2020 15:05:54|L |MT |2786|NAV |
2|10660| |21/07/2020 09:27:31|L |MT |4088|PIS |
values of names
values of names .|0|0|1|1|0|0||||
||||||||||||||||||||||||||||||||||||||||||||||||||
|Table2|||||||||||||||||||||||||||||||||||||||||||||||||
||||||||||||||||||||||||||||||||||||||||||||||||||
N|IDI |TEST|START DATE HOUR |END DATE HOUR |LENGHT |RETURNS |CAUSE|KIND|NUMB|NAMES|
1|10710| |21/07/2020 19:34:00|21/07/2020 20:19:09|00:45:09| - |L |MT |7806|ACC |
2|10708| |21/07/2020 18:28:12|21/07/2020 18:28:13|00:00:01| - |T |MT |2600|LIT |
3|10700| |21/07/2020 14:16:37|21/07/2020 15:19:13|01:02:36|21/07/2020 17:00|L |MT |4435|UHI |
4|10698| |21/07/2020 14:06:45|21/07/2020 14:07:22|00:00:37|- |B |MT |5789|TYK |
5|10674| |21/07/2020 10:21:04|21/07/2020 10:44:41|00:23:37|21/07/2020 12:30|T |MT |6699|FGR |
||||||||||||||||||||||||||||||||||||||||||||||||||
我需要删除或跳过 csv 文件中的这些行,因为该行不以number
或N
值开头或pipeline |
values of names
values of names .|0|0|1|1|0|0||||
这是我的错误代码
指数超出范围。必须为非负数且小于集合参数 name:index 的大小
如果该行不以number
或N
值或pipeline |
int posNewColumn = 4;
string input = @"C:\Temp\SO\import.csv";
string output = @"C:\Temp\SO\out.csv";
string[] CSVDump = File.ReadAllLines(input);
List<List<string>> CSV = CSVDump.Select(x => x.Split('|').ToList()).ToList();
foreach (List<string> line in CSV)
{
if (line[1] == "Table2")
{
break;
}
line.Insert(posNewColumn, line[0] == "N" ? "LENGHT" : string.Empty);
line.Insert(posNewColumn, line[0] == "N" ? "END DATE HOUR" : string.Empty);
}
File.WriteAllLines(output, CSV.Select(x => string.Join("|", x)));
如果行中只有一个元素(如名称的行值),我需要跳过或删除行
你能帮我吗?
解决方案
所以你想跳过所有以管道开头的行吗?
List<List<string>> CSV = CSVDump
.Where(x => !x.StartsWith('|'))
.Select(x => x.Split('|').ToList()).ToArray();
所以你想保留任何以数字、N 或管道开头的东西?
List<List<string>> CSV = CSVDump
.Where(x => x.Length > 0 && "0123456789N|".Contains(x[0]))
.Select(x => x.Split('|').ToList()).ToArray();
为了回应史蒂夫对性能等的担忧,也许最好的方法是:
int posNewColumn = 3;
string input = @"C:\Temp\SO\import.csv";
string output = @"C:\Temp\SO\out.csv";
using (var dest = File.CreateText(output))
{
bool adjust = true;
foreach (string s in File.ReadLines(input))
{
if(line.Length == 0 || !"0123456789N|".Contains(line[0]) //skip zero len or line not begin with number/pipe/N
continue;
string line = s; //copy enum variable so we can adjust it
if(adjust)
{
string[] bits = line.Split('|');
if(line.StartsWith("N"))
bits[posNewColumn] += "|END DATE HOUR|LENGHT";
else
bits[posNewColumn] += "||";
line = string.Join("|", bits);
}
if(line.StartsWith("|Table2")
adjust = false;
dest.WriteLine(line);
}
}
这需要最少的内存和处理;我们不会不必要地拆分每一行,不会创建数千个列表,我们不会尝试将整个文件保存在内存中;我们只是读取行并可能将它们写出,如果我们没有遇到 Table2 可能会调整它们
笔记; 我已经编写了它,但没有对其进行调试/测试——它可能有错字或轻微的逻辑错误;将其视为伪代码
推荐阅读
- django - request.method == "POST" 在更新博客文章视图中不起作用
- r - R:将列名从科学计数法更改为十进制
- reactjs - 如何修复 Apollo 客户端中的分页不做任何事情?
- java - (Java)为什么 Integer.toOctalString() 函数有时能正常工作,有时不能?(详情请看我的程序)
- c++ - 4x4矩阵重置缩放?
- javascript - 寻找动态添加/删除框,但在下拉值上隐藏字段
- google-apps-script - 编写教育成绩册
- flutter - Android Studio 在编辑大型多部分 dart 文件时内存不足
- r - 包数据集未被识别为对象
- java - Java for 循环词