python - 在python中读取200000行的文本文件
问题描述
我有一个 10K 行的 csv 文件。我能够阅读:
import numpy as np
features = pd.read_csv("data/kt/features.csv", dtype=np.float64)
targets = pd.read_csv("data/kt/targets.csv", dtype=np.float64)
for i in range(len(features)-1):
yield {
"inputs": list(features.iloc[i]),
"targets": list(targets.iloc[i])
}
但现在我有 200000 行的文本文件。我试图复制到 excel 中,但它告诉我们行数不能超过 ~120000。
1)有没有一种方法可以将我的 200000 行的测试文件转换为 csv 文件而无需复制/粘贴?
2)我可以有一个程序来使用熊猫/或任何库来读取所有这些行并获取输入和目标中的数据吗?
解决方案
推荐阅读
- flutter - 如何比较 Dart 中构造不同的两个日期?
- javascript - 应该如何在codepen中使用此代码添加以下部分任何人都知道我想在此标题下添加关于部分和工作部分
- powerapps - PowerApps 库 - 混合屏幕
- python - 我有带有情绪分数的词典,我想从标记化的推文中找到这些词并添加分数
- r - 带有此类数据的图表,我如何找到每个“集群”的峰值和谷值?在 R 中
- javascript - HTML Input[Date] 默认为 mm/dd/yyyy,尽管区域设置
- javascript - 如何解决这个模数运算符javascript不准确的问题?
- c++ - 将具有固定签名的自定义函数名称注入 CRTP
- android - 跟踪用户之间的纬度/经度距离
- vim - 如何找出导致 Enter 键延迟的原因?