java - 在 scala 或 java 中读取非常广泛的数据集的有效方法
问题描述
我需要在镶木地板列中摄取非常宽的固定宽度数据集
目前固定宽度记录接近1000万条，加载数据需要ti 2天。
谁能告诉我在 scala 或 java 中读取宽数据集的最有效方法是什么
解决方案
推荐阅读
- c# - 在 ASP.NET MVC 中对 Foreach 循环中的项目求和
- python - macOS 中的 pipenv 和 conda
- python-3.x - vs代码无法导入python包但终端可以导入
- javascript - `import`语句的路径可以包含多个`/`吗？
- python - 使用 ffmpeg 连接文件夹中的所有 .mp4 文件
- java - 如何在不添加更多窗格的情况下在 ImageView JavaFx 中对图像切换进行动画处理
- python - QProcess 无法从 Telethon 的异步函数中读取
- python - 我在 PySpark 数据框中有一列（字符串数组）。如何打破数组并为数组中的每个字符串项创建单独的行？
- python - 如何聚类标签（在多标签分类问题中）大多一起出现在一个类中
- node.js - full-ICU 在传递 --icu-data-dir 节点选项时有效，但在使用 NODE_ICU_DATA 环境变量时无效