mysql - 创建mysql表并加载数据
问题描述
我面临一个问题。
我有这个数据。数据存储在gene_ontology.txt,提取自:http ://gala.bx.psu.edu/downloads/hg15/genes/ 在这个数据中,第二列有多个字符串,“-”,“,” , 以及字符串和数字之间的空格。
以数据为例:
GO:0000001,mitochondrion inheritance
GO:0000002,mitochondrial genome maintenance
GO:0000003,reproduction
GO:0000005,ribosomal-chaperone activity
GO:0000006,high affinity zinc uptake transmembrane transporter......
我想将该数据插入到我创建的表中,如下所示:
mysql> create table annotation
-> (GOid VARCHAR(255) NOT NULL,
-> FUNCTION TEXT NOT NULL,
-> PRIMARY KEY goid (goid));
当我加载时:
LOAD DATA LOCAL INFILE 'gene_ontology.txt' INTO TABLE annotation FIELDS TERMINATED BY ',' LINES TERMINATED BY '\n';
Query OK, 26077 rows affected, 1639 warnings (0.89 sec)
Records: 26083 Deleted: 0 Skipped: 6 Warnings: 1639 (<- LOADING GAVE ME WARNING AND SKIPPED RESULTS)
结果:
mysql> SELECT GOid FROM annotation LIMIT 6;
显示好的结果
+-------------+
| GOid |
+-------------+
| GO:0000001 |
| GO:0000002 |
| GO:0000003 |
| GO:0000005 |
| GO:0000006 |
+-------------+
但是,问题是当我选择两列时:
mysql> SELECT GOid, FUNCTION FROM annotation LIMIT 10;
+-------------+----------------------------------------------------------------+
| GOid | FUNCTION |
+-------------+----------------------------------------------------------------+
|nce
|enome maintenance
|
| activity
|GO:0000006 | high affinity zinc uptake transmembrane transporter activity
|000007 | low-affinity zinc ion transmembrane transporter activity
|
| GO:0000009 | alpha-1 |
|hexaprenyltranstransferase activity
|
+-------------+----------------------------------------------------------------+
或者只有第二个:
+----------------------------------------------------------------+
| FUNCION |
+----------------------------------------------------------------+
|
|nce
|
|
|igh affinity zinc uptake transmembrane transporter activity
|ffinity zinc ion transmembrane transporter activity
|
| alpha-1 |
|stransferase activity
|
+----------------------------------------------------------------+
我不知道发生了什么。为了解决这个问题,我尝试使用 LONGTEXT 和 BLOB 更改“FUNCTION”的类型。我已经完成了这些更改,因为我认为问题在于第二列(FUNCTION)的类型。但我没有成功。
解决方案
问题似乎在于第二列文本之间的逗号“,”。
尝试将完整的文件以固定宽度加载到TableA
. 然后使用substr()
将第一个字段放入第二个表TableB's
column1,而将第二个字段放入column2。
这可能会加载数据,您可以进一步分析数据以改进加载过程。
推荐阅读
- c - Atmel USART 和 TCC 交互问题
- html - 在控制台上的 EJS 变量中打印 json 数组时出错
- c# - 实体框架优化包含多对多表关系
- sql-server - 是否可以根据输出参数循环存储过程?
- python - 在列表(地图)中编写语法的正确方法是什么?
- java - Spring Boot REST API 无法识别的令牌
- python - 将字典列表转换为一行中的多个列表
- python - 我需要将一个字符串中的 2 个单词添加到两个不同的列表中
- azure - 使用托管标识和 REST API 从 VM 调用 Azure 函数
- azure-powershell - 为什么在明确启用公共访问时 Get-AzStorageAccount cmdlet 的 AllowBlobPublicAccess 返回 NULL?