时间戳

首页 > 解决方案 > KDB - 在单个列中处理多种数据类型

kdb - KDB - 在单个列中处理多种数据类型

问题描述

我有一个数据集，其中包含我作为符号导入的一列字符串值。不幸的是，值列是日期、整数或浮点数，具体取决于列 value_type 中标识的数据类型。

我value_type手动创建了该字段以“标记”什么类型的数据value，因此我可以根据需要修改或添加更多内容。

我的目标是将所有这些转换为整数月，以便我可以从 iStart 生成时间序列数据。i.e (iEnd: iStart + 0+ til desired_months) 我已经包含desired_months在我想根据列中的各种数据生成的列中value

有条件的开关在这里似乎合适，但我无法让它工作。日期解析似乎是最成问题的。我一直在想一些类似于is number=1b或is date=1b会有所帮助的东西。

提前感谢您的任何意见。

show t;

Symbol  Symbol       Symbol        Symbol            Integer   
id      iStart        value    value_type       desired_months
---|--------------------------------- 
AAA|    2014.08   02/01/2015     date                      6           
BBB|    2014.08   1              month                     1           
CCC|    2014.08   2              year                     24 
DDD|    2014.08   3              months                    3 
EEE|    2014.08   4.5            years                    54 
FFF|    2014.08   2016.01.02     date                     17 
GGG|    2014.08   10/1/2014      date                      2 
HHH|    2014.08   24             months                   24 
III|    2014.08   07/2015        date_part                11 
JJJ|    2014.08   2/16           date_part                18

标签： kdb

解决方案

解决这个问题的一种方法可能是创建一个函数字典，该字典value根据它的内容进行转换val_type。见下文

q)dict:`date`month`year`date_part!({abs y-"m"$"D"$x};{[x;y]"F"$x};{[x;y]12*"F"$x};{abs y-"M"$"/"sv$[5>count x;("20";"0"),';]reverse"/"vs x})
q)dict
date     | {abs y-"m"$"D"$x}
month    | {[x;y]"F"$x}
year     | {[x;y]12*"F"$x}
date_part| {abs y-"M"$"/"sv$[5>count x;("20";"0"),';]reverse"/"vs x}

然后我们可以在对原表的更新中使用这个字典来返回

q)update desired_months:`int${[x;y;z;s]get each(x y),'enlist'[z],'s}[dict;val_type;string val;iStart]from t
iStart  val        val_type  desired_months
-------------------------------------------
2014.08 02/01/2015 date      6
2014.08 1          month     1
2014.08 2          year      24
2014.08 3          month     3
2014.08 4.5        year      54
2014.08 2016.01.02 date      17
2014.08 10/1/2014  date      2
2014.08 24         month     24
2014.08 07/2015    date_part 11
2014.08 2/16       date_part 18

这样做的一个困难是与value. date&的格式date_part并不一致，这意味着可能需要开发更全面的功能以涵盖所有可能性。

推荐阅读