微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

不同库的结果和性能不同

如何解决不同库的结果和性能不同

在Felipe Mello的信息丰富的答案之上的一些其他信息(免责声明:此处是DTAIdistance的作者)。

对于距离结果:

  • DTAIdistance仅使用欧几里得距离(或L2范数),这是硬编码的。做出此选择是为了加快C代码的执行速度(不调用函数)。“快速”是指使用基于C的实现而不是纯Python版本,因此这两种方法给出的结果完全相同。
  • FastDTW是与DTW不同的算法。这是线性近似。“快速”是指较低的复杂性。
  • cDTW。我对这个工具箱不是很熟悉,但是它似乎实现了L1规范。

对于速度结果:

通常,基于纯C的算法比纯Python的算法快100倍(在DTAIdistance中,这是distance()和distance_fast()之间的差异)。对于基于C的方法,差异主要是由于方法的灵活性。例如,传递自定义规范会减慢该方法的速度(更多函数调用)。同样,不同的方法具有不同的选项,这会导致算法中或多或少的switch语句。例如,DTAIdistance提供了许多方法来调整该方法,因为它更喜欢提早停止计算而不是进一步的优化(也由Felipe Mello观察到)。此外,不同的方法存储不同数量的数据。DTAIdistance距离方法不存储整个矩阵,也不提供线性空间复杂度(使用具有二次空间复杂度的warping_paths方法获得完整的矩阵)。通常,对于DTW,建议使用一个窗口来稍微降低时间复杂度。

对于DTAIdistance,所有设计选择都考虑了时间序列聚类应用程序(distance_matrix_fast方法)。这是不允许自定义规范的另一个原因。DTW代码必须是纯C语言,才能在C代码级别上支持并行化,并且具有最小的开销(它使用OpenMP)来计算序列之间的所有成对距离。

解决方法

我正在比较DTW计算的库dtaidistancefastdtwcdtw。这是我的代码:

from fastdtw import fastdtw
from cdtw import pydtw
import fastdtw
import array
from timeit import default_timer as timer
from dtaidistance import dtw,dtw_visualisation as dtwvis

s1 = mySampleSequences[0] # first sample sequence consisting of 3000 samples
s2 = mySampleSequences[1] # second sample sequence consisting of 3000 samples

start = timer()
distance1 = dtw.distance(s1,s2)
end = timer()
start2 = timer()
distance2 = dtw.distance_fast(array.array('d',s1),array.array('d',s2))
end2 = timer()
start3 = timer()
distance3,path3 = fastdtw(s1,s2)
end3 = timer()
start4 = timer()
distance4 = pydtw.dtw(s1,s2).get_dist()
end4 = timer()

print("dtw.distance(x,y) time: "+ str(end - start))
print("dtw.distance(x,y) distance: "+str(distance1))
print("dtw.distance_fast(x,y) time: "+ str(end2 - start2))
print("dtw.distance_fast(x,y) distance: " + str(distance2))
print("fastdtw(x,y) time: "+ str(end3 - start3))
print("fastdtw(x,y) distance: " + str(distance3))
print("pydtw.dtw(x,y) time: "+ str(end4 - start4))
print("pydtw.dtw(x,y) distance: " + str(distance4))

这是我得到的输出:

  • dtw.distance(x,y)时间:22.16925272245262
  • dtw.distance(x,y)距离:1888.8583853746156
  • dtw.distance_fast(x,y)时间:0.3889036471839056
  • dtw.distance_fast(x,y)距离:1888.8583853746156
  • fastdtw(x,y)时间:0.23296659641047412
  • fastdtw(x,y)距离:27238.0
  • pydtw.dtw(x,y)时间:0.13706478039556558
  • pydtw.dtw(x,y)距离:17330.0

我的问题是:为什么我会有不同的表演和不同的距离?非常感谢您的评论。

//编辑:时间测量单位为秒。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。