在时间序列中使用Word2Vec学习有意义的时间序列嵌入表示

向量表示是机器学习生态系统中的一个关键概念。无论进行什么样的任务，我们总是试图训练找所掌握的数据的意义而机器学中通常使用数字向量来对数据进行描述，发现隐藏的行为，产生有价值的见解。

随着深度学习则是通过更少的假设和更少的工作获得更有意义的数据表示。例如在NLP领域，最早的 TF-IDF（词频-逆文档频率）是自然语言过程中采用的一种技术，用于将原始文本文档的集合转换为数字矩阵。TF-IDF 长期以来一直是NLP的基础，代表了一种编码文本序列的好方法。深度学习的出现首先带来了 Word2Vec 等新技术，然后是transformer编码。它们都是端到端的解决方案，并且在提供文本数据的数字数据表示方面更有效，并且无需（在大多数情况下）理解上下文。

在 NLP 领域采用深度学习嵌入表示是革命性的。通常将术语“嵌入表示”与涉及文本数据的应用程序相关联。这是因为很容易概括文本内容中单词的位置依赖性。

在以前的研究中一个有趣的想法可能是将 NLP 中获得的成就应用在时间序列域。这可能是一个完美的契合，因为时间序列数据也以位置/时间关系为特征。在NLP中的这些技术可以根据潜在的时间依赖性生成有价值的数据向量表示。所以出现了很多为时间序列数据生成嵌入的方法， Time2Vec 作为与模型无关的时间表示，可用于任何深度学习预测应用程序。Corr2Vec，通过研究它们的相互相关性来提取多个时间序列的嵌入表示。

在这篇文章中，我们尝试在时间序列域中应用 Word2Vec。目标是利用无监督方法（如 Word2Vec）的灵活性来学习有意义的时间序列嵌入。生成的嵌入应该能够捕获底层系统行为，以便在其他上下文中也可重用。

数据

我们从UCI 库中收集一些开源数据（在UCI 许可政策内）。Parking Birmingham 数据集包含从 2016/10/04 到 2016/12/19 的每小时 8:00–16:30 范围内的停车占用率。它非常适合我们的目的，因为它记录了来自不同位置的数据，使我们能够在多变量情况下进行切换。

我们拥有原始占用率（即当时停车场内有多少辆汽车）和最大停车容量。