代码之家 › 专栏 › 技术社区 › Christian Studer delphist

nosql与气象数据

nosql

5

Christian Studer delphist · 技术社区 · 16 年前

所以有一个新的很酷的东西,这些nosql数据库。这就是我的数据:一行行一行的气象数据:值,表示在某个特定时间在某个特定地点(由气象组织编号而不是坐标标识)的特定测量值。

不是每个站点都测量每个参数,也不是每个参数都一直测量。

我在mysql中存储了这些数据(30年的小时值,结果是大约10亿个值)。持续的增长和不可预见的更多数据的增加让我有点头疼。

读到基于文档的nosql系统似乎很容易扩展,我想知道nosql是否也是一个可行的气象数据存储概念。你有这方面的经验吗?

更新:忘记了典型的查询:大多数查询需要时间轴上的数据:即,给我066310号站从2010年1月1日00:00到2010年3月1日00:00的温度。

或者:给我一个特定站点所有参数的最新值。

3 回复 | 直到 16 年前

1

2

ChristopheD 16 年前

当您的数据结构非常简单(例如一个简单的键值存储)/可预测,并且您不需要关系完整性,也不需要特别和/或高级查询时,nosql可能非常适合。

但是,您在易扩展性方面的优势可能会在灵活性和一致性方面失去。

最大的问题是要有一个简单的方法来组合对数据的复杂查询。我认为气象数据不是nosql的最佳候选数据。

我个人更喜欢postgresql而不是mysql,在正确设置的情况下,我发现postgresql的可伸缩性非常强(即使有数百万甚至数十亿行)。

2

1

Marco Mariani 16 年前

我认为在放弃sql之前,您应该尝试使用功能齐全、成熟的dbms。

例如,请参见:

3

1

ase 16 年前

我发现现在很难找到一个连贯的答案,但我要说的是。

谢谢收听;)