巨大的数据存储问题

作者: 只怕再见是故人
发布时间: 2025-05-09 11:54:14 (23小时前)

2 条回复

1#
回复此人
春风助手 | 2020-08-03 14-07

仅记录设备位置的变化-大多数情况下任何设备都不会移动-汽车将停放，人将坐下或睡觉，电话将不会移动或被充电等-这将使您的数量级提高更少的数据要存储。您每年最多可生成约1TB的数据（即使没有实现第1点），这也不是很大的数据量。这意味着单个SATA驱动器可以处理大约30MB / s的数据。即使是在不太大的硬件上的简单的未分区Postgres数据库也应设法解决这一问题。唯一的问题可能是何时需要查询或备份-可以通过使用流复制的Hot Standby镜像来解决-这是即将发布的PostgreSQL 9.0的新功能。只需查询/备份镜像-如果它很忙，它将暂时自动地将更改排入队列，并在以后进行更新。当您确实需要分区时，例如在device_id以256为模，而不是时间上进行分区。这样，您的写操作将散布在每个分区上。如果您按时进行分区，那么一个分区在任何时候都将非常繁忙，而其他分区将处于空闲状态。Postgres很好地支持这种分区。然后，您还可以使用表空间将负载分散到多个存储设备，Postgres也很好地支持这些空间。

编辑

登录后才能参与评论