适当的Python数据结构用于实时分析？

作者: WL
发布时间: 2024-04-13 04:25:27 (3月前)
转自：

2 条回复

0#
回复此人
日耀九洲 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 首先，我会质疑两个假设： </p> <OL> <LI> 您在帖子中提到数据每秒输入一次。如果您可以依赖它，则根本不需要时间戳 - 查找最后N个数据点与查找最后N秒的数据点完全相同。 </LI> <LI> 您有一个约束，您的摘要数据必须绝对100％实时。这可能会让生活更加复杂 - 是否有可能放松一下呢？ </LI> </醇> <P> 无论如何，这是一个使用列表的非常天真的方法。它满足您的需求。性能可能会成为问题，具体取决于您需要存储的先前数据点的数量。 </p> <P> 此外，您可能没有想到这一点，但是您是否需要过去数据的完整记录？或者你可以放弃东西？ </p> <pre> <code> data = [] new_observation = (timestamp, value) # new data comes in data.append(new_observation) # Slice the data to get the value of the last logged datapoint. data[-1] # Slice the data to get the mean of the datapoints for the last n seconds. mean(map(lambda x: x[1], filter(lambda o: current_time - o[0] < n, data))) # Perform a regression on the last n data points to get g/s. regression_function(data[-n:]) # Remove from the log data points older than n seconds. data = filter(lambda o: current_time - o[0] < n, data) </code> </pre> </DIV>

编辑

登录后才能参与评论