关于nosql和sql的问题
我现在手头上有一个项目,需要并发写入的数据非常大,初步假设 1s 并发 100次,然后要每次都要存储一条数据,那么1分钟内就会出现6000条数据。
这些数据进来的时候要计算,计算完毕好的结果才保存,然后以后会读取这些数据出来(包括实时数据与历史数据)。
这些数据第一时间往redis里写入,然后有一个任务将数据以每分钟1次的往sql写入(变成历史数据)
读取数据的时候如果查询的是即使数据,则从redis上获取,如果数据历史大于1000条,就往sql里头获取。
这样的方案如何?
另外,其实我希望使用sql的一些聚合函数功能,但由于我的数据表结构不固定,没办法将字段分拆得合理,所以我考虑选用nosql的方案。
CHICHI
11 years, 1 month ago