从Google Analytics得到的一点启发和想法, 关于(类)实时数据统计和报表.
2009-01-04 02:17
344 查看
[个人想法,不供参考]
Google Analytics的对于page view的report给出的(似乎)是今天以前的数据, 也就是从开始到昨天的数据.
因此, 首先, 对于类似的click report, 我们也可以参照这样的方式, 对于类实时统计数据, 只给出最后一个当前统计周期之前的数据, 对于当天(当前统计周期)的数据不予考虑.
然后, 在统计的时候, 当当前周期结束的时候, 我们可以把此周期(或之前)的实时(click)数据转移到待统计数据表(其实和实时数据表一样), 它保存的是为进行统计处理的数据.
统计程序只处理这张表来把实时数据处理/计算到统计表. (这样的话, 统计程序处理的表, 也就是待统计数据会比较少, 另外, 实时表的数据也会减少, 有利于加快检索).
这样做的好处是, 实时数据/待统计实时数据/统计数据 (ps, 甚至还有历史数据)都得到相应的分离, 在处理的时候都只会处理相应的数据, 减少处理的数据量, 并提高数据的处理速度.
Google Analytics的对于page view的report给出的(似乎)是今天以前的数据, 也就是从开始到昨天的数据.
因此, 首先, 对于类似的click report, 我们也可以参照这样的方式, 对于类实时统计数据, 只给出最后一个当前统计周期之前的数据, 对于当天(当前统计周期)的数据不予考虑.
然后, 在统计的时候, 当当前周期结束的时候, 我们可以把此周期(或之前)的实时(click)数据转移到待统计数据表(其实和实时数据表一样), 它保存的是为进行统计处理的数据.
统计程序只处理这张表来把实时数据处理/计算到统计表. (这样的话, 统计程序处理的表, 也就是待统计数据会比较少, 另外, 实时表的数据也会减少, 有利于加快检索).
这样做的好处是, 实时数据/待统计实时数据/统计数据 (ps, 甚至还有历史数据)都得到相应的分离, 在处理的时候都只会处理相应的数据, 减少处理的数据量, 并提高数据的处理速度.
相关文章推荐
- 05 关于AVR ATmega8 串口数据协议传输的奇偶校验码的一点想法
- 关于产品与数据该如何结合的一点想法(一)
- 关于使用EXCEL做报表的一点想法
- 关于实时数据统计
- 关于Ext的EditorGridPanel实时修改数据后保存到数据库的一点心得
- 关于数据挖掘的一点想法(复杂网络、机器学习、群体智慧)
- FLOT+SSH+JQUERY完成实时数据统计报表
- 关于电信运营商大数据应用的一点启发
- [笔记].关于Nios II的数据类型的一点想法
- 关于Ext的EditorGridPanel实时修改数据后保存到数据库的一点心得
- 关于函数调用得到传递参数的想法
- 数据压缩技术简史---关于实时数据压缩的基础知识
- 关于用户角色权限的一点想法
- SparkSQL结合SparkStreaming,使用SQL完成实时计算中的数据统计
- [LeetCode]关于Add Two Numbers的一点想法
- 关于数据统计的应用
- 报表分组统计然后显示数据的时候顺序不正常,即使用order by 也是不可以!见图
- Druid (大数据实时统计分析数据存储)
- 关于登陆时被截取用户密码的一点想法(出自新手,勿喷)
- 关于APP自动化工程的一点小想法