mysql 留存率统计_留存率,数据表分表问题

傷城~ 2022-10-25 01:47 182阅读 0赞

你的位置:

问答吧

\-> PHP基础

\-> 问题详情

留存率,数据表分表问题

本帖最后由 minoc 于 2013-5-22 15:00 编辑

现在有一个1千多万的数据表,是记录的用户的产品使用记录,

有如下几用查询留存要用到的字段,

id    userid   软件使用时间戳timestamp    应用包名packname    版本号version    发布渠道channel   用户注册时间register   数据入库时间datetime

数据600M多,索引600M多,一共1400万条左右,

此表涉及到留存率这个功能,比如3月注册的用户在4月的留存情况, 还有可能要看3月注册的用户在5月的留存情况,更具体的是,3月在4月中每一天的留存率,

如:3月在4月的留存率,即是(register=3月内 and timestamp=4月内),这个条件内的用户数占3月用户注册总数的比例

产品越来用户越多,数据增加越来越大,如果要分表,当前这个表就要保留最少3 4 5月这3个月的数据,查询了一下,这3个月占了900W多, 如果现在查询一次留存率,把3月在4月的留存缓存了,只需要保留4 5月的数据.也有700W多,数据表还是挺大的,但这不是办法,以后数据更多的时候,一个月有可能就会出现1千万,所以这样分表只是把表缩小了体积,没有多大意义

其实说这么多,我想知道的是,留存率,怎么统计比较好,可以占用空间少,效率又高,注意里面有版本和包名的字段,用处是查询一个包名或者版本3月在4月的留存情况.

作者: minoc

发布时间: 2013-05-22

分去吧 现在都是这样 空间换时间  或者是加个缓存

作者: 弱水寒

发布时间: 2013-05-22

弱水寒 发表于 2013-5-22 15:54

分去吧 现在都是这样 空间换时间  或者是加个缓存

不是说一定要在现在的表基础上分,

而是找到更好的数据存储方式,

刚在又百度了老半天,又找到一个更理想的留存存储方式,不过还不太完善,正在研究中

作者: minoc

发布时间: 2013-05-22

难道你想改变原来的数据存储方式？

作者: 弱水寒

发布时间: 2013-05-22

弱水寒 发表于 2013-5-22 16:03

难道你想改变原来的数据存储方式？

把原来的数据分离出来,

文档已经总结好了, 明天就试验,

这样的话表结构会缩小N多,以后数据量大了也更容易分表,100万用户1天也只有100万条数据,但不可能100万用户会同时在这一天使用

其实吧,我现在的想法是,不要把功能全做在一个表里去,可以把每个功能或多个类似的功能做在单独一个表,相同数据可以在多表中重复浪费磁盘空间(当然有限),但可以提高性能及减少问题复杂性,后期更好维护及分表

作者: minoc

发布时间: 2013-05-22

试下mysql merge吧，每月一个表，如果单独查询某个月可以用子表查询，如果查询三个月可查询主表，这样效率就高了很多，另外可以根据需求来修改主表包含的子表如三个月就包含，3，4，5，如两个月就包含3，4

作者: chouxiaozi

发布时间: 2013-05-23

发表评论取消回复

表情：

评论列表（有 0 条评论，182人围观）

还没有评论，来说两句吧...

相关阅读

相关 SQL计算留存率指标

select ,CONCAT(ROUND(100ciriliucun/huoyue,2),'%') ciri from( select DATE_FORMAT(

た入场券/ 2023年07月17日 06:18/ 0 赞/ 10 阅读

相关 SQL计算留存率指标

select , concat(round(100 次日留存用户数/活跃用户数, 2), '%') 次日留存率, concat(round(100

逃离我推掉我的手/ 2023年07月17日 06:09/ 0 赞/ 11 阅读

相关用户留存率

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhp

小咪咪/ 2023年02月26日 15:26/ 0 赞/ 7 阅读

相关 GoLang生成留存率时间周期

需求生成留存率生成周期 package main import ( "flag" "fmt" "regexp"

快来打我*/ 2022年12月20日 08:37/ 0 赞/ 141 阅读

相关 mysql怎么分组计算逾期率_Tableau分享第一篇：如何计算分组留存率（Cohort Analysis)！...

衡量一款产品是否健康，用户的留存率是一个关键的指标，常见的有7日留存率，14天留存率，30天留存率，60天留存率等等。今天Tay哥先讲一下如何用Tableau做Cohort A

梦里梦外;/ 2022年10月27日 05:16/ 0 赞/ 203 阅读

相关 mysql 留存率统计_留存率,数据表分表问题

你的位置: 问答吧 \-> PHP基础 \-> 问题详情留存率,数据表分表问题本帖最后由 minoc 于 2013-5-22 15:00 编辑现在有一个1千多

傷城~/ 2022年10月25日 01:47/ 0 赞/ 183 阅读

相关用Redis bitmap统计活跃用户、留存

Spool的开发者博客，描述了Spool利用Redis的bitmaps相关的操作，进行网站活跃用户统计工作。原文：http://blog.getspo

落日映苍穹つ/ 2022年08月14日 05:00/ 0 赞/ 218 阅读

相关程序员：产品形态变更要迅速；要尽力提高用户留存率

产品形态变更要迅速；要尽力提高用户留存率　　由于用户短期内的大量增加是足记团队计划外的情况，因此，足记必须应对好这次难得的机会。　　创业的确需要自己的节奏和调性

拼搏现实的明天。/ 2022年08月07日 05:52/ 0 赞/ 184 阅读

相关用Redis bitmap统计活跃用户、留存

[用Redis bitmap统计活跃用户、留存][Redis bitmap] 分类： [NOSQL][] [大数据处理][Link 1] Spoo

水深无声/ 2022年08月05日 07:29/ 0 赞/ 294 阅读

相关用Redis bitmap统计活跃用户、留存

Spool的开发者博客，描述了Spool利用Redis的bitmaps相关的操作，进行网站活跃用户统计工作。原文：http://blog.getspo

刺骨的言语ヽ痛彻心扉/ 2022年01月14日 14:05/ 0 赞/ 242 阅读