mysql表结构hive_doc/hive表结构&mysql表结构.md · kfd-bigdata/kfd - Gitee.com

小咪咪 2022-11-05 03:25 171阅读 0赞

\# hive/hbase表结构设计

\#\# 数据收集表

\#\#\# hbase表结构

表名称 pv\_log\_yyyy\_mm\_dd\_HH

\`\`\`sql

create database my\_hive;

\`\`\`

\`\`\`shell

create 'pv\_log\_yyyy\_mm\_dd\_HH','log';

\`\`\`

\#\#\# hive表结构

表名称：pv\_log\_hive\_yyyy\_mm\_dd\_HH

| 字段名称 | 类型 | 备注 |

| --------------- | ------ | ------------------- |

| key | string | |

| appid | string | 项目appid |

| method | string | |

| ip | string | |

| port | string | |

| url | string | |

| country | string | 国家 |

| province | string | 省 |

| city | string | 市 |

| request\_time | string | 请求时间 10位时间戳 |

| os\_name | string | 操作系统名称 |

| os\_version | string | 操作系统版本号 |

| browser\_name | string | 浏览器名称 |

| browser\_version | string | 浏览器版本 |

| device\_type | string | moibie/pc |

\`\`\`sql

\-- 已经过时

CREATE EXTERNAL TABLE pv\_log\_hive

(key string, user\_agent string, method string,ip string,port string,url string,request\_time string)

STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'

WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,log:user\_agent,log:method,log:ip,log:port,log:url,log:request\_time")

TBLPROPERTIES ("hbase.table.name" = "pv\_log");

\`\`\`

\#\# mysql 表设计

\#\#\# 项目表

表名称：kfd\_project

| 列名称 | 类型 | 备注 |

| ------------ | ----------- | ----------- |

| id | bigint | 主键自增 |

| project\_name | varchar(50) | 项目名称 |

| appid | varchar(50) | |

| project\_url | varchar(50) | 项目url路径 |

| create\_time | datetime | 创建时间 |

\#\#\# 用户项目关联表

表名称：kfd\_user\_project\_relation

| 列名称 | 类型 | 备注 |

| ----------- | -------- | -------- |

| id | bigint | 主键自增 |

| user\_id | bigint | 用户id |

| project\_id | bigint | 项目id |

| create\_time | datetime | 创建时间 |

\#\#\# PV统计类表

\#\#\#\# 项目pv总统计表

表名称：kfd\_pv\_all

| 列名称 | 类型 | 备注 |

| ------------ | ----------- | ------------------- |

| id | bigint | 主键自增 |

| appid | varchar(50) | |

| pv\_count | bigint | pv总数 |

| create\_time | datetime | 创建时间 |

| request\_time | datetime | yyyy-mm-dd HH:00:00 |

\#\#\#\# 客户端请求方式pv总统计表

表名：kfd\_pv\_http\_client

| 列名称 | 类型 | 注释 |

| ------------ | ----------- | ------------------- |

| id | bigint | 主键 |

| appid | varchar(50) | 项目appid |

| create\_time | datatime | 创建时间 |

| request\_time | datetime | yyyy-mm-dd HH:00:00 |

| method | varchar(50) | 请求方式 |

| pv\_count | bigint | pc总数量 |

\#\#\# UV统计类表

\#\#\#\# 浏览器UV统计表

表名：kfd\_uv\_browser

| 列名称 | 类型 | 注释 |

| ------------ | ----------- | ------------------- |

| id | bigint | 主键 |

| appid | varchar(50) | 项目appid |

| create\_time | datatime | 创建时间 |

| request\_time | datetime | yyyy-mm-dd HH:00:00 |

| browser\_name | varchar(50) | 浏览器名称 |

| uv\_count | bigint | 浏览器UV数量 |

\#\#\#\# 操作系统UV统计表

表名：kfd\_uv\_os

| 列名称 | 类型 | 注释 |

| ------------ | ----------- | ------------------- |

| id | bigint | 主键 |

| appid | varchar(50) | 项目appid |

| create\_time | datatime | 创建时间 |

| request\_time | datetime | yyyy-mm-dd HH:00:00 |

| os\_name | varchar(50) | 操作系统+版本 |

| uv\_count | bigint | 操作系统uv数量 |

\#\#\#\# 客户端类型UV统计表

表名：kfd\_uv\_client\_type

| 列名称 | 类型 | 注释 |

| --------------- | ----------- | ------------------- |

| id | bigint | 主键 |

| appid | varchar(50) | 项目appid |

| create\_time | datatime | 创建时间 |

| request\_time | datetime | yyyy-mm-dd HH:00:00 |

| mobile\_uv\_count | bigint | 移动端uv数量 |

| pc\_uv\_count | bigint | pc端uv数量 |

\#\#\#\# 用户地域分布UV统计表

表名：kfd\_uv\_user\_area\_distribution

| 列名称 | 类型 | 注释 |

| --------------- | ----------- | ------------------- |

| id | bigint | 主键 |

| appid | varchar(20) | 项目appid |

| start\_count | datatime | 启动次数 |

| create\_time | datetime | 创建时间 |

| request\_time | bigint | 访问时间-yyyy-mm-dd HH |

| country | bigint | 国家 |

| province | varchar(20) | 省份 |

| city | varchar(20) | 城市 |

一键复制

编辑

原始数据

按行查看

历史

mysql表结构hive_doc/hive表结构&mysql表结构.md · kfd-bigdata/kfd - Gitee.com

发表评论取消回复

还没有评论，来说两句吧...

相关阅读

相关 MySQL表结构混乱：重建表结构指南

相关表结构误操作：MySQL修改表结构实例

相关 MySQL表结构

相关 mysql表结构hive_doc/hive表结构&mysql表结构.md · kfd-bigdata/kfd - Gitee.com

相关 mysql 导出表结构

相关 Mysql复制表结构、表数据

相关 MySQL复制表结构表数据

相关 Mysql复制表结构、表数据

相关 MySQL表结构

相关更新mysql表结构，同步数据库表结构