【课后作业】ADS 层创建&数据接入

时间:2022-07-25
本文章向大家介绍【课后作业】ADS 层创建&数据接入,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。

因为数据仓库已经创建完成,所以直接基于已有的 DWS 层进行计算。计算 GMV 的 ADS 层具体操作下面会具体进行讲解。

ADS 层创建

1. 在 Node03 节点,/home/warehouse/sql 目录下编写 ads_gmv_ddl.sql,创建 DWS 层数据表:

vim /home/warehouse/sql/ads_gmv_ddl.sql

SQL 内容如下:

-- 使用数据库 mall
use mall;

-- 创建 gmv 表
drop table if exists ads_gmv_sum_day;
create table ads_gmv_sum_day( 
    `dt` string COMMENT '统计日期',
    `gmv_count`  bigint COMMENT '当日 gmv 订单个数',
    `gmv_amount`  decimal(16,2) COMMENT '当日 gmv 订单总金额',
    `gmv_payment`  decimal(16,2) COMMENT '当日支付金额' 
) COMMENT '每日 GMV 统计'
row format delimited  fields terminated by 't' 
location '/warehouse/mall/ads/ads_gmv_sum_day/'
;

2. 将 ads_gmv_ddl.sql 导入到 Hive 中,在 ADS 层创建结果表:

hive -f /home/warehouse/sql/ads_gmv_ddl.sql