Hive用户行为数仓（二）业务术语1.用户 用户以设备为判断标准，在移动统计中，每个独立设备认为是一个独立用户。Android系统根据IMEI号，IOS系统根据OpenUDID来标识一个独立用户，每部手机一个用户。2.新增用户 首次联网使用应用的用户。如果一个用户首次打开某APP，那这个用户定义为新增用户；卸载再安装的设备，不会被算作一次新增。新增用户包括日新增用户、周新增用户、月新增用户。3.活
转载
2024-02-23 10:59:52
115阅读
本节基本涵盖了Hive日常使用的所有SQL，因为SQL太多，所以将SQL进行了如下分类：一、DDL语句（数据定义语句）： 对数据库的操作：包含创建、修改数据库 对数据表的操作：分为内部表及外部表，分区表和分桶表 二、DQL语句（数据查询语句）： 单表查询、关联查询 hive函数：包含聚合函数，条件函数，日期函数，字符串函数等 行转列及列转行：lateral view 与 explode 以及 re
转载
2024-07-24 10:29:29
23阅读
一个语音助手包含很多模块和环节，比如ASR、NLU、TTS、客户端等，那么如何评估一个语音助手以及其各个模块的效果呢？有没有可以量化的指标？1、产品指标：用户会话量：指每日用户对话次数。用户量：指每日用户量。次日留存：指次日仍然使用助手的用户相对于前一天的占比。第7日留存：以n为基准，则第n+7天仍然使
接上篇第6章的6.7.4 Hive第三天：Hive的Join语句、Hive数据排序、分区排序、OrderBy全局排序、MR内部排序SortBy、ClusterBy、Hive分桶及抽样查询、行转列与列转行、窗口函数，赋空值
本文目录6.7.5Rank 第7章函数 7.1系统内置函数 7.2自定义函数 7.3自定义UDF函数 第8章压缩和存储 8.1Hadoop源码编译支持Snappy压缩
转载
2024-08-20 09:19:06
21阅读
0x00 前言 最近又遇到了很多小伙伴在群里问画像数据的存储问题，这里分享一下之前写的一篇文章，给大家参考现在的用户画像，动不动就是几千几万个标签，标签一多就出现了一些需要克服的难题，比如下面两个：如何解决频繁新增和删除标签的场景如何解决不同标签更新时间和频率不同的问题 0x01 数据模型设计 从个人角度来讲，在大数据领域接触比较多的的存储引擎有这几个：Hive（Hdfs）、Hbase、ES。这
转载
2023-11-27 11:24:35
50阅读
有时为了查看用户的质量，次日留存，1周内的日留存，周留存率都是用得比较多的统计指标
原创
2022-09-28 16:46:45
101阅读
玩家在某段时间内注册开始游戏，经过一段时间后，仍然继续游戏的被认作是留存；这部分用户占当时新增用户的比例即是留存率，会按照每隔1单位时间（例日、周、月）来进行统计。顾名思义，留存指的就是“有多少玩家留下来了”。留存用户和留存率体现了应用的质量和保留用户的能力。
次日留存率 首次登陆后第二天登录游戏用户/统计日的注册用户数
三日留存率 首次登陆后第三天登
转载
2023-11-30 15:22:29
86阅读
什么是留存，比如在20200701这天操作了“点击banner”的用户有100个，这部分用户在20200702这天操作了“点击app签到”的有20个，那么对于分析时间是20200701，且“点击banner”的用户在次日“点击app签到”的留存率是20%。背景关于用户留存模型是各大商业数据分析平台必不可少的功能，企业一般用该模型衡量用户的活跃情况，也是能直接反应产品功能价值的直接指标；如，boss
转载
2024-05-16 09:36:48
265阅读
在电商行业，老板或运营同学经常需要看客户活跃，留存，流失情况。今天，就重点聊一下【如何计算客户的留存率？】留存即客户在完成第一次交易后，在后续的日子里，是否持续的上来交易。如果按月为单位，则就是客户首次成交后，后续月份的成交比例。被观察客户群：某月份首次成交客户 。后续的留存率都是基于这些客户来计算的。月度留存率算法公式：月度留存率 = 某月份中被观察客户中成交客户数 / 被观察月份的总成交客户数
转载
2024-03-01 15:27:16
142阅读
在互联网行业中，用户在某段时间内开始使用应用，经过一段时间后，仍然继续使用该应用的用户，被认作是留存用户，这部分用户占当时新增用户的比例即是留存率，会按照每隔1单位时间（例日、周、月）来进行统计。顾名思义，留存指的就是“有多少用户留下来了”。留存用户和留存率体现了应用的质量和保留用户的能力，那么我们怎么样计算留存率呢？看下面这个例子： 如上示例所示，我们如何通过Hive S
转载
2023-09-08 14:41:45
348阅读
今天介绍一个对互联网公司来说一个比较重要的指标计算方法 - 留存率。留存通俗来讲就是回头客，用户第一次体验了产品之后，是否有第二次，第三次，第n次重复使用和体验，是数据分析笔试中几乎必考的计算指标。本篇会结合博主学习到的项目示例，对留存率的计算有一个完完整整的梳理，篇幅会相对较长，但建议大家认真阅读。数据源： o_retailers_trade_useruser_idi
转载
2023-11-23 19:54:14
432阅读
一、数据类型1、基本数据类型Hive 支持关系型数据中大多数基本数据类型类型描述示例booleantrue/falseTRUEtinyint1字节的有符号整数-128~127 1Ysmallint2个字节的有符号整数，-32768~327671Sint4个字节的带符号整数1bigint8字节带符号整数1Lfloat4字节单精度浮点数1.0double8字节双精度浮点数1.0deicimal任意精度
转载
2023-07-12 21:35:04
121阅读
1.每天新增用户数怎么实现？2.日活怎么 实现 ？3.留存率怎么 实现 ？用户行为触发的日志上报,已经存放在Hive的外部分区表中.结构如下: 主要字段内容：dt表示日期,如20160510platform表示平台,只有两个选项,苹果和安卓mid是用户机器码,类似于网卡MAC地址什么的pver是版本channel是分发渠道现在需要统计每天用户的新增
很多同学都抱怨：用户留存、用户活跃、用户流失三大问题很难搞。一来，这三个问题看似相同，可又不全一样，不太清楚到底是啥。二来，这三个问题常常相互牵扯，相互影响，讲着讲着就晕了。三来，这三个问题都很难给分析建议，往往把数值算出来，就不知道说啥了。每次做分析，不是只能说：“要搞高！要搞低！”，就是战战兢兢地写上：具体情况得同业务沟通/得去问用户，给不出啥建设性意见。今天我们先正本清源，搞清楚这仨是啥。一
转载
2023-08-15 22:55:58
97阅读
运营模型中的经典模型：1、AARRR模型：Acquisition（获客）：获取客户的指标。Activation（活跃）：活跃度。提高活跃度的方法：获客渠道与产品定位相匹配，就会产生高质量的用户；能否留住用户关键在于产品一上来的几分钟
转载
2024-02-23 11:17:35
8阅读
## 实现Hive留存率的步骤
### 整体流程
1. 计算用户留存
2. 计算留存率
### 每一步具体操作
| 步骤 | 操作 |
| --- | --- |
| 1 | 计算用户留存 |
| 2 | 计算留存率 |
### 步骤一：计算用户留存
在Hive中，我们可以通过查询用户在不同时间段内的活跃情况，来计算用户的留存情况。首先，我们需要创建一张包含用户活跃情况的表。
```
原创
2024-05-31 04:16:43
77阅读
# 实现活跃留存hive的流程
本文将介绍如何使用Hive实现活跃留存（Active User Retention）分析。活跃留存是一种用于衡量用户参与度的指标，它表示在某个时间段内，用户是否继续使用产品或服务。对于产品运营和市场营销来说，了解用户的活跃留存情况非常重要，可以帮助优化产品和改进用户体验。
## 活跃留存Hive的流程
下面是活跃留存Hive实现的整体流程，可以使用流程图来展示：
原创
2023-08-18 14:47:06
95阅读
留存收益率计算公式留存收益率计算公式：留存收益率＝(净收益-全部股利)/净收益。留存收益率是指净收益扣除全部股利后与净收益的比率，该指标用于衡量当期收益总额有多大的比例留在公司用于公司发展，留存收益率与股利支付率是一对指标，此消彼长。 留存收益：留存收益是指企业从历年实现的利润中提取或形成的留存于企业的内部积累，包括盈余公积和未分配利润两类。盈余公积：企业按照有关规定从净利润中提取的积累
转载
2023-12-08 10:46:55
64阅读
user_profile表 question_practice_detail表 question_detail表29.计算用户的平均次日留存率select count(date2)/count(date1)
from(
select distinct a.device_id,
a.date as date1,
b.addday as date2
fr
转载
2023-12-07 02:11:59
110阅读
一、计算2020-07-22这一天的会员活跃度
### --- 计算2020-07-22这一天的会员活跃度
~~~ Hive on Tez测试数据说明：07-22(新增5000条) / 0723(新增4000条)：18999条左右，执行脚本 ### --- Hive on Tez语法
SCRIPT_HOME=/data/yanqidw/script/member
