有关新用户留存率模型的一种设计方法
今天分享一个新用户留存率模型的设计 1、抛出问题 用户留存是用户分析中最常用到的指标之一。 我们常常接到这样的需求： ~我们要看1天、2天、3天、4天 … 7天的留存~ ~我们要看1天、2天、3天、4天 … 28天的留存~ 还有一些不按套路出牌的： ~我们要看第33天的留存~ ~我们要看第56天的留存~ … 让你在代码里写连着7天的留存，就已……
会员资料
ID：2
邮箱：您没有查看权限
网站：该用户很懒，还没有填写网站哦。
QQ：该用户很懒，还没有填写QQ哦。
最近登录：暂未登录
加入时间：2018-08-21 07:37:13
简介：该用户很懒，还没有填写个人简介。
社交网络
新浪微博 ：该用户很懒，还没有填写新浪微博。
百度ID ：该用户很懒，还没有填写百度ID。
Twitter ：该用户很懒，还没有填写Twitter。
GitHub ：该用户很懒，还没有填写GitHub。
spark sql多维分析优化——提高读取文件的并行度
这次分享多维分析优化的另一种情况 【本文大纲】 1、描述问题背景 2、讲一下解决思路 3、解决办法（spark sql处理parquet row group原理及分区原理，参数测试，解决方案） 4、效果 1、描述问题 代码如下： select netease_user, if(campaign_id is null, 'all', campaign_……
spark sql多维分析优化——细节是魔鬼
这次是分享一个多维分析优化的案例 【本文大纲】 业务背景 spark sql处理count distinct的原理 spark sql 处理 grouping sets的原理 优化过程及效果 总结 1、业务背景 先上sql： select if(req_netease_user is null, 'all',……
Hive源码系列（九）编译模块之语义解析 数据准备
在hive的源码apache-hive-2.1.1-src/data目录 下有测试数据以及脚本，进入该 目录执行 hive -f ‘scripts/q_test_init.sql’ 语句导入数据到hive，也可以自己创建数据表。 创建两张表： use tmp;create table t1 (id int, na……
Hive源码系列（八）编译模块之语义解析 整体分析
语义解析主要是把AST Tree转化为QueryBlock，那为什么要转成QueryBlock呢？从之前的分析，我们可以看到AST Tree 还是很抽象，并且也不携带表、字段相关的信息，进行语义解析可以将AST Tree分模块存入QueryBlock 并携带对应的元数据信息，为生成逻辑执行计划做准备 简单串一下语义解析 sql编译器的入口： ……
Hive源码系列（七）编译模块之词法、语法解析 （下）
这篇主要介绍hive词法、语法解析的源码 以及hive AstTree 1、Hive的语法文件 对一个已有的项目进行语法分析，首先是要找到语法分析文件，分析语法文件之间的关系，然后根据语法分析文件提供的接口，确定语法解析在这个体系中所处的位置。 语法文件是以.g结尾 基本可以确定了 ql下面就是需要找到东西 HiveLexer.g 是做词法分析……
Hive源码阅读系列（六）编译模块之词法、语法解析 （中）
这篇主要举实际案例说明怎么使用antlr工具、利用antlr生成的Lexer、Parser、TreeParser代码，获取asttree。这些都是hive获取asttree的过程，理解了这些，再理解hive的asttree就很容易了 程序设计语言入门小案例一般都用“Hello World”，在编译领域的入门往往选择计算器。而我们这次的小案例就更简单：……
Hive源码阅读系列（五）编译模块之词法、语法解析 （上）
词法、语法解析模块会先介绍一下antlr环境（上）。然后举实际案例说明怎么使用antlr工具、利用antlr生成的Lexer、Parser、TreeParser代码，获取asttree。这些都是hive获取asttree的过程，理解了这些，再理解hive的asttree就很容易了（中）。 最后 详细介绍hive词法、语法解析的源码 以及hive AstTr……
Hive源码阅读系列（四）编译模块之整体介绍
这次主要对Hive编译模块做整体介绍，后面会针对流程中的每一步做详细分析 1、Hive执行过程回顾 client:用户通过客户端提交查询操作 Driver:提供执行接口，负责接收查询请求并建立session，创建一系列环境参数等 Compiler:Hive的编译器，负责将sql转化为平台可执行的执行计划 MetaStore:Hi……
Hive源码阅读系列(三) hive2.1.1源码包介绍及调试
这次主要对hive源码包及hive的两种调试方式做了介绍，这篇结束后，整个源码调试环境的搭建已经完成。 源码包介绍参考官网： https://cwiki.apache.org/confluence/display/Hive/DeveloperGuide#DeveloperGuide-CodeOrganizationandaBriefArchitecture……
Hive源码阅读系列(二) hive2.1.1源码导入eclipse并做初步运行
上一篇主要写了hive2.1.1源码编译并编译成eclipse项目，这一篇主要写将hive2.1.1源码导入eclipse以及运行hive命令的入口类CliDriver.java。在导入及运行的过程会遇到各种各样的问题，本文写了自己遇到的问题及解决方案。把项目跑起来非常重要，这些都是我们后面分析调试hive编译模块源码的基础。 1、安装ecl……
Hive源码阅读系列(一) hive2.1.1源码编译并编译成eclipse项目
这是一篇工具类的文章，工欲善其事必先利其器，要分析调试hive源码，必须搭建一套hive的运行环境。还记得第一次搭建hive源码调试环境，用了一个月的时间，才完全跑通整个调试过程。中间遇到各种各样莫名奇妙的问题，也有好多次想放弃，幸好坚持了下来。 我在调试hive源码时，主要使用eclipse，所以最终要把hive源码编译成eclipse项目，方便导入……
数据仓库开发人员怎么避免成为取数机器？
从事互联网数据仓库工作好多年了，其中最大的感触就是数据仓库开发人员每天做的最多的工作就是为业务方取数。简单重复的取数工作，一方面很难让大家在技能上有提高，另一方面也慢慢的消磨了大家的积极性和意志，也让大家极没有存在感。 另外，在公司的整体架构中，取数这种工种很容易被替代，所以，也极不被重视。 那做为一名数据仓库的开发人员，该怎么反省提高自己？下面是我的一些……
大数据开发工程师如何避免成为取数机器？
从事互联网数据仓库工作好多年了，其中最大的感触就是数据仓库开发人员每天做的最多的工作就是为业务方取数。简单重复的取数工作，一方面很难让大家在技能上有提高，另一方面也慢慢的消磨了大家的积极性和意志，也让大家极没有存在感。 另外，在公司的整体架构中，取数这种工种很容易被替代，所以，也极不被重视。 那做为一名数据仓库的开发人员，该怎么反省提高自己？下面是我的一些……
共有 14 篇文章，仅显示前20篇文章，更多文章请登录进入后台查看
您已发表0条评论。
当前拥有 0 金币，穷逼一枚
金币细节
| 日期时间 | Points | 类别 | 状态 | 描述 |
|---|
您还没发表过任何的评论。我们期待您的精彩点评。