- 博客(13)
- 收藏
- 关注
RSS订阅转载 2020-10-29
什么是用户留存率在互联网行业中，用户在某段时间内开始使用应用，经过一段时间后，仍然继续使用该应用的用户，被认作是留存用户。这部分用户占当时新增用户的比例即是留存率，会按照每隔1单位时间（例日、周、月）来进行统计。顾名思义，留存指的就是“有多少用户留下来了”。留存用户和留存率体现了应用的质量和保留用户的能力。如何计算留存率留存率=新增用户中登录用户数/新增用户数*100%（一般统计周期为天）新增用户数：在某个时间段（一般为第一整天）新登录应用的用户数；登录用户数：登录应用后至当前时
2020-10-29 14:40:41
190
转载 MapReduce调优
MapReduce调优（完美版）MapReduce调优一、调优的目的 充分的利用机器的性能，更快的完成mr程序的计算任务。甚至是在有限的机器条件下，能够支持运行足够多的mr程序。二、调优的总体概述 从mr程序的内部运行机制，我们可以了解到一个mr程序由mapper和reducer两个阶段组成，其中mapper阶段包括：(1)数据的读取、(2)map处...
2020-07-06 11:15:51
140
原创 beeline配置
需要对hive的hiveserver2的beeline进行配置：（1）修改hadoop集群的hadoop的conf下的 hdfs-site.xml 配置文件：加入一条配置信息，表示启用 webhdfs。<property> <name>dfs.webhdfs.enabled</name> <value>true</va...
2020-05-07 15:35:09
888
原创 关闭集群时出现no resourcemanager to stop、no nodemanager to stop、no namenode to stop、no datanode to stop
关闭集群时出现no resourcemanager to stop、no nodemanager to stop、no namenode to stop、no datanode to stop，但是相关进程都真实存在，并且可用。原因： 当启动的时候如果没有指定pid的存放位置，hadoop(hbase也是这样)默认会放在Linux的/tmp目录下，进程名命名规则一般是框架名-...
2020-04-16 16:33:52
2361
3
原创 为什么阿里巴巴不喜欢招聘应届生？
## 为什么阿里巴巴不喜欢招聘应届生？这个问题，马云自己也曾说过。马云曾说阿里做了一个政策，每年招不超过300名应届生。招聘的员工大概有2/300人，应届生的数量不能超过10%。对于这么做的原因，马云给出了答复：1.应届生比较听话很多大公司都喜欢招应届毕业大学生，比如微软啊，IBM等等。这些公司都很喜欢应届毕业生。对刚毕业的大学生来说，顺利找到一份工作才是他们目前最着急的，而阿里并不缺工...
2020-04-09 16:35:11
408
原创 Hadoop和Spark Shuffle机制对比
Hadoop和Spark Shuffle机制对比Shuffle 管理器Hadoop 2.7.x Shuffle过程是sort-based过程，在shuffle过程中会发生排序行为； Spark 2.2.x Spark ShuffleManager 分为HashShuffleManager和SortShuffleManager。Spark 1.2后 默认为SortShuffleManage...
2020-04-03 09:14:40
213
原创 hive备份表
create table tb_user_bak like tb_user;或insert into table tb_user_bak select * from tb_useri;
2020-03-16 11:01:45
2194
原创 windows下安装gitblit
版本：gitblit-1.8.0.zip步骤：1.解压，到我的目录是：D:\Fiqiu\windows-gitblit-1.8.02.打开data\gitblit.properties，修改默认配置项，把下面的代码复制进去，保存#Git仓库目录git.repositoriesFolder = D:\Coding\GitblitData#访问端口server.httpP...
2019-05-14 20:44:55
2108
原创 beeline连接hive出错 Error: Could not open client transport with JDBC Uri
出现的错误：Error: Could not open client transport with JDBC Uri: jdbc:hive2://NODE01:10000: Failed to open new session: java.lang.RuntimeException:org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.se...
2019-05-05 22:02:26
2019
原创 MySQL字符集设置
系统变量： –character_set_server：默认的内部操作字符集 –character_set_client：客户端来源数据使用的字符集–character_set_connection：连接层字符集 –character_set_results：查询结果字符集 –character_set_database：当前选中数据库的默认字符集–character_set_system：系统元...
2018-03-25 18:44:15
266
原创 mysql安装启动发生1067错误
把my-default.ini文件名修改为my.ini，然后把下面的配置复制进去，其中port=….. 、basedir=….. 、basedir=….. 这三项在my-default.ini源文件中补全一下，把前面的 # 去掉 , 保存。...
2018-03-25 14:12:38
234
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人