- 博客(9)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 产业互联网与数字中台
文章摘自《中台战略：中台建设与数字商业》时代变迁我们正处于一个互联网新技术和各行业加快融合并孕育变革的时代，以云计算、大数据、物联网和人工智能为主要标志的新一代信心技术迅速发展，日益成为推动社会、经济、政治和文化等各个领域发展的强大动力，也带来或即将带来我们整个国家的变化，其中就包括关于政府和企业的三大变化。第一个变化就是过去20年的消费互联网时代，互联网云计算这种共享服务模...
2020-04-25 12:52:41
465
原创 Solr6.2.0 + zookeeper 集群搭建
一、安装包准备jdk版本:jdk-8u172-linux-x64.tar.gz solr版本:solr-6.2.0.tgz zookeeper版本:zookeeper-3.4.6.2.6.4.0-91.jar tomcat版本:apache-tomcat-8.5.46.tar.gz二、IP地址规划jdk : 192.168.12.21 ~ 192.168.12.23sol...
2020-03-21 22:39:53
279
原创 Spark GraphX 之同人关系归一分析 （一）
Spark GraphX 之同人关系归一分析一、绪论1.1 研究背景和意义随着互联网的迅速发展，多种多样网络应用程序呈现了爆发式的增长，直接造成人们对互联网的高度依赖性，人们的生活方式也逐步从现实生活转变到以网络生活为主的模式。人们通过网络与他人进行交流沟通，通过网络邮件的方式传递重要文件或信息，通过网络购物满足对象生活物质的追求，通过网络视频来满足对生活娱乐的追求等等。然而，...
2020-03-20 12:52:26
572
原创 Delta Lake （一） 简介
Delta Lake简介Delta Lake是一个开源存储层，为数据湖带来了可靠性。Delta Lake提供了ACID事务、可伸缩的元数据处理以及统一的流和批数据处理。Delta Lake运行在现有数据湖之上，与Apache Spark api完全兼容。特性Spark上的ACID事务:可序列化的隔离级别确保读者永远不会看到不一致的数据。 可伸缩的元数据处理:利用Spark的...
2020-03-20 11:33:47
1269
原创 java.lang.RuntimeException: java.lang.String is not a valid external type for schema of bigint
spark写hive时报错，日志如下：Job aborted due to stage failure: Task 15 in stage 38.0 failed 4 times, most recent failure: Lost task 15.3 in stage 38.0 (TID 19577, DataNode-7, executor 6): java.lang.Runtime...
2019-09-24 18:50:37
2997
原创 hadoop脚本启动时，错误： ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: Exception in secureMain
1.问题： 在使用Hadoop自带脚本时启动hdfs/yarn时出现的问题：mv: 无法获取"/usr/local/apps/hadoop-2.8.1/logs/hadoop-root-datanode-vm001.out.3" 的文件状态(stat): 没有那个文件或目录 在/usr/local/apps/hadoop-2.8.1/logs/hadoop-root-datan...
2018-06-15 09:55:44
13045
6
原创 java集合中Camparale与Camparator的区别
一、Comparable: Comparable:接口，位于 java.lang包下，实现了这个接口，就让这个类具备了可比较（排序）的能力如果我想对一个Person类型的集合进行排序，应该怎么办？让Person类实现Comparable接口 使用步骤： 1. 让类实现Comparable接口 2. 重写里面...
2018-05-17 19:52:37
590
Scala容器的核心编程.pdf
2020-02-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人