- 博客(5)
- 资源 (10)
- 收藏
- 关注
RSS订阅原创 Java JDBC连接Impala
需要用java jdbc 连接Impala 进行查询数据代码简单 和mysql类似 问题在于impala的驱动包先贴代码：public class TestImpala { static String JDBC_DRIVER = "com.cloudera.impala.jdbc4.Driver"; static String CONNECTION_URL = "jdbc:impala://192.168.30.50:21050/default"; public stat
2021-03-10 14:42:04
148
原创 Sparksql读impala hive表下parquet文件 String读取问题分享
用sparkSql 读取parquet文件数据传输到hbase parquet文件在impala创建的hive表下核心代码：val df = spark.read .option("mergeSchema", "true") .parquet(path) .select("xxx1", "xxx2", "xxx3")df.show()发现：+---------+---------------+--------------------+|200000466| ...
2020-12-22 08:45:00
419
原创 spark Streaming 报错 StreamingQueryException: null
org.apache.spark.sql.streaming.StreamingQueryException: nullCurrent Committed Offsets: {}Current Available Offsets: {}Caused by: java.lang.NumberFormatException: null
2020-12-15 10:09:47
601
1
原创 Superset安装
环境 CentOS7 + Python3.6 沙箱安装一、pyenv简介pyenv 主要用来管理 Python 的版本，比如一个项目需要 Python 2.x ，一个项目需要 Python 3.x 。pyenv 通过系统修改环境变量来实现 Python 不同版本的切换。pyenv 它并没有使用将不同的 PATH植入不同的shell这种高耦合的工作方式，而是简单地在PATH 的...
2019-05-06 15:57:09
574
原创 flink + kafka + es 流式计算
首先讲一下背景，公司现在要做流式，最后敲定用flink来做（考虑flink在阿里的巨大成功）。我们的数据读取Kafka ，经过处理之后会存储到ES中。现在还处在研究阶段，把一些基本的东西跑通，写这篇博客希望做一个记录 也希望能给刚开始搞flinkd 朋友们一点帮助。用到的技术：flink on yarn (1.7.0) kafka(1.1.1) es（1.7） maven(3.04)...
2019-03-12 11:43:45
4705
navicat数据库链接
2018-05-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人