- 博客(5)
- 收藏
- 关注
RSS订阅原创 更改Linux服务器主机名 - 不用重启服务器
执行hostname命令,显示当前主机名执行hostname NEW_NAME 命令,更改主机名,<这种方法只对当前系统有效，重启后无效>虽然更改成功,但是当前会话无效,需要另外开启一个会话然后编辑/etc/sysconfig/network,加上HOSTNAME=<HOSTNAME>这一行vim /etc/sysconfig/networkHOSTNAME=<HOSTNAME>'NETWORKING=yes'是原先就有的,..
2020-09-06 20:52:54
773
原创 Structured Streaming分流,多个流式输出
方法1val query_station = etcTollEnBillInfo_station_result.writeStream .format("console") .outputMode("update") //update ,append ,complete .option("truncate", false) //不省略的显示数据 //.option("checkpointLocation", "./StructuredSteam.
2020-07-15 10:39:38
1173
7
原创 spark Structured steaming 写入mysql的工具类(不考虑mysql表的字段类型)
MysqlSink_StructuredStreaming.scala代码:package com.hr.utilsimport org.apache.spark.sql.ForeachWriterimport java.sql.{Connection, DriverManager, PreparedStatement}import org.apache.spark.sql.SparkSessionimport org.apache.spark.sql.functions._...
2020-07-03 14:40:15
318
原创 spark DataFrame 分区写入mysql的工具类
话不多说,我知道各位大佬都很忙直接上代码package com.hr.utilsimport java.sql.{Connection, DriverManager, PreparedStatement}import org.apache.spark.sql.SparkSessionimport org.apache.spark.sql.functions._import scala.collection.mutable.ListBufferimport java.sql.{Connec.
2020-06-23 17:02:09
433
原创 linux命令执行顺序和上一个linux命令执行成功与否的关系
在shell脚本中,linux的命令是从上到下一条一条执行的,执行完当前命令再执行下一个命令,但是当前命令是启动一个脚本,该脚本又是启动一个java程序,那个是java程序先启动还是下一条linux命令先执行呢?? 我实验中发现是先启动java程序,并且等待java程序执行完毕后才执行下一条linux命令, 补充一些,即使这个java程序执行失败...
2020-03-13 17:31:19
651
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人