- 博客(10)
- 收藏
- 关注
RSS订阅原创 scala语言的一些特技
用scala语言做spark项目也有一年了，虽然scala语言也是运行在jvm上面，但其是动态语言，还有很多之前从来没见过的特技，这里写这篇文章记录一下。1.case class样例类case class样例类初始化的时候不需要用new来初始化，而且此样例类自带了toString,hascode,equals等方法，这个样例类最多的用途是用来做模式匹配 case class P
2017-09-14 16:48:30
306
原创 kafka的相关要点总结
1.kafka每个节点叫做broker，producer向kafka发送消息时，是将消息发送给指定的topic。同时每个topic下面还细问分partition，具体到每条消息细分到哪个partition，是根据消息的key参数以及配置的partition规则来的，由于多个partition的存在，所以针对同一个topic，其吞吐量更高，并发性也越强2.partition中消息都是直接追加写到
2017-06-24 17:02:10
537
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人