玖月启程-CSDN博客

原创 pip升级后无法使用问题

前言ubuntu16.04下无需安装python，默认已经装好了，可以使用whereis python查看python所在路径，默认为2.7版本，同时存在pip和pip2两个命令安装模块工具，其他一些知识点请参考其他博客。在一些情况下，Terminal会提示You are using pip version 8.1.1, however version 10.0.1 is availabl...

2018-04-24 09:53:40 2679 1

原创 Python实现微信好友数据分析

作者：September 。致谢：微信公众号、data挖掘机。说明：本文是笔者看到一篇文章《基于Python实现的微信好友数据分析》，也正好想简单学习Python，据说Python很简洁，也的确如此。声明：本文中的代码是从公众号中弄过来的，但是没有格式，自己通过简单学习，掌握了一点点知识，也将代码改好了，再后来看到data挖掘机的博客，发现了他写的一些优化，感觉也是很棒，Code详见Git...

2018-03-18 13:35:04 798

原创微信小程序上的“生活圈”

作者：September 。致谢：耿耿、Boss Chen。说明：本文是笔者离开本科实验室后的第一篇缅怀以前Coder生活的文章，有感而发，于是借着“小程序”的开发去记录一下之前的开发领域，大部分都是基于第三方开发，服务于应用场景。声明：本文中的技术部分在本科时期都去学习了一下，但是小程序由于时间问题没有亲自去实现（在耿耿的带领下学习了一遍流程），这里只讲技术点，并附上原作者的课程设计报告...

2018-03-06 20:22:09 1563 3

原创微信开发<1>——图像拍照接口实现

参考Code，记得点小星星哦，有问题可以显示评论区，一定尽快回答。说明图像接口，属于微信JS-SDK说明文档中比较有挑战性的地方。需要实现：微信测试号登录测试号接入实现测试号开发信息 AccessToken + Jsapi_Ticket前台测试拍照页面后台素材下载实现功能为了完成人脸识别的功能，人脸识别这块通过深度学习完成，目前还没集成代码，可以先用Face++第三方测试

2017-12-12 22:05:38 757

原创 jetty JSP support not configured

首先，选择下载jetty，按照此文操作不知道是否可以实现，笔者提供一个一定可以成功的，亲测有效。详细案例参考github项目程序 springmvc-demo，有帮助请点赞，不明白的可以评论。<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-ins

2017-09-06 18:35:04 1502 2

原创 Apache CarbonData快速入门指南

How to Use it?CarbonData是由华为开发、开源并支持Apache Hadoop的列式存储文件格式，支持索引、压缩以及解编码等，其目的是为了实现同一份数据达到多种需求，而且能够实现更快的交互查询。　Follow the steps in CarbonData-Quick Start. Put the *.csv file into HDFS, like:cd carbon

2017-08-25 11:20:09 1405 1

原创 Maven插件整合protocol buffer

1. 博客由来：（1）其他博客（2）2.5.0版本坑了半天，语法已经改变，参考2. 分析：在这个过程中可以直接使用.exe编译.proto，当然最好使用Maven插件进行编译，出现问题：a)在上述其他博客中没有找到那个插件的一些信息，放弃，但是配置还是可以学习一下； b)在上述2中被版本语法折腾了；c)在执行compile过程windows中出现 “另一个程序正在使用此文件，进程无法访问

2017-08-22 22:18:04 2900 5

转载 hadoop学习之路

每个人也存在学习上的低谷点，笔者也是芸芸众生，自然也有一些只能通过码字才能释怀的情景。在校外毕设时候接触了一些大数据的知识点，但是在学习上因为其偏于底层而没有深入进去，但很明显，有些时候还是需要硬着头皮学下去。特此，在一年前看了阿里封神的一篇对于“Hadoop学习之路”的讲解，今天也将其分享出来，也是自己学习的一个起点。转载地址：阿里封神谈hadoop学习之路1. 引言当前，越

2017-08-06 11:50:31 413 1

原创 Java根据词频生成批量数据

1. 背景：首先条件是1200列的4W行数据，先进行各个列字段的词频统计，然后根据这些列的词频给出任意GB的生成数据。 2. 分析：将各个列的词频信息放在Column.txt中，（Reporting_IsEditorial.txt），这个地方可以有两种方案，（a）根据区间或者上界查找（二分查找）；（b）根据初始化的String[]数组。Reporting_IsEditorial T

2017-07-30 20:17:55 405

原创 UESTC 187 Prime Palindromes

1. 背景：原题链接：http://acm.uestc.edu.cn/#/problem/show/187The number 151151 is a prime palindrome because it is both a prime number and a palindrome (it is the same number when read forward as back

2017-07-27 22:04:01 331

原创 Spark Streaming java实现简单例子(一)

1. 背景：之前已经学习过Spark SQL的相关知识，现在开始对Spark的另一模块Streaming部分进行学习。首先是参考官网上的Demo进行样例的编写，但是发现代码有点问题，百度之后发现，在一处代码处发现问题，所以写此文。2. 介绍：一些博客上的 JavaDStream words = lines.flatMap(new FlatMapFunction(){ //如果是Scala，

2017-07-24 23:17:37 4255 1

原创 SummerTraining——字典树（1）

转 http://www.cnblogs.com/tanky_woo/archive/2010/09/24/1833717.html1. 定义：优点是：利用字符串的公共前缀来减少查询时间，最大限度地减少无谓的字符串比较，查询效率比哈希树高。Trie的数据结构定义：

2017-07-24 10:31:59 277

原创 IDEA本地执行 or 调试Spark Application的方法

1.背景： Spark是基于内存的分布式计算框架，在大数据时代应用广阔，同Hadoop一样，在写代码时一般都需要将jar部署到集群或者单节点上，这样可能会造成操作上的繁琐。对此，本人查找了一些方法，使得Spark或者Hadoop程序可以在本地IDE中执行（常见的java编写工具有Eclipse或者IntelliJ），2. 介绍：在直接运行中肯定报 “A master URL must be

2017-07-23 19:10:26 1253

原创时序大数据可视化分析平台研究与设计

毕业设计(1) —— 时序大数据可视化分析平台研究与设计毕业尾声，今天突然想在CSDN写写博客了，积累一些心得。通过时序大数据可视化平台研究与设计这个毕业课题来总结一下学习过程，一个新的起跑线：第1章绪论第2章国内外研究现状和相关工作介绍第3章基于Spark 的时序大数据分析方案第4章时序大数据的可视化分析系统实现第5章实验结果分析第6章总结与展望参考文献致谢附录英文

2017-06-19 16:25:01 5758 2

原创 JS直接调用java后台中的函数——DWR

1、配置xml<web-app xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns="http://java.sun.com/xml/ns/javaee" xsi:schemaLocation="http://java.sun.com/xml/ns/javaee http://java.sun.com/xml/ns/ja

2015-12-06 20:39:42 1133

原创微信学习系列之一：定时获取微信access_token的线程

package wx.thread;import org.slf4j.Logger;import org.slf4j.LoggerFactory;import entity.AccessToken;import util.ReadSQLUtil;import util.WeixinUtil;import wx.service.DBService;/** * * @Pack

2015-12-06 10:37:59 1072