- 博客(186)
- 资源 (16)
- 收藏
- 关注
RSS订阅原创 DataX-数据迁移Oracle到Mysql-ETL工具
自检脚本： python {YOUR_DATAX_HOME}/bin/datax.py {YOUR_DATAX_HOME}/job/job.json。三、datax-web: DataX管理调度。
2024-03-14 15:30:16
518
原创 FastDFS实现大文件分片上传
Docker方式安装FastDFS1、拉取镜像命令docker pull delron/fastdfs 2、使用docker镜像构建tracker容器（跟踪服务器，起到调度的作用）docker run -dti --network=host --name tracker -v /var/fdfs/tracker:/var/fdfs -v /etc/localtime:/etc/localtime delron/fastdfs tracker3、使用docker镜像构建storage容器（存储服
2022-01-28 10:08:57
5190
2
原创 地图爬虫 坐标转换
1、百度地图 关键字爬虫（python）百度地图信息采集器（exe暂无法使用）https://github.com/lolkt/BaiduMap-webcrawler-information此处爬虫的坐标为投影坐标2、坐标转换（python）https://github.com/wandergis/coordTransform_py坐标转换模块此模块用于百度坐标系(bd-09)、火星坐标系(国测局坐标系、gcj02)、WGS84坐标系的相互转换，并提供中文地址到坐标的转换功能
2021-11-15 20:25:50
653
原创 Centos7 部署 Zlmediakit+WVP
1、环境准备yum -y updateyum -y install git vim unzip net-tools wget openssl-devel bzip2 gcc gcc-c++ gmp-devel mpfr-devel libmpc-devel make zlib zlib-devel cmake关闭SELINUXgetenforce ##查看下状态vim /etc/selinux/config ##修改配置文件，将SELINUX=en
2021-09-26 17:01:15
2725
原创 蓝天采集器安装部署
1、安装docker、portainercentos7安装docker以及搭建portainer可视化UI_Sir_小三的博客https://blog.csdn.net/qq_42962779/article/details/104666070Xshell 6 (Build 0197)Copyright (c) 2002 NetSarang Computer, Inc. All rights reserved.Type `help' to learn how to use Xshel
2021-08-10 16:44:11
918
原创 Centos7 编译安装Cmake+ffmpeg
1、系统准备安装好Centos7.9，并打好系统补丁，安装一些常用工具，关闭防火墙，yum -y updateyum -y install gityum -y install vimyum -y install unzipyum -y install net-toolsyum -y install wgetyum -y install openssl-develyum -y install bzip2 gcc gcc-c++ gmp-devel mpfr-devel libmpc-d
2021-08-10 16:37:24
355
原创 win10本地 Nginx、redis、zookeeper脚本
安装路径固定 D:\Program文件地址https://share.weiyun.com/S3Vy57yO1、nginx.bat@echo offrem zheng-toolsrem author: shuzheng http://www.zhangshuzheng.cnrem GitHub: https://github.com/shuzhengrem OsChina: http://git.oschina.net/shuzheng/zhengecho ==========..
2021-05-25 10:21:52
137
原创 阿里云身份证识别
1、身份证/** * 身份证识别 * * @author maq */public class OcrIdcard { public static final String APPCODE = "1d067161e6694171b378dc8cd9933e53"; /** * 身份证正反面类型:face/back */ public static final String SIDE1 = "face"; public static.
2021-01-12 10:21:53
1455
1
转载 jprofiler主要功能简介及内存泄漏分析示例
一、安装JProfiler 从http://www.ej-technologies.com/下载5.1.2并申请试用序列号二、主要功能简介1．内存剖析 Memory profilerJProfiler 的内存视图部分可以提供动态的内存使用状况更新视图和显示关于内存分配状况信息的视图。所有的视图都有几个聚集层并且能够显示现有存在的对象和作为垃圾回收的对象。所有对象 显示类或在状况统计和尺码信息堆上所有对象的包。你可以标记当前值并显示差异值。 记录对象 Record ...
2020-06-29 11:19:57
674
转载 SpringSourceStudy
package gupao.gpSpring.v3.servlet;import gupao.gpSpring.annotations.GPAutowired;import gupao.gpSpring.annotations.GPController;import gupao.gpSpring.annotations.GPRequestMapping;import...
2020-03-17 17:21:48
146
原创 打印回形数组
题目：输入一个整数N，打印出从1~N*N的N*N矩阵。比如N = 3，构成矩阵：1,2,3,8,9,4,7,6,5,比如N = 4，构成矩阵：1, 2, 3, 4,12,13,14, 5,11,16,15, 6,10, 9, 8, 7,public enum DirectionEnum{ RIGHT(1,"向右"), DOWN(2,"向...
2019-11-01 10:11:24
469
原创 android:sharedUserId="android.uid.system" 使用系统签名+SNTP 校准时间
在应用程序的AndroidManifest.xml中的manifest节点中加入android:sharedUserId="android.uid.system"这个属性之后用系统签名工具签名，即可使用alarmManager.setTime 修改时间private void correctTime(final Context context) { new Thre...
2019-10-18 17:48:12
1122
原创 IDEA activiti插件actiBPM乱码问题
找到IDEA安装目录bin目录下的两个vmoptions文件（idea.exe.vmoptions、idea64.exe.vmoptions），用编辑器打开，在文件末尾添加-Dfile.encoding=UTF-8，然后重启IDEA即可；ps:如果这样还乱码，那估计是没找到对应的文件，我一开始按照上面也失败了，后面直接在C盘搜索vmoptions找到了个文件修改就...
2019-09-16 16:54:40
69
原创 SpringMVC 使用aop记录用户操作日志
系统监控- 操作日志 使用apo记录用户操作日志https://github.com/elunez/eladmin1、添加spring配置文件<!-- 日志 --> <context:annotation-config></context:annotation-config> <aop:aspectj-autoproxy>&...
2019-08-02 17:21:36
1162
翻译 aop:pointcut 的expression 的各种表达式
任意公共方法的执行：execution(public * *(..))任何一个以“set”开始的方法的执行：execution(* set*(..))AccountService 接口的任意方法的执行：execution(* com.xyz.service.AccountService.*(..))定义在service包里的任意方法的执行：execution(* com...
2019-06-29 10:44:02
2764
原创 开发整理 工具篇
目录1、IntelliJ IDEA2、Postman3、手把手教你如何安装Pycharm4、redisplus5、开源软件镜像 下载6、端口占用CurrPorts1、IntelliJ IDEA官网：https://www.jetbrains.com/idea/修改 host 0.0.0.0account.jetbrains.comIntellij...
2019-06-13 16:00:53
143
原创 Centos6.x 安装opencv环境
目录1、yum install opencv2、安装opencv-python3、错误解决 ImportError: libSM.so.64、import cv2 出现错误1、yum install opencv[root@web_lboss local]# yum install opencv已加载插件：fastestmirror设置安装进程Loadi...
2019-05-16 09:48:41
1546
原创 腾讯地图与百度地图坐标转换
import org.junit.Test;public class TestMap { @Test public void addition_isCorrect() throws Exception { String bdmap = map_tx2bd(39.908823, 116.39747); System.out.println("...
2019-05-10 10:45:48
1025
转载 为什么你不能体面地做自己
你强迫自己干一份并不喜欢的工作，你无奈地被许多人逼婚，你身不由己地做出背离自己意愿的选择。你突然意识到，越长大越孤单，越长大越不能做真实的自己。可你并不知道，你经济独立、思想独立、四肢健全，却为何不能体面的做自己？ 一、 面对世俗观念，你要成为自己...
2019-04-24 15:12:32
180
原创 SpringMVC集成Swagger2，配置包含后缀的URL
目录1、引入Swagger2依赖2、配置spring3、新增Swagger配置类4、添加测试controller5、配置web.xml6、运行效果1、引入Swagger2依赖<properties> <version.swagger>2.9.2</version.swagger></properties>...
2019-04-24 14:58:16
2521
转载 Centos6.5 升级 安装 python3、pip3
前言：由于Python2的缓慢更新，Python3 已成了 Python 的未来楼主自己在虚拟机上安装了Centos 的系统，由于 Centos 自带了 Python2 的版本，由于工作需要，需要更新 Python 的版本，之前在安装时遇到了很多坑，特别是 pip 的问题现整理了一份可安装成功的稳定，希望各位看客可以少踩坑#python 依赖安装 yum in...
2019-03-26 10:02:26
405
原创 Python 自动化测试
使用Python3.7 版本# coding=utf-8# coding=utf-8from selenium import webdriverfrom selenium.webdriver.support.ui import WebDriverWaitfrom selenium.webdriver.common.by import Byfrom selenium...
2019-03-15 13:55:05
769
转载 责任链模式实现的三种方式
责任链模式责任链模式的定义：使多个对象都有机会处理请求，从而避免请求的发送者和接受者之间的耦合关系， 将这个对象连成一条链，并沿着这条链传递该请求，直到有一个对象处理他为止。这里就不再过多的介绍什么是责任链模式，主要来说说java中如何编写。主要从下面3个框架中的代码中介绍。servlet中的filter dubbo中的filter mybatis中的plugin 这3个框架在实现责任...
2019-03-05 16:23:15
412
转载 Maven的构建生命周期理解
以下引用官方的生命周期解释https://maven.apache.org/guides/introduction/introduction-to-the-lifecycle.html：一、构建生命周期基础：Maven基于构建生命周期的中心概念。这意味着构建和分发特定工件（项目）的过程被明确定义。对于构建项目的人员，这意味着只需要学习一小堆命令即可构建任何Maven项目，POM将确保他...
2019-03-04 10:47:52
126
转载 两个单链表相交，求开始相交的点
腾讯面试题：两个链表相交，求开始相交的点腾讯的技术面试很喜欢问算法类的问题，准备去腾讯面试前，要好好看下算法的东西。这题如果求两个链表是否相交，或者求相交的终点好求，要求开始相交的点，不好求。刚开始我的思路一直停留再相交的终点做文章，比如，1）知道终点，就知道终点的上一个点，判断它是不是，再找上上一个点，以此类推。。。可惜这是个单链表，不能逆向遍历。使用这种办法，...
2019-03-01 14:09:56
244
转载 判断链表中是否有环 ----- 有关单链表中环的问题
给定一个单链表，判断其中是否有环，已经是一个比较老同时也是比较经典的问题，在网上搜集了一些资料，然后总结一下大概可以涉及到的问题，以及相应的解法。首先，关于单链表中的环，一般涉及到一下问题：1.给一个单链表，判断其中是否有环的存在；2.如果存在环，找出环的入口点；3.如果存在环，求出环上节点的个数；4.如果存在环，求出链表的长度；5.如果存在环，求出环上距离任意一个节点...
2019-03-01 13:58:17
175
转载 mybatis IF判断的坑
最近在项目使用mybatis中碰到个问题 <if test="type=='y'"> and status = 0 </if> 当传入的type的值为y的时候，if判断内的sql也不会执行，抱着这个疑问就去看了mybatis是怎么解析sql的。下面我们一起来看一下mybatis 的执行过程。 DefaultSqlSession.class...
2019-02-22 15:23:23
805
转载 OkHttp超时时间设置
OkHttp3中设置超时的方法 public WebApi(){ client = new OkHttpClient.Builder() .connectTimeout(10, TimeUnit.SECONDS) .readTimeout(20, TimeUnit.SECONDS) ...
2019-01-08 10:34:46
20035
1
转载 spark任务提交
提交第一个spark应用到集群中运行bin/spark-submit --master spark://node-5:7077 --class org.apache.spark.examples.SparkPi --executor-memory 2048mb --total-executor-cores 12 examples/jars/spark-examples_2.11-2.2.0...
2018-12-18 16:05:04
355
转载 Spark running-on-yarn
官方文档http://spark.apache.org/docs/latest/running-on-yarn.html配置安装安装hadoop：需要安装HDFS模块和YARN模块，HDFS必须安装，spark运行时要把jar包存放到HDFS上。 安装Spark：解压Spark安装程序到一台服务器上，修改spark-env.sh配置文件，spark程序将作为YARN的客户端用于提交任...
2018-12-18 10:53:09
172
转载 Spark安装配置
Spark是MapReduce的替代方案，而且兼容HDFS、Hive，可融入Hadoop的生态系统，以弥补MapReduce的不足。Spark 内存放不下的时候写磁盘 Shuffle的时候写磁盘，否则丢数恢复代价太大安装安装JDK 下载安装包 上传spark-安装包到Linux上 解压安装包到指定位置 tar -zxvf spark-2.1.0-bin-hadoop2.6.tgz -...
2018-12-18 10:48:50
146
转载 使用certbot为你的网站免费上https
关于作者程序开发人员，不拘泥于语言与技术，目前主要从事PHP和前端开发，使用Laravel和VueJs，App端使用Apicloud/Cordova混合式开发。合适和够用是永不停息的追求。个人网站：https://www.linganmin.cn什么是https引自维基百科超文本传输安全协议（英语：Hypertext Transfer Protocol Secure，缩...
2018-10-17 16:50:07
668
原创 Redis安装配置
1、InstallationDownload, extract and compile Redis with:$ wget http://download.redis.io/releases/redis-4.0.11.tar.gz$ tar xzf redis-4.0.11.tar.gz$ cd redis-4.0.11$ makeThe binaries that...
2018-10-17 16:45:44
128
原创 hive 求月访问记录，累计访问记录
求出当月记录和累计记录，如2月累计记录=1月+2月记录，3月累计记录=1月+2月+3月记录A,2015-01,1A,2015-01,11A,2015-01,12A,2015-01,13B,2015-01,10B,2015-01,20B,2015-01,30B,2015-01,40A,2015-01,1A,2015-01,11A,2015-01,12A,2015-02,1...
2018-10-10 16:45:47
529
转载 【转】如何避免下重复订单
转载一篇大宽宽的文章，出处：https://www.jianshu.com/p/e618cc818432 如何避免下重复订单 SpeedFirst 字数 2407电子交易的一个很基本的问题，就是避免用户下重复订单。用户明明想买一次，结果一看下了两个单。如果没有及时发现，就会带来额外的物流成本和扯皮。对商家的信誉也不好看。从技术上看，这是一个分布式一致性问题；但实际上，技术无法1...
2018-09-21 11:53:08
1789
转载 Hadoop：hdfs-site.xml，mapred-site.xml，core-site.xml 配置项清单
hdfs-site.xml配置项清单： 清单中涉及的专业词语使用如下简称NN:NameNodeDN:DataNodeSNN:SecondaryNameNode 属性 值 说明 dfs.namenode.handler.count 10 NN启动后开启的线程数。 dfs.name.dir ${hadoop.tmp.dir}/dfs/n...
2018-09-20 11:26:48
561
转载 Python中split通过多个字符分割字符串
Python中的spilt方法只能通过指定的某个字符分割字符串，如果需要指定多个字符，需要用到re模块里的split方法。例子：>>> import re>>> a = "Hello world!How are you?My friend.Tom">>> re.split(" |!|\?|\.", a)['Hello',
2018-09-05 16:07:49
19466
转载 Redis教程
1、Redis简介Redis是一个开源，高级的键值存储和一个适用的解决方案，用于构建高性能，可扩展的Web应用程序。Redis有三个主要特点，使它优越于其它键值数据存储系统 -Redis将其数据库完全保存在内存中，仅使用磁盘进行持久化。与其它键值数据存储相比，Redis有一组相对丰富的数据类型。Redis可以将数据复制到任意数量的从机中。Redis的优点以下是Redis的一些优点。异常快 - Re...
2018-07-09 14:01:45
756
poi-bin-3.13-20150929
2015-11-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人