wakawakaohoh-CSDN博客

转载 unity手机端手势基本操作

主要有单指移动3D物体、单指旋转3D物体、双指缩放3D物体。基类using UnityEngine;using System.Collections;/// <summary>/// 手势操作父类，并用于互斥三种手势/// </summary>public class GestureControl : MonoBehaviour{ //记录手势状态： //-1——没有任何手势在操作 //0——移动手势正在操作 //1——旋转手势正在操作

2021-01-26 16:46:06 1825 1

原创 win10 pip安装dlib cmake错误

直接pip install dlib==19.6.1 安装这个版本其他什么cmake boost都是扯淡

2021-01-06 12:57:36 1480 1

原创让python提高运行速度

目前有cpython，numba，pythran等等一堆工具，思路都是把Python编译成机器码，先记录一下，日后更新。

2020-12-04 09:33:45 602

原创后台启动服务

# 带日志输出nohup XXX &> /xxx/xxx.log &# 不带日志输出nohup XXX &> /dev/null &

2020-11-26 11:12:24 393

原创语义去重、去包含关系、去相似

MySimHash：import com.hankcs.hanlp.seg.common.Term;import com.hankcs.hanlp.tokenizer.StandardTokenizer;import org.apache.commons.lang3.StringUtils;import org.jsoup.Jsoup;import org.jsoup.safety.Whitelist;import java.math.BigInteger;import java.util.

2020-11-24 16:50:20 365

原创 sklearn DBSCAN调参

参考：https://www.cnblogs.com/pinard/p/6217852.html1）eps： DBSCAN算法参数，即我们的ϵ-邻域的距离阈值，和样本距离超过ϵ的样本点不在ϵ-邻域内。默认值是0.5.一般需要通过在多组值里面选择一个合适的阈值。eps过大，则更多的点会落在核心对象的ϵ-邻域，此时我们的类别数可能会减少，本来不应该是一类的样本也会被划为一类。反之则类别数可能会增大，本来是一类的样本却被划分开。2）min_samples： DBSCAN算法参数，即样本点要成为核心对象所需要

2020-11-23 17:38:23 2505

原创对长文本的聚类

需求：长文本的实时聚类\离线聚类，聚类新闻中重复或相似的文章BERT取句首[CLS]向量做聚类效果并不好，取出所有向量做处理做聚类据说效果提升，没试，而且位置编码时速度太慢，弃用。SBERT没试。HashTrick+DBSCAN，效果不错，采用Single-Pass Clustering，效果应该也可以，没试。参考知乎Single-Pass Clustering...

2020-11-19 20:14:15 692

原创使用单例模式只加载一次模型

模型预测时使用单例模式避免重复加载def singleton(cls): # 单下划线的作用是这个变量只能在当前模块里访问,仅仅是一种提示作用 # 创建一个字典用来保存类的实例对象 _instance = {} def _singleton(*args, **kwargs): # 先判断这个类有没有对象 if cls not in _instance: _instance[cls] = cls(*args, **kw

2020-11-17 20:33:23 827

原创 plotly画图不显示的问题

使用离线模式3D图不显示加上import cufflinks as cfcf.go_offline()###这两句是离线生成图片的设置cf.set_config_file(offline=True, world_readable=True)# 导入依赖库import numpy as npimport matplotlib.pyplot as pltimport seaborn as snsimport mathimport plotly.graph_objs as gofrom pl

2020-11-12 17:45:56 7075 2

原创 python logging写入日志文件

import loggingimport os.pathimport timelogger = logging.getLogger()logger.setLevel(logging.INFO)rq = time.strftime('%Y%m%d%H%M', time.localtime(time.time()))log_path = os.path.dirname(os.getcwd()+'/Logs/')log_name = log_path+'/' + rq + '.log'lo

2020-11-05 18:27:20 348

原创 pymysql数据插入不报错但数据库没报错

记住在excute后家connention.commit（）才能插入数据try: if add_time2 < add_time1: # 更新FINANCIAL_FEATURE cursor1.execute("select * from FINANCIAL_FEATURE where add_time like \"{}\"".format('%' + add_time1 + '%')) data = cursor1.fetchall()

2020-10-19 14:43:37 289

原创 pymysql中文乱码问题

test_conn = pymysql.connect(host=test_conf['intranetIP'], user=test_conf['user'], password=test_conf['password'], port=3306, db=test_conf['db'], charset='utf8')

2020-10-16 17:06:36 200

原创 mysql只取出日期字段的年月日

SELECT distinct DATE_FORMAT(add_time,'%Y-%m-%d') FROM FINANCIAL_FEATURE

2020-10-16 15:46:10 2075

原创解决语义重复，语义包含关系

生成的文本会出现语义包含现象，现在有过滤掉出现语义包含的语句import com.hankcs.hanlp.seg.common.Term;import com.hankcs.hanlp.tokenizer.StandardTokenizer;import java.util.ArrayList;import java.util.List;/** * created by liangpengfei on 2020/10/15 */public class FilterInclusion

2020-10-15 17:30:45 993

原创利用hanlp比较文本相似度

import com.hankcs.hanlp.seg.common.Term;import com.hankcs.hanlp.tokenizer.StandardTokenizer;import org.apache.commons.lang3.StringUtils;import org.jsoup.Jsoup;import org.jsoup.safety.Whitelist;import java.math.BigInteger;import java.util.ArrayList;

2020-10-15 17:28:15 2500 1

原创 conda 段错误解决办法

因为网络问题中断导致，要么找到未下完的包删掉，要么运行 conda clean -a

2020-10-14 09:18:34 229

原创 python连接远程服务器执行shell脚本并传输文件

需要对数据进行维护，每次复制粘贴太麻烦，同事已经在本地实现了大部分功能，现在在已有的代码上添加自动更新数据的脚本import paramikoimport loggingimport timeimport osfile_path1 = "aaaaaaaaaaa"file_path2 = "aaaaaaaaaa"target_path1 = "xxxxxxxxxxxx"target_path2 = "ccccccccccccccccc"file_list = [xxxxxxxxxxxx

2020-10-12 18:15:38 1534

原创 tensorflow2 搭建神经网络六步法

import tensorflow as tfimport osimport numpy as npfrom matplotlib import pyplot as pltnp.set_printoptions(threshold=np.inf)mnist = tf.keras.datasets.mnist(x_train, y_train), (x_test, y_test) = mnist.load_data()x_train, x_test = x_train / 255.0, x_

2020-09-21 15:21:49 732

原创一文搞懂马尔可夫模型和条件随机场

马尔科夫链隐马尔科夫条件随机场

2020-09-01 10:26:30 522

原创 pandas读取大数据

comments = pd.read_csv('xxx.csv',iterator=True)loop = Truedf = comments.get_chunk(1)while loop: try: tmp = None tmp=comments.get_chunk(500) df = df.append(tmp) except StopIteration: loop = False print("It

2020-08-10 09:42:23 294

转载 python pandas使用chunksize异步拆分固定行数的文件

添加链接描述import pandas as pdimport asynciofrom collections import defaultdict collect = defaultdict(list) #######创建处理一个对象的方法，并返回期物async def dealone(chunk,sas): path='/data/chaifen/testphone_%d.txt'%sas chunk.to_csv(path,index=False) retu

2020-08-10 09:24:12 531

原创 mysql常用命令（总结）

环境：windows10 mysql5.6启动停止mysqlnet start mysqlnet stop mysql修改mysql提示符连接客户端是通过参数指定shell>mysql -uroot -proot --prompt 提示符连接上客户端后，通过promptmysql>prompt 提示符mysql>prompt \u@...

2020-08-07 16:28:00 541

原创 git开发中的常用操作

git几乎天天用，但是各种教程介绍的非常繁琐，所以来总结一下，以github为例参考github界面变动过，但基本结构就这样了，其他版本库都差不多Used by：展示了这个项目被 github 上其他项目使用的次数，例如图中的 React 是个知名的前端库，所以使用者众多；Watch：点击 Watch 后，相当于你就关注了这个项目，那么以后要是这个项目有更新，你就会收到提醒；Star: 类似朋友圈点赞功能，你觉得这个项目不错，就可以给它点赞；Fork: 拷贝一份项目到你自己的仓库，不过如

2020-08-07 16:22:31 197

原创 hadoop无法开启namenode和secondarynamenode

在安装hadoop时一直无法开启namenode和secondarynode，主机名ip映射也排查过，还是无法解决，查看日志一直报The value of property bind.address must not be null 可以看出是ip和端口号的问题，排查端口号发现没有被占用。试了无数次还是无法开启，最后在hdfs-site.xml中添加dfs.http.address属性，发现可以开启namenode但无法开启secondarynamenode。由此可确定是端口号的问题。需要在hdfs-

2020-07-30 16:51:29 1825

转载各种转码（bytes、string、base64、numpy array、io、BufferedReader ）

# 将字节流转ndarrayimport ioimport structimport cv2import numpy as npa = b'\x89PNG\r\n\x1a\n\x00\x00\x00\rIHDR\x00\x00\x00\xa0\x00\x00\x00\xa0\x08\x02\x00\x00\x00\x04\xad\xf0z\x00\x00\x91[IDATx\x9cd\xfdi\x93,K\x93\x1e\x86\xf9\x16\x91YKw\x9fs\xee\xfen\x98\x

2020-07-11 18:21:21 18986

空空如也

空空如也