03 2019 档案
摘要:Presto 是 Facebook 推出的一个基于Java开发的大数据分布式 SQL 查询引擎,可对从数 G 到数 P 的大数据进行交互式的查询,查询的速度达到商业数据仓库的级别,据称该引擎的性能是 Hive 的 10 倍以上。Presto 可以查询包括 Hive、Cassandra 甚至是一些商业
阅读全文
摘要:下载:https://www.jetbrains.com/idea/download/download-thanks.html?platform=windows 安装教程:https://blog.csdn.net/mashuai720/article/details/79389314 激活:htt
阅读全文
摘要:from sklearn.model_selecting import train_test_spilt() 参数stratify: 依据标签y,按原数据y中各类比例,分配给train和test,使得train和test中各类数据的比例与原数据集一样。 例如:A:B:C=1:2:3 split后,t
阅读全文
摘要:首先,对需要导入的库进行导入,读入数据后,用jieba来进行中文分词 # encoding: utf-8 #载入接下来分析用的库 import pandas as pd import numpy as np import xgboost as xgb from tqdm import tqdm fr
阅读全文
摘要:本文主要介绍一下多分类下的ROC曲线绘制和AUC计算,并以鸢尾花数据为例,简单用python进行一下说明。如果对ROC和AUC二分类下的概念不是很了解,可以先参考下这篇文章:http://blog.csdn.net/ye1215172385/article/details/79448575 由于RO
阅读全文
摘要:首先,读取所有xml文件完整路径,写入train.txt 文本文档中, 然后读取TXT文档,逐行读取xml文档,建文件夹,用于保存解析好的TXT,写入TXT时,只需要保存类别名和坐标信息即可,中间用Tab分割 参考: https://www.cnblogs.com/rainsoul/p/628323
阅读全文
摘要:- xgboost 基本方法和默认参数 - 实战经验中调参方法 - 基于实例具体分析 在训练过程中主要用到两个方法:xgboost.train()和xgboost.cv(). params 这是一个字典,里面包含着训练中的参数关键字和对应的值,形式是params = {‘booster’:’gbtr
阅读全文
摘要:在官方网站中对as_index有以下介绍: as_index : boolean, default True For aggregated output, return object with group labels as the index. Only relevant for DataFram
阅读全文
摘要:Python 读取文件首行多了"\ufeff"字符串 python读取B.txt文件时,控制台打印首行正常,但是若是用首行内容打开文本的话,就会报错: 要打开的路径比预期A.txt多了一串字符"\ufeff", 显然无法正确打开文件. 解决方案: 在读取B.txt 时,指定编码方式为 "utf-8-
阅读全文
摘要:双层循环,打印循环执行次数. 特别注意 ,shell 脚本赋值时 '=' 两侧不能有空格,否则报错,shell command not found 但在if 语句中需要有: STR1="abc" STR2="abcd" if[$STR1=$STR2](错误写法) if [ $STR1 = $STR2
阅读全文
摘要:转自:http://www.jb51.net/article/105064.htm 前言 Python 3 最重要的新特性大概要算是对文本和二进制数据作了更为清晰的区分。 文本总是 Unicode,由 str 类型表示,二进制数据则由 bytes 类型表示。 Python 3 不会以任意隐式的方式混
阅读全文
摘要:https://blog.csdn.net/confuciust/article/details/78982264 在终端执行程序时指定GPU CUDA_VISIBLE_DEVICES=1 python your_file.py 这样在跑你的网络之前,告诉程序只能看到1号GPU,其他的GPU它不可见
阅读全文
摘要:深蓝的blog:http://blog.csdn.net/huangyanlong/article/details/43935535 (1)、查看cpu信息 [root@xckydb ~]# cat /proc/cpuinfo --查看cpu信息 processor: 0 vendor_id: Ge
阅读全文
摘要:函数:endswith() 作用:判断字符串是否以指定字符或子字符串结尾,常用于判断文件类型 相关函数:判断字符串开头 startswith() 一、函数说明语法:string.endswith(str, beg=[0,end=len(string)]) string[beg:end].endswi
阅读全文
摘要:解决方法: https://www.polarxiong.com/archives/Python-%E6%93%8D%E4%BD%9Cdict%E6%97%B6%E9%81%BF%E5%85%8D%E5%87%BA%E7%8E%B0KeyError%E7%9A%84%E5%87%A0%E7%A7%8
阅读全文
摘要:在Python语言中,json数据与dict字典以及对象之间的转化,是必不可少的操作。 在Python中自带json库。通过import json导入。 在json模块有2个方法, loads():将json数据转化成dict数据dumps():将dict数据转化成json数据load():读取js
阅读全文
摘要:Linux下的压缩解压缩命令详解及实例 实例:压缩服务器上当前目录的内容为xxx.zip文件 zip -r xxx.zip ./* 解压zip文件到当前目录 unzip filename.zip 另:有些服务器没有安装zip包执行不了zip命令,但基本上都可以用tar命令的,实例如下: tar -z
阅读全文
摘要:git clone 遇到问题 Cloning into 'warp-ctc'...fatal: unable to access 'https://github.com/SeanNaren/warp-ctc.git/': error:1407742E:SSL routines:SSL23_GET_S
阅读全文
摘要:https://zhuanlan.zhihu.com/p/37260275 对抗攻击基础知识,主要是对抗方法 对抗方法: FGSD(Fast gradient sign method) 一种基于梯度生成对抗样本的算法FGM(fast gradient method) 对FGSD做了推广,使其能够满足
阅读全文
摘要:Docker 安装教程: https://blog.csdn.net/hunan961/article/details/79484098 安装docker前需要首先开启虚拟服务:重启电脑-->F12-->BIOS-->安全-->虚拟服务下的两个都设置为Enable 使用Dockerfile创建镜像:
阅读全文
摘要:行人重识别综述: https://zhuanlan.zhihu.com/p/26168232 一个强力的ReID basemodel https://zhuanlan.zhihu.com/p/40514536 CVPR2018 ReID论文简评 https://zhuanlan.zhihu.com/
阅读全文