摘要：
1、配置文件 package config import org.apache.spark.sql.SparkSession import org.apache.spark.{SparkConf, SparkContext} case object conf { private val master 阅读全文
摘要：
1、单表查询与插入 INSERT /*+ APPEND */ INTO a SELECT /*+ PARALLEL(b,4)*/ b.* FROM b; 2、多表查询与插入 INSERT /*+ APPEND */ INTO a SELECT /*+ PARALLEL(b,4)(c,4)*/ b.* 阅读全文
摘要：
1、VM options 添加 -Xms512m -Xmx4096m -XX:-UseGCOverheadLimit -XX:+UseConcMarkSweepGC 阅读全文
摘要：
1、脚本：renameing.sh for file in `ls | grep .gz` do newfile=`echo $file | sed "s/$1/$2/g"` mv $file $newfile done 2、文件批量文件 3、执行sh脚本 sh renameing.sh 20200 阅读全文
摘要：
1、分布式版本安装步骤 1.conda安装：conda install dask distributed-cconda-forge 2.pip 安装：pip install dask distributed --upgrade 3.source安装： git clone https://github 阅读全文
摘要：
oracle database用一段时间以后，硬盘空间会不够，更甚者硬盘会used 100%。（oracle表空间设置为自动扩展）。此时oracle会出现各种莫名其妙的错误，为保持oracle数据库的稳定，我们需要实时查看硬盘空间。 那么怎样缩小一些不用的表空间，以释放硬盘空间？ oracle常用的 阅读全文
摘要：
Xmanager是一个简单易用的高性能的运行在Windows平台上的X Server软件。它能把远端Unix/Linux的桌面无缝地带到你的Windows上，甚至当你的电脑是在内网或防火墙后，你也能通过SSH协议安全的运行远端的X应用程序。特点包括： -可通过Xcongfig工具设置多个Xmanag 阅读全文
摘要：
1.创建一个组 groupadd 组名 groupadd sftp 2.组下创建一个用户 useradd -g 组名 -s /bin/false 用户名 useradd -g sftp -s /bin/false sftpuser 3.给上述步骤创建的用户设置密码 passwd 用户名 passwd 阅读全文
摘要：
1、python dask dataframe series 升序和降序 # conding:utf-8 import time import dask.dataframe as dd import dask.array as da import gc st = time.time() # url: 阅读全文
摘要：
1、Excel格式截图 2、配置文件脚本 # coding:utf-8 # 表英文名 table_name = '表英文名' # 表中文名 table_comments = '表中文名' # Excel路径 input_data_path = './data' # 导出sql路径 output_sq 阅读全文
摘要：
--|/ range分区 create table sale( product_id varchar2(5), sale_count number(10,2) ) partition by range (sale_count) ( partition P1 values less than (100 阅读全文
摘要：
CREATE OR REPLACE PROCEDURE getName(eno number, uname OUT VARCHAR) IS s VARCHAR(100); BEGIN MERGE INTO 插入表名称 T USING( 查询语句 ) S ON ( 条件 ) -- 根据条件更新 WHE 阅读全文
摘要：
1、原文件备份 sudo cp /etc/apt/sources.list /etc/apt/sources.list.bak 2、编辑源列表文件 sudo vim /etc/apt/sources.list 3、将原来的列表删除，添加如下内容（阿里镜像源） deb http://mirrors.a 阅读全文
摘要：
1、模型结构图 2、随机测试模型 3、训练logs 2020-05-10T11:28:20.491640: Step 4, loss_total = 28.22, acc = 2.23%, sec/batch = 1.23 2020-05-10T11:28:27.849279: Step 9, lo 阅读全文
摘要：
1、fastapi快速服务器搭建 # -*- coding:utf-8 -*- from typing import List,Set,Dict from fastapi import FastAPI, Request, Form from fastapi.staticfiles import St 阅读全文
摘要：
-- SELECT * FROM employment_direction_recommend_table GROUP BY student_name HAVING count(student_name)>1; -- SELECT * FROM employment_direction_recomm 阅读全文
摘要：
import datetime import time import asyncio import numba as nb import numpy as np @nb.jit() def f(n): if n<2: return 1 else: return f(n-1)+f(n-2) async 阅读全文
摘要：
1、创建函数 -- 创建存储函数 DROP FUNCTION IF EXISTS SPLIT_STR; -- 判断是否存在，存在则删除 CREATE FUNCTION SPLIT_STR( x VARCHAR(255), delim VARCHAR(12), pos INT ) RETURNS VA 阅读全文
摘要：
1、AlexNet网络模型，pytorch1.1.0 实现 注意：AlexNet，in_img_size >=64 输入图片矩阵的大小要大于等于64 # coding:utf-8 import torch.nn as nn import torch class alex_net(nn.Module) 阅读全文
摘要：
1、vgg19模型——pytorch 版本= 1.1.0 实现 # coding:utf-8 import torch.nn as nn import torch class vgg19_Net(nn.Module): def __init__(self,in_img_rgb=3,in_img_si 阅读全文
摘要：
1、降低pillow版本小于7.0以下 conda install --yes pillow=6.2.1 或者 pip install pillow=6.2.1 阅读全文
摘要：
1、配置文件 package config import org.apache.spark.sql.SparkSession import org.apache.spark.{SparkConf, SparkContext} case object conf { private val master 阅读全文
摘要：
package classifierAlg import config.conf.{sc, spark_session} import config.conf.spark_session.implicits._ import org.apache.spark.sql.functions._ impo 阅读全文
摘要：
1、配置文件 package config import org.apache.spark.sql.SparkSession import org.apache.spark.{SparkConf, SparkContext} case object conf { private val master 阅读全文
摘要：
package operationMysql import config.conf.{sc, spark_session} import org.apache.spark.sql.DataFrame object readingMysqlOperation { def main(args: Arra 阅读全文