09 2021 档案
摘要：from pyspark import SparkConf,SparkContext from pyspark.sql import SparkSession import json def make_data(line): data = json.loads(line) h = data.get(
阅读全文
摘要：#!/bin/bash num_executors=100 executor_memory=4g executor_cores=20 principal=BotSpider queue=DB_QUEUE keytab=/opt/keys/user.keytab python_path="hdfs:/
阅读全文
摘要：小鹏汽车充电有两种类型，快充、慢充，有如下数据：车辆ID 充电时间 充电类型 a 20200601 19:21:09 1a 20200611 11:30:09 1a 20200621 21:10:09 0a 20200701 19:01:09 1a 20200701 20:30:09 1a 2020
阅读全文
摘要：题目： 1.原始数据： 1,3.50 2,3.65 3,4.00 4,3.85 5,4.00 6,3.65 2.创建表，导入数据 create table sc(id string,score float) row format delimited fields terminated by ',';
阅读全文
