李好秀

2021年11月14日

摘要：大数据科学家学习路线数据科学与大数据技术我个人理解，就是两个方向一、分析：大数据分析师走向大数据科学家二、开发：大数据开发工程师走向大数据专家大数据岗位方向 Hadoop大数据技原理与应用： VMware Workstation |虚拟机 Centos6.7-install.iso |镜像阅读全文

posted @ 2021-11-14 14:30 李好秀阅读(1091) 评论(0) 推荐(0) 编辑

下载安装NodeJs v16

摘要： @ 下载安装Node.js v16 下载地址：Node.js (nodejs.org) 除了修改安装位置，无脑next Node.js runtime 表示运行环境 npm package manager表示npm包管理器 online documentation shortcuts 在线文档快捷方阅读全文

posted @ 2021-11-14 14:02 李好秀阅读(748) 评论(0) 推荐(0) 编辑

五、深度学习-逻辑回归模型

摘要：

@ 前文一、Windows系统下安装Tensorflow2.x（2.6）二、深度学习-读取数据三、Tensorflow图像处理预算四、线性回归模型的tensorflow实现逻辑回归模型的tensorflow实现 #%% #读取MNIST数据 ## 在conda python环境中，tens 阅读全文

posted @ 2021-11-14 00:04 李好秀阅读(183) 评论(0) 推荐(0) 编辑

2021年11月13日

网易翻译爬虫/反爬虫

摘要： # -*- coding: utf-8 -*- # @Author : LEHOSO # @FileName: CrawlerTranslation.py # @Time : 2021/9/28 00:06 import hashlib import json import random impor 阅读全文

posted @ 2021-11-13 23:02 李好秀阅读(66) 评论(0) 推荐(0) 编辑

爬取二手房信息、数据清洗并存入数据库

摘要： import pandas as pd import numpy as np import pymysql pymysql.install_as_MySQLdb() from sqlalchemy import create_engine df = pd.read_csv(r'ftx_xian3.c 阅读全文

posted @ 2021-11-13 23:00 李好秀阅读(135) 评论(0) 推荐(0) 编辑

R语言爬虫、新闻

摘要： library(rvest) library(magrittr) library(jiebaRD) library(ggplot2) #载入rvest包 url <- 'https://www.thepaper.cn/' #需要爬取的网址 web <- read_html(url) #新闻主页对应的阅读全文

posted @ 2021-11-13 22:54 李好秀阅读(97) 评论(0) 推荐(0) 编辑

R语言爬虫、房价爬取

摘要： install.packages("pacman") #先安装这个包，方便一键加载其他包 pacman::p_load(XML,rvest,dplyr,stringr) house_inf <- data.frame() #爬取前50页 for (i in 1:50) { #发现url规律，利用字符阅读全文

posted @ 2021-11-13 22:49 李好秀阅读(172) 评论(0) 推荐(0) 编辑

Jetbrians软件自定义配置和缓存位置以及数据迁移

摘要： Jetbrians自定义配置和缓存位置以及数据迁移 @ 一、数据转移步骤找到config配置位置默认在 C:\Users\xxx\AppData\Roaming\JetBrains #例如：C:\Users\Administrator\AppData\Roaming\JetBrains syst 阅读全文

posted @ 2021-11-13 22:38 李好秀阅读(1116) 评论(0) 推荐(0) 编辑

四、Zookeeper3.7安装

摘要：前文一、CentOS7 hadoop3.3.1安装(单机分布式、伪分布式、分布式二、JAVA API实现HDFS 三、MapReduce编程实例 Zookeeper安装 @ 前言 ZooKeeper是用Java编写的，运行在Java环境上，因此，在部署zk的机器上需要安装Java运行环境。为了正阅读全文

posted @ 2021-11-13 22:37 李好秀阅读(203) 评论(0) 推荐(0) 编辑

三、MapReduce编程实例

摘要：前文一、CentOS7 hadoop3.3.1安装(单机分布式、伪分布式、分布式二、JAVA API实现HDFS MapReduce编程实例 @ 前言简介讲解_Hadoop 中文网 Hadoop测试项目：HadoopDemo 注意事项如果下载了HadoopDemo作为测试，用到HDFS_C 阅读全文

posted @ 2021-11-13 22:36 李好秀阅读(242) 评论(0) 推荐(0) 编辑

公告