06 2019 档案
摘要：1、创建工程 2、创建项目 3、安装pymysql 4、settings.py文件，主要是全局字段的定义，包括数据库信息 # -*- coding: utf-8 -*- # Scrapy settings for jd project # # For simplicity, this file co
阅读全文
摘要：1、创建工程 2、创建项目 3、既然保存到数据库，自然要安装pymsql 4、settings文件，配置信息，包括数据库等 # -*- coding: utf-8 -*- # Scrapy settings for tencent project # # For simplicity, this f
阅读全文
摘要：1、settings.py文件 # -*- coding: utf-8 -*- # Scrapy settings for jd project # # For simplicity, this file contains only settings considered important or
阅读全文
摘要：针对这种招聘信息，使用crawlscrapy很适合。 1、settings.py # -*- coding: utf-8 -*- # Scrapy settings for gosuncn project # # For simplicity, this file contains only set
阅读全文
摘要：1、redis的使用，自己可以多学习下，个人也是在学习 2、下载安装scrapy-redis 3、下载好了，就可以使用了，使用也很简单，只需要在settings.py配置文件添加一下四个 如：settings.py # -*- coding: utf-8 -*- # Scrapy settings
阅读全文
摘要：1、FormRequest表单实现自动登陆 2、FormRequest.from_response模拟自动登陆 3、笔记 a）FormRequest b) FormRequest.from_response
阅读全文
摘要：知识点 1、学习官网网址 2、settings文件，USER_AGENTS代理池 3、middleware.py处理代码池 4、参考学习 a)代理UserAgent b) 代理ip
阅读全文
摘要：知识点 1、创建工程 2、创建工程 3、setting.py文件设置COOKIES和COOKIES_DEBUG # -*- coding: utf-8 -*- # Scrapy settings for qq project # # For simplicity, this file contain
阅读全文
摘要：注意点： 1、创建工程 2、创建项目 3、settings文件添加日志级别，USER_AGENT # -*- coding: utf-8 -*- # Scrapy settings for zjh project # # For simplicity, this file contains only
阅读全文
摘要：1、debug了解 2、scrapy shell了解 3、settings.py # -*- coding: utf-8 -*- # Scrapy settings for gosuncn project # # For simplicity, this file contains only set
阅读全文
摘要：1、定义爬取的字段items.py # -*- coding: utf-8 -*- # Define here the models for your scraped items # # See documentation in: # https://doc.scrapy.org/en/latest
阅读全文
摘要：1、创建工程 2、创建项目 3、运行项目 4、gaoxinxing.py代码 # -*- coding: utf-8 -*- import scrapy import logging logger = logging.getLogger(__name__) #引入日志 class Gaoxinxin
阅读全文
摘要：1、知识点 2、scrapy项目中使用logging 2、普通项目中 a)建立一个通用的log_a.py b)log_b.py文件使用通用的log_a.py
阅读全文
摘要：1、知识点 2、spider.py文件中通过 2、修改pipelines.py文件，对其中的item可以操作 # -*- coding: utf-8 -*- # Define your item pipelines here # # Don't forget to add your pipeline
阅读全文
摘要：看这个博客吧! 挺好的。 理论：https://www.cnblogs.com/jajian/p/10014145.html 实践：https://www.cnblogs.com/sessionbest/p/9396663.html
阅读全文
摘要：1、知识点 2、目录结构 3、解析案例
阅读全文
摘要：可以看该博客：https://www.cnblogs.com/aijianiula/p/4339960.html 1、知识点 2、代码案例 3、算法流程
阅读全文
摘要：1、知识点 """ 推荐系统 1、相似度计算： 1、欧几里德距离 2、皮尔逊相关系数 3、Cosin距离 2、推荐相似度选择： 1、固定数量的邻居 2、基于相似度门槛的邻居 3、基于用户的协同过滤：根据用户和其他用户之间的相关系数值，选择值越小的用户数据，并和该用户比较，推荐物品 需要解决的问题：1
阅读全文
摘要：知识点： 下面开始工程改造 1、注释以前的mybatis注解（我试了下不去注解，会报错），也可以不注释掉，注意看使用的mybatis-plus的包，我使用的是3.11版本必须注释，但是这个版本不需要 2、添加mybatis-plus注解 3、配置文件 4、mybatis-plus找表名 5、对Dao
阅读全文
摘要：代码来源于：https://www.cnblogs.com/huangyc/p/10327209.html ，本人只是简介学习 1、 贝叶斯.py import numpy as np from word_utils import * class NaiveBayesBase(object): de
阅读全文
摘要：1、知识点 2、Bellman优化目标 3、bellman案例，gridworld.py和ValueIteration.py import numpy as np import sys from gym.envs.toy_text import discrete UP = 0 RIGHT = 1 D
阅读全文
摘要：1、知识点 2、代码 # coding: utf-8 import numpy as np import tensorflow as tf import pickle import matplotlib.pyplot as plt get_ipython().run_line_magic('matp
阅读全文
摘要：1、结构图 2、知识点 3、代码及案例 # coding: utf-8 # ## 对抗生成网络案例 ## # # # <img src="jpg/3.png" alt="FAO" width="590" > # - 判别器 : 火眼金睛，分辨出生成和真实的 <br /> # <br /> # - 生
阅读全文
摘要：1、目录结构 2、入口类 3、tang_poems.py # -*- coding: utf-8 -*- # file: tang_poems.py import collections import os import sys import numpy as np import tensorflo
阅读全文
摘要：1、知识点 2、中文数据清洗(使用停用词) 3、英文数据清洗(使用停用词) 4、nltk的停用词进行数据清洗
阅读全文
摘要：1、知识点 2、代码 3、模板图片
阅读全文
摘要：1、知识点 2、标点符号处理，并分词,存储到文件中 3、中文分词统计 4、英文分词统计
阅读全文
摘要：知识点 # - sentences：可以是一个list # - sg： 用于设置训练算法，默认为0，对应CBOW算法；sg=1则采用skip-gram算法。 # - size：是指特征向量的维度，默认为100。大的size需要更多的训练数据,但是效果会更好. 推荐值为几十到几百。 # - windo
阅读全文
摘要：1、去阿里云官网下载Demo edas-app-demo.zip 2、下载Ali-Tomcat和Pandora,注意红色下面字体 3、下载轻量版EDAS(下载地址：https://help.aliyun.com/document_detail/44163.html),和配置host文件 4、cd到e
阅读全文
摘要：知识点：java事务属性 1、场景 >并行事务： 执行结果： 结论：并行事务不存在事务影响 2、场景 >嵌套相同事务： a) 事务嵌套，在同一个事务中，没有对异常进行处理 执行结果：两个都没有插入成功 结论：由于两个都是在一个事务当中，所以只要有一个方法事务有问题，那么都不会插入成功。 b) 事务嵌
阅读全文
摘要：1、谷歌访问助手 下载网址：http://www.ggfwzs.com/ 2、Json Viewer 格式化请求接口，返回Json数据格式，可以在浏览器展示 3、Restlet client 一种类似postman的google浏览器插件 4、Axure RP 不需要安装Axure的浏览器插件，可以
阅读全文
