石斛 - 博客园

2019年12月10日

摘要： 1.1、Answer：web crawler question 1 概述 Question 1 1、cookie、JavaScript的关系？怎么产生的cookie？cookie包含哪些内容？JavaScript的功能在crawler代码中通过python的第三方库selenium，selenium 阅读全文

posted @ 2019-12-10 07:56 石斛阅读(246) 评论(0) 推荐(0) 编辑

2、Question about RDD、分区、stage、并行计算、集群、流水线计算、shuffle（join？？）、task、executor

摘要： 2、Question about RDD、分区、stage、并行计算、集群、流水线计算、shuffle（join？？）、task、executor RDD是spark数据中最基本的数据抽象，task是spark的最小代码执行单元？数据不是代码的资源？？？那为什么RDD又是分区存储？节点中又是对分区（阅读全文

posted @ 2019-12-10 04:53 石斛阅读(393) 评论(0) 推荐(0) 编辑

1、Question about web crawler

摘要： 1、Question about web crawler 难： 1、cookie、JavaScript的关系？怎么产生的cookie？cookie包含哪些内容？JavaScript的功能在crawler代码中通过python的第三方库selenium，selenium用于执行JavaScript的脚阅读全文

posted @ 2019-12-10 04:51 石斛阅读(209) 评论(0) 推荐(0) 编辑

2019年12月9日

随笔-转（面试记录）

摘要：转自：https://www.cnblogs.com/king-lps/p/11795529.html 总结：只投了算法岗，7.15到9.15找工作，字节的offer最早，所以9月中旬之后就不找了，等谈薪资。总体而言拿到的有字节、搜狗、拼多多、海康、华为、虹软、大华、14所。一. 7.15下午3: 阅读全文

posted @ 2019-12-09 19:25 石斛阅读(231) 评论(0) 推荐(0) 编辑

算法和算法分析

摘要： 1、算法的性质。有穷性、能行性、确定性、终止性、输入/输出。 2、算法的描述自然语言(容易歧义) 自然语言+数学公式(简单方便，还是歧义) 严格形式描述(比如图灵机模型，非常麻烦，难以阅读) 类似编程语言描述伪代码的形式 3、6种算法设计模式枚举法(枚举全部、找出最优解)、贪心法(根据已有阅读全文

posted @ 2019-12-09 19:24 石斛阅读(726) 评论(0) 推荐(0) 编辑

数据结构链表

摘要：一、单向循环链表 1、链表是一种数据结构，链表的基本组成单元是节点(Node)。节点(Node)包含了：节点数据（val/element）、后一个节点的引用（next）、前一个节点的引用（pre） 2、链表在内存中存储空间是不连续的，每一个节点都包含后一个节点的引用（next）和前一个节点的引用（p 阅读全文

posted @ 2019-12-09 19:23 石斛阅读(264) 评论(0) 推荐(0) 编辑

数据结构数据的规模抽象

摘要：数据结构数据的规模抽象 1、将数据的规模抽象为一个n，而问题规模的大小和时间复杂度抽象为一个关于n的函数。如果在意的是时间复杂度的整体趋势或者说是时间复杂度的规模，则时间复杂度将抽象为只跟n相关的函数，去除与常数项，系数和次要项，并去最高次n项。 3、数据，分类，存储，字符串，int，组成，浮点，阅读全文

posted @ 2019-12-09 19:23 石斛阅读(267) 评论(0) 推荐(0) 编辑

算法递归

摘要：算法递归一、基础知识递归思想——递归的理解：一、压栈（属性值+下一步执行程序的存储位置）；二、基线条件（if...return）+子问题的实现（最小结构+边界条件） 1、迭代是重复反馈过程的活动，其目的通常是为了逼近所需目标或结果。每一次对过程的重复称为一次“迭代”，而每一次迭代得到的结果会作阅读全文

posted @ 2019-12-09 19:23 石斛阅读(226) 评论(0) 推荐(0) 编辑

算法排序

摘要：算法排序一、概述排序算法可以分为内部排序和外部排序，内部排序是数据记录在内存中进行排序，而外部排序是因排序的数据很大，一次不能容纳全部的排序记录，在排序过程中需要访问外存。常见的内部排序算法有：插入排序、希尔排序、选择排序、冒泡排序、归并排序、快速排序、堆排序、基数排序等。本文主要内容是介绍这阅读全文

posted @ 2019-12-09 19:22 石斛阅读(232) 评论(0) 推荐(0) 编辑

Windows系统安装Git

摘要：转自：https://www.cnblogs.com/wj-1314/p/7993819.html Git安装教程（windows） Git是当今最流行的版本控制软件，它包含了许多高级工具，这里小编就讲一下Git的安装。下载地址：https://git-scm.com/downloads git安阅读全文

posted @ 2019-12-09 19:21 石斛阅读(350) 评论(0) 推荐(0) 编辑

石斛

公告