lshan - 博客园

2019年11月28日

摘要： ubuntu16.04 添加用户: 一、创建用户 1. 创建用户：vagrant为用户名 -> sudo useradd -m ryan -d /home/ryan -s /bin/bash 2、为创建的用户设置密码 -> sudo passwd vagrant 3、修改用户的权限：（ /etc/s 阅读全文

posted @ 2019-11-28 13:53 lshan 阅读(474) 评论(0) 推荐(0) 编辑

2019年11月26日

elastic- ik分词器插件

摘要：目录： --1. 安装 --2.测试 --3. 创建mapping --4. testing 1. 安装 Ik分词器的安置于测试 http://www.360doc.com/content/18/1128/12/33260087_797769881.shtml 方案1：下载编译好了的： https: 阅读全文

posted @ 2019-11-26 20:37 lshan 阅读(241) 评论(0) 推荐(0) 编辑

kibana 安装及使用说明

摘要：原文请参考： https://blog.csdn.net/cb2474600377/article/details/78963247 Kibana安装及使用说明 Kibana是一个针对Elasticsearch的开源分析及可视化平台，用来搜索、查看交互存储在Elasticsearch索引中的数据。阅读全文

posted @ 2019-11-26 17:52 lshan 阅读(1439) 评论(0) 推荐(0) 编辑

elasticsearch 入门

摘要：官网地址教程: https://www.elastic.co/cn/webinars/getting-started-elasticsearch https://www.elastic.co/guide/en/elasticsearch/reference/index.html (各版本文档) 基本阅读全文

posted @ 2019-11-26 17:32 lshan 阅读(203) 评论(0) 推荐(0) 编辑

Ubuntu 16.04安装ElasticSearch and kibala

摘要：可以参考：https://segmentfault.com/a/1190000019897522 基础知识与配置讲解：https://www.cnblogs.com/sunsky303/p/9438737.html kibana 操作入门：https://www.cnblogs.com/wmyskx 阅读全文

posted @ 2019-11-26 16:35 lshan 阅读(212) 评论(0) 推荐(0) 编辑

2019年11月25日

Ubuntu16.04 安装tesseract

摘要：原文链接：https://blog.csdn.net/tintinetmilou/article/details/80212305 必要包安装： sudo apt-get install autoconf automake libtool autoconf-archive pkg-config li 阅读全文

posted @ 2019-11-25 16:27 lshan 阅读(1754) 评论(0) 推荐(0) 编辑

phantomjs 的安装

摘要： PhantomJS 是一个基于Webkit的“无界面”(headless)浏览器，它会把网站加载到内存并执行页面上的 JavaScript，因为不会展示图形界面，所以运行起来比完整的浏览器要高效。如果我们把 Selenium 和 PhantomJS 结合在一起，就可以运行一个非常强大的网络爬虫了，阅读全文

posted @ 2019-11-25 11:41 lshan 阅读(448) 评论(0) 推荐(0) 编辑

2019年11月22日

JsonPath python

摘要： JsonPath pip install jsonpath JsonPath 是一种信息抽取类库，是从JSON文档中抽取指定信息的工具，提供多种语言实现版本，包括：Javascript, Python， PHP 和 Java。 JsonPath 对于 JSON 来说，相当于 XPATH 对于 XML 阅读全文

posted @ 2019-11-22 17:15 lshan 阅读(207) 评论(0) 推荐(0) 编辑

CSS 选择器：BeautifulSoup4

摘要：和 lxml 一样，Beautiful Soup 也是一个HTML/XML的解析器，主要的功能也是如何解析和提取 HTML/XML 数据。 lxml 只会局部遍历，而Beautiful Soup 是基于HTML DOM的，会载入整个文档，解析整个DOM树，因此时间和内存开销都会大很多，所以性能要低于阅读全文

posted @ 2019-11-22 17:13 lshan 阅读(189) 评论(0) 推荐(0) 编辑

xpath 的使用

摘要：模糊查询： def Sprider1(): pass url="http://juji123.net/tag/5_2.html" headers={ "User-Agent":"Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 ( 阅读全文

posted @ 2019-11-22 17:12 lshan 阅读(197) 评论(0) 推荐(0) 编辑