摘要：
想得有点久，后来自己画图了才会头绪 先画一个模型图： 源代码： 其实也不知道怎么讲，自己摸索一下就能搞出来的。 输入18： 阅读全文
posted @ 2018-07-12 09:36 风吹白杨的安妮 阅读(937) 评论(0) 推荐(0) 编辑
摘要：
眼看实习就快一个月了，这也是自己的第一份实习工作。 很幸运能来到这家公司，毕竟以后写在简历上还是挺好的。。。。 刚来一星期的时候，都不知道要做什么，爬取高德地图POI数据总差最后一步将地图分割成N个矩形。。 现在还是很疑惑啊，但还是通过朋友的力量搞到了高德地图的数据。。。 但不想罢休，自己还是得去弄 阅读全文
posted @ 2018-05-11 17:58 风吹白杨的安妮 阅读(282) 评论(0) 推荐(0) 编辑
摘要：
最近想吃烤肉，所以想看看深圳哪里的烤肉比较好吃，于是自己就开始爬虫咯。这是个静态网页，有反爬机制，我在setting和middlewares设置了反爬措施 Setting ITEM Spider： PIPELINE： middlewares： 那些没有环境评分、服务评分数据的也就跳过了，爬来没意义 阅读全文
posted @ 2018-04-17 23:20 风吹白杨的安妮 阅读(2079) 评论(0) 推荐(1) 编辑
摘要：
这个Scrapy框架搞了我好久，功夫不负有心人，差不多懂整个思维逻辑了，下面是我爬的代码，不详细介绍了 要自己找资料慢慢体会，多啃啃就懂的啦。 这个框架及真的很好用，很快，很全，上次用Request只爬了200多，这次差不多800.很nice哦！！ 其实不用太懂这个原理，懂用这个框架就好了，反正也不 阅读全文
posted @ 2018-04-16 04:11 风吹白杨的安妮 阅读(2924) 评论(1) 推荐(0) 编辑
摘要：
这篇可能讲的没那么详细，其实不难的，我学这个主要是用于Scrapy框架，妈嗨，Scrapy框架真的是嗨快的 送它几百个大拇指。以下就截图了，该说的都说了 阅读全文
posted @ 2018-04-15 17:20 风吹白杨的安妮 阅读(266) 评论(0) 推荐(0) 编辑
摘要：
找到了一份实习，在一家比较大的地产公司做数据挖掘的工作。 (⊙o⊙)…，之前没想过会去大公司做这些，有点幸运。。。 毕竟以后把大公司的经历写在简历上也是漂漂亮亮哒O(∩_∩)O~ 据说是刚成立的部门，应该会很忙很忙了！ 爬虫的工作据说也蛮多的，考虑到我之前做的爬虫都是比较基础的 这几天打算看看scr 阅读全文
posted @ 2018-04-14 18:01 风吹白杨的安妮 阅读(150) 评论(0) 推荐(0) 编辑
摘要：
数据标准化不用解释了，很简单的一个概念。要用到sklearn的预处理功能 阅读全文
posted @ 2018-04-09 15:12 风吹白杨的安妮 阅读(410) 评论(0) 推荐(0) 编辑