博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

实习的一些总结

Posted on 2018-05-11 17:58  风吹白杨的安妮  阅读(282)  评论(0编辑  收藏  举报

眼看实习就快一个月了,这也是自己的第一份实习工作。

很幸运能来到这家公司,毕竟以后写在简历上还是挺好的。。。。

刚来一星期的时候,都不知道要做什么,爬取高德地图POI数据总差最后一步将地图分割成N个矩形。。

现在还是很疑惑啊,但还是通过朋友的力量搞到了高德地图的数据。。。

但不想罢休,自己还是得去弄一弄的,我觉得自己之所以对那个分割地图的事情百思不得其解的很大原因是。。

我对地理地图这些东西一无所知,完全不知道怎么分割比较合适~但是最近找到了一个不错的方法,到时候试试

除此之外,我的工作最多的是爬虫。。。。。。。。。

妈逼,老子天天爬虫,数据获取阶段真的是嗨鸡巴累的。

我想想我爬了什么鬼和干了什么鬼:

  ①用Scrapy爬取了大众点评一些乱七八糟的频道数据,啥都有,累死老夫

  ②写了一个小工具,功能是这样的:通过输入地块名称,来返回相应的地块所在位置(经纬度)

                  如果地块名称太泛,太模糊,就会要求你输入规划建筑面积来更加精确地匹配位置

   其实这个工具挺好的,就是界面好丑略简陋。

  ③定向爬虫,我也不知道该不该叫这个名字,当时是这样的,同事把中指数据库的地块信息数据下载下来了,顺便吐槽下中指数据库,

     贵死你妈咪,数据还不全!还只准一个人登陆!太过分!

   (继续)同事把中指数据库的地块信息下载下来后,然后想根据地块名称来对应经纬度位置,其实我本来是觉得这么重要的信息,中指数据库肯定会放在很明显的位置。但是并没有,还是我在json文件里找到的。但是这样找也很费时间,如果有很多个的话,一个个找也是很麻烦。但我当时还想不到要怎么取批量爬取。。

因为爬取中指数据库对我来说。。。难度应该很大啊?登陆还是那种几分钟换一次密码的,还只能一个人登陆惹。但后来通过探索知道中指数据库的一些数据连接的是房天下那边的数据,地图用的是百度地图。所以就想在房天下的网站上看看能不能找到相应的地块以及相应经纬度,最后找到了。

所以目标转为房天下的土地板块网页。

当时还没想好要怎么爬,就一步一步分析,就干脆通过写代码一个个转换,反正分析了蛮久的,最后写出来了一个小工具。就是②上面说的小工具。

最后根据excel表格里的地块名称成功批量爬取了对应的经纬度,夸一下我自己。

爬虫这种东西,真的是要一步步分析的,从一个点到一条线,再到一个面,最后成为一个立体的形状。有空把代码放上了

  ④还是爬虫。。。因为④上面的爬虫爬的经纬度是百度地图的经纬度,而我们做的东西都是根据高德地图的经纬度坐标来的。同事说可以通过网上下载工具来实现批量转换,但我看了一下高德地图开发平台那Web开发的内容,写到了将百度地图坐标转换成高德地图坐标的接口。然后就写代码根据那个接口实现了批量转换,还是挺简单的。凡是靠自己比较好,哈哈!

还做了一些乱七八糟的事,不太记起来了

我觉得我一定要弄下那个高德地图POI数据的获取!

总结下,来公司不到一个月的时间,虽然刚进来心里一直抱怨没人带我,很多东西从网上搜也搜不到。

刚开始遇到什么任务,首先想到的是怎么从网上copy代码,然后自己修改。。但是不是自己写的代码,就算每一句都知道

也很难把那个逻辑思维串联起来。于是我开始自己写代码,跟着自己的思维方式走,还是挺有成效的,给了我一定的信心!

第一份实习就学到了这么宝贵的经验,不是说技术多么厉害,因为我现在还很菜。重要的是学到了一种宝贵的思维方式和做事方法!

最近在学习C语言,谭浩强的书看到一半,但这星期有点忙,没怎么看,周末真该好好泡在书里过了~~~~