数据获取与存储的心得

目录

• 用java获取json数据
• 用python获取json数据
• mysql还是csv

传统的数据获取一般都是用java来实现的，但是随着python的兴起，用python的人越来越多，主要原因是python拥有tensorflow和pytorch这样的库，可以在前期用python获取数据，然后再将数据进行训练。

用java获取json数据

需要用到jdbc，代码繁琐，且存入数据库也需要写很多代码，由于java适用于企业级开发，所以对于普通学生来说，要学习的内容非常多。比如想要简化数据存取这个过程，可以利用一些数据库的框架，例如mybatis，但是这样又增加了许多学习成本，比如mavan等等，而且配置环境会比较复杂，不利于数据的迁移和复现。

用python获取json数据

由于python可以利用pip直接下载库，所以会比较方便调用方法。不用像java一样配置很多环境。

mysql还是csv

python可以用pandas进行数据获取和分析，尤其是读取csv文件，并且csv只要有excel就能打开。且最新的csv文件无行数限制，可以存储大量的数据。简单粗暴
而mysql就有点麻烦，虽然可以方便的进行数据库连接操作，但是需要额外安装mysql和navicat，增添了复杂性。