如何高效地向SQLite导入大量数据

使用官网提供的SQLite.exe。下面详细介绍如何使用。

一、下载SQLite.exe

下载地址:http://www.sqlite.org/download.html
网上很多信息都过时了,今天研究了一下,下载图中圈起来那个文件,解压后,SQLite.exe就在里面了。

 

 

二、准备工作

1、在数据库中创建一个表格,制定好表格各列的属性(可使用SQLiteStudio)。

2、打开CSV文件,删除第一行(表头)。因为数据量很大,需要用EmEditor打开,把"去除掉,可以另存为txt。如果文件中有中文,记得要选择UTF-8编码,否则导入后是乱码。保存在数据库所在的文件夹。

3、把SQLite.exe复制到数据库所在的文件夹中。

三、打开SQLite.exe

执行以下指令。

sqlite> .open database.db   #打开数据库
sqlite> .database    #用于验证:显示目前连接的数据库路径
main: D:\python test\SQLite\DB\database.db
sqlite> .table    #用于验证:显示这个数据库有哪些表格
tableA
sqlite> .separator ","  #指定分隔符为","
sqlite> .import importdata.txt tableA   # .import FileName TableName

回车后就开始导入数据,两百多万的数据不到一分钟就导完了。导完后通过SQLiteStudio打开,确认是否成功。

记住每个指令前面都有一个“.”
.help可调出所有指令说明。

四、SQLite.exe导入中文的乱码问题

导入文件需保存为UTF-8编码方式。

 
 
4人点赞
 
posted @ 2020-09-02 11:35  黑剑石清  阅读(969)  评论(0编辑  收藏  举报