一、NoSQL 简介
Nosql的全称是Not Only Sql,这个概念早起就有人提出,在09年的时候比较火。Nosql指的是非关系型数据库,而我们常用的都是关系型数据库。就像我们常用的mysql,sqlserver,oracle一样,这些数据库一般用来存储重要信息,应对普通的业务是没有问题的。但是,随着互联网的高速发展,传统的关系型数据库在应付超大规模,超大流量以及高并发的时候力不从心。而就在这个时候,Nosql得到的告诉的发展。
二、MongoDB备忘录
1、首先说一下自己在使用MongoDB过程中踩过的坑,安装的时候很简单,解压安装完成。我安装的版本是v3.6.5,使用中也非常简单
最简单的启动指令:mongod 带认证的启动指令:mongod -dbpath /data/db -auth 指定配置文件启动的指令:mongod -config /etc/mongod.conf
2、启动后使用mongo进入shell界面,就可以操作数据库了,下面列一些我还记住的指令,不知道的指令区runoob上查一下
查看数据库:show dbs 使用数据库:use <db_name> 查看集合(表):show collections 查看一条内容:db.school.findOne()
3、上面说到了使用认证方式启动mongodb,那么认证的前提当然是需要有用户名和密码了,下面记录一下如何增加认证用户。
> use admin switched to db admin > db.createUser( ... { ... user: "dba", ... pwd: "dba", ... roles: [ { role: "userAdminAnyDatabase", db: "admin" } ] ... } ... ) Successfully added user: { "user" : "dba", "roles" : [ { "role" : "userAdminAnyDatabase", "db" : "admin" } ] }
- user:用户名
- pwd:密码
- db : 数据库名字
- roles:指定用户的角色,可以用一个空数组给新用户设定空角色;在roles字段,可以指定内置角色和用户定义的角色。
role里的角色可以选:
Built-In Roles(内置角色): 1. 数据库用户角色:read、readWrite; 2. 数据库管理角色:dbAdmin、dbOwner、userAdmin; 3. 集群管理角色:clusterAdmin、clusterManager、clusterMonitor、hostManager; 4. 备份恢复角色:backup、restore; 5. 所有数据库角色:readAnyDatabase、readWriteAnyDatabase、userAdminAnyDatabase、dbAdminAnyDatabase 6. 超级用户角色:root // 这里还有几个角色间接或直接提供了系统超级用户的访问(dbOwner 、userAdmin、userAdminAnyDatabase) 7. 内部角色:__system 具体角色: read:允许用户读取指定数据库 readWrite:允许用户读写指定数据库 dbAdmin:允许用户在指定数据库中执行管理函数,如索引创建、删除,查看统计或访问system.profile userAdmin:允许用户向system.users集合写入,可以找指定数据库里创建、删除和管理用户 clusterAdmin:只在admin数据库中可用,赋予用户所有分片和复制集相关函数的管理权限。 readAnyDatabase:只在admin数据库中可用,赋予用户所有数据库的读权限 readWriteAnyDatabase:只在admin数据库中可用,赋予用户所有数据库的读写权限 userAdminAnyDatabase:只在admin数据库中可用,赋予用户所有数据库的userAdmin权限 dbAdminAnyDatabase:只在admin数据库中可用,赋予用户所有数据库的dbAdmin权限。 root:只在admin数据库中可用。超级账号,超级权限
开启用户权限
新建mongodb.conf文件,并加入“auth=true”
从配置文件启动mongodb服务
./bin/mongod -f mongodb.conf
用户验证
[caideyang@localhost mongodb3.2.10]$ ./bin/mongo MongoDB shell version: 3.6.1 connecting to: test > use admin switched to db caideyang > db.auth('admin','admin') 1 >
mongodb.conf配置文件
#数据库数据存放目录 dbpath=/usr/local/mongodb304/data #数据库日志存放目录 logpath=/usr/local/mongodb304/logs/mongodb.log #以追加的方式记录日志 logappend = true #端口号 默认为27017 port=27017 #以后台方式运行进程 fork=true #开启用户认证 auth=true #关闭http接口,默认关闭http端口访问 nohttpinterface=true #mongodb所绑定的ip地址 bind_ip = 127.0.0.1,192.168.1.140 #启用日志文件,默认启用 journal=true #这个选项可以过滤掉一些无用的日志信息,若需要调试使用请设置为false quiet=true
其他配置参数含义
--quiet # 安静输出 --port arg # 指定服务端口号,默认端口27017 --bind_ip arg # 绑定服务IP,若绑定127.0.0.1,则只能本机访问,不指定默认本地所有IP --logpath arg # 指定MongoDB日志文件,注意是指定文件不是目录 --logappend # 使用追加的方式写日志 --pidfilepath arg # PID File 的完整路径,如果没有设置,则没有PID文件 --keyFile arg # 集群的私钥的完整路径,只对于Replica Set 架构有效 --unixSocketPrefix arg # UNIX域套接字替代目录,(默认为 /tmp) --fork # 以守护进程的方式运行MongoDB,创建服务器进程 --auth # 启用验证 --cpu # 定期显示CPU的CPU利用率和iowait --dbpath arg # 指定数据库路径 --diaglog arg # diaglog选项 0=off 1=W 2=R 3=both 7=W+some reads --directoryperdb # 设置每个数据库将被保存在一个单独的目录 --journal # 启用日志选项,MongoDB的数据操作将会写入到journal文件夹的文件里 --journalOptions arg # 启用日志诊断选项 --ipv6 # 启用IPv6选项 --jsonp # 允许JSONP形式通过HTTP访问(有安全影响) --maxConns arg # 最大同时连接数 默认2000 --noauth # 不启用验证 --nohttpinterface # 关闭http接口,默认关闭27018端口访问 --noprealloc # 禁用数据文件预分配(往往影响性能) --noscripting # 禁用脚本引擎 --notablescan # 不允许表扫描 --nounixsocket # 禁用Unix套接字监听 --nssize arg (=16) # 设置信数据库.ns文件大小(MB) --objcheck # 在收到客户数据,检查的有效性, --profile arg # 档案参数 0=off 1=slow, 2=all --quota # 限制每个数据库的文件数,设置默认为8 --quotaFiles arg # number of files allower per db, requires --quota --rest # 开启简单的rest API --repair # 修复所有数据库run repair on all dbs --repairpath arg # 修复库生成的文件的目录,默认为目录名称dbpath --slowms arg (=100) # value of slow for profile and console log --smallfiles # 使用较小的默认文件 --syncdelay arg (=60) # 数据写入磁盘的时间秒数(0=never,不推荐) --sysinfo # 打印一些诊断系统信息 --upgrade # 如果需要升级数据库 * Replicaton 参数 -------------------------------------------------------------------------------- --fastsync # 从一个dbpath里启用从库复制服务,该dbpath的数据库是主库的快照,可用于快速启用同步 --autoresync # 如果从库与主库同步数据差得多,自动重新同步, --oplogSize arg # 设置oplog的大小(MB) * 主/从参数 -------------------------------------------------------------------------------- --master # 主库模式 --slave # 从库模式 --source arg # 从库 端口号 --only arg # 指定单一的数据库复制 --slavedelay arg # 设置从库同步主库的延迟时间 * Replica set(副本集)选项: -------------------------------------------------------------------------------- --replSet arg # 设置副本集名称 * Sharding(分片)选项 -------------------------------------------------------------------------------- --configsvr # 声明这是一个集群的config服务,默认端口27019,默认目录/data/configdb --shardsvr # 声明这是一个集群的分片,默认端口27018 --noMoveParanoia # 关闭偏执为moveChunk数据保存
备份还原数据库
备份
[caideyang@localhost mongodb3.2.10]$ ./bin/mongodump --port=27017 -ucdy -ppasswd --db=caideyang -o /home/caideyang/backup/ 2016-10-30T15:58:58.082+0800 writing caideyang.score to 2016-10-30T15:58:58.083+0800 writing caideyang.user to 2016-10-30T15:58:58.084+0800 done dumping caideyang.score (4 documents) 2016-10-30T15:58:58.085+0800 done dumping caideyang.user (2 documents) [caideyang@localhost ~]$ tree backup/ backup/ └── caideyang ├── score.bson ├── score.metadata.json ├── user.bson └── user.metadata.json 1 directory, 4 files
还原
[caideyang@localhost mongodb3.2.10]$ ./bin/mongorestore --port=27017 -ucdy -ppasswd --db=caideyang ../backup/caideyang/ 2016-10-30T16:04:43.914+0800 building a list of collections to restore from ../backup/caideyang dir 2016-10-30T16:04:43.918+0800 reading metadata for caideyang.score from ../backup/caideyang/score.metadata.json 2016-10-30T16:04:43.918+0800 reading metadata for caideyang.user from ../backup/caideyang/user.metadata.json 2016-10-30T16:04:43.918+0800 restoring caideyang.score from ../backup/caideyang/score.bson 2016-10-30T16:04:43.918+0800 restoring caideyang.user from ../backup/caideyang/user.bson 2016-10-30T16:04:43.930+0800 error: multiple errors in bulk operation: - E11000 duplicate key error collection: caideyang.user index: _id_ dup key: { : ObjectId('5815a5fa5fee222be4c321c9') } - E11000 duplicate key error collection: caideyang.user index: _id_ dup key: { : ObjectId('5815a63a5fee222be4c321ca') } 2016-10-30T16:04:43.930+0800 restoring indexes for collection caideyang.user from metadata 2016-10-30T16:04:43.936+0800 finished restoring caideyang.user (2 documents) 2016-10-30T16:04:43.988+0800 restoring indexes for collection caideyang.score from metadata 2016-10-30T16:04:43.989+0800 finished restoring caideyang.score (4 documents) 2016-10-30T16:04:43.989+0800 done [caideyang@localhost mongodb3.2.10]$
注:部分内容引用自 https://www.jianshu.com/p/5844fdfa9511