mongodb 使用总结

mongo 分页查询排序报错误，数据量小时没有错误，当数据量大时报错误，排序最大32MB的限制

解决方案：对排序字段创建索引即可

You're running into the 32MB limit on an in-memory sort:

http://docs.mongodb.org/manual/reference/limits/#Sorted-Documents

Indexing the sort field allows MongoDB to stream documents to you in sorted order, rather than attempting to load them all into memory on the server and sort them in memory before sending them to the client.

./mongo localhost:27017/admin

db.auth("site","123456")

use test1
更新

db.User.update({},{$rename:{"account.id":"account._id"}},{multi:true})

删除字段

db.Role.update({},{$unset:{"creator":1}},{multi:true})

Mongodb修改字段名称

db.User.update({mvno:{$exists:true,$nin:[null]}},{$rename:{"mvno.id":"mvno._id"}},{multi:true})

db.User.update({"account.accType.id":{$exists:true,$nin:[null]}},{$rename:{"account.accType.id":"account.accType._id"}},{multi:true})

db.User.update({_id:ObjectId("561b88eedc199e231802267c")},{$set:{username:"test"}})

导出数据指定数据表

./mongoexport -h localhost:27017 -u site -p=123456 --authenticationDatabase admin -d test1 -c Terminal -o /tmp/terminal.dat

导出数据库

./mongod -h localhost:27017 -u site -p=123456 --authenticationDatabase admin -d test1 -o /tmp/datacopy

./mongodump -h localhost:40000 -u site -p=123456 --authenticationDatabase admin -d bssmongodb -o /tmp/datacopy

导入数据库

./mongorestore -h localhost:27017 -u site -p=123456 --authenticationDatabase admin -d test1 /tmp/datacopy/test2/

{$where: '(this.createTime-1452152974903 > 1000)'} where做运算

./mongostat --host localhost --port 27017 -u site -p 123456 --authenticationDatabase admin --监控mongodb状态

--discover切片信息查看

./mongostat --host localhost --port 27017 -u site -p 123456 --authenticationDatabase admin --discover

--聚合通道使用

db.DetailRecord.aggregate(

[

{ $match : { "businessId" : "5630851131196b149429ae88"}},

{

$group:

{

_id: {day:"$sessionId"},

totalAmount: { $sum: "$amount"},

count: { $sum: 1 }

}

}

]

)

创建组合索引

db.DetailedRecord.ensureIndex({"createDate":1,"processState":1})

./mongod --port=27017 --dbpath=/usr/local/mongodb/data/mongodb_data/ --logpath=/usr/local/mongodb/data/mongodb_log/mongodb.log --auth --fork

--quiet	# 安静输出
--port arg	# 指定服务端口号，默认端口27017
--bind_ip arg	# 绑定服务IP，若绑定127.0.0.1，则只能本机访问，不指定默认本地所有IP
--logpath arg	# 指定MongoDB日志文件，注意是指定文件不是目录
--logappend	# 使用追加的方式写日志
--pidfilepath arg	# PID File 的完整路径，如果没有设置，则没有PID文件
--keyFile arg	# 集群的私钥的完整路径，只对于Replica Set 架构有效
--unixSocketPrefix arg	# UNIX域套接字替代目录,(默认为 /tmp)
--fork	# 以守护进程的方式运行MongoDB，创建服务器进程
--auth	# 启用验证
--cpu	# 定期显示CPU的CPU利用率和iowait
--dbpath arg	# 指定数据库路径
--diaglog arg	# diaglog选项 0=off 1=W 2=R 3=both 7=W+some reads
--directoryperdb	# 设置每个数据库将被保存在一个单独的目录
--journal	# 启用日志选项，MongoDB的数据操作将会写入到journal文件夹的文件里
--journalOptions arg	# 启用日志诊断选项
--ipv6	# 启用IPv6选项
--jsonp	# 允许JSONP形式通过HTTP访问（有安全影响）
--maxConns arg	# 最大同时连接数 默认2000
--noauth	# 不启用验证
--nohttpinterface	# 关闭http接口，默认关闭27018端口访问
--noprealloc	# 禁用数据文件预分配(往往影响性能)
--noscripting	# 禁用脚本引擎
--notablescan	# 不允许表扫描
--nounixsocket	# 禁用Unix套接字监听
--nssize arg (=16)	# 设置信数据库.ns文件大小(MB)
--objcheck	# 在收到客户数据,检查的有效性，
--profile arg	# 档案参数 0=off 1=slow, 2=all
--quota	# 限制每个数据库的文件数，设置默认为8
--quotaFiles arg	# number of files allower per db, requires --quota
--rest	# 开启简单的rest API
--repair	# 修复所有数据库run repair on all dbs
--repairpath arg	# 修复库生成的文件的目录,默认为目录名称dbpath
--slowms arg (=100)	# value of slow for profile and console log
--smallfiles	# 使用较小的默认文件
--syncdelay arg (=60)	# 数据写入磁盘的时间秒数(0=never,不推荐)
--sysinfo	# 打印一些诊断系统信息
--upgrade	# 如果需要升级数据库

复制集读选项模式

详细说明

primary

默认模式，所有的读操作都在复制集的 主节点 进行的。

primaryPreferred

在大多数情况时，读操作在 主节点 上进行，但是如果主节点不可用了，读操作就会转移到 从节点 上执行。

secondary

所有的读操作都在复制集的 从节点 上执行。

secondaryPreferred

在大多数情况下，读操作都是在 从节点 上进行的，但是当 从节点 不可用了，读操作会转移到 主节点 上进行。

nearest

读操作会在 复制集 中网络延时最小的节点上进行，与节点类型无关。

注意：在从节点上进行读操作时返回的数据可能不是 主节点 上最新的数据。如果需要数据强一致性，也需要在写入的时候设置写策略。

代码参考：

DBCollection collection=mongoPersist.getMongoTemplate().getCollection("test");

//Gets a read preference that forces reads to a secondary if one is available, otherwise to the primary 读数据设置。根据实际情况设置不同的读策略。

collection.setReadPreference(ReadPreference.secondaryPreferred());

//at least 2 servers for the write operation 写数据时设置。根据实际情况设置不同的写策略。

collection.setWriteConcern(WriteConcern.REPLICAS_SAFE);

collection.find();

collection.save(document);

集群搭建资料
http://blog.csdn.net/luonanqin/article/details/8497860
Spring 集成配置方式

<mongo:mongo-client replica-set="${mongo.replicaset}"

id="mongoClient" credentials="${mongo.user}:${mongo.password}@${mongo.authenticationdb}">

</mongo:mongo-client>

<mongo:db-factory dbname="${mongo.database}"

mongo-ref="mongoClient" />

<bean id="mappingContext"

class="org.springframework.data.mongodb.core.mapping.MongoMappingContext" />

<!-- 默认Mongodb类型映射 -->

<bean id="defaultMongoTypeMapper"

class="org.springframework.data.mongodb.core.convert.DefaultMongoTypeMapper">

<constructor-arg name="typeKey">

<null /><!-- 这里设置为空,可以把 spring data mongodb 多余保存的_class字段去掉 -->

</constructor-arg>

</bean>

<!-- 配置mongodb映射类型 -->

<bean id="mappingMongoConverter"

class="org.springframework.data.mongodb.core.convert.MappingMongoConverter">

<constructor-arg name="mongoDbFactory" ref="mongoDbFactory" />

<constructor-arg name="mappingContext" ref="mappingContext" />

<property name="typeMapper" ref="defaultMongoTypeMapper" />

</bean>

<bean id="mongoTemplate" class="org.springframework.data.mongodb.core.MongoTemplate">

<constructor-arg name="mongoDbFactory" ref="mongoDbFactory" />

<constructor-arg name="mongoConverter" ref="mappingMongoConverter" />

</bean>

<!-- 定义mongo对象，对应的是mongodb官方jar包中的Mongo，replica-set设置集群副本的ip地址和端口 -->

<!-- <mongo:mongo id="mongo" replica-set="${mongodb.replica-set}">

一些连接属性的设置

<mongo:options

connections-per-host="${mongo.connectionsPerHost}"

threads-allowed-to-block-for-connection-multiplier="${mongo.threadsAllowedToBlockForConnectionMultiplier}"

connect-timeout="${mongo.connectTimeout}"

max-wait-time="${mongo.maxWaitTime}"

auto-connect-retry="${mongo.autoConnectRetry}"

socket-keep-alive="${mongo.socketKeepAlive}"

socket-timeout="${mongo.socketTimeout}"

write-number="1"

write-timeout="0"

write-fsync="true"/>

</mongo:mongo> -->

用户验证：注意事项

为什么我们启用了登录验证模块，但我们登录时没有指定用户，为什么还可以登录

呢？在最初始的时候 MongoDB 都默认有一个 admin 数据库（默认是空的），

而 admin.system.users 中将会保存比在其它数据库中设置的用户权限更大的用户信息。

注意：当 admin.system.users 中没有添加任何用户时，即使 MongoDB 启动时添加了 --auth

参数，如果在除 admin 数据库中添加了用户，此时不进行任何认证依然可以使用任何操作，

直到知道你在 admin.system.users 中添加了一个用户.

副本集加切片部署方案详见：http://blog.csdn.net/angellove156/article/details/20638107

Mongodb权威指南中文版

仲裁节点不需要也可以切换主从，副本集使用奇数个成员

/usr/local/mongodb/bin/mongod --replSet rs2 --keyFile /data/key/r0 --fork --port 28010 --dbpath /data/data/r0 --logpath=/data/log/r0.log --logappend

/usr/local/mongodb/bin/mongod --replSet rs2 --keyFile /data/key/r1 --fork --port 28011 --dbpath /data/data/r1 --logpath=/data/log/r1.log --logappend

/usr/local/mongodb/bin/mongod --replSet rs2 --keyFile /data/key/r2 --fork --port 28012 --dbpath /data/data/r2 --logpath=/data/log/r2.log --logappend

/usr/local/mongodb/bin/mongod --configsvr --keyFile /data/key/config --port 30000 --dbpath /data/configdb --fork --logpath /data/log/config.log --directoryperdb

/usr/local/mongodb/bin/mongos --port 40000 --configdb SZ-MongoDB02:30000 --fork --logpath /data/log/route.log --keyFile /data/key/mongos

/usr/local/mongodb/bin/mongod --replSet rs1 --keyFile /data/key/r0 --fork --port 28010 --dbpath /data/data/r0 --logpath=/data/log/r0.log --logappend

/usr/local/mongodb/bin/mongod --replSet rs1 --keyFile /data/key/r1 --fork --port 28011 --dbpath /data/data/r1 --logpath=/data/log/r1.log --logappend

/usr/local/mongodb/bin/mongod --replSet rs1 --keyFile /data/key/r2 --fork --port 28012 --dbpath /data/data/r2 --logpath=/data/log/r2.log --logappend

/usr/local/mongodb/bin/mongos --port 40000 --configdb SZ-MongoDB02:30000 --fork --logpath /data/log/route.log --keyFile /data/key/mongos