MongoDB Basics

dumpAndRestore.md

• mongo collection to csv export

mongoexport --host [hostname] --port [portNumber] --db [backupDBName] --collection [collectionName] --csv --fields field1,field2,field3,field4 --out [exportedFileName.csv]

• dump

mongodump -o [outfileLocation] --db [dbName] --host [hos] --port [portNum]

• dump file restore

mongorestore -d [사용할 db이름] --port 28017 [복구할 db폴더]

mongo_basic.md

• 참고

  • 하둡을-쓰지마세요-당신의-데이터는-그리-크지-않습니다

• 특징

  • auto-sharding

    가상의 큰 table을 만들고 여러 Disk에 랜덤으로 분산저장

  • Map Reduce

    흩어진 데이터를 어떻게 모아서 읽거나 쓸것인가

  • Document안에서 Query가 가능하다. 그리고 Atomic Operation 또한 가능하다.

  • http://docs.mongodb.org/manual/reference/operator/query/

  • Memory Mapped file

• 이슈

  • config server에 부하가 집중.
  • index가 config server에 구성됨
  • config server가 병목현상이 일어나면 문제가 발생
    • 해결책 : 반드시 부하 테스트를 해볼것. 병목현상이 발생하면 분산형스토리지 구축할것(hadoop?)
  • spatial query : Near(가까운 것 부터) , Box(사각형내), Center(원형내)
  • 노드(예를 들어 학교)를 geospatial query를 사용해서 Center 나 Near Query를 사용해서 찾아 낼 수 있을 듯.
  • Disk error가 뜨면 그 부분의 데이터 유실이 발생
    • 해결책 : replica set 구성
  • sharding과 replication은 1set으로 구성

• Write 이슈

  • Global Write-Lock
    • 초당 200 update가 발생했을 때 읽기 작업을 포함한 모든 작업이 Lock(Block)된다.
      • 해결책 : Sharding을 사용하면 된다?
  • MongoDB는 Memory량과 Disk성능(CPU와는 별로 차이가 없나?)을 고려해야 함.

    • Why?

    • Memory Mapped file(OS에서 제공하는 mmap) 즉, 메모리 관리를 Kernel에게 일임한다.

    • Write가 일어날 때

      • logical하게 Memory 공간에 저장
      • 그 후에 일정한 주기에 따라서 OS가 Disk에 Write한다. 이 메모리의 블럭을 Disk에 store한다.

    • [참고] http://bcho.tistory.com/746

    • [참고] http://architects.dzone.com/articles/why-i-said-goodbye-mongodb -- 부정적

• 전체 연산자

  • http://docs.mongodb.org/manual/reference/operator/

• 논리 연산자 ($or, $and, $not, $nor)

  • http://docs.mongodb.org/manual/reference/operator/query-logical/

• 비교 연산자($gt, $gte, $in, $lt, $lte, $ne, $nin)

  • http://docs.mongodb.org/manual/reference/operator/query-comparison/

mongo_config.md

sudo service mongod --config /etc/mongod.conf
sudo service mongodb stop
sudo service mongodb restart
sudo service mongodb status

• dump

//[전체 덤프]
mongodump --out ./mongoback_20150120.bson -uikoob -p

[DB지정]
mongodump --out ./mongoback_20150120.bson —db ucb -uikoob -p

MongoDB Basics.md

User Management Methods

ref (http://docs.mongodb.org/manual/reference/method/js-user-management/)

User Create

/* 
* db.createUser()
*/

// products db에 nspark유저를 생성.
// admin db에  readAnyDatabase와 clusterAdmin role을 부여
// products db는 readWrite role을 부여
use products
db.createUser( { "user" : "nspark",
                 "pwd": "password string",
                 "customData" : { employeeId: 12345 },
                 "roles" : [ { role: "clusterAdmin", db: "admin" },
                             { role: "readAnyDatabase", db: "admin" },
                             "readWrite"
                             ] },
               { w: "majority" , wtimeout: 5000 } )
               
// products db에 dbAccount1유저를 생성하고 readWrite role을 부여              
use products
db.createUser(
   {
     user: "dbAccount1",
     pwd: "password",
     roles: [ "readWrite", "dbAdmin" ]
   }
)

// admin db에 role없이 reportsUser유저를 생성 
use admin
db.createUser(
   {
     user: "reportsUser",
     pwd: "password",
     roles: [ ]
   }
)

// admin db에 clusterAdmin role을 가진 appAdmin유저를 생성
// config db에 readWrite role을 생성
use admin
db.createUser(
   {
     user: "appAdmin",
     pwd: "password",
     roles:
       [
         { role: "readWrite", db: "config" },
         "clusterAdmin"
       ]
   }
)

Change User Password

db.changeUserPassword("reporting", "SOh3TbYhx8ypJPxmt1oOfL");

Role

// 사용자 정의 role 생성
// ____________________________________________________________________________
use admin
  
db.createRole({
    // 사용자 정의 role 이름
    role: "userRole1",
    // 권한 리스트
    privileges: [
        // product.inventory collection은 읽기/쓰기 가능 (삭제는 못함)
        {
            resource: {db: "product", collection: "inventory"},
            actions: ["find", "update", "insert"]
        },
        // product.orders collection은 read만 가능
        {
            resource: {db: "product", collection: "orders"},
            actions: ["find"]
        } 
    ],
    // built-in-roles에서 상속받고자 하는 role을 기입. 필수값이므로 없으면 빈 array라도 있어야 함.
    roles: []
})
  
  
// 생성된 권한을 특정 사용자에게 부여
// ____________________________________________________________________________
db.createUser({user: "user1", pwd: "1111", roles: ["userRole1"]})
  
  
// 권한이 부여된 사용자를 이용하여 테스트
// ____________________________________________________________________________
use product
 
// 성공
db.inventory.insert({no: 1, name: "product1"})
// 실패
db.orders.insert({no: 1, products: [1,2,3]})
  
// 성공
db.inventory.find()
// 성공
db.orders.find()

mongoose.md

Person.find({occupation: /host/})
    .where('name.last')
    .equals('Ghost')
    .where('age')
    .gt(17).
    lt(66)
    .where('likes')
    .in(['vaporizing', 'talking'])
    .limit(10)
    .sort('-occupation')
    .select('name occupation')
    .exec(callback);

mongoose_subdocument.md

var Team = mongoose.Schema({
    teamName:       String,
    teamURL:        String,
    teamMembers:    [{username: String, password: String, email: String, dateCreated: Date}],
});

var Team = db.model('Team', Team);

Team.findOne({'teamMembers.username': 'Bioshox'}, {'teamMembers.$': 1},
    function (err, team) {
        if (team) {
            console.log(team.teamMembers[0].email);
        }
    }
);

update_save_insert.md

(UPDATE VS SAVE) - (SAVE VS INSERT) function

• UPDATE : 특정필드만 수정하기
• SAVE :도큐먼트 덮어쓰기
  • 같은 _id가 있어도 오류를 발생시키지 않고 그 값을 수정
    • 필드가 6개 존재하고 2개를 SAVE할 경우 6개 필드가 다 사라지고 새로 저장하는 2개만 저장됨
• INSERT : 같은 _id가 있으면 오류

  	db.service.insert(
  		{
			"name" : "gmap test",
			"regdate": new Date(),
			"desc" : "app name"
		}
	);