암초보

Group by로 묶은 것중에 n번째를 선택하는방법은...

아래 링크를 참고..

http://code.openark.org/blog/mysql/sql-selecting-top-n-records-per-group

간단한 예제. 해석은 알아서..

SELECT
    SUBSTRING_INDEX( GROUP_CONCAT(fieldA ORDER BY dateField DESC), ',', 1 ) as 'test'
FROM
    tableA
GROUP BY fieldC

그리고,,

group_concat_max_len 에 주의,,

1. mysql 데이터를 csv 파일로 저장(header line함께 출력되도록 union으로 하든가....)

ex) SELECT * from TABLE

 into outfile 'tmp.csv' fields  terminated by ',' lines terminated by '\r\n';

2. mongoimport 명령어로 mongodb에 import

ex) mongoimport --db <db명> --collection <collection명> --type csv --headerline --file tmp.csv

=> --headerline : csv 첫줄에 header line, 즉 컬럼명이 명시되어 있다는뜻..

mongostat -n 0 1

-n : -rowcount 와 동일

0 : 무한 반복

1 : 1초마다

=> 1초마다 mongodb 쿼리 상태(insert, query 등의 개수)를 보여준다.

mongostat -n 0 30

=> 30초마다 한번씩 초당 처리 평균을 보여준다. => 합계가 아닌 평균

16MB인데...

최종 결과물만 제한이 16MB이고

중간 과정에서의 결과는 16MB가 아닌데, 제한이 있는지는 모르겠다

- 내장

적은 수의 하위 문서 자주 변하지 않는 데이터

크기의 변화가 작은 데이터

검색결과에 꼭 필요할 때가 많은 데이터

빠른 읽기

- 참조

많은 수의 하위문서

빈번하게 바뀌는 데이터

크기의 변화가 많은 데이터

검색결과에서 종종 생략하는 데이터

빠른쓰기

사용했을때 데이터가 많아짐에 따라 성능 향상(알고리즘이 효과를 발휘하기위한 최적의 데이터양?)

사용안하고 코드상에서 Ragne를 분기하면 데이터가 적을때는 성능이 좋지만 많이질수록 성능저하..

big data...

INSERT 시 PK가 중복되면 무시하는 것.

INSERT IGNORE INTO... 이렇게 INSERT와 INTO사이에 IGNORE 만 넣어주면된다.

그 외 

INSERT문 끝에 ON DUPLICATE KEY를 사용하여

키 중복시 Update를 사용할 수도 있음..

mysqldump --routines --no-create-info --no-data --no-create-db --skip-opt -u계정 -p 데이터베이스이름 > 백업할 파일이름