반응형 memory2 MySQl Memory DB Table is Full 환경은 Cetnos 64bit 30GBRAM, MySQL 5.7 버전을 사용하고 있습니다. 많은 텍스트들을 보면 Hadoop MapReduce에서 반복적인 작업은 지양하라고 되어있는데, 현재, 싱글 머신에서 돌리기에는 양이 너무 많아서(쓰레드를 붙이더라도)... MapReduce에 약간의 꼼수를 써서 포팅해서 사용하고 있습니다. 현재 10개의 Hadoop Node에서 총 40개의 Task(MapReduce) 걸었습니다. Map 작업 한번에 총 약 12개 정도의 쿼리를 날립니다. 사실 이 쿼리가 단일 머신에서 할때는 0.55ms 정도 나오는데 10Node로 동시에 Query를 날리니 9s 넘게 걸리더군요.. 물론 제가 쿼리를 엉망으로 만든것은 있습니다. 이러한 문제점을 해결하기 위해, 쿼리에 사용되는 Ta.. 2015. 12. 27. 컴퓨터 버스가 메모리와 I/O 와 통신하는 방법 1. 기억장치와 I/O가 분리된 버스 사용 (메모리를 위해 하나, I/O를 위해 하나) 2. 메모리와 I/O가 공통 버흐와 분리된 제어선 사용 3. 메모리와 I/O가 공통 버스 및 제어선 사용 ...........말은 쉬운데,, 머리가 돌인가..; 2009. 5. 14. 이전 1 다음 반응형
