FileCache
프로그램이 실행될 때 동시에 열 수 있는 파일의 갯수에 제한이 있는데, FileCache 모듈을 쓰면 자기가 알아서 오랫동안 사용되지 않은 핸들을 닫고, 필요할 때 다시 열 수 있게 해 준다.
파일 하나에 수백만 개의 데이타가 들어 있는 것을 정렬하려고 하는데 메모리에 다 올려둘 수가 없어서 임시 파일에 저장하며 정렬하는 것을 시도하면서 사용하게 된 모듈인데, 테스트 결과를 처음에 이 페이지에 적었다가, 다른 모듈들을 사용한 결과와 비교하게 되면서 BigDataSort 페이지로 내용을 이전하였다.
더불어 내용이 FileCache때문에 시작한건데 이제 그건 그냥 일부가 되어버렸으니 위키타이틀 제목을 BigDataSort 또는 BigFileSort 정도로 바꾸는게 낫지 않을까요? 요즘 하도 빅데이터 드립들이 많아서 이 좋은 내용들을 널리 보게하기 위해 검색에 의한 유입수를 늘이는데도 그게 좋을듯요 :)
-- aero 2012-11-1 9:11 am
어제부터 그 생각을 하고 있는데 한 번 제목을 정했다 바꾸면 이래저래 불편한게 많아서(이게 위키가 엄청 수동식이라서요 ^^;)... 이 페이지는 그냥 두고 새로 만들어 옮겨야겠어요. 어쨌거나 이번에도 가르침 많이 받았습니다 :-)