약 1300 만 개의 파일을 저장하고 파일에 몇 가지 표준 작업을 수행해야합니다. 우리는 Windows를 사용하고 있습니다. 첫 번째 질문은 파일 시스템에 저장할 수 있는가? 총 파일 크기는 약 6000 TB입니다. MongoDB의 gridfs를 점검하고 있습니다. 이것이 좋은 접근법인지 나는 모른다. 우리는 서버 측에서 Java를 사용할 것입니다.
파일을 편리하게 저장할 수 있다면 파일을 가져 와서 사용자에게 제공하고 파일 이름 바꾸기, 메타 데이터 업데이트 등의 작업을 수행하는 성능은 무엇입니까?
또한 모든 파일을 보조 파일 시스템 저장소 후에. 그러나 gridfs에있는 파일은 청크에 저장됩니다. 그래서 문제는 어떻게 우리가 모든 파일을 빠르게 가져 와서 보조 파일 시스템으로 보낼 수 있는가하는 것입니다.
제가 취해야 할 접근법을 알려주십시오.1300 만 개 파일 gridfs mongo
0
A
답변
5
MongoDB는 웹 스케일이므로 괜찮을 것입니다.
+0
gridfs에 저장된 모든 파일의 백업을 보조 파일 시스템 저장소 일을 쉽게 할 수 있습니까? –
+2
필수 NSFW 게시물 : http://www.youtube.com/watch?v=b2F-DItXtZs. 또한 GridFS를 다른 파일 시스템에 백업하는 것은 그리 직관적이지 않으며 Windows에 파일을 저장하는 경우 GridFS 데이터베이스에서 파일을 검색하면 Word, Excel, Photoviewer와 같은 많은 MS 응용 프로그램에서 읽을 수 없게됩니다. Linux를 사용한다면 괜찮을 것입니다. – PinkElephantsOnParade
관련 문제
- 1. nginx mongo 및 gridfs 버그
- 2. Mongo RC1 용 Grails GORM의 GridFS 지원?
- 3. JQuery와 다중 선택 1300 개 기록
- 4. GridFS
- 5. Ruby GridFS - 파일명을 검색
- 6. 비교적 작은 파일을위한 MongoDB GridFS 파일 크기가 상당히 큰 것
- 7. PHP + GridFS : Own id
- 8. MongoDB, Carrierwave, GridFS 및 파일 복제 방지
- 9. nginx-gridfs 연결 실패
- 10. Gridfs-Nginx 대 토네이도의 Gridfs
- 11. Ruby MongoDB 드롭 GridFS 모음
- 12. GridFS 사용 - 별도의 DB에 있어야합니까?
- 13. mengoengine이있는 GridFs 대신 DEFAULT_FILE_STORAGE에 파일 업로드
- 14. 왜 GridFS 파일 이름과 바이트가 null입니까?
- 15. MongoDB GridFS 오류 : 중복 요소 이름 'filename'
- 16. 결과 반복 MongoDB & GridFS (PHP)
- 17. CAML 만 10 개 결과 만 반환
- 18. Mongodb Gridfs 이미지 크기 줄이기
- 19. MongoDB GridFS 이미지 임베딩 (PHP/HTML)
- 20. mongo 복제가 데이터를 분할하거나 복제합니까
- 21. 만 2 개 라인을 보여
- 22. 상위 10 개 순위 만
- 23. MongoDB gridFS - 파일 이름 길이, 색인 생성, 성능
- 24. MongoDB GridFS 버킷?
- 25. GridFS Chunksize를 MongoDB에서 구성하십시오.
- 26. MongoDB 및 GridFS
- 27. GridFS 랜덤 액세스
- 28. GridFS 파일을 IO 파일로 변환
- 29. 겉으로보기에 기본 MongoDB GridFS 명령 ... 찾지 못했습니다
- 30. gridfs가 파일 아이디 (ObjectId)에서 파일 이름으로 만 작동하지 않는 이유
@JeffFoster, 어떤 경로를 따라야할지 아직 확실하지 않습니다. Ceph, Lustre 등 성능이 뛰어난 파일 시스템을 살펴 본다. 나는 파일 시스템에 대해 많이 모른다. gridfs가 더 나은 옵션인가 ...? –
@Vish Jeff에 의해 작성된 바와 같이, 이것은 프로용입니다 ... 그리고 "정상적인"프로는 아마도 ... 프로 용 :-) – xanatos