8
현재 MongoDB가있는 단일 서버에서 내 웹 사이트를 실행합니다. 내 서버에 나는 두 가지 구성 요소를 (1) 시간마다 실행하고 내 MongoDB를 인스턴스 (2) 크롤러 인덱스에서 읽고 또한 사용자의 개인 DB에 기록 웹 사이트에 데이터를 추가 크롤러. 자동 스케일링을 위해 Amazon EC2로 이동 중이므로 웹 서버가 자동 확장 할 수 있으므로 웹 트래픽이 증가 할 때 서버 수를 늘릴 수 있습니다. 내 크롤러에는 자동 크기 조정이 필요하지 않습니다. 이것은 내가 MongoDB를 사용하는 방법에 대한 도전이된다. 내 최선의 선택이 내 코드에EC2에서 MongoDB를 확장하거나 DynamoDB로 전환해야합니까?
- 최소한의 변화를 최적화하기 위해 무엇인지 궁금하네요 완벽하게 DB에서 데이터 손실에 대한 걱정없이 웹 서버를 추가/제거 할 수
- 능력 (코드는 펄에)
- 단기간에 저렴한 비용
의 DB는 확실히 2GB가 아래에있을 것입니다 이후의 모든 machies를 통해 메모리에 들어갈 수있을 것입니다. 사용자 개인 설정 DB를 다시 작성할 수 없으므로 색인을 쉽게 다시 작성할 수있는 반면 사용자 개인 설정 DB는 다시 작성할 수 없습니다. 현재 MongoDB 크롤링 색인은 ~ 15 개의 서로 다른 열에서 입력되는 약 100,000 개의 항목이 있습니다. 이것은 온라인 데이트 사이트 (여러 가지 방법으로 검색 가능)에서 일하고 있기 때문에 속도를 높이기 위해 만들어졌습니다.
나는 몇 가지 옵션
인덱스에 대한- 를 사용하여 사용자의 개인 저장소에 대한 SimpleDB에, 그리고 MongoDB를 생각할 수 있습니다. 색인은 모든 컴퓨터에서 복제되지만, MongoDB 복제에 대해서는 너무 많이 알지 못합니다. SimpleDB는 에
- 이동 모든 것을 내가 SimpleDB에 및/또는 DynamoDB의에 대해 너무 많이 알고하지 않습니다 DynamoDB의
에 모든 이동
감사합니다. Joe! 이것은 매우 통찰력이 있습니다. 따라서 Mongo 데이터가 3 대의 컴퓨터에 분산되어 있거나 3 대의 컴퓨터에 복제되어 있습니까? 이것은 Mongo 확장을 사용하여 웹 서버의 크기 조정을 분리하는 좋은 방법입니다. mongo 서버를 확장 할 때 가동 중지 시간이 있습니까? 더 많은 용량이 필요할 때 Mongo를 확장하는 좋은 방법에 대한 조언이나 링크가 있습니까? – ZenoriInc
우리는 복제본 세트가있는 3 개의 개별 시스템 (하나는 마스터, 2 개는 복제본)을 사용합니다. 이것은 주로 자동 장애 극복을위한 것입니다. 따라서 마스터가 죽으면 복제본 중 하나가 마스터가되도록 승격됩니다. 각 복제본 데이터의 데이터는 동일합니다. – Joe
데이터 크기를 조정할 때 샤딩이라고하는 것을 사용할 수 있습니다. 여기서 여러 개의 Mongo 인스턴스에 걸쳐 하나 이상의 콜렉션에서 데이터를 분산시킵니다. 이렇게하면 수평으로 확장 할 수 있습니다. 데이터는 여러 실제 시스템에 분산되어 있으며 프록시는 Mongo에게 샤드 키를 기반으로 할 위치를 알려줍니다. 우리는 이것이 작동 하는지를 확인하기위한 인프라를 설정했지만, 현재 인스턴스를 부팅 한 후에는 사용하기에 충분한 데이터가 없습니다. – Joe