2012-10-23 3 views
0

mysql 데이터베이스의 백업을 수행하고 s3에 업로드하는 스크립트를 작성하는 중입니다 ... "s3cmd la"를 사용하여 현재이 s3 버켓에있는 내용을 확인하고보고 싶어졌습니다. 이 같은 만 개 파일 :아마존 s3에 백만 가지를 업로드하는 것으로 보입니다.

2012-10-23 12:19  411 s3://xv_backups/xv.backups_2012-10-23-12-19-55-F6DC46D0F13059F7 
    2012-10-23 12:30  410 s3://xv_backups/xv.backups_2012-10-23-12-30-27-76B099AC21454FED 
    2012-10-23 13:21  411 s3://xv_backups/xv.backups_2012-10-23-13-21-53-0A339BDD587ECACD 
    2012-10-23 13:28  410 s3://xv_backups/xv.backups_2012-10-23-13-28-23-65B7B3AEAAAD0FDF 
    2012-10-23 14:18  410 s3://xv_backups/xv.backups_2012-10-23-14-18-07-29FFF4BD0AE9AB02 
    2012-10-23 14:26  410 s3://xv_backups/xv.backups_2012-10-23-14-26-43-3BC4C3011FB93627 
    2012-10-23 14:28  410 s3://xv_backups/xv.backups_2012-10-23-14-28-19-CAC78643A195BFB5 
    2012-10-23 15:21  410 s3://xv_backups/xv.backups_2012-10-23-15-21-34-BABF49A52A8BA824 
    2012-10-23 16:00  411 s3://xv_backups/xv.backups_2012-10-23-16-00-30-072D0A74DBA71008 
    2012-10-23 16:21  410 s3://xv_backups/xv.backups_2012-10-23-16-21-12-B81605B136D338F3 
    2012-10-23 16:28  378 s3://xv_backups/xv.backups_2012-10-23-16-28-15-1BDAA5F42E3E5EAE 
    2012-10-23 16:57  410 s3://xv_backups/xv.backups_2012-10-23-16-57-50-CF7662865C347D1D 
    2012-10-23 17:20  410 s3://xv_backups/xv.backups_2012-10-23-17-20-19-798E3C0312C959A0 
    2012-10-23 17:31  411 s3://xv_backups/xv.backups_2012-10-23-17-31-31-18C3CD91ACE9D6ED 
    2012-10-23 17:56  410 s3://xv_backups/xv.backups_2012-10-23-17-56-06-8B197E8EE680A9F5 
    2012-10-23 18:19  410 s3://xv_backups/xv.backups_2012-10-23-18-19-54-486BC0B861DF196E 
    2012-10-23 19:24  411 s3://xv_backups/xv.backups_2012-10-23-19-24-03-129C8E3227876BDA 

내가 어디 세계에서 그들이에서오고있다 ... 그들은 모두 상대적으로 작은 files--하지만 있습니다주의? 하나는 그것을 검사 다운로드 I ID가 "얻을 s3cmd"내가 볼 :

그래서
06859b77eb778603ede74dfa6b3444948d577d4c5bca27bfaa1fadd6ed56d35a xv_backups [23/Oct/2012:18:19:54 +0000] 10.186.158.42 3272ee65a908a7677109fedda345db8d9554ba26398b2ca10581de88777e2b61 88B05F67852EAA0D REST.PUT.OBJECT bb.backups_2012-10-23-18-19-54-486BC0B861DF196E "PUT /xv_backups/xv.backups_2012-10-23-18-19-54-486BC0B861DF196E HTTP/1.1" 200 - - 410 48 28 "-" "Jakarta Commons-HttpClient/3.0" - 

--- 뭔가 어딘가에 넣어 요청을하고는 S3에이 펑키 파일을 태우고? 아무도 그게 뭔지, 어떻게 여기에 왔는지, 어떻게 막을 수 있는지, 내가 걱정해야 할까?

답변

0

그들은 S3 bucket logging에서 오는 것처럼 보입니다. 문제가되는 양동이 로깅을 켰습니까? TL

+0

나는하지 않았다. 하지만 아마도 이미 켜져 있었을 것입니다 ... 몇 분 간격으로 기록되는 것이 이상하지 않습니까? 왜 그렇게하고 있니? – patrick

1

, DR은 - 나는 비슷한 문제를 가지고 아마존 S3

에 같은 버킷에 기록하지 마십시오.

기본적으로 로그 파일을 기록했습니다. 이 줄을 에 기록하면 로그 파일이 다른 로그를 트리거하고 또 다른 로그가 나타납니다. 다행히도 S3의 로깅은 실시간이 아니며 단지 하루에 몇 백 개의 파일 만 쓰는 것으로 보입니다.

http://kylecronin.me/blog/2011/11/30/dont-log-to-the-same-bucket-in-amazon-s3.html

관련 문제