1
파일이 여러 소스에서 계속 복사 (스트리밍)되는 HDFS 디렉토리가 있습니다.HDFS 디렉토리를 모니터링하기 위해 Apache storm을 구현하는 방법
HDFS 디렉토리 모니터링을위한 토폴로지를 작성하는 방법. 즉, 해당 디렉토리에 새 파일을 만들 때마다 처리해야합니다.
A
답변
1
HDFS 파일/디렉토리 변경을 모니터링하려고합니다.
는보고를 Oozie와 HBase와 기존 지원 가리키는이 질문을 보자 : How to know that a new data is been added to HDFS? 새 파일이 이러한 도구로 검색 할 때 당신은 처리를 위해 토폴로지에 항목을 보낼 수 있습니다.또는 폭풍에 사용자 지정 논리를 작성하고 새 파일이 주기적으로 HDFS에 추가되는지 확인하고 나열 할 수 있습니다. Storm의 진드기 튜플 지원을 확인하십시오.
관련 문제
- 1. 여러 테이블을 모니터링하기 위해 SqlDependency를 설정하는 방법
- 2. SpagoBI를 Apache Hadoop (hdfs)에 연결하는 방법
- 3. hdfs 사용자의 HDFS 사용자 홈 디렉토리를 변경하는 방법은 무엇입니까?
- 4. 라이브 스트림 - Apache Storm을 사용한 다단계 단어 수
- 5. 상태를 모니터링하기 위해 실행중인 프로세스에 연결
- 6. 웹 서비스를 모니터링하기 위해 어떤 도구를 사용합니까?
- 7. .tsv 파일이있는 HDFS 디렉토리를 하이브로 매핑
- 8. hdfs 데이터 노드 디렉토리를 변경할 수 없음
- 9. Apache Flume HDFS 시리얼 화기 포맷하기
- 10. Apache 디렉토리를 index.php로 리디렉션합니다.
- 11. Apache 루트 디렉토리를 변경하십시오.
- 12. 트리거 실행을 모니터링하기 위해 SQL 프로필러를 얻는 방법
- 13. Windows 서비스를 모니터링하기 위해 활성 펄 스크립트를 사용하는 방법
- 14. java.lang.NoClassDefFoundError : org/apache/hadoop/hdfs/BenchmarkThroughput
- 15. Apache Mod_rewrite를 사용하여 디렉토리를 변경하십시오.
- 16. mysql에서 Apache Hadoop HDFS 설치로 데이터를 가져 오는 방법.
- 17. Cocoa/Cocoa Touch에서 디렉토리 모니터링하기
- 18. PHP에서 DRPC Storm을 호출하는 방법은 무엇입니까?
- 19. apache wicket 서버 측 스레드를 구현하는 방법
- 20. Apache Felix로 OSGi에서 AOP를 구현하는 방법
- 21. CloudWatch Amazon Aws - Apache Solr이 다운되어 있는지 모니터링하기 위해 LB에 경보를 만드시겠습니까?
- 22. 우분투에서 파이썬 스크립트 모니터링하기
- 23. HDFS - 사용자
- 24. HDFS - 강제 복제 방법
- 25. HBase + HDFS - hdfs 블록이 누락되었습니다.
- 26. iphone에서 다운로드를 위해 nsdocuments 디렉토리를 사용하는 방법
- 27. Wix- 폴더를 설치하기 위해 디렉토리를 복사하는 방법
- 28. APACHE 웹 서버를 사용하여 HDFS HADOOP에 액세스, Linux CentOS
- 29. Spark iterate HDFS 디렉토리
- 30. SNMP로 NAS 모니터링하기