분산 된 grep 구현

Question

분산 된 grep을 구현하려고합니다. 다른 시스템의 로그 파일에 어떻게 액세스합니까? 나는 네트워크를 사용해야한다는 것을 알고 있지만 ssh, telnet 또는 다른 것을 사용하는지 모르겠습니다. 내 컴퓨터에서 연결하려는 컴퓨터에 대해 알아야 할 정보는 무엇입니까? 나는 다른 리눅스 머신에 연결하고 로그 파일을 읽고 그것을 머신으로 파이프 할 수 있기를 원한다.

Answer 1

시스템에는 로그 데이터 (SERVER)를 생성하는 많은 Linux 시스템과 사용자가 조작하는 하나의 시스템 (CLIENT)이 있습니다. 권리?

문제 1) 액세스 할 파일. 일반적으로 소프트웨어는 로그 데이터를 언제든지 로그 파일에 쓸 수 있어야하기 때문에 로그 데이터를 생성하는 소프트웨어가 로그 파일을 잠급니다. 다른 소프트웨어에서 로그 파일에 액세스하려면 잠금 해제 된 로그 데이터 파일을 준비해야합니다. 소프트웨어 설치 또는 소프트웨어 (프로그램) 자체의 일부 수정.

문제 2) 로그 파일을 제공하는 프로그램. SERVER에서 로그 데이터를 얻으려면 각 서버가 일부 서버 프로그램을 실행해야합니다. 원격 쉘 액세스의 경우 rshd (원격 쉘 데몬)가 필요합니다. (ssh는 rsh와 보안 통신의 조합입니다). FTP 액세스의 경우 ftpd (파일 전송 프로토콜 데몬)가 필요합니다. 필요한 소프트웨어는 CLIENT가 SERVER에 액세스하는 방법에 따라 다릅니다.

3) 배포 된 grep. 'distributed grep'이라는 단어를 사용합니다. 그 말이 무슨 뜻이야? '분산 된 grep'에 배포되는 내용은 무엇입니까? 많은 시나리오가 내 마음에 들었습니다. a) 로그 파일은 SERVER에 배포됩니다. 모든 로그 데이터는 CLIENT에 수집되고 grep 프로그램은 CLIENT에서 수집 된 로그 데이터에 대해 작동합니다. b) 로그 파일은 SERVER에 배포됩니다. Grep 기능은 각 서버에서도 구현됩니다. CLIENT가 각 SERVER에게 grep의 resule을 얻는 데 필요한 데이터 요청을 기록하고 결과를 CLIENT에 수집합니다. 등 귀하의 계획은 무엇입니까?

문제 4) SERVER에 대한 액세스. 보안 통신의 필요성은 기계와 네트워크의 위치에 따라 다릅니다. 모든 컴퓨터가 회의실/집에 있고 컴퓨터 간 네트워크가 인터넷에 연결되어 있지 않으면 보안 통신이 필요하지 않습니다. 로그의 데이터가 일급 비밀 인 경우 네트워크에서 데이터를 보내기 전에 데이터를 암호화해야 할 수 있습니다. 로그 데이터가 중요한 이유는 무엇입니까?

개발 초기 단계에서 위에서 설명한 내용을 확인해야합니다. 내 충고입니다.