나는 Mapreduce 개념을 배우고 있습니다. 그리고 이해하고자하는 학습 사례 연구가 하나있었습니다. 지난 50 년간 5 개 도시 (A, B, C, D, E) 온도 데이터가 있는데이 쿼리에서지도 축소가 어떻게 작동하는지 말하시겠습니까? 그것들은 최종 결과를 얻으려면 2 가지 이상의 수준의 감속기 그룹이 필요하다고 생각합니다. (이것은 올바른 하둡 맵에서
나는이 map-reduce 것을 아주 새롭기 때문에 이것을 사용하여 내 사이트의 사용자를 걸러냅니다. 내가 물어보고 싶은 것은 어떻게 그룹 기반 필터링을 할 수 있습니까? 시나리오를 설명해 드리겠습니다. - 사용자가 특정 날짜 사이에 물어 보는 검색어를 필터링하려는 경우> from : -1/01/2016 To : -03/02/2016. 나는 내가 사용하고
IBM Cloudant 데이터베이스의 맵 축소 프로세스를 사용하여 24 시간 이내에 작성된 문서 수를 계산하고 싶습니다. 여기 내지도-줄 코드는 다음 감소 단계에서 function (doc) {
docTime = (new Date(doc.created_at)).getTime();
currentTime = (new Date()).getTim
좋아, 그래서 Map/Reduce 배포에서 많은 데이터를 처리하기 위해 많은 노력을 기울이고 있습니다. 내 질문은 현재 배포가 '유휴 상태'인지 어떻게 알 수 있습니까? 또한 문서를 읽으면 동일한 배포에 대해 계속해서 '제출'할 수 있으며 같은 결과를 얻을 수 있습니다 (제출시 null이 표시됨)? 그게 사실이야? '예약 된 스크립트 인스턴스 검색'을 사용
"otherCauseForRelease"속성을 가진 문서를 식별하기 위해보기를 작성했으며 그 속성이 실제로 채워졌습니다. 내보기 코드는 다음과 같습니다 function (doc) {
if(doc.payload.otherCauseForRelease.length > 5); emit(doc.payload.otherCauseForRelease);
}
그러나
필자는 큰 온톨로지 (.owl)를 만들었으며 지금은 추론 단계에 있습니다. 실제로 문제는 내 온톨로지에 대한 확장 가능한 추론을 보장하는 방법입니다. 나는 문헌을 조사한 결과 큰 데이터가이를위한 적절한 해결책이 될 수 있다는 것을 발견했다. 불행히도 Map-reduce가 입력 OWL 파일로 받아 들일 수 없음을 발견했습니다. SWRL과 같은 의미 론적 언어
sqoop의 기본 매퍼와 감속기는 몇 개입니까? (4-mappers, 0-reducers). --where 또는 --query 조건을 sqoop import으로 사용하면 얼마나 많은 감속기가 있습니까? 로컬 클러스터 그것이 Sqoop을 사용 설명서에 따라 같이 --where or --query condition
내 하둡 버전은 다음과 같습니다 2.8.1 나는 단어 수의 소스 코드가 같다 Apache Hadoop 2.8.0에있는 맵리 듀스 예제를 실행하려고 이하. import java.io.IOException;
import java.util.StringTokenizer;
import org.apache.hadoop.conf.Configuration;
impo
YARN과 MR2 사이에 다소 혼란 스럽습니다. 그들은 같은가요? 일부 문서에서는 분산 응용 프로그램을 실행하고 MapReduce에서는 분산 응용 프로그램을 실행하기위한 플랫폼으로 YARN을 보았습니다. 그 의미는 무엇입니까? 프로그래머가 만든 MapReduce 응용 프로그램입니까 (예 : wordcount 프로그램)? 다시 '내가 직접 작성한 YARN 응
W.r.t 자바 프로젝트 중 하나에 우리는 최근 SonarLint를 사용하기 시작했습니다. 코드 분석 결과에 너무 많은 중요한 코드 냄새 경고가 나타납니다. Critical code smell: Refactor this method to reduce its Cognitive Complexity.
나는 Cyclomatic Complexity에 대해 들었지