반응형 wordcount1 [We-Co] Word Count - Spark 예제 안녕하세요. 위기의 코딩맨입니다. 오늘은 Spark를 이요하여 문자를 count 하는 예제 한번 알아보겠습니다. 텍스트 파일 속에 있는 문자열 들을 Count 하기 위해 텍스트 파일을 하나 작성합니다. [ 예제 ] Spark를 실행하고.. 해당 텍스트 파일을 inputfile로 지정해 주도록 합니다. scala> val inputFile = sc.textFile("생성된텍스트파일경로/sparkTest.txt") Split의 기준을 " "로 기준을 잡고 개수를 count 해주도록 기준을 설정해 주도록 합니다. scala> val counts = inputFile.flatMap(line => line.split(" ")).map(word => (word,1)).reduceByKey(_ + _); scala>.. 2021. 8. 6. 이전 1 다음 반응형
