Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 |
Tags
- TensorFlow
- Transformer
- 부스트클래스
- 서울 맛집
- Spark MLlib
- r
- 위기의코딩맨
- Python
- 홍대 맛집
- kaggle
- DataSet
- 부스트캠프
- NLP
- AI 엔지니어 기초 다지기
- 연남 맛집
- 연남동 맛집
- pycharm
- 데이터 시각화
- AI Tech 준비과정
- yolo
- mllib
- spark
- 부스트캠프 ai tech 준비과정
- RDD
- 맛집
- tensorflow 예제
- Ai
- 캐글
- AI tech
- 자연어
Archives
- Today
- Total
반응형
목록RDD 정렬 (1)
반응형
We-Co
[We-Co] Spark RDD filter 및 정렬 연산
안녕하세요. 위기의 코딩맨입니다. 오늘은 RDD의 filter 및 정렬 연산에 대해 알아보도록 하겠습니다. [ filter() ] 용어 그대로 내가 원하는 요소를 뽑아내는 함수입니다 scala> val rdd = sc.parallelize(1 to 5) scala> val result = rdd.filter(_>2) scala> print(result.collect.mkString(", ")) 결과를 확인해보면 3, 4, 5 가 출력되는 것을 확인할 수 있습니다. 1~ 5까지 숫자를 RDD에 넣어주고 2보다 큰 수를 result에 넣어주도록 filter()의 조건을 설정해주면 결과 값이 출력 됩니다. [ sortByKey() ] sortByKey() 함수는 키 값을 기준으로 RDD의 요소들을 정렬하는 연..
Spark
2021. 9. 1. 11:36