filter

Definition

원하는 데이터만 불러오기 위해 필터링 조건을 설정합니다.
좌측 [데이터처리(기본)]노드 중 [filter]노드를 drag & drop 한 후 Property 항목을 입력합니다. Property 패널의 [더보기+] 버튼을 누르면 입력가능한 전체 Property 항목을 볼 수 있습니다.

Set

[setting], [parameter] 설정은 [워크플로우] > [생성] > [기본구성]을 참고합니다.

Property

[Node Description] 작성 중인 노드명 입력

1. filters : filtering 옵션 선택

   • col : 필터링 대상 컬럼 선택. 적용대상 컬럼이 여러 개일 경우 우측 [+]버튼으로 추가

     filterOption
     less than(<)
     less than or equal(<=)
     equal(=)
     not equal(!=)
     greater than or equal(>=)
     greater than(>)
     contains
     not contains
     like

   • filterValue : 필터 기준값 입력(문자열 입력시 쌍따옴표("") 사용필요)

2. filterOperator : 필터 사이의 조건 연산자 선택(AND, OR)

3. useCustom : 사용자 입력 기능 사용 시 선택

4. customCondition : 사용자가 원하는 조건식을 직접 입력(1.filters로 해결할 수 없는 복잡한 조건 적용시)

Example

상품정보 데이터의 category컬럼의 값이 "악세사리"이고, price 컬럼값이 50000이상인 데이터를 조회합니다.

1. [HDFS불러오기], [filter] 노드를 Designer에 Drag & Drop하여 워크플로우 생성
   
2. [fillna]노드에서 filters, filterOperator 항목을 아래와 같이 입력 후 snapshot 확인
3. [fillna]노드에서 customCondition에 아래와 같이 입력해도 동일한 결과를 표출