Property

Property

데이터 불러오기, 처리하기, 내보내기를 수행하는 ETL 노드의 경우 추가로 property 설정을 할 수 있다.

1. appName : ETL name을 정할 수 있다(필수).
2. source : 작성된 워크플로우에 대한 pyspark 소스를 볼 수 있다.
3. argument : 인수를 지정 할 수 있다.
4. sparkOpts : spark 실행 options을 정할 수 있다(ex: executor 수, executor 메모리 등).
5. master : spark master URL
6. mode : spark deploy mode를 의미하며 입력하지 않을 경우 cluster mode로 수행된다.
7. forceOK : 해당 부분이 오류가 나도 다음 노드로 넘어간다.