카프카 vs 스파크

Question

안녕하세요! 데이터 엔지니어를 꿈꾸는 학생입니다.기초부터 차근차근 공부하려고 노력하고 있습니다.현재 파이썬, AWS, CS 지식, 알고리즘은 어느정도 한 거 같습니다.Airflow를 공부하고 있고 병행하면서 할 공부를 선택해야 하는데..카프카와 스파크 중 어느 것을 먼저 공부해야 할까요..?

메타인지러 · Answer

그 정도 basic knowledge로는 안 건드리는 걸 추천합니다.....애초에 파이썬부터 카프카나 스파크에 맞지 않아요.데이터 엔지니어가 아닌 분석용으로만 스파크를 쓰겠다면 스파크 먼저 추천드립니다. pyspark 하시면 돼요.다만 도커 등을 사용안한다면 설치과정부터 난감하실 겁니다.

카프카 vs 스파크

1개의 답변

Q&A 목록