빅데이터

이 섹션의 질문은 데이터 분석, 데이터 엔지니어링, 머신러닝에 관련된 개발자 또는 직무가 데이터 분석가/데이터 엔지니어/데이터 과학자인 개발자에게만 표시되었습니다. 이 설문조사는 개발자만을 대상으로 실시되었으므로, 설문조사 결과가 광범위한 빅데이터 직무 종사자를 대표하지 못할 수 있습니다.

다음 중 어떤 배치 처리 도구를 사용하시나요?

다음 중 어떤 스트리밍 처리 도구를 사용하시나요?

데이터 파이프라인 구축에 관여하지 않는 전문가는 데이터 레이크 구축을 위해 기존의 관계형 데이터베이스를 사용합니다. Spark는 여전히 배치 처리 및 스트리밍 처리 작업에 가장 많이 사용되는 도구입니다.

다음 중 어떤 오케스트레이션 도구를 사용하시나요?

예상대로 Apache Airflow는 특히 데이터 엔지니어에게 가장 인기 있는 오케스트레이션 도구입니다. 흥미롭게도 오케스트레이션 도구의 10%는 사용자 지정 또는 직접 개발한 도구입니다.

다음 중 Spark 실행에 사용하는 도구는 무엇인가요?

Kubernetes, YARN 및 Amazon EMR은 Spark 실행을 위해 가장 많이 사용되는 클라우드 솔루션입니다.

다음 중 데이터 레이크 구축에 어떤 도구를 사용하시나요?

다음 중 어떤 MPP 도구를 사용하시나요?

응답자 중 대다수는 MPP 도구를 사용하지 않습니다. BigQuery, Redshift 및 Azure SQL 데이터 웨어하우스는 가장 많이 사용되는 도구입니다.

메시지 브로커 또는 메시지 큐(예: Kafka, RabbitMQ) 관련 업무를 수행하시나요?

다음 중 메시징 및 전달에 사용하는 도구는 무엇인가요?

The Big Data Tools Plugin

선호하는 데이터 엔지니어링 도구로 작업할 수 있는 IDE 플러그인

이전 페이지

Swift 및 Objective-C

다음 페이지

데이터베이스

빅데이터:

2022

읽어주셔서 감사합니다!

이 보고서가 여러분에게 도움이 되었길 바랍니다. 이 보고서를 친구와 동료에게 공유하세요.

질문이나 제안이 있으면 surveys@jetbrains.com으로 연락해 주세요.