방법론

응답자 수

2023년 개발자 에코시스템 설문조사 참여자는 35,000명 이상입니다. 가장 대표성 높은 표본을 확보하기 위해 아래 설명된 프로세스를 통해 데이터를 정리했습니다. 결과적으로 이 보고서는 남극에서 보고된 응답 한 개를 포함하여 196개 국가 및 지역의 개발자 26,348명의 응답을 기반으로 작성되었습니다. 이 섹션의 마지막 부분에 설명된 대로 여러 기준에 따라 데이터에 가중치를 적용했습니다.

데이터 정리 프로세스

최소한 프로그래밍 언어 사용에 관한 질문에 답변한 경우에만 불완전한 응답을 활용했습니다. 또한 의심스러운 응답을 식별하고 제외하기 위해 다음을 포함한 일련의 기준을 사용했습니다.

답변에 대한 부담 완화

올해 설문조사는 544개의 질문으로 구성되었습니다.

우리의 목표는 다양한 조사 영역을 다루는 것이었기 때문에 각 응답자는 이전 질문을 기반으로 특정 섹션에만 노출되고 다른 섹션에는 노출되지 않았습니다. 예를 들어, Go에 관한 질문은 Go를 사용하는 프로그래머에게만 표시되었습니다. 또한 각 응답자의 부담을 덜기 위해 질문과 섹션을 무작위로 분류했습니다.

평균적으로, 참가자들은 설문조사를 완료하는 데 30분을 투자했습니다. 설문조사 프로세스를 간소화하기 위해 노력하는 한편, 내년에는 참여 과정을 더욱 효율적으로 만들려고 합니다.

대상 설정

설문조사에 응할 잠재적인 응답자를 초대하기 위해 Twitter 광고, Facebook 광고, Instagram, Quora 및 JetBrains의 자체 커뮤니케이션 채널을 사용했습니다. 또한 사용자 그룹과 기술 커뮤니티 채널에 설문조사 링크를 게시했으며 응답자들에게 설문조사를 동료들과 공유하도록 요청했습니다.

국가 및 지역

아르헨티나, 브라질, 캐나다, 중국, 프랑스, 독일, 인도, 일본, 멕시코, 한국, 스페인, 튀르키예, 러시아, 우크라이나, 영국, 미국 등 16개국에서 충분히 큰 표본을 수집했습니다.

나머지 국가는 6개 지역에 분포되어 있습니다.

현지화

보다 넓은 범위를 포괄하고 다양한 부류의 참가자를 수용하기 위해 설문조사는 총 10개 언어인 영어, 한국어, 중국어, 프랑스어, 독일어, 일본어, 브라질 포르투갈어, 러시아어, 스페인어, 튀르키예어로 제공되었습니다.

샘플링 편향 감소

응답의 출처에 따라 데이터에 가중치가 부여됩니다. Twitter, Facebook, Instagram, Quora의 유료 광고 및 응답자 추천과 같이 JetBrains 사용자에 덜 편중된 외부 출처에서 수집된 응답을 기본적으로 사용했습니다. 가중치 적용 절차를 기초로 결과를 생성하기 위해 각 응답자의 출처를 개별적으로 고려했습니다.

전 세계 개발자 집단의 의견을 편향 없이 수렴하여 파악하기 위해 최대 3단계의 가중치를 적용했습니다.

여전히 존재하는 편차

이러한 조치에도 불구하고 JetBrains 사용자들은 평균적으로 더 적극적으로 이 설문조사에 참가하였기 때문에 일부 편향이 있을 수 있습니다.

설문조사의 분포를 통제하고 스마트 가중치를 적용하기 위해 최선을 다하지만, 커뮤니티와 개발자 에코시스템은 끊임없이 진화하므로 예상치 못한 데이터 변동의 가능성을 완전히 배제할 수는 없습니다.