このセクションの質問は、データ解析、データエンジニアリング、機械学習に関与する開発者、またはデータアナリスト/データエンジニア/データサイエンティストを役職とする方に示されました。このアンケートは具体的に開発者を対象としているため、結果は、より幅広いビッグデータオーディエンスを代表するものではない可能性があります。

ビッグデータ

データの解析と視覚化には、どの統計パッケージを使用していますか?

表計算エディターはデータ解析と視覚化に最も使用されているツールです(46%)。

どのビッグデータ分析プラットフォームを使用していますか?

ビッグデータ開発者の大半は、具体的なデータ解析プラットフォームを使用していません(68%)。最も一般的なデータ解析プラットフォームは Google Colab です(19%)。

どのビッグデータツールを使用していますか?

ビッグデータ用のツールとしては、Jupyter が最も人気が高く、ビッグデータ開発者の 32% が使用しています。ほかには、Apache Spark(20%)と Apache Kafka(17%)にも人気が寄せられています。

どのバージョンの Spark を使用していますか?

どこで大部分のデータをホストしていますか?

データはほとんどの場合社内サーバー(36%)かローカル(26%)でホスティングされています。回答者の 21% は AWS でデータをホスティングしており、ほかのホスティングはそれほど一般的ではありません。

IT はあなたの会社の中核事業ですか? 

機械学習専門家はより一般的にコア IT 企業で勤務しています。

あなたの会社の主要な分野は次のうちどれですか? 

IT 以外の業界では、データエンジニアは金融業界で、機械学習専門家は教育および科学の分野で雇用されていることがより一般的です。

あなたの会社の主要な分野は次のうちどれですか? 

Apache Spark における Python、Scala、および Java の使用状況

Python を Apache Spark と使用している人は 66%、Java と使用している人は 34%、Scala と使用している人は 11% です。

使用されているビッグデータツールの組み合わせトップ 10

10% は Apache Spark と Apache Kafka の両方を使用しています。9% は Apache Spark とApache Hadoop の両方を使用しています。

Apache Kafka と共に使用されている 3 大言語

Apache Kafka と使用されている 3 大言語は Python、Java、および SQL です。

米国、ヨーロッパ、ロシア、およびアジアにおける Pytho/R の比率

他の地域に比べ、ロシアでは R(5%)が使用されています。アジアでは Python(59%)がより広く使用されています。

主要言語(ビッグデータのホスティング別)

Python と Java は Google Cloud で、JavaScript と PHP は AWS で、C#は Azure で最も一般的に使用されています。

ビッグデータツールの使用状況(ビッグデータのホスティング別)

Google Cloud とともに一般的に使用されているのは Jupyter と Apache Beam です。Apache Spark と Apache Kafka は AWS ユーザーの間でより一般的に使用されています。

主要言語(データ解析/データエンジニアリング/機械学習への関与別)

データ解析およびデータエンジニアリングに携わる開発者に比べ、機械学習専門家はより一般的に Python、C++ 、および C を使用しており、SQL と PHP はあまり一般的ではありません。

主要言語(業界別)

Python と R は教育と科学の分野に関与している開発者で、より一般的に使用されている言語です。

ビッグデータツールの使用状況(業界別)

Jupyter の使用は、教育と科学の分野でより一般的に使用されています。Apache Spark、Apache Kafka、Apache Hadoop、および Apache Hive はバンキングが一般的です。

Apache Spark 使用状況のシェア(国・地域別)

Apache Spark ユーザーは、中国、インド、韓国、スペイン、およびラテンアメリカで最大のシェアを示しています。

ご覧いただきありがとうございました!

レポートはお役に立ちましたか?
ぜひこのレポートを友人や同僚と共有してください。

JetBrains Tech Insights Lab にご参加ください

JetBrains 製品をより使いやすく、さらに強力にするためのアンケートと UX 調査にご協力ください。調査にご参加いただいた方には報酬を獲得できるチャンスもあります。

ご質問やご提案がございましたら、surveys@jetbrains.comまでお問合わせください。