ハッカランクでデータエンジニアリングスキルを評価するには？

概要

この記事は、HackerRankが有効にした候補者のデータエンジニアリングスキルを評価する機能について説明しています。 データエンジニアは、データセットの傾向を見つけ出し、アルゴリズムを開発して生データをより有益にする責任があります。HackerRankでは、SQL、Apache Kafka、Hadoop、Couchbase、Apache Spark、Java、Scalaなどの基本的なスキルを備えた事前設計およびカスタムビルドのテストを通じて、データエンジニアリングのスキルを評価できます。

注意: HackerRankのスキル諮問委員会によって検証されたHackerRankは、HackerRankスキルディレクトリを提供しており、データエンジニアリングの役割の候補者を評価するために活用できる能力を明確に定義しています。

HackerRankのデータエンジニア役割を使用して、関連するスキルの理論的および実践的な知識をテストできます。データエンジニアリングの評価は、3つの役割に分類されます：

• データエンジニア（JavaSpark）
• データエンジニア（PySpark）
• データエンジニア（ScalaSpark）

各役割に対して評価されるスキルは以下に示します：

データエンジニアリングスキルを評価するための質問タイプ

データエンジニアリングスキルを評価する最も一般的な方法のいくつかは：

• 実践的なタスク（推奨）
• 選択式質問

実世界のまたは実践的なタスク と質問は、候補者により深く掘り下げてスキルの熟練度を示すことを求めます。HackerRankライブラリの実践的な質問を使用することで、候補者は実践的なデモンストレーションと複数の解決策を評価できます。

例えば、HackerRankライブラリのApache Sparkベースの質問は、ラムダを使用したインメモリ変換、RDDをData Frameに変換、ブロードキャスト変数とアキュムレータの使用、データ操作タスクを実行するスパークジョブの作成などの能力を評価します。

いくつかの例は 私たちのライブラリのApache Sparkハンズオンプロジェクトの質問は以下の通りです。

Apache Sparkの質問例

同様に、Apache Kafkaのハンズオンタスクは、Apache Kafkaのアーキテクチャ、Kafkaクラスター、Kafkaメッセージングシステム、Apache Kafkaのパーティションとブローカーの理解、Kafkaのプロデューサーとコンシューマーなどをテストします。タスクには Webアナリティクス、シリアル化、デシリアル化、CDRなどが含まれます。 

いくつかの例は Apache Kafka Javaハンズオンプロジェクトの質問は以下の通りです。

Apache Kafkaの質問例

選択式問題 [MCQs] は、概念的な知識とスキルの理解度を評価します。例えば、HackerRankのデータエンジニアリング評価で使用されるHadoop MCQsは、マップサイド結合の制御フロー、MapReduceコンバイナ、一般的に使用されるHadoopコマンド、Hadoopのハンズオンプロジェクトの質問、分析、計算操作の実行、Hadoopアプリケーションの主要な機能の実装など、アプリケーション指向のスキルをテストします。

私たちのライブラリにある Hadoopの選択式とハンズオンプロジェクトの質問のいくつかは：

Hadoopの質問の例