毎日、会社はAzure Blob StorageとAzure Data Lake Storageに何百ものファイルを保存することを計画しています。
会社は寄木細工の床のフォーマットを使用します。
次の要件を満たすパイプラインを開発する必要があります。
6時間ごとにデータを処理する

対話型データ分析機能を提供する

ソリッドステートドライブ（SSD）キャッシングを使用してデータを処理する機能を提供します

有向非巡回グラフ（DAG）処理メカニズムを使用する

プロセスを監視するためのREST API呼び出しをサポートする

Pythonのネイティブサポートを提供する

Microsoft Power BIと統合する

パイプラインを実装するために適切なデータテクノロジを選択する必要があります。
どのデータ技術を実装する必要がありますか？