タスクオーケストレーターは、2つの1時間ごとのタスクを実行するように設定されています。まず、外部システムが/mnt/raw_orders/にマウントされたディレクトリにParquetデータを書き込みます。このデータが書き込まれた後、以下のコードを含むDatabricksジョブが実行されます。
Certified-Data-Engineer-Professional試験の最新かつ実際の質問と回答を入手する

フィールド customer_id と order_id は各注文を一意に識別する複合キーとして機能し、time フィールドはレコードがソース システムにキューに入れられた時刻を示すものと想定します。
上流システムが、単一の注文に対して数時間おきに重複したエントリをキューに入れることが時々あることがわかっている場合、正しい記述はどれですか。