エンタープライズデータ移行においてETL/Excelアプローチに依存するリスク

重要なポイント

• ETL + Excel = 高リスクETLツールとExcelを使用した従来のデータ移行では、チームの連携不足、バージョン管理の問題、コストの急騰などが発生することがよくあります。
• リアルタイムの可視性の欠如経営幹部やITリーダーはリアルタイムの情報把握に苦労しており、納期遅延やステークホルダーの信頼喪失のリスクが高まっている。
• 手動コーディングはエラーを増加させるETL/Excelアプローチにおける自動化の限界は、結果のばらつき、高い失敗率、およびテストサイクルの長期化につながります。
• 低品質データの移動単にデータを移動するだけでは成功は保証されません。データの整合性が不十分だと、価値実現までの時間が長くなり、ストレージコストが増加します。
• 知識の再利用なしETL/Excelでは変換ロジックが将来の利用のために記録されないため、新しいデータプロジェクトごとに処理速度とコストが増加する。
• データセキュリティが危険にさらされているスプレッドシートをメールでやり取りすることは、深刻なデータセキュリティ上の脆弱性を生み出し、金銭的損害や評判の低下につながる可能性があります。

アプローチを構築するにあたって デジタル変換常に重要なトピックとして浮上するのは、データの移行方法です。これまで多くの手法が試みられてきましたが、データ移行が始まって以来、Excel はその中心に位置してきました。テクノロジーの発展に伴い、ETL (抽出、変換、ロード) の概念が登場し、レガシー システムから新しいプラットフォームへデータを移行する、よりスムーズな (少なくとも表面上は) 方法を提供しました。しかし、常に問題がありました。ソース ランドスケープやデータ構造が複雑な場合、ETL テクノロジーのみを使用した Excel / DIY アプローチは機能しません。

Synitiでは、長年にわたりETL/Excelプロジェクトから生じる様々な影響を目の当たりにし、それが企業にもたらす多大なコストを目の当たりにしてきました。こうした企業の大半が問題に陥った理由は、この手法のリスクを理解していなかったことにあります。ETLツールは数多く存在するため、ここでは特定のツールの詳細には触れませんが、ETL/Excelアプローチの一般的なリスクについて分析してみましょう。

有害な縦割り構造の中で活動する、大規模なプロジェクトチーム 

エンタープライズ規模の移行プロジェクトにETLベースのアプローチを採用する場合、データチーム、ビジネス担当者、開発者はそれぞれ独立して作業を進め、プロジェクトマネージャーは裏で必死に作業を調整します。通常、Excelはマッピング要件の収集、不足データの収集、ETLツールで実装される変換要件の文書化に使用されます。何千ものExcelスプレッドシートが作業され、やり取りされる可能性があるため、バージョン管理は大きな問題となり、テストや品質管理も同様に問題となります。ほとんどの企業にとって、この制御されたカオスへの対処法は、高額な人的資源を投入して問題を解決しようとすることですが、これには大幅なコスト増が伴います。 

結論：稼働開始失敗のリスク増大とプロジェクトコスト増加 

IT部門のリーダーシップ層および経営幹部にとってプロジェクトの可視性が低い 

移行プロジェクトでは個々の作業が非常に多いため、プログラムリーダーがリアルタイムの状況アップデートを自身や経営陣に提供することは大きな課題となります。プロジェクトの状況やタイムラインに関するリアルタイムのアクティビティベースの洞察を提供する、アクセスしやすいダッシュボードがなければ、プロジェクトリーダーは状況に応じてプロジェクトの方向転換に苦労し、リスクが増大する可能性があります。経営陣もまた、プログラム全体の方向性に対して不信感や懸念を抱きやすくなり、リソース不足やさらに深刻な事態につながる恐れがあります。

結論：納期や期待に応えられないリスクが高まり、上司がイライラするリスクも高まる。. 

限定的なコード自動化は一貫性のない結果をもたらす 

何千ものデータマッピングとデータ統合の課題に対処する必要があるため、開発者やデータ管理者はすぐに圧倒されてしまう可能性があります。ETL/Excelアプローチに依存すると、自動コード生成が制限されるか、まったく生成されないことになり、ノーコード開発機能も不足します。さらに、ETLツールは質の低いETLコードの生成を防ぐことができません。そのため、個別の修正や長時間のテストが必要となり、複雑な問題や遅延が発生する可能性が高まります。 

結論：カスタムコード生成の必要性が高まり、潜在的な障害発生箇所が増加する。 

ダウンロード IDCによるSynitiナレッジプラットフォームに関する調査：データ移行がいかに価値が高く、リスクのないものになり得るか [無料リソース]

目的地には着いたが、データは依然としてひどい 

ソースシステムからターゲットシステムにデータを「リフトしてシフト」することは、 タ移行手法により、技術的なデータ移行は、あるシステムから別のシステムへ移行する最も迅速な方法ですが、データが適切に構成、統合、マッピングされてターゲットシステムの要求に適合していない場合、新しいシステムは期待どおりの機能を発揮しません。データの「適切なサイズ」に調整されないと、ストレージとそれを維持するために必要なインフラストラクチャに余分な費用がかかります。ETL/Excelアプローチにおいて、データ品質と適切なサイズ調整に重点が置かれていないと、企業は貴重な時間とリソースを浪費し、ターゲットシステムが稼働した際の有効性が低下する可能性があります。  

結論：価値実現までの期間が長引くリスク、ユーザー／顧客の不満リスク高額なIT維持費

あなたは自分の努力を無駄にする 

ETL と Excel (と多くの人員) でプロジェクトを完了させることはできますが、プロジェクト中に生成されたすべての知識を自然に取得して、将来のデータ移行やデータ プロジェクトで再利用できるようにするわけではありません。別のデータ移行、データ品質、 マスターデータ管理データ移行プロジェクト、あるいはその他のデータ関連プロジェクトは、移行後のルールをゼロから再構築するために、最初からやり直す必要があるでしょう。 

結論：次のプロジェクトは、必要以上に費用がかかり、時間も長くなるでしょう。 

あなたのデータは脆弱です

ETL/Excel方式は、データセキュリティに関して深刻な欠陥を抱えています。個人情報、機密情報、業務データを含むスプレッドシートをメールでやり取りすることは、企業を意図的なハッキングや人為的なミスによる情報漏洩のリスクに晒すことになります。エンタープライズグレードのファイアウォール技術で安全に保護された中央リポジトリがなければ、ETL/Excelプロセスにおける脆弱性が企業に重大な経済的損失や評判の低下をもたらすのは時間の問題です。

結論：中央データリポジトリがないと、データは脆弱になります

ETL/Excelは一見すると最もシンプルで抵抗の少ない方法のように見えるかもしれませんが、このブログで示してきたように、この自動化されていない、整合性のないアプローチでエンタープライズデータ移行を行うことには多くのリスクが伴います。幸いなことに、ETLとExcelだけがデータ移行に取り組む唯一の方法ではありません。Synitiが何千ものエンタープライズ移行プロジェクトを成功させてきた方法、そして常に退屈な本番稼働を伴うプロジェクトをどのように実現してきたかについて詳しく知りたい場合は、^®

ダウンロード IDCによるSynitiナレッジプラットフォームに関する調査：データ移行がいかに価値が高く、リスクのないものになり得るか [無料リソース]