(589)ブロックチェーン(65)ソーシャル・エンタープライズ2.0(281)VR/AR/MR/SR/xR(48)O2O・オムニチャネル(96)IT市場調査(554)DX推進を阻む現行システムの壁、その乗り越え方とは?スペシャル2020/02/26「決められない」生保の担当者がやらかした、AI導入の行き詰まり2020/02/25【マンガ解説】5分でわかるエッジコンピューティング。開発トップ(942)開発総論(266)プロジェクト管理・ワークフロー管理(124)Web開発(236)レガシーマイグレーション(128)CAD(25)組み込み・産業機械(40)RIA(29)開発ツール・開発言語(94)RSSFacebookTwitterトップページ基幹系EAI・ETL・SOAデータクレンジングの手法を解説、どうすれば価値あるデータとなるのか関連ジャンルEAI・ETL・SOABI(DWH、OLAP、マイニング)ビッグデータ日本アイ・ビー・エム株式会社提供コンテンツスペシャル会員限定2018/09/20データクレンジングの手法を解説、どうすれば価値あるデータとなるのか企業経営や日常業務での意思決定にデータを活用することで、自社の競争力を高めようと考える企業が年々増えています。ところがデータ活用を本格的に開始しようとすると、必ず陥る落とし穴があります。それは、社内に蓄積しているデータも、社外から取り込んだデータも、必ずしもそのままでは利用できないということです。そのようなことが起こるのか、またどうすれば活用可能な価値あるデータになるかについて分かりやすく説明します。Fotolia)データクレンジングとは何か?最初に本稿のテーマである「データクレンジング」という言葉について説明します。クレンジング(cleansing)とは、「清潔にする、洗い清める、浄化する」などを意味する動詞“cleanse”の名詞形で、「洗浄、浄化」などと訳されます。「データクレンジング」という場合は、「データをきれいにする」という意味になります。きれいにしないといけないということは、データは「汚れがち」ということです。・どのように汚れてしまうでしょうか。分かりやすい例として「名刺管理システム」を考えてみましょう。営業担当者が、名詞を見て手入力するタイプのシステムです。同じ会社名でも、ある人は「株式会社ABC商事」と入力するかもしれません。別の人は「(株)ABC商事」と入力するかもしれません。担当者名も「大沢」と入力する人もいれば「大澤」と入力する人もいます。アルファベットや数字を全角で入力する人も、半角で入力する人もいます。住所を「1丁目2番地3号」と入力する人もいれば、「1-2-3」と入力する人もいます。中には入力ミスをする人もいます。気の利いたシステムであれば、ある程度はシステム側で整えてくれるかもしれません。「株式会社」と「(株)」は同一視してくれても、「大沢」と「大澤」では別物とみなすのが普通でしょう。「大沢仁史」さんと「大澤仁史」さんは本当は同一人物なのに、別の人物とみなされて検索結果がおかしくなることが起こりえます。通常は入力ルールを設けて統一化を図ります。守られるものではありません。仮に完璧に守られたとしましょう。それでも部門ごとに別々の名刺管理システムを使っていたとしたらどうでしょうか(よくあることです)。同じ入力ルールを採用していれば問題ありませんが、そのようなことはあまり期待できません。それぞれが別のシステムを使っていたら、さらに他の問題も起こりえます。ある部門のシステムは、性別は「男」、「女」と表していました。ところが別の部門のシステムは、性別を男なら「1」、女なら「2」として表していました。したら、性別は「男、女、1、2」の4種類あることになってしまいます。修正する必要があります。この修正作業を「データクレンジング」と言うのです。・データが企業競争力の源泉となる時代にこの続きは会員限定ですここから先は「ビジネス+IT」の会員の方(登録は無料)のみ、ご利用いただけます。ログインする今すぐビジネス+IT会員にご登録ください。会社情報SBクリエイティブ株式会社ビジネス+ITはソフトバンクグループのSBクリエイティブ株式会社によって運営されています。]この続きを読むを前に...「ビジネス+IT(登録無料)」にご登録いただくと、最新の関連情報が届きます。会員登録をすると、4つのプレミアム特典を受け取ることができます。今すぐ登録(無料)会員ログインビジネス+IT会員とはこの続きを読むを前に...「ビジネス+IT(登録無料)」にご登録いただくと、最新の関連情報が届きます。ビジネス+IT会員とは。