データ受領で気を付けるポイント

この記事は GiXo アドベントカレンダー の 7日目の記事です。昨日は、Platform Engineering チーム紹介 2021でした。 Technology Div. の緒方です。最近のメインの業務はデータ加工です。データ...

次のデータクレンジングのトレンドは”グリッドビュー”かもしれない ～ETLツールの新たなカタチを勝手に推測～

先頭は Talend Data Preparation。それに追随する Google Cloud Dataprep と Tableau Project Maestro の登場でグリッドクレンジングツール戦線は激化する データ分析にとってデ...

ETL処理とELT処理の違い ～ビッグデータ処理の新トレンド～

ELT処理はクラウドデータベースだから可能になった荒業 皆さんは「ELT処理」をご存知でしょうか？ 決して「Every Little Thing」ではありません。 ELT処理は、ETL(Extract/Transform/Load)...

データレイクとクラウドサービス　～②クラウドサービスが支えるこれからのデータレイク～

クラウドサービス進化によってデータレイクの運命が決まる 前回、データレイクとはどういうものか、データベースと何が違うかについて触れました。今回はクラウドサービスがデータレイクにどの様に影響しているか、そして、今後、データレイクはどの様に変...

データレイクとクラウドサービス　～①データレイクの今までをおさらい～

データレイクはビッグデータ分析とともに常に進化している ちょうど2年前。弊社ブログで「データレイク(Data Lake)」について取り上げさせていただきました。その当時「データレイク」という言葉だけが先行し、何を使えばよいか、どんな場面で...

NASDAQ上場したTalend社とは？ ～これからのビッグデータをリードする企業～／ニュースななめ斬りbyギックス

Talend社はGartner社のマジック・クアドラントでデータ統合のリーダーに選ばれる企業 クラウドサービスやビッグデータ分析などの業界では、オープンソースコミュニティなどの非営利団体はありますが、各分野をリードする企業の存在は必要不可...

TOSでギガ単位の適切なテストデータを作成する｜Talend Open Studio によるビッグデータ分析(第11回)

手間がかかるテストデータもTOSを使えばノープログラミングで作成できる データ分析業務は、分析対象データが無いと始めることにはできません。しかし、提案段階でクライアントに分析結果イメージを提示する場合、または、分析対象データを受領してから...

Talend Data Preparationは分析データの「検証」と「加工」の切り札になる／ニュースななめ斬りbyギックス

Talend Data Preparation はデータに係わる全ての層が使えるデータ検証・加工ツール データ分析を専門の部署や機関に依頼しようとした場合、分析対象のシステムから分析データを抽出してデータ受渡を行うことがあります。しかし、...

データベースを使ったデータ分析はNull(ヌル)に気を付ける | データ分析のお作法

本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました（2019/7/1） データベース初心者が躓くNullの癖をしっかり理解しよう Excelなどを使ったデータ分析では、画面で表示されたままの文...

桁落ちとオーバーフローとその対処方法 | データ分析のお作法

本記事は、株式会社ギックスの運営していた分析情報サイト graffe/グラーフ より移設されました（2019/7/1） DBなどの数値型には登録できる範囲が決まっている DB(データベース)やプログラミング言語にはデータ型と呼ばれる取り扱う...