Tech & Science 2014.06.18 12:04 Microsoft Power BI 導入レポート:本格導入③ ~クラウド環境へのSQL Serverのインストール/セットアップ~ Power BI本格導入(=SQL Server 導入)をしてみよう クラウド環境にSQL Serverを導入する 前回は、SQL Serverをオンプレ環境に構築する手順を紹介しましたが、今回はSQL Serverをクラウド環境(Mi...
Tech & Science 2017.03.17 09:06 ゲーミングパソコンはデータ分析に使えるのか? ~DELL ALIENWARE AURORA で検証~ データ分析パソコン選びの基準は「NVMe接続」 きっかけは非常に単純だった。オンプレミスPCでデータ分析がどのくらいできるか? 大量データを高速で処理したい場合は、どうしても大掛かりなサーバー環境が必要になり、そのため比較的手軽に使...
Tech & Science 2017.03.22 12:55 最小最速のデータ分析パソコンを自作してみた~ディスク読み書き速度の限界突破を目指す~ データ分析機能に特化すれば低予算でパソコンが作れる 前回、DELLのゲーミングパソコンはALIENWARE AURORA R5を使用して、データ分析に向いているかの検証を行いました。その結果「ディスク読書きが速いゲーミングパソコンはデータ...
Tech & Science 2017.12.05 11:52 Redshiftの弱点をRDSとRedshift Spectrumでカバーする ~SQL命令だけでデータ分析ができる環境を考える~ RDSの機能を使えばRedshiftのデータを使用したGIS環境も構築できる クラウド上のデータベース(クラウドデータベース)は、非常に高性能、かつ安定していながら、費用的や技術的にも容易に環境構築することが可能です。しかし、これらの利点...
Tech & Science 2018.01.24 12:13 BigQueryの標準SQL対応によって競合サービスからの乗り換えが発生するか? ~Redshiftと使用感を比較してみた~ 分析の試行錯誤フェーズではRedshift。分析の”型”が決まったらBigQuery。 ビッグデータ分析においてデータベースは必要不可欠であることは言うまでもありません。これらのビックデータ向けデータベースの代表格としてオンプレミスではO...
Tech & Science 2013.12.16 13:13 2次属性を理解しよう|ギックスのビッグデータ分析体系 ④ ギックスならではの分析プロセス 「2次属性の作成」 前回は分析プロセスの最初の段階となる「ビジネスの理解」と「データの理解・準備」のプロセスについてご説明しました。今回は、いよいよギックスデータ分析体系ならではの分析プロセスであたる「2次...
Tech & Science 2014.03.23 11:01 べき分布のデータには注意しよう|ビッグデータ分析の留意点④ 購買系のビッグデータには「べき分布」が多く注意が必要 (第2回)と(第3回)で全量分析の優位点について紹介しました。本日からは、全量データに注意すべき点を説明します。本日は注意点①の以下のポイントです。 注意点①:サンプルデータは中...
Tech & Science 2015.05.21 09:01 「フルマネージド」クラウドサービス~第三回・実例1「Tableau Online」~ フルマネージドのアプリケーションサービス。今回は「Tableau Online」を紹介します 本連載は全五回で「フルマネージド(Fully Managed)のクラウドサービス」について書かせていただいています。前回はフルマネージドサービス...
Tech & Science 2015.11.17 08:36 PolyBaseを使ったAzure SQL DWへの高速インポート ~Azure Storageにデータをアップロードする~:Microsoft Azure SQL Data Warehouse を使ってみた(4) PolyBaseの説明に入る前にインポートファイルを保存するAzure Storageを理解しよう 前回、Microsoft Azure SQL Data Warehouse(以下、SQL DW)に対して、BCPコマンドによるインポート操...
Tech & Science 2016.11.16 08:12 データベースを”倉庫”ではなく”道具”として使う発想 ~データベース上で分析データを下ごしらえする~ データベースの特性を活かすことで "誰でも"、"確実に" データ分析が行える データ分析 = データベース。こんな公式を書いて何の違和感もないほど、データベースは、データ分析のために「なくてはならない存在」です。まさに、両者は切っても切れ...