Tech & Science 2015.01.26 09:06 第2回 分析ツール群(AktblitzII / AWS Redshift / Tableau / R / Power BI)|POSデータで事業構造分析 with Power BI Power BIで実践するPOSデータの事業構造分析を公開 この連載では、2013年11月に弊社CEOの網野が出版した「会社を強くするビッグデータ分析」「Part2 分析の実践」の部分を「Power BIでPOSデータを使って事業構造分析...
Tech & Science 2015.05.22 09:02 「フルマネージド」クラウドサービス~第四回・実例2「Microsoft Power BI」~ フルマネージドのアプリケーションサービス。今回は「Microsoft Power BI」を紹介します 本連載は全五回で「フルマネージド(Fully Managed)のクラウドサービス」について書かせていただいています。前々回(第二回)でフ...
Tech & Science 2015.06.18 14:50 Amazon Redshiftを利用料金そのままでds1.xlarge(旧:dw1.xlarge)からds2.xlargeにアップグレードしてみた|AWSを使い倒せ ds2.xlargeは、従来のCPU性能、メモリ容量が2倍、I/Oが1.5倍!なのにお値段そのまま!! 先日(2015/6/9)、AmazonよりRedshiftの新しいインスタンスタイプ「DS2」が発表されました。DS2インスタンスは、...
Tech & Science 2015.09.02 08:33 Amazon CloudWatch × Amazon SNS で月額利用料金を管理しよう|AWSメール通知システム メール通知システムでAWSのコスト管理を実現する AmazonのクラウドサービスであるAWSサービスは、利用(起動)時間ごとに課金されるため「使いたいときに使いたいだけ」利用できます。そのため、特にシステムの立ち上げ時にはコストを削減でき...
Tech & Science 2015.08.29 09:36 Amazon Redshiftへのデータインポートを2つのコンポーネントだけで行う ~TOSからAWSを操作~|Talend Open Studio によるビッグデータ分析(第7回) tRedshiftOutputBulkExecコンポーネントを使用すれば、Amazon Redshiftのインポート処理を一括で行える Amazon Redshift(以下、Redshift)は、ビッグデータに特化したDBとして広く知られ...
Tech & Science 2015.10.07 14:58 AWSの新サービス「AWS WAF」がリリース~re:Invent 2015 速報~ Webアプリケーションのセキュリティがより強固に AWS WAFは既存サービスであるCloudFrontを「中継サーバ」として、その中で稼働するWAFサービス こんにちは。技術チームの岩谷です。2015年10月6日~9日アメリカのラスベガスでクラウド大手Amazon Web Servic...
Tech & Science 2016.03.30 08:12 AWS DMS を使ってみた(1) ~手軽にMy SQLからRDS(Postgre SQL)にDB移行する~|AWSを使い倒せ AWS DMS を使えばテーブル作成なしで異なるDB種類へのクラウド移行が行える 近年、AWS(Amazon Web Services)やMicrosoft Azureなどのクラウドサービスが進歩してきたことで、新規システムの導入先として...
Tech & Science 2016.05.25 08:49 Redshiftのインポート/エクスポート権限をIAMロールに変更する|AWSを使い倒せ DBユーザーとIAMユーザーの権限を分けることでセキュリティ強化を行う AWSのビッグデータ用DBのAmazon Redshift(以下、Redshift)に大量データを登録する場合は、クラウドストレージのAmazon S3(以下、S3)...
Tech & Science 2017.10.27 07:17 AWS Glue を使ってみた ~ETLツールではなくETL支援サービスとしての役割~ AWS Glue がフルマージドしているのはETLのプロセスではなく動作環境 データ分析ではデータベースを使うことが多く、そのデータベースにデータを入れるためにはETL処理は必要不可欠な処理です。ETL処理をフルスクラッチでプログラミング...
Tech & Science 2017.12.05 11:52 Redshiftの弱点をRDSとRedshift Spectrumでカバーする ~SQL命令だけでデータ分析ができる環境を考える~ RDSの機能を使えばRedshiftのデータを使用したGIS環境も構築できる クラウド上のデータベース(クラウドデータベース)は、非常に高性能、かつ安定していながら、費用的や技術的にも容易に環境構築することが可能です。しかし、これらの利点...