Tech & Science 2014.01.20 08:04 Quick Startのための分析インフラとは|ギックスのビッグデータ分析体系 ⑨ ビッグデータを分析するためのインフラ ここまで8回にわたってギックスのビッグデータ分析体系について説明してきました。今回が本連載の最終回となります。本日は「分析インフラ」についてご紹介します。ビックデータ分析体系の中では以下の赤枠の部分に...
Tech & Science 2014.11.11 08:43 【企画部のためのシステム講座】クラウドとオンプレミスは、果たして何が違うのか? 「クラウド」は「オンプレ」に比べて、何が優れているのか? 近年、クラウドという言葉が良く使われています。実際、読者の皆さんも、新聞やニュースなどで、その言葉を目にしない日は無いと思います。しかし、「クラウドが登場する前」と「クラウドが登場...
Tech & Science 2015.05.22 09:02 「フルマネージド」クラウドサービス~第四回・実例2「Microsoft Power BI」~ フルマネージドのアプリケーションサービス。今回は「Microsoft Power BI」を紹介します 本連載は全五回で「フルマネージド(Fully Managed)のクラウドサービス」について書かせていただいています。前々回(第二回)でフ...
Tech & Science 2015.06.25 12:37 Amazon Elastic File System (EFS)が登場|新しいクラウドストレージでセキュリティ強化がさらに確実に|AWSを使い倒せ Amazon Elastic File System (EFS)の登場はかゆいところにより手が届く 2015年4月、AWSから新しいクラウドストレージサービスAmazon Elastic File System (EFS)が登場しました...
Tech & Science 2015.09.02 08:33 Amazon CloudWatch × Amazon SNS で月額利用料金を管理しよう|AWSメール通知システム メール通知システムでAWSのコスト管理を実現する AmazonのクラウドサービスであるAWSサービスは、利用(起動)時間ごとに課金されるため「使いたいときに使いたいだけ」利用できます。そのため、特にシステムの立ち上げ時にはコストを削減でき...
Tech & Science 2015.08.29 09:36 Amazon Redshiftへのデータインポートを2つのコンポーネントだけで行う ~TOSからAWSを操作~|Talend Open Studio によるビッグデータ分析(第7回) tRedshiftOutputBulkExecコンポーネントを使用すれば、Amazon Redshiftのインポート処理を一括で行える Amazon Redshift(以下、Redshift)は、ビッグデータに特化したDBとして広く知られ...
Tech & Science 2015.10.07 14:58 AWSの新サービス「AWS WAF」がリリース~re:Invent 2015 速報~ Webアプリケーションのセキュリティがより強固に AWS WAFは既存サービスであるCloudFrontを「中継サーバ」として、その中で稼働するWAFサービス こんにちは。技術チームの岩谷です。2015年10月6日~9日アメリカのラスベガスでクラウド大手Amazon Web Servic...
Tech & Science 2016.05.25 08:49 Redshiftのインポート/エクスポート権限をIAMロールに変更する|AWSを使い倒せ DBユーザーとIAMユーザーの権限を分けることでセキュリティ強化を行う AWSのビッグデータ用DBのAmazon Redshift(以下、Redshift)に大量データを登録する場合は、クラウドストレージのAmazon S3(以下、S3)...
Tech & Science 2017.10.27 07:17 AWS Glue を使ってみた ~ETLツールではなくETL支援サービスとしての役割~ AWS Glue がフルマージドしているのはETLのプロセスではなく動作環境 データ分析ではデータベースを使うことが多く、そのデータベースにデータを入れるためにはETL処理は必要不可欠な処理です。ETL処理をフルスクラッチでプログラミング...
Tech & Science 2017.12.05 11:52 Redshiftの弱点をRDSとRedshift Spectrumでカバーする ~SQL命令だけでデータ分析ができる環境を考える~ RDSの機能を使えばRedshiftのデータを使用したGIS環境も構築できる クラウド上のデータベース(クラウドデータベース)は、非常に高性能、かつ安定していながら、費用的や技術的にも容易に環境構築することが可能です。しかし、これらの利点...