Tech & Science 2014.01.29 09:02 ビッグデータ活用事例(1)流行予測/会社を強くするビッグデータ活用 この連載では「会社を強くする ビッグデータ活用入門 -基本知識から分析の実践まで-」で取り上げたビッグデータやアナリティクスの活用事例を抜粋し、ご紹介していきます。 書籍の中では大きく2つの場合で事例を区分しており、まずは4回に渡って...
Tech & Science 2014.03.02 10:58 ビックデータを全量分析できる時代になった|ビッグデータ分析の留意点① サンプル分析から全量分析へ 近代統計学の学問体系は、無限に近い大規模な母集団から無作為に抽出された、数百から数万のサンプルデータが持つ統計的な性質を中心に論じられてきました。たとえば、内閣府が行っている「社会意識に関する世論調査」では、1...
Tech & Science 2014.12.15 08:59 2次属性データとクロス集計で事業構造分析を行う 2次属性データとクロス集計は最強の組み合わせである ビッグデータブームはデータが大量に発生し始めている事に加えて、その大量に発生したデータを処理する環境が整ってきたからにほかなりません。個人的には、ビッグデータに注力してもよいと考えるきっか...
Tech & Science 2015.02.06 09:02 第4回・CSVファイル|CSV、XML、JSON…データフォーマットの変遷について考える フォーマット解説の第二弾はおなじみCSVフォーマットです 前回(第3回)は、各フォーマットを説明していく第一弾として「フラットフォーマット」について説明しました。今回は第二弾としてCSVフォーマットについて説明します。これまでの記事と同様...
Tech & Science 2015.04.17 09:15 文字コードや文字化けを理解しよう(その2)|いまさら訊けないビッグデータ分析 第2回は「文字化けあるある」です。 前回は文字コード関する基本的な知識をまとめてみました。第2回の今回は「じゃあ文字化けはどういった場合に起こるの?」という場面についてパターン分けして説明していきたいと思います。皆さんも心当たりがあったら...
Tech & Science 2015.04.24 16:12 Power BI Designerでグループ集計する | ブラウザで動く新Power BIを使ってみた Power BI Designerを使用してマウス操作だけでグループ集計を行う 前回は、Power BIブラウザ版を使用して、様々なグラフが作れることを記載しました。今回は、データを取り込んでグループ集計を行い、Power BIブラウザ版...
Tech & Science 2015.08.07 12:02 30度を超えるとアイスが”売れなくなる”?:データの正しい眺め方|冷やしデータ分析はじめました 他人の作った資料は「データ」と「解釈」に分けて考えよう 前回は、今年の夏は本当に暑いのか?ということを様々な切り口で考えてみました。今回は、前回のアイスブレイクでも言及した「30度を超えると、アイスではなくかき氷が売れるようになる」という...
Tech & Science 2018.01.24 12:13 BigQueryの標準SQL対応によって競合サービスからの乗り換えが発生するか? ~Redshiftと使用感を比較してみた~ 分析の試行錯誤フェーズではRedshift。分析の”型”が決まったらBigQuery。 ビッグデータ分析においてデータベースは必要不可欠であることは言うまでもありません。これらのビックデータ向けデータベースの代表格としてオンプレミスではO...
Tech & Science 2020.12.10 07:56 非エンジニアの Kaggler がエンジニア指南を受けて気づいた、たった1つのこと この記事は GiXo アドベントカレンダー の 10 日目の記事です。昨日は、「Apache Superset の可視化例紹介」 でした。 MLOps Div. の濱田です。皆さん、Kaggle をご存知でしょうか?ざっくりいうと、...
Tech & Science 2021.12.12 07:02 BigQueryスロット利用量の見積り この記事は GiXo アドベントカレンダー の 12 日目の記事です。昨日は、「プログラミング歴40年のおじさんが初めて本格的なPythonプログラム」を書いてみた でした。 本稿ではBigQueryにおいて計算...