「データ」カテゴリーアーカイブ

そろそろSQLのウィンドウ関数を理解したい – 連載1/3話 – Qiita

そろそろSQLのウィンドウ関数を理解したい - 連載1/3話 - Qiita

そろそろSQLのウィンドウ関数を理解したい - 連載1/3話 - Qiita

はじめに データ分析とデータ品質改善に従事してきた筆者が、SQLを用いた分析の基本である「ウィンドウ関数」の使い方とデータ品質の調査改善を行う手法をまとめてみようと思います。 こちらの記事は、SQLの知識向上と振り返りを主題としているので、ABC分析、バスケット分析、RFM分析などの「データ分析の手法」につい...

はてなブックマーク - そろそろSQLのウィンドウ関数を理解したい - 連載1/3話 - Qiita はてなブックマークに追加

データ収集からディープラーニングまで全て行って競馬の予測をしてみた – Qiita

データ収集からディープラーニングまで全て行って競馬の予測をしてみた - Qiita

データ収集からディープラーニングまで全て行って競馬の予測をしてみた - Qiita

概要 某T大学で情報系を専攻している学生です。Qiitaの記事を色々見ていたら、こんな記事を発見。 ディープラーニングさえあれば、競馬で回収率100%を超えられる この記事の回収率100%達成に関しては、購入シミュレーションした馬券の数が少ないので、他の期間でも成立するのかはわかりません。ソースコードも有料なので...

はてなブックマーク - データ収集からディープラーニングまで全て行って競馬の予測をしてみた - Qiita はてなブックマークに追加

全くのゼロから「駆け出しデータサイエンティスト」を育てる方法論 – 渋谷駅前で働くデータサイエンティストのブログ

全くのゼロから「駆け出しデータサイエンティスト」を育てる方法論 - 渋谷駅前で働くデータサイエンティストのブログ

全くのゼロから「駆け出しデータサイエンティスト」を育てる方法論 - 渋谷駅前で働くデータサイエンティストのブログ

(Image by Pixabay) 「データサイエンティスト」の第一次ブーム勃興から6年余り、人工知能ブームに便乗した第二次ブームで人口に膾炙してから3年余り、気が付いたら何やかんや言われながらもデータサイエンティスト及びその類似職が、じわじわと日本国内の産業各分野・企業各社に広まりつつあるように僕の目には映ります...

はてなブックマーク - 全くのゼロから「駆け出しデータサイエンティスト」を育てる方法論 - 渋谷駅前で働くデータサイエンティストのブログ はてなブックマークに追加

News Up 92人の死から見えてきたものは | NHKニュース

News Up 92人の死から見えてきたものは | NHKニュース

News Up 92人の死から見えてきたものは | NHKニュース

台風19号による豪雨被害から1か月。全国で92人が亡くなり、3人が行方不明のままです。 災害担当の記者として、何を伝え、どのような呼びかけをすれば少しでも被害を減らすことができたのか…。 犠牲になった方が被害にあった場所や状況を詳しく調べることで、課題や教訓を導き出せないかと私たちは調査を始めました。 ...

はてなブックマーク - News Up 92人の死から見えてきたものは | NHKニュース はてなブックマークに追加

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い ”ノン”データサイエンティストでも取り入れられる、データサイエンティスト的モノの見方・考え方 「データサイエンティストと名乗るのは厚かましいというか、自分はむしろ外れ値です」そう切り出した小野寺和樹さんは現在、DeNAのA...

はてなブックマーク - 普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い はてなブックマークに追加

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い ”ノン”データサイエンティストでも取り入れられる、データサイエンティスト的モノの見方・考え方 「データサイエンティストと名乗るのは厚かましいというか、自分はむしろ外れ値です」そう切り出した小野寺和樹さんは現在、DeNAのA...

はてなブックマーク - 普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い はてなブックマークに追加

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い

普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い ”ノン”データサイエンティストでも取り入れられる、データサイエンティスト的モノの見方・考え方 「データサイエンティストと名乗るのは厚かましいというか、自分はむしろ外れ値です」そう切り出した小野寺和樹さんは現在、DeNAのA...

はてなブックマーク - 普通のデータサイエンティストと世界トップクラスのデータサイエンティストの違い はてなブックマークに追加

デジカメ販売、8年で7割縮小 岐路に立つカメラメーカー(BCN) – Yahoo!ニュース

デジカメ販売、8年で7割縮小 岐路に立つカメラメーカー(BCN) - Yahoo!ニュース

デジカメ販売、8年で7割縮小 岐路に立つカメラメーカー(BCN) - Yahoo!ニュース

デジタルカメラ市場の縮小が止まらない。全国の家電量販店やECショップでPOSデータを集計する「BCNランキング」によると、2018年のデジタルカメラ市場は絶頂期である10年の約30%規模まで縮小していることが分かった。19年は、さらに下回る可能性がある。 さらに細かくデータを見てみると、最も販売台数が多かった10年の...

はてなブックマーク - デジカメ販売、8年で7割縮小 岐路に立つカメラメーカー(BCN) - Yahoo!ニュース はてなブックマークに追加

デジカメ販売、8年で7割縮小 岐路に立つカメラメーカー(BCN) – Yahoo!ニュース

デジカメ販売、8年で7割縮小 岐路に立つカメラメーカー(BCN) - Yahoo!ニュース

デジカメ販売、8年で7割縮小 岐路に立つカメラメーカー(BCN) - Yahoo!ニュース

デジタルカメラ市場の縮小が止まらない。全国の家電量販店やECショップでPOSデータを集計する「BCNランキング」によると、2018年のデジタルカメラ市場は絶頂期である10年の約30%規模まで縮小していることが分かった。19年は、さらに下回る可能性がある。 さらに細かくデータを見てみると、最も販売台数が多かった10年の...

はてなブックマーク - デジカメ販売、8年で7割縮小 岐路に立つカメラメーカー(BCN) - Yahoo!ニュース はてなブックマークに追加

生活保護費と同額支給の代わりに、プライベート情報を全て収集・マネタイズする社会実験Exographがスタート|株式会社Plasmaのプレスリリース

生活保護費と同額支給の代わりに、プライベート情報を全て収集・マネタイズする社会実験Exographがスタート|株式会社Plasmaのプレスリリース

生活保護費と同額支給の代わりに、プライベート情報を全て収集・マネタイズする社会実験Exographがスタート|株式会社Plasmaのプレスリリース

株式会社Plasma(東京都目黒区、代表取締役 遠野宏季)は、11月1日からデータ経済と資本主義の次を模索する社会実験Exographを行います。 この社会実験では、東京都内23区の30歳前後の人々に支給される生活保護費用132,930円を提供する代わりに、その私生活データを動画で収集し、その費用を賄うことに挑戦します。 株...

はてなブックマーク - 生活保護費と同額支給の代わりに、プライベート情報を全て収集・マネタイズする社会実験Exographがスタート|株式会社Plasmaのプレスリリース はてなブックマークに追加

[速報]マイクロソフト、「Azure Synapse」発表。BigQuery対抗の大規模並列データ処理サービス。Ignite 2019 - Publickey

[速報]マイクロソフト、「Azure Synapse」発表。BigQuery対抗の大規模並列データ処理サービス。Ignite 2019 - Publickey

[速報]マイクロソフト、「Azure Synapse」発表。BigQuery対抗の大規模並列データ処理サービス。Ignite 2019 - Publickey

フロリダ州オーランドで開催中のマイクロソフトのイベント「Microsoft Ignite 2019」が開催中です。 その基調講演において同社CEOのサティア・ナデラ氏は、大規模並列データ分析サービス「Azure Synapse Analytics」を発表しました。 同社は現在、大規模データウェアハウス向けのサービスとして「Azure SQL Data Warehou...

はてなブックマーク - [速報]マイクロソフト、「Azure Synapse」発表。BigQuery対抗の大規模並列データ処理サービス。Ignite 2019 - Publickey はてなブックマークに追加

[速報]マイクロソフト、「Azure Synapse」発表。BigQuery対抗の大規模並列データ処理サービス。Ignite 2019 - Publickey

[速報]マイクロソフト、「Azure Synapse」発表。BigQuery対抗の大規模並列データ処理サービス。Ignite 2019 - Publickey

[速報]マイクロソフト、「Azure Synapse」発表。BigQuery対抗の大規模並列データ処理サービス。Ignite 2019 - Publickey

フロリダ州オーランドで開催中のマイクロソフトのイベント「Microsoft Ignite 2019」が開催中です。 その基調講演において同社CEOのサティア・ナデラ氏は、大規模並列データ分析サービス「Azure Synapse Analytics」を発表しました。 同社は現在、大規模データウェアハウス向けのサービスとして「Azure SQL Data Warehou...

はてなブックマーク - [速報]マイクロソフト、「Azure Synapse」発表。BigQuery対抗の大規模並列データ処理サービス。Ignite 2019 - Publickey はてなブックマークに追加

首里城デジタル復元プロジェクト

首里城デジタル復元プロジェクト

首里城デジタル復元プロジェクト

概要 このプロジェクトでは、2019年10月31日に焼失した首里城のデジタル復元に取り組んでいます。Visual SFMという、多数の静止画から3Dモデルを生成する技術を用いて、これまでにクローリングにより収集したデータから3Dモデルを生成しました。 復元に協力する これまで収集できたデータでは枚数や視点が限られており、...

はてなブックマーク - 首里城デジタル復元プロジェクト はてなブックマークに追加

自分の死後、GmailやGoogleドライブのデータを自動削除する方法 | ライフハッカー[日本版]

自分の死後、GmailやGoogleドライブのデータを自動削除する方法 | ライフハッカー[日本版]

自分の死後、GmailやGoogleドライブのデータを自動削除する方法 | ライフハッカー[日本版]

高齢な人でも、若くて健康な人でも、「エンディングプラン」を作っておくのは賢明な考えです。 残された人びとが、あなたのペットや持ち物、そしてGmailアカウントをどうすればいいのか、わかるようにしておきましょう。 Gmail(およびGoogleドライブ、Google Pay、Googleフォト)のエンディングプランを作成するのは簡単...

はてなブックマーク - 自分の死後、GmailやGoogleドライブのデータを自動削除する方法 | ライフハッカー[日本版] はてなブックマークに追加

オタクと気持ち悪いという言葉 – データをいろいろ見てみる

オタクと気持ち悪いという言葉 - データをいろいろ見てみる

オタクと気持ち悪いという言葉 - データをいろいろ見てみる

概要 Twitter上で「気持ち悪い」、「キモイ」という言葉が、どのように使われてるかと調査した。 調査対象は、キモイ、気持ち悪いという言葉を含むtweet、約28万件 時系列の変化を見るため、2018年と2019年で調査を行った 気持ち悪いと言う言葉は、オタクへの言及とともに使われている 調査結果 2018年調査 2018年に投稿...

はてなブックマーク - オタクと気持ち悪いという言葉 - データをいろいろ見てみる はてなブックマークに追加

オタクと気持ち悪いという言葉 – データをいろいろ見てみる

オタクと気持ち悪いという言葉 - データをいろいろ見てみる

オタクと気持ち悪いという言葉 - データをいろいろ見てみる

概要 Twitter上で「気持ち悪い」、「キモイ」という言葉が、どのように使われてるかと調査した。 調査対象は、キモイ、気持ち悪いという言葉を含むtweet、約28万件 時系列の変化を見るため、2018年と2019年で調査を行った 気持ち悪いと言う言葉は、オタクへの言及とともに使われている 調査結果 2018年調査 2018年に投稿...

はてなブックマーク - オタクと気持ち悪いという言葉 - データをいろいろ見てみる はてなブックマークに追加

データサイエンス・機械学習をやるためのエンジニアな本まとめ – 2019年版 – Lean Baseball

データサイエンス・機械学習をやるためのエンジニアな本まとめ - 2019年版 - Lean Baseball

データサイエンス・機械学習をやるためのエンジニアな本まとめ - 2019年版 - Lean Baseball

ここ1〜2年くらいで、業務やプライベートのデータ分析・データサイエンスで参考にした本(と一部本じゃないもの)をまとめてみました(注:もちろん全部読んでいます).*1. なお, あくまでワタシ個人(@shinyorke)の見解に基づいた独自解釈であり、所属組織・チームの意向とは関係ありません(とだけ最初に断っておきま...

はてなブックマーク - データサイエンス・機械学習をやるためのエンジニアな本まとめ - 2019年版 - Lean Baseball はてなブックマークに追加

データサイエンス・機械学習をやるためのエンジニアな本まとめ – 2019年版 – Lean Baseball

データサイエンス・機械学習をやるためのエンジニアな本まとめ - 2019年版 - Lean Baseball

データサイエンス・機械学習をやるためのエンジニアな本まとめ - 2019年版 - Lean Baseball

ここ1〜2年くらいで、業務やプライベートのデータ分析・データサイエンスで参考にした本(と一部本じゃないもの)をまとめてみました(注:もちろん全部読んでいます).*1. なお, あくまでワタシ個人(@shinyorke)の見解に基づいた独自解釈であり、所属組織・チームの意向とは関係ありません(とだけ最初に断っておきま...

はてなブックマーク - データサイエンス・機械学習をやるためのエンジニアな本まとめ - 2019年版 - Lean Baseball はてなブックマークに追加

近年のデータ分析基盤構築における失敗はBigQueryを採用しなかったことに全て起因している – データエンジニアの酩酊日記

近年のデータ分析基盤構築における失敗はBigQueryを採用しなかったことに全て起因している - データエンジニアの酩酊日記

近年のデータ分析基盤構築における失敗はBigQueryを採用しなかったことに全て起因している - データエンジニアの酩酊日記

久しぶりにペラペラな思いつきを書き捨てて、寝ます。 2、3年前ぐらいにSIerやコンサルでTreasure Dataとか使ってマネージドDWH作ろうぜっていう風潮が流行って、今は運用フェーズに入ってどこも結構苦しんでるってのが僕のすごく狭い観測範囲での印象。 AWSのReadshiftしかり。 なぜ苦しんでるかっていうと、言うほどス...

はてなブックマーク - 近年のデータ分析基盤構築における失敗はBigQueryを採用しなかったことに全て起因している - データエンジニアの酩酊日記 はてなブックマークに追加

近年のデータ分析基盤構築における失敗はBigQueryを採用しなかったことに全て起因している – データエンジニアの酩酊日記

近年のデータ分析基盤構築における失敗はBigQueryを採用しなかったことに全て起因している - データエンジニアの酩酊日記

近年のデータ分析基盤構築における失敗はBigQueryを採用しなかったことに全て起因している - データエンジニアの酩酊日記

久しぶりにペラペラな思いつきを書き捨てて、寝ます。 2、3年前ぐらいにSIerやコンサルでTreasure Dataとか使ってマネージドDWH作ろうぜっていう風潮が流行って、今は運用フェーズに入ってどこも結構苦しんでるってのが僕のすごく狭い観測範囲での印象。 AWSのReadshiftしかり。 なぜ苦しんでるかっていうと、言うほどス...

はてなブックマーク - 近年のデータ分析基盤構築における失敗はBigQueryを採用しなかったことに全て起因している - データエンジニアの酩酊日記 はてなブックマークに追加

食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー(井上明人) – 個人 – Yahoo!ニュース

食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー(井上明人) - 個人 - Yahoo!ニュース

食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー(井上明人) - 個人 - Yahoo!ニュース

久しぶりのyahoo個人への投稿となりますが、この記事を公開するのは、正直、気が重いな、と思いつつ、公開します。 というのも、今、食べログに対して非常にネガティブな解釈が広がっているわけですが、何かしらポジティブな材料を提供するとなると、確実にいろいろ言われるだろうなあと思って気が重くて仕方がないので...

はてなブックマーク - 食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー(井上明人) - 個人 - Yahoo!ニュース はてなブックマークに追加

食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー(井上明人) – 個人 – Yahoo!ニュース

食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー(井上明人) - 個人 - Yahoo!ニュース

食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー(井上明人) - 個人 - Yahoo!ニュース

久しぶりのyahoo個人への投稿となりますが、この記事を公開するのは、正直、気が重いな、と思いつつ、公開します。 というのも、今、食べログに対して非常にネガティブな解釈が広がっているわけですが、何かしらポジティブな材料を提供するとなると、確実にいろいろ言われるだろうなあと思って気が重くて仕方がないので...

はてなブックマーク - 食べログの得点計算についてのポジティブな可能性を考えるー操作されたデータを検証する難しさー(井上明人) - 個人 - Yahoo!ニュース はてなブックマークに追加

データ解析を駆使して食べログ3.8問題が証明できなかった話 – konkon3249’s diary

データ解析を駆使して食べログ3.8問題が証明できなかった話 - konkon3249’s diary

データ解析を駆使して食べログ3.8問題が証明できなかった話 - konkon3249’s diary

はじめに この記事は、藍屋えん氏( @u874072e )の以下のブログに触発されて、個人的に行った一連のデータ解析をまとめたものです。 clean-copy-of-onenote.hatenablog.com 上のブログでは、食べログ3.8問題と称される問題、 「評価3.8以上の店舗は年会費を払わなければ評価を3.6に下げられる」 との説を食べログの店舗デ...

はてなブックマーク - データ解析を駆使して食べログ3.8問題が証明できなかった話 - konkon3249’s diary はてなブックマークに追加

データ解析を駆使して食べログ3.8問題が証明できなかった話 – konkon3249’s diary

データ解析を駆使して食べログ3.8問題が証明できなかった話 - konkon3249’s diary

データ解析を駆使して食べログ3.8問題が証明できなかった話 - konkon3249’s diary

はじめに この記事は、藍屋えん氏( @u874072e )の以下のブログに触発されて、個人的に行った一連のデータ解析をまとめたものです。 clean-copy-of-onenote.hatenablog.com 上のブログでは、食べログ3.8問題と称される問題、 「評価3.8以上の店舗は年会費を払わなければ評価を3.6に下げられる」 との説を食べログの店舗デ...

はてなブックマーク - データ解析を駆使して食べログ3.8問題が証明できなかった話 - konkon3249’s diary はてなブックマークに追加

「令和にもなって手で書かせるなんて…」大学生開発の“全自動手書きレポートマシン”が本当にすごい! – FNN.jpプライムオンライン

「令和にもなって手で書かせるなんて…」大学生開発の“全自動手書きレポートマシン”が本当にすごい! - FNN.jpプライムオンライン

「令和にもなって手で書かせるなんて…」大学生開発の“全自動手書きレポートマシン”が本当にすごい! - FNN.jpプライムオンライン

レポートを手書き風に書いてくれる“夢のマシン”を現役大学生が開発 実際にマウスで文字を書き「手書きフォント」までも作成する用意周到ぶり ネットの要望に応え新たなバージョンを開発予定。就活生が喜ぶ“あれ”を手書き風に 学生時代の悩みと言えば、留年などをせずに卒業できるかどうか。 そのためには常に勉学に励み...

はてなブックマーク - 「令和にもなって手で書かせるなんて…」大学生開発の“全自動手書きレポートマシン”が本当にすごい! - FNN.jpプライムオンライン はてなブックマークに追加

なぜ40代は「若者の童貞化」を許せないのか?(トイアンナ) | 現代ビジネス | 講談社(1/4)

なぜ40代は「若者の童貞化」を許せないのか?(トイアンナ) | 現代ビジネス | 講談社(1/4)

なぜ40代は「若者の童貞化」を許せないのか?(トイアンナ) | 現代ビジネス | 講談社(1/4)

あなたは「童貞問題」を知っているだろうか。 20代男性の4割が童貞という、驚きの統計データのことだ。当然ながら女性も20代も約4割が処女。いまの20代にとって、処女や童貞はいたって普通のことなのである。 しかし、これを「そうなんだ」とは受け容れられない世代がいる。それは、アラフォー代だ。 20代童貞率が最低だ...

はてなブックマーク - なぜ40代は「若者の童貞化」を許せないのか?(トイアンナ) | 現代ビジネス | 講談社(1/4) はてなブックマークに追加

1. 機械学習概論と単回帰 (1) | 筑波大学オープンコースウェア|TSUKUBA OCW

1. 機械学習概論と単回帰 (1) | 筑波大学オープンコースウェア|TSUKUBA OCW

1. 機械学習概論と単回帰 (1) | 筑波大学オープンコースウェア|TSUKUBA OCW

計算機による自律的な学習を目指す機械学習や, 大規模情報源からの知識発見を実現するデータマイニングの理論について, 教師付き学習, 教師なし学習を中心に理解する.

はてなブックマーク - 1. 機械学習概論と単回帰 (1) | 筑波大学オープンコースウェア|TSUKUBA OCW はてなブックマークに追加

1. 機械学習概論と単回帰 (1) | 筑波大学オープンコースウェア|TSUKUBA OCW

1. 機械学習概論と単回帰 (1) | 筑波大学オープンコースウェア|TSUKUBA OCW

1. 機械学習概論と単回帰 (1) | 筑波大学オープンコースウェア|TSUKUBA OCW

計算機による自律的な学習を目指す機械学習や, 大規模情報源からの知識発見を実現するデータマイニングの理論について, 教師付き学習, 教師なし学習を中心に理解する.

はてなブックマーク - 1. 機械学習概論と単回帰 (1) | 筑波大学オープンコースウェア|TSUKUBA OCW はてなブックマークに追加