Submit Search
Upload
Log解析の基礎@phpcon2014
•
8 likes
•
8,791 views
菊池 佑太
Follow
Log解析の基礎@phpcon2014 https://joind.in/12030
Read less
Read more
Data & Analytics
Report
Share
Report
Share
1 of 30
Download now
Download to read offline
Recommended
Log解析の超入門
Log解析の超入門
菊池 佑太
リアルタイムデータを活用したインターネットユーザーへのアプローチ
リアルタイムデータを活用したインターネットユーザーへのアプローチ
菊池 佑太
20130819 jjugnslt
20130819 jjugnslt
Shinya Takebayashi
Goコンパイラのきもち
Goコンパイラのきもち
mjhd-devlion
iTamabi 13 第7回:ARTSAT API 実践 2 衛星の情報で表現する
iTamabi 13 第7回:ARTSAT API 実践 2 衛星の情報で表現する
Atsushi Tadokoro
Collective_Intelligence_chap2
Collective_Intelligence_chap2
Yutaro Sugai
iTamabi 13 第9回:ARTSAT API 実践 3 ジオコーディングで衛星の位置を取得
iTamabi 13 第9回:ARTSAT API 実践 3 ジオコーディングで衛星の位置を取得
Atsushi Tadokoro
恐怖!シェルショッカー1号男
恐怖!シェルショッカー1号男
Tomoyuki Matsuura
Recommended
Log解析の超入門
Log解析の超入門
菊池 佑太
リアルタイムデータを活用したインターネットユーザーへのアプローチ
リアルタイムデータを活用したインターネットユーザーへのアプローチ
菊池 佑太
20130819 jjugnslt
20130819 jjugnslt
Shinya Takebayashi
Goコンパイラのきもち
Goコンパイラのきもち
mjhd-devlion
iTamabi 13 第7回:ARTSAT API 実践 2 衛星の情報で表現する
iTamabi 13 第7回:ARTSAT API 実践 2 衛星の情報で表現する
Atsushi Tadokoro
Collective_Intelligence_chap2
Collective_Intelligence_chap2
Yutaro Sugai
iTamabi 13 第9回:ARTSAT API 実践 3 ジオコーディングで衛星の位置を取得
iTamabi 13 第9回:ARTSAT API 実践 3 ジオコーディングで衛星の位置を取得
Atsushi Tadokoro
恐怖!シェルショッカー1号男
恐怖!シェルショッカー1号男
Tomoyuki Matsuura
中年以降エンジニアの成長戦略
中年以降エンジニアの成長戦略
Ryo Tomidokoro
Good Parts of PHP and the UNIX Philosophy
Good Parts of PHP and the UNIX Philosophy
Yuya Takeyama
恐怖!シェルショッカーの POSIX原理主義シェルスクリプト
恐怖!シェルショッカーの POSIX原理主義シェルスクリプト
Richie Shellshoccar
GNU awk (gawk) を用いた Apache ログ解析方法
GNU awk (gawk) を用いた Apache ログ解析方法
博文 斉藤
Amebaサービスのログ解析基盤
Amebaサービスのログ解析基盤
Toshihiro Suzuki
PHP+伺かで始める新しい通知の形
PHP+伺かで始める新しい通知の形
K Kinzal
POSIX中心主義と情報科学教育
POSIX中心主義と情報科学教育
Tomoyuki Matsuura
サーバ攻撃されてみた
サーバ攻撃されてみた
Kimie Furuya
Hadoopを用いた大規模ログ解析
Hadoopを用いた大規模ログ解析
shuichi iida
Flumeを活用したAmebaにおける大規模ログ収集システム
Flumeを活用したAmebaにおける大規模ログ収集システム
Satoshi Iijima
More Related Content
Viewers also liked
中年以降エンジニアの成長戦略
中年以降エンジニアの成長戦略
Ryo Tomidokoro
Good Parts of PHP and the UNIX Philosophy
Good Parts of PHP and the UNIX Philosophy
Yuya Takeyama
恐怖!シェルショッカーの POSIX原理主義シェルスクリプト
恐怖!シェルショッカーの POSIX原理主義シェルスクリプト
Richie Shellshoccar
GNU awk (gawk) を用いた Apache ログ解析方法
GNU awk (gawk) を用いた Apache ログ解析方法
博文 斉藤
Amebaサービスのログ解析基盤
Amebaサービスのログ解析基盤
Toshihiro Suzuki
PHP+伺かで始める新しい通知の形
PHP+伺かで始める新しい通知の形
K Kinzal
POSIX中心主義と情報科学教育
POSIX中心主義と情報科学教育
Tomoyuki Matsuura
サーバ攻撃されてみた
サーバ攻撃されてみた
Kimie Furuya
Hadoopを用いた大規模ログ解析
Hadoopを用いた大規模ログ解析
shuichi iida
Flumeを活用したAmebaにおける大規模ログ収集システム
Flumeを活用したAmebaにおける大規模ログ収集システム
Satoshi Iijima
Viewers also liked
(10)
中年以降エンジニアの成長戦略
中年以降エンジニアの成長戦略
Good Parts of PHP and the UNIX Philosophy
Good Parts of PHP and the UNIX Philosophy
恐怖!シェルショッカーの POSIX原理主義シェルスクリプト
恐怖!シェルショッカーの POSIX原理主義シェルスクリプト
GNU awk (gawk) を用いた Apache ログ解析方法
GNU awk (gawk) を用いた Apache ログ解析方法
Amebaサービスのログ解析基盤
Amebaサービスのログ解析基盤
PHP+伺かで始める新しい通知の形
PHP+伺かで始める新しい通知の形
POSIX中心主義と情報科学教育
POSIX中心主義と情報科学教育
サーバ攻撃されてみた
サーバ攻撃されてみた
Hadoopを用いた大規模ログ解析
Hadoopを用いた大規模ログ解析
Flumeを活用したAmebaにおける大規模ログ収集システム
Flumeを活用したAmebaにおける大規模ログ収集システム
Log解析の基礎@phpcon2014
1.
1 Log解析の基礎 @phpcon2014
菊池佑太
2.
2 One to
One
3.
3 機械学習
4.
知識無くておk まずやってみる! 4
5.
5 性別推定
6.
6 未知への拡張 50%
20% 20%
7.
7 検索Log
8.
機械に確率を学習 P(男|ガンダム) =
0.8 8
9.
9 <?php namespace
Algorithms; class NaiveBayes { public function add_instance(){} public function train(){} public function predict(){} ... }
10.
10 学習 推定
評価
11.
{ 正解 :
{KW : 回数} } { 男性 : {ガンダム : 5 , ACミラン : 8 } } { 女性 : {化粧水 : 2 , 日焼け止め : 7 } } 11 ・・・
12.
12 $nb =
new NaiveBayes(); // iteration $nb->add_instance( 'label' => '正解', 'attributes' => 'KW : 回数' ); $nb->train();
13.
13 学習 推定
評価
14.
{ 未知 :
{KW : 回数} } { ? : {ガンダム : 3 , シャア : 2 } } 14 ・・・
15.
15 // iteration
$res = $nb->predict( 'attributes' => 'KW : 回数' ); foreach($res as $label => $p) { echo $label . "t" . $p . "n"; } // 男性 : 0.878 // 女性 : 0.122 // UniqIDをKeyにNosqlへ
16.
16 学習 推定
評価
17.
17 精度 Balance
{ 精度 : 70%, 拡張量: 30%増} 拡張量
18.
18 応用
19.
Hadoop Streaming 19
PHP
20.
20 特徴を追加して 精度を上げる
21.
21 他の問題
22.
Are You Ready?
22
23.
魔法少 女推定23
24.
24 言語・画像処理から人物推定 ・動画台詞抽出
{ KW : 回数} ・動画SnapShot {特徴 : 数値}
25.
25 学習 推定
評価(精度)
26.
26 台詞 40%
画像 低精度
27.
もっと詳しく知り 27 たい方
〜知りたい,があなたを変えていく〜
28.
28 僕の名前 まどマギ
検索! 〜知りたい,があなたを変えていく〜
29.
29 Check It
Out
30.
30 ご清聴 ありがとうござい
ました
Download now