Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
データ分析イベントデータ説明(VRChatイベントカレンダー)
Search
ぶんちん
February 06, 2025
Technology
0
60
データ分析イベントデータ説明(VRChatイベントカレンダー)
ぶんちん
February 06, 2025
Tweet
Share
More Decks by ぶんちん
See All by ぶんちん
<事前告知> DS集会データ分析イベント VRChatイベントカレンダー
bunnchinn3
0
57
統計知識と実務のギャップ
bunnchinn3
0
70
製造業における品質不良の要因分析04_ツール選択の考え方
bunnchinn3
0
69
これまでLT振り返り 何が人気の話題?
bunnchinn3
0
72
製造業における品質不良の要因分析03_必要な知識の入手方法
bunnchinn3
0
75
製造業における品質不良の要因分析02_分析着手順の考え方
bunnchinn3
0
75
製造業における品質不良の要因分析01_ゴール設定
bunnchinn3
0
120
良書紹介02_Head First データ解析
bunnchinn3
0
68
良書紹介01_生命科学・生物工学のための間違いから学ぶ実践統計解析
bunnchinn3
0
89
Other Decks in Technology
See All in Technology
OCI Success Journey OCIの何が評価されてる?疑問に答える事例セミナー(2025年2月実施)
oracle4engineer
PRO
2
130
Perlの生きのこり - エンジニアがこの先生きのこるためのカンファレンス2025
kfly8
2
270
短縮URLをお手軽に導入しよう
nakasho
0
140
CDKでカスタムランタイムを作成して、Lambdaをnode.js23+TypeScriptで動かしてみた
smt7174
2
110
PHPで印刷所に入稿できる名札データを作る / Generating Print-Ready Name Tag Data with PHP
tomzoh
0
180
Snowflakeの開発・運用コストをApache Icebergで効率化しよう!~機能と活用例のご紹介~
sagara
1
410
AWSを活用したIoTにおけるセキュリティ対策のご紹介
kwskyk
0
340
ウォンテッドリーのデータパイプラインを支える ETL のための analytics, rds-exporter / analytics, rds-exporter for ETL to support Wantedly's data pipeline
unblee
0
120
データベースの負荷を紐解く/untangle-the-database-load
emiki
2
480
AIエージェント元年
shukob
0
150
役員・マネージャー・著者・エンジニアそれぞれの立場から見たAWS認定資格
nrinetcom
PRO
3
5.7k
Share my, our lessons from the road to re:Invent
naospon
0
140
Featured
See All Featured
The Web Performance Landscape in 2024 [PerfNow 2024]
tammyeverts
4
430
RailsConf 2023
tenderlove
29
1k
Writing Fast Ruby
sferik
628
61k
Designing for humans not robots
tammielis
250
25k
Why Our Code Smells
bkeepers
PRO
336
57k
Music & Morning Musume
bryan
46
6.4k
Building Flexible Design Systems
yeseniaperezcruz
328
38k
Visualization
eitanlees
146
15k
Building Your Own Lightsaber
phodgson
104
6.2k
Bootstrapping a Software Product
garrettdimon
PRO
306
110k
KATA
mclloyd
29
14k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
44
7k
Transcript
データ分析イベントデータ説明 <超簡易版>R AnaliticFlow操作説明 ぶんちん 2025年2月6日 データサイエンティスト集会 in VRC 1
使用するデータ VRChatイベントカレンダー 2018年~2025年1月21日までに登録されたデータ
基データ概要 配布ファイル形式:CSV 文字コード:UTF-8 ファイルサイズ:約65MB データ期間:2018年6月21日~2025年1月21日
レコード数:95693 項目数:18 3
データ項目 タイムスタンプ イベント名 日付 開始時刻
終了時刻 イベント詳細 イベント主催者 イベント内容 4 人数制限 参加条件(モデル、人数制限など) 参加方法 備考 Android対応可否 イベントジャンル 海外ユーザー向け告知 告知文 途中から取得したと思われる項目もあるので扱いに注意
データ分析にあたっての注意点 イベント名などの入力のないデータ(空白行) ⇒明らかな異常データ VRChatイベントへの登録データは利用者側で修正・削除不 可であり、正しいデータへの対応は新規登録(データ追加) ⇒不適切な内容のデータ 基本的にデータクレンジングが必要 5
できる範囲でやりました!
配布データ 2種類のデータを配布します 生データ 前処理済データ <初心者はこちらがオススメ> イベント名の記載がない異常データ(空白行)を削除 同一イベント名が同じ日に複数回開催登録されているデータの重複 削除(タイムスタンプが最新のレコードを採用)
イベントジャンル列をカテゴリごとに扱いやすいよう整理 6 どれを使ってもらってもOKです 後述の理由からそれぞれ ・UTF-8版 ・Shift-JIS版(特殊文字削除) の2種類、計4種類を配布します
ちょっとだけ、 データ分析ソフト「R AnaliticFlow」の 使い方(超ダイジェスト)と注意点 7
R AnalyticFlow 8 https://r.analyticflow.com/ja/ Rベースで動く、GUI操作を基本とする“データ解析ソフトウェア” 日本で作られたソフトで、 UIやチュートリアルなど 全てが日本語対応! 注意) Rの導入も必要です
私の仕事(データ分析教育)で メインに使っているソフトです 導入方法の詳細は公式の情報見てください。 基本的にexeファイルでインストールし、指示に従って進めばOKです。
画面の基本的な見方 9 一番基本のエリア 分析フローの作成 ノード (分析・データ処理機能) データ・グラフ・ ヘルプなどの表示 Rのコンソール 選択中のノードの
設定を入力 ノードの格納場所
起動後の画面 作業フォルダの作成 10 初めてのデータのときは ここを選択してプロジェ クトフォルダを作成 分析を再開する場合は ここから該当のプロジェクトを選択
データの読み込み 11 ここを右クリックすると作業 フォルダを開ける ⇒データを入れておくとよい 読み込みたいデータを ドラッグ&ドロップ ヘッダーがTRUE 文字コードを確認 ⇒フローを実行
or ノードを実行 注意! 今回使用するデータの特殊文字を読み込めない 今回に限り特殊文字を消すため、 文字コードをShift-JISに変換したデータを 読み込むのが楽です( Shift-JIS 版データも配布予定)
分析例 12 集計ノードで カテゴリごとに統計量算出 グラフノードで 見たいグラフ描画 分析フローを示す矢印は右クリックのドラッグ&ドロップで引けます 処理(コード)の実行順にノードを配置して分析する 集計条件を設定 描画条件を設定
Orange Data Mining こちらは処理順ではなく、データの流れをフローで描画 UTF-8をそのまま読み込めます 13 使用方法は過去のLT資料を見てみてください