Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
「台灣報紙新聞」與「台灣即時新聞」
Search
Ping-Yen Tsai
December 02, 2017
Technology
0
110
「台灣報紙新聞」與「台灣即時新聞」
Ping-Yen Tsai
December 02, 2017
Tweet
Share
More Decks by Ping-Yen Tsai
See All by Ping-Yen Tsai
我的工作經驗 (到目前為止)
pingyen
2
420
網頁前端⼯程師與室內裝修師傅的相似之處
pingyen
0
87
JavaScript Closure
pingyen
1
110
HTML5 Sectioning Elements
pingyen
0
47
次世代搜尋引擎戰爭
pingyen
0
100
進階 JavaScript
pingyen
0
230
jQuery 入門
pingyen
0
56
Windows 市集應⽤用程式實例解說 (使⽤ JavaScript)
pingyen
0
95
Windows 市集應用程式開發實戰 (使用 JavaScript)
pingyen
0
72
Other Decks in Technology
See All in Technology
PHPで印刷所に入稿できる名札データを作る / Generating Print-Ready Name Tag Data with PHP
tomzoh
0
110
RSNA2024振り返り
nanachi
0
580
プロダクトエンジニア構想を立ち上げ、プロダクト志向な組織への成長を続けている話 / grow into a product-oriented organization
hiro_torii
1
210
転生CISOサバイバル・ガイド / CISO Career Transition Survival Guide
kanny
3
1k
(機械学習システムでも) SLO から始める信頼性構築 - ゆる SRE#9 2025/02/21
daigo0927
0
120
データ資産をシームレスに伝達するためのイベント駆動型アーキテクチャ
kakehashi
PRO
2
540
2/18/25: Java meets AI: Build LLM-Powered Apps with LangChain4j
edeandrea
PRO
0
120
目の前の仕事と向き合うことで成長できる - 仕事とスキルを広げる / Every little bit counts
soudai
24
7.2k
リアルタイム分析データベースで実現する SQLベースのオブザーバビリティ
mikimatsumoto
0
1.4k
地方拠点で エンジニアリングマネージャーってできるの? 〜地方という制約を楽しむオーナーシップとコミュニティ作り〜
1coin
1
230
あれは良かった、あれは苦労したB2B2C型SaaSの新規開発におけるCloud Spanner
hirohito1108
2
610
【Developers Summit 2025】プロダクトエンジニアから学ぶ、 ユーザーにより高い価値を届ける技術
niwatakeru
2
1.4k
Featured
See All Featured
Building Flexible Design Systems
yeseniaperezcruz
328
38k
Building an army of robots
kneath
303
45k
GitHub's CSS Performance
jonrohan
1030
460k
The MySQL Ecosystem @ GitHub 2015
samlambert
250
12k
jQuery: Nuts, Bolts and Bling
dougneiner
63
7.6k
It's Worth the Effort
3n
184
28k
Code Review Best Practice
trishagee
67
18k
Rebuilding a faster, lazier Slack
samanthasiow
80
8.8k
Stop Working from a Prison Cell
hatefulcrawdad
267
20k
Optimizing for Happiness
mojombo
376
70k
How to Think Like a Performance Engineer
csswizardry
22
1.3k
How to Ace a Technical Interview
jacobian
276
23k
Transcript
「台灣報紙新聞」與 「台灣即時新聞」 蔡秉諺
2015 春節 2/18 - 2/23 228 2/27 - 3/1 9
天
「台北市政府報紙新聞」與 「台北市政府即時新聞」
None
2014-12-25
輿論
Google News ? 漏新聞
你們到底要什麼?
報紙彙整 六大報頭條 其它要聞 台北市新聞 同一新聞事件 Group 記者姓名 相關局處 新聞內文 Word
檔
即時監看 網路即時新聞 台北市相關 15 分更新一次
我:開始打嘴砲
韶:能不能做個 DEMO ? 我: …………………
None
「原」碩士論文 最後沒做
「 DEMO 」 https://vexed.me/daily/taipei https://vexed.me/realtime/taipei
抓 Crawl
RSS 報社 類別 標題 描述 網址 時間 順序
新聞內頁 作者 次類別 內文 圖片說明
拆 Parse
群 Group
怎麼知道兩篇新聞 在講同件事? 原來我一點都不了解我自己
自己都不了解自己 還要教機器?
同關鍵字 同新聞事件
關鍵字 Keyword
斷詞 詞庫 jieba 結巴
踹共
2-Gram 中正大學 → 中正、正大、大學
停止字 \n \r \t . ; : ? ! (
) [ ] { } \ < > - _ @ # $ % & ~ | \ / ` ^ + = * 。 、 … . 「 」 《 》 〈 〉 【 】 ★ → ,。 :!; … 好吧,就這樣! → 好吧、就這、這樣 Stop Words
不同位置 不同分數 次類別 → 80 標題 → 100 內文 →
80 60 40 20 10 5 圖片說明 → 50 30 10 5 分數加總
前 100 名 25 同 前 400 名 80 同
鄰居 + 前 400 名 50 同 → 同報社、類別、次類別 同關鍵字 同新聞事件 分數受文長影響、名次不受
排序 Sort
新聞事件 { 間, 內 } 排序
怎麼知道 這篇新聞重要? 原來我一點都不了解我自己
自己都不了解自己 還要教機器?
報社編輯決定 誰重要 頭版頭最重要 工人智慧 RSS 報社 類別 順序
六大報 自由、聯合、蘋果、中時 工商、經濟 越多報導 越重要
新聞事件內排序 先比類別、再比順序 要聞 200 政治 100 國際 80 社會
30 地方 30 生活 30 財經 30 評論 20 投訴 20 娛樂 10
新聞事件間排序 類別分數相加、排序相加 先比類別分數、越大越好 再比排序和、越小越好
篩 Filter
台北市政府相關 兩層 Filter 一層 Positive 一層 Negative Count >= 5
台北市政府 相關局處 一層 Positive Filter 目前無 Negative Count >= 1
雜訊 Noise
Noise 廣編特輯 一週大事 英文新聞 星座理財 ... 雜訊
做完了!? 演算法? AI? 機器學習? 80 → 100 難
即時 RSS Aggregator + Filter
副產品 台灣 https://vexed.me/daily https://vexed.me/realtime
現實 自由時報 8 點更新 偶爾吐搥 Parse 記者 → 大坑
現況 daily/taipei 半年 realtime/taipei 至今
北市府放棄 Daily 政治 100 → 30 國際 80 → 2000
中時 扣分
經驗 不要用 Pthreads 3-Gram 、 4-Gram 無效 作者分析無效
心得 Feeling
None
工程師爽無用 現實會打醒你 即時 > 報紙
9 天、再也不想動
釐清問題難
輿論產業 政治公關 網軍
系友會 https://facebook.com/groups/CCUCSIE.alumni 中正大學資工系友會
Q & A