色々聞く

色々聞く色々聞く Kenichiro Matohara(matoken) <[email protected]> 1 / 47

南隅から参加(鹿児島の右下) 好きなLinuxディストリビューションはDebian お仕事募集 mailto:work＠matohara.org Kenichiro Matohara(matoken) Kenichiro Matohara(matoken) https://matoken.org https://matoken.org
©OpenStreetMap協力者 + overpass turbo 2 / 47

最近最近 ThinkPad Yoga-260の調子が悪く Terminalをmltermに移行中鹿児島らぐ 2022.03 参加者10人，発表3人次回は04/24(日) オンライン開催
https://kagolug.connpass.com/event/244419/ 3 / 47

鹿児島らぐ2022.03発表鹿児島らぐ2022.03発表 matoken koedoyoshida「sshd DDOS対策してみた」 kapper ，，，「Torで色々🧅」
「超格安ジャンクPCでXubuntu22.04にAnboxを入れてX11指定すると爆安Andorid環境とGooglePlayをLinuxで作れてとても楽しい」「ドン・キホーテ格安1,980圓焼き芋メーカーで石焼き芋を作って堪能してみた」「ジャンク2,000圓Blu-RayプレイヤーとジャンクWindowsタブレットとUbuntu LinuxとWineで格安Blu-Ray端末してみた」「100均Candoの330圓テンキーのキーバインドを改造してオリジナルキーボードを作ってみる。 Ubuntuのxevでキーコードを調べてxmodmpに書き込むだけ。簡単。Windowsでも似たような事が出来る。」 4 / 47

色々聞く色々聞く 👂 5 / 47

Podcast Podcast 基本的にラジオのような音声メディア基本的に音声ファイルをダウンロードして聞くので時間や場所を選ばず聞ける ShowNoteがあったり，文字起こしテキストがあったり，限定コンテンツがあったり Podcast AgregatorでPodcast RSS
feedを購読 Spotifyなどはストリーミングで聞けて複数デバイスでも視聴一元管理出来てお手軽に? スマートスピーカーなども対応要回線 → 圏外で聞けない Androidアプリでは前もってダウンロードすることでオフラインで視聴可能だった 6 / 47

matoken Podcast視聴環境 matoken Podcast視聴環境 7 / 47

昔昔 iTunes + iPod mini Songbird + iPod mini
PCと同期するとファイル，視聴履歴が同期されるアプリケーションが重かった 8 / 47

最近最近 Rakiten Mini(Android) + Podcast Addict PCで聞くときにもBluetooth A2DPで音を飛ばして視聴履歴を 1つに
最新5話を保存，1.5倍速再生 podget + audacious podgetで全話保存特定の話を聞き返したいときなどに利用 (大抵全話公開されているが，サーバが死んだりする……) 9 / 47

Songbirdは死んでいそう? Songbirdは死んでいそう? Nightingale SongbirdはLinuxサポートを打ち切られ，Nightingaleというプロフェクトがフォーク http://getnightingale.com/ 10 / 47

Podcast以外のものも聞いてみる Podcast以外のものも聞いてみる YouTube Twitter Spaceのアーカイブ日本語文章英語のコンテンツ 11 / 47

YouTubeのコンテンツを聞く YouTubeのコンテンツを聞く YouTubeでラジオ形式で配信されているコンテンツオープンソースカンファレンス動画他 12 / 47

yt-dlpでダウンロード yt-dlpでダウンロード youtube-dlのフォーク，他の派生の機能も取り込まれている． YouTube以外にもいろいろなサービスに対応 https://github.com/yt-dlp/yt-dlp 13 / 47

導入例導入例 $ wget https://github.com/yt-dlp/yt-dlp/releases/latest/download/yt-dlp https://github.com/yt-dlp/yt-dlp/releases/latest/download/SHA2-512SUMS $ sha512sum -c ./SHA2-512SUMS
2>&1 | grep OK yt-dlp: OK $ install -m700 ./yt-dlp ~/bin/ $ rm ./yt-dlp ./SHA2-512SUMS 14 / 47

YouTubeにはいくつかのメディア YouTubeにはいくつかのメディアがあるがある音声のみ ← これが欲しいビデオのみビデオ+動画 15
/ 47

ダウンロード可能なフォーマッダウンロード可能なフォーマットを確認&IDをメモトを確認&IDをメモ $ yt-dlp -F https://www.youtube.com/watch?v=BoFSOt0mtvg [youtube] BoFSOt0mtvg:
Downloading webpage [youtube] BoFSOt0mtvg: Downloading android player API JSON [info] Available formats for BoFSOt0mtvg: ID EXT RESOLUTION FPS │ FILESIZE TBR PROTO │ VCODEC VBR ACODEC ABR ASR MOR ─────────────────────────────────────────────────────────────────────────────────────────────── sb2 mhtml 48x27 │ mhtml │ images st sb1 mhtml 80x45 │ mhtml │ images st sb0 mhtml 160x90 │ mhtml │ images st 139 m4a audio only │ 20.17MiB 48k https │ audio only mp4a.40.5 48k 22050Hz low 249 webm audio only │ 20.80MiB 50k https │ audio only opus 50k 48000Hz low 250 webm audio only │ 25.84MiB 62k https │ audio only opus 62k 48000Hz low 140 m4a audio only │ 53.53MiB 129k https │ audio only mp4a.40.2 129k 44100Hz med 251 webm audio only │ 48.99MiB 118k https │ audio only opus 118k 48000Hz med 17 3gp 176x144 12 │ 18.87MiB 45k https │ mp4v.20.3 45k mp4a.40.2 0k 22050Hz 14 160 mp4 256x144 24 │ 13.37MiB 32k https │ avc1.4d400c 32k video only 14 278 webm 256x144 24 │ 17.94MiB 43k https │ vp9 43k video only 14 133 mp4 426x240 24 │ 27.53MiB 66k https │ avc1.4d4015 66k video only 24 242 webm 426x240 24 │ 29.36MiB 71k https │ vp9 71k video only 24 134 mp4 640x360 24 │ 48.95MiB 118k https │ avc1.4d401e 118k video only 36 18 mp4 640x360 24 │ 88.97MiB 215k https │ avc1.42001E 215k mp4a.40.2 0k 44100Hz 36 243 webm 640x360 24 │ 56.62MiB 136k https │ vp9 136k video only 36 135 mp4 854x480 24 │ 82.40MiB 199k https │ avc1.4d401e 199k video only 48 244 webm 854x480 24 │ 76.90MiB 185k https │ vp9 185k video only 48 136 mp4 1280x720 24 │ 134.08MiB 324k https │ avc1.64001f 324k video only 72 22 mp4 1280x720 24 │ ~191.73MiB 452k https │ avc1.64001F 452k mp4a.40.2 0k 44100Hz 72 247 webm 1280x720 24 │ 143.82MiB 347k https │ vp9 347k video only 72 137 mp4 1920x1080 24 │ 201.57MiB 487k https │ avc1.640028 487k video only 10 248 webm 1920x1080 24 │ 168.30MiB 407k https │ vp9 407k video only 10 16 / 47

音声+サムネイルダウンロード音声+サムネイルダウンロード 1 .m4a ダウンロード 2 サムネイル埋め込み 3 対象動画URL ファイラーでサムネイルもOK
$ yt-dlp -f 140 \ --embed-thumbnail \ https://www.youtube.com/watch?v=BoFSOt0mtvg 1 2 3 17 / 47

YouTubeチャンネルやプレイリス YouTubeチャンネルやプレイリストからラジオだけをダウンロートからラジオだけをダウンロードド 1 タイトルに「ラジオをする」の含まれている動画のみダウンロード 2 対象プレイリストURL
$ yt-dlp -f 140 \ --embed-thumbnail \ --match-filter "title~=ラジオをする" \ https://www.youtube.com/watch?list=PLUH30mfo5wJwdafMdAJFcrcryUbYiixl4 1 2 18 / 47

指定期間でダウンロード指定期間でダウンロード最新n件，前回のダウンロード実行時以降，いつからいつまでの間…… --playlist-start NUMBER --playlist-end NUMBER --playlist-items ITEM_SPEC --date
DATE --datebefore DATE --dateafter DATE --match-filter FILTER 19 / 47

視聴履歴に残す視聴履歴に残す --cookies-from-browser BROWSER[+KEYRING][:PROFILE] YouTubeログイン済のブラウザ( brave, chrome, chromium, edge, firefox,
opera, safari, vivaldi)から cookieを取得 --cookies FILE ブラウザからYouTubeのcookieを書き出したファイル指定， cookie書き出しには拡張機能のcookies.txt利用リモートで利用時に便利 cookies.txt – Get this Extension for <F0><9F> <A6><8A> Firefox (en-US) 20 / 47

その他よく使うオプションその他よく使うオプション -i ダウンロード失敗しても次の動画を処理する -f 保存ファイル名指定 -P ダウンロードテンポラリパス(exFATおすすめ) -s, --simulate
ダウンロードをしない，ドライラン他にも大量にオプションがあるので yt-dlp -h をチェック 21 / 47

Twitter Spaceのアーカイブをダウ Twitter Spaceのアーカイブをダウンロードして聞くンロードして聞く Twitterの音声配信サービス配信者がアーカイブを残す設定にしていれば一定期間(30日?)アーカイブを聞くことができる Python製のTwspace-dlを利用してダウンロード
導入例 HoloArchivists/twspace-dl: A python module to download twitter spaces. $ pip install twspace-dl 22 / 47

Twitter Spaceアーカイブダウンロ Twitter Spaceアーカイブダウンロードード $ twspace_dl -i https://twitter.com/i/spaces/1ypKdEXLdLqGW
: $ ffprobe -i ./$辻\ 伸弘\ \(nobuhiro\ tsuji$\)ゆくアレ、くるアレ\ #セキュリティのアレ-1ypKdEXLdLqGW : Input #0, mov,mp4,m4a,3gp,3g2,mj2, from './(辻伸弘 (nobuhiro tsuji))ゆくアレ、くるアレ #セキュリティ Metadata: major_brand : M4A minor_version : 512 compatible_brands: M4A isomiso2 title : ゆくアレ、くるアレ #セキュリティのアレ artist : 辻伸弘 (nobuhiro tsuji) encoder : Lavf58.76.100 episode_id : 1ypKdEXLdLqGW Duration: 01:13:21.71, start: 0.000000, bitrate: 95 kb/s Stream #0:0(und): Audio: aac (LC) (mp4a / 0x6134706D), 48000 Hz, stereo, fltp, 93 kb/s (defau Metadata: handler_name : SoundHandler vendor_id : [0][0][0][0] 23 / 47

無音部分をカット無音部分をカット 1 一定以下の音の部分をカット 01:13:21.71 → 01:09:51.71 になった  ノーマライズを挟むといい
かも? $ ffmpeg -i ./$辻\ 伸弘\ \(nobuhiro\ tsuji$\)ゆくアレ、くるアレ\ #セキュリティのアレ-1ypKdEXLdLqGW.m -af silenceremove=stop_periods=-1:stop_duration=1:stop_threshold=-50dB \ -acodec libopus \ ./$辻\ 伸弘\ \(nobuhiro\ tsuji$\)ゆくアレ、くるアレ\ #セキュリティのアレ-1ypKdEXLdLqGW.opus 1 別の動画では -90dB でうまくいった． 24 / 47

日本語文章を聞く日本語文章を聞く MozillaのオンラインブックマークサービスのPocket(スマートフォンアプリのみ)の読み上げ機能最高品質の音声(既定値)は要オンラインディスクを大量に消費するので設定で制限 LinuxのTTSで読み上げ VOICEVOXが人間に近い&Linux版もあっていい感じ  VOICEVOX登場以前に試したときのもの
↓ Linuxで日本語の扱えるTTS(Text-to-speech)を試す 25 / 47

26 / 47

27 / 47

28 / 47

VOICEVOXで文章を音声に VOICEVOXで文章を音声に商用・非商用問わず無料音声ライブラリはたくさんのキャラクターが居てキャラクターにより利用規約があるクレジットのみが多いけど要確認 GUIとENGINEのみが利用できる GUI版はENGINEとしても利用可能 ENGINEはDockerもあり GPU/CPU版とCPU版がある
GPU版はRAM 3GB以上を搭載したNVIDIA GPUが必要 https://voicevox.hiroshiba.jp/ 29 / 47

VOICEBOX GUI版で読み上げ VOICEBOX GUI版で読み上げ $ VOICEVOX/voicevox でGUI版起動適当なテキストファイルを用意「ファイル」→「テキスト読み込み」「ファイル」→「音声を繋げて書き出し」
.wavで書きだされる Intel Core i5-3320Mで大体実時間の3〜4倍くらい 30 / 47

31 / 47

VOICEVOX ENGINE利用 VOICEVOX ENGINE利用 $ VOICEVOX/run でエンジンのみ起動 http経由でやり取りして.wavを受け取れるエンジンを起動した状態ででド
キュメントが確認できる http://127.0.0.1:50021/docs 32 / 47

README.mdにもサンプルが README.mdにもサンプルが echo -n "こんにちは、音声合成の世界へようこそ" >text.txt curl -s \ -X
POST \ "localhost:50021/audio_query?speaker=1"\ --get --data-urlencode [email protected] \ > query.json curl -s \ -H "Content-Type: application/json" \ -X POST \ -d @query.json \ localhost:50021/synthesis?speaker=1 \ > audio.wav 33 / 47

テキストファイルからを1行毎にテキストファイルからを1行毎に読み出して.wavに読み出して.wavに 1 テキストを渡すとwavを返すscript $ count=0 ; cat
./文章.txt | while read line; \ do echo ${line} ; \ ./voicevox2wav.bash ${line} > "${count}.wav" ; \ count=$(( ${count} + 1 )); done 1 34 / 47

.wav を結合しつつopus/oggに変換 .wav を結合しつつopus/oggに変換大分聞きやすい2時間超のものを最後まで聞けた $ find . -name "*.wav"
-size +1c | sort -V | xargs -n1 basename | xargs -n1 echo file > wav-fi $ time ffmpeg -f concat -i ./wav-files -acodec libopus episode12.ogg 35 / 47

英語のコンテンツを日本語で聞英語のコンテンツを日本語で聞きたいきたい YouTubeの自動文字起こし，機械翻訳を読み上げてみる機械翻訳したものを読み上げてみる  Google翻訳のURLをPocketに登録は英語のまま読まれて失敗 36
/ 47

YouTubeの自動文字起こし，機械 YouTubeの自動文字起こし，機械翻訳翻訳 YouTubeにアップロードされた動画は自動的に文字起こしされ，各種言語に翻訳されて字幕として利用できる yt-dlpで字幕ファイルをダウンロード可能 YouTubeにないものをダウンロードしてYouTubeに限定公開で Upして字幕のみDLとかも可能(データによっては警告が来るので注意)
37 / 47

機械翻訳字幕ファイル入手機械翻訳字幕ファイル入手 1 字幕ファイルのみダウンロードするために動画のダウンロードをスキップ 2 日本語の字幕のみ入手 3 字幕ファイルダウンロード $
yt-dlp --skip-download \ --sub-lang=ja \ --write-auto-sub \ https://www.youtube.com/watch?v=lZjciSImVhU 1 2 3 38 / 47

字幕ファイルの.vttから.txtに変換字幕ファイルの.vttから.txtに変換 $ awk 'FNR<=4 || ($0 ~ /^$|-->|\[|\]|</){next} !a[$0]++'
\ ./Ep\ 12\ -\ Crypto\ Wars\ \[lZjciSImVhU\].ja.vtt > \ ./Ep\ 12\ -\ Crypto\ Wars\ \[lZjciSImVhU\].ja.txt 39 / 47

40 / 47

同様に.wavに書き出して結合し同様に.wavに書き出して結合して聞くて聞く元の字幕ファイルが細切れになっているので聞きづらいテキストファイルの改行を減らすともっと良くなると思う 41 / 47

英語テキストを機械翻訳して読英語テキストを機械翻訳して読み上げして聞くみ上げして聞く今回は英語Podcastの書き起こしテキストを変換 htmlをテキストに，無駄な改行を削除 $ w3m -dump |
tr -s "\n" > text TransShell経由でGoogle翻訳を使い日本語に変換 $ cat ./text | while read line; do trans -b en:ja "${line}" | tee -a text.ja; done https://darknetdiaries.com/transcript/112 42 / 47

 Translate ShellはGoogle翻訳，Bing翻訳，Yandex翻訳，Apertium(DeepLはドロップ)をコマンドラインで利用できるもの．既定値はGoogle翻訳．翻訳読み上げを録音する手も?(未検証) -download-audio-as FILENAME Google翻訳を使いすぎるとしばらく使えなくなる．
Telegramは頑張って回避しているようなので真似すれば? Translate Shell How Telegram Messenger circumvents Google Translate’s API | DanPetrov 43 / 47

 DeepLの利用(失敗) ファイルだと5MB 10万文字までの翻訳が可能．しかし帰ってきた文章からテキストに戻せない? $ pandoc text.en -o text_en.pdf
$ : ウェブブラウザのDeepLで翻訳 $ pdf2txt 'text_ja.pdf' | head rM?= 2 DREW8»(cid:220)(cid:215)(cid:238)\(cid:231)(cid:135)[CTI8(cid:11) JACK: 88(cid:135)[M?=(cid:143)¡?]:?(cid:131)?}^8E](cid:10)^(cid:135)?.........(cid:11) DREW88x6(cid:10)Q:^(cid:135)[M|(cid:11) 44 / 47

出来上がった日本語テキストをVOICEVOXで読み上げ結構普通に聞ける，英単語がアルファベットで読まれる(多分設定で回避できる?) Podcastの書き起こしテキストは行頭に話者が書かれていたので話者毎にVOICEVOXのキャラクターを切り替えると聞きやすくなると思う 45 / 47

まとめまとめ音声コンテンツはながら聴きができるので便利気になったら戻って聞き返したり何度も聞いたりオープンソースカンファレンス動画がいっぱい公開，後で見よう……もう次のOSC!というのを繰り返してしまう．とりあえず音声だけ聞いて気になったものを動画で見る．をできるように TTSのVOICEVOXは既定値でも結構普通に聞けていい感じ設定を凝ればもっと流暢なものになると思うが…… YouTube以外のSpeech
to Textを試したい自分用Podcast RSS feedを書き出して自動的に同期するようにもしたい 46 / 47

奥付奥付発表発表者利用ソフトウェアライセンス CC BY 4.0 東海道らぐとLinuxをはじめる春まつり
Kenichiro Matohara(matoken) Asciidoctor Reveal.js 47 / 47

色々聞く

色々聞く

More Decks by Kenichiro MATOHARA

Other Decks in Technology

Featured

Transcript