Upgrade to Pro — share decks privately, control downloads, hide ads and more …

転職会議でGPT-3を活用した企業口コミ要約機能をリリースした話

Livesense Inc.
May 11, 2023
1k

 転職会議でGPT-3を活用した企業口コミ要約機能をリリースした話

Livesense Inc.

May 11, 2023
Tweet

More Decks by Livesense Inc.

Transcript

  1. 自己紹介
 落合 隆行(Takayuki Ochiai)
 • 株式会社リブセンス転職会議事業部のエンジニアリング マネージャー兼エンジニア
 • 今回は本機能の開発担当者として喋ります 


    • 略歴)
 – SIerで通販事業者向けECパッケージの開発 
 – アドテクの会社で管理画面や配信サーバーの開発 
 – リブセンスで開発したりマネージャーやったり 

  2. 作った機能
 • URL(SP版で先行リリース)
 – https://jobtalk.jp/companies/4075 
 – 現在A/Bテスト中なので見れない人いるかも 
 –

    QRコードは↓
 
 
 
 
 • プレスリリースはこちら
 – https://prtimes.jp/main/html/rd/p/000000156.0000154 43.html

  3. 出力フォーマットが統一されない
 • お困りごと
 – 普通の文書で出力される場合と箇条書きで出力される場合がある
 – 良い点と悪い点が脈絡なく出力される
 • やったこと
 –

    基本に忠実に、プロンプトエンジニアリングする
 • 良い点と改善点を分けて、箇条書きで出力しろって言う
 • プロンプトで要約結果の返却方式を明示的に指定する

  4. 入力したデータの要約でも捏造・架空情報には注意
 • お困りごと
 – ChatGPTの仕組み上、架空情報が生成される可能性もある
 • 特に情報が少ない項目については発生しやすい可能性がある
 • やったこと
 –

    情報が少ないカテゴリ・会社についてはそもそも要約しない
 – プロンプトで「ただし、良い点がない場合はなしと回答してください」などを加 えることで予防
 – 中身を見る限り、これで明らかに架空・捏造な要約とかは出してなさそう
 • 特に本番利用するにあたっては公式が出してるSafety best practicesをちゃんと 読もう
 – OpenAIは可能な限り、アウトプットを実際に使用する前に、人間がレビュー することをお勧めしている