在 ChatGPT Work 中使用 Voice


🏦 台灣Pay 銀行轉帳 💙 PayPal
示範 ChatGPT Voice 如何邊對話邊在背景跨 app 處理多項工作任務
- 00:00 使用者開口請 ChatGPT 幫忙處理待辦事項,並順便放音樂
- 01:31 範例中,Voice 把 Slack 上的請求與使用者的行事曆結合起來
- 03:01 下次需要 ChatGPT 時不必停下手邊工作,只要開始對話、繼續工作即可
💡 你可以怎麼用:下次整理待辦或安排出差時,可以用 Voice 邊講邊請它查行事曆、準備機票飯店,但要明講「停在付款前、不要下訂」,最後由自己按確認。
看全部 26 條重點
🧑🏫 這支是 OpenAI 示範怎麼在工作時用 ChatGPT Voice。ChatGPT Voice 是用講話跟 ChatGPT 持續對話的功能,它也能在背景幫你做事。影片裡一個人只靠開口講,就同時完成活動點子發想、做簡報、查行程、準備機票飯店。值得看的是兩件事:一是「講一句,事情就在背景跑」的工作方式,二是怎麼讓 AI 在付錢前停手。
- 00:00 使用者開口請 ChatGPT 幫忙處理待辦事項,並順便放音樂↳ 她一開口就交代兩件事:幫忙處理待辦、順便放音樂。重點是用講的就能開始,不用先打字或切視窗。
- 00:00 ChatGPT 看到待辦清單共四項:Dev Day activation idea、developer homepage copy、weekly DX agenda、conference speaker shortlist↳ 清單上有四件:Dev Day(OpenAI 的開發者大會)的現場活動點子、開發者首頁文案、每週 DX(開發者體驗)會議議程、研討會講者名單。
- 00:00 使用者選擇先處理 Dev Day activation ideas,並請 ChatGPT 一起 brainstorm↳ 她挑一件先做,而且不是叫 ChatGPT 自己寫完交差,是請它一起 brainstorm(腦力激盪,你一言我一語丟點子)。
- 00:00 點子一:用 Game Boy 控制 Codex↳ 第一個點子:拿 Game Boy(任天堂的經典掌上遊戲機)去操作 Codex(OpenAI 幫人寫程式的 AI 工具)。
- 00:00 點子二:設一個攤位,讓大家用 ChatGPT 和 image generation 設計客製 T 恤,並現場印出來↳ 第二個點子:在會場擺攤,讓來賓用 ChatGPT 加 image generation(用文字描述讓 AI 畫出圖)設計自己的 T 恤,當場印好。
- 00:30 點子三:做一個協作型的活動,讓每個人都參與同一個遊戲↳ 第三個點子:辦一個大家一起玩的活動,所有人加入同一個遊戲,不是各玩各的。
- 00:30 使用者請 ChatGPT 開始製作視覺化的 pitch deck,ChatGPT 表示會先做第一版↳ 她接著請它把點子做成有圖的 pitch deck(提案簡報)。它說先做第一版,意思是先出草稿,之後再改。
- 00:30 Dictation 與 ChatGPT Voice 的差別:Dictation 是把說的話轉成 prompt;Voice 則是陪著你工作、持續進行的對話↳ Dictation(語音輸入)只是把你講的話轉成 prompt(給 AI 的指令文字),講完就結束。Voice 則是一直開著的對話,你邊做事它邊陪你聊。
- 00:30 Voice 能在你要求時看到螢幕、和你討論手上的工作,並在你切換 app 時繼續在背景運作↳ 你開口要求時它才會看螢幕,然後針對你手上的東西討論。你切到別的 app,它不會中斷,還在背景繼續做。
- 01:00 透過 Voice 可以開始新任務,也可以查看既有任務的進度↳ 在同一個對話裡,可以丟新工作給它,也可以問它「剛才那件做到哪了」。
- 01:00 可從 real-time voice 按鈕或 hotkey 開始對話;啟動後 ChatGPT 會跟著你在不同 app 之間移動↳ 啟動方式有兩種:按 real-time voice(即時語音)按鈕,或按 hotkey(鍵盤快速鍵)。開了之後,你換到哪個 app,它都跟著。
- 01:00 範例:使用者問「你看得到我在看什麼嗎」,ChatGPT 讀出 DX 團隊的 Paris off-site 是 8 月 26 日至 28 日,週三早上開始、週五下午結束↳ 她問「你看得到我在看什麼嗎」,它就讀出畫面上的資訊:DX 團隊在巴黎的 off-site(團隊到外地集合開會)是 8/26–28,週三早上到週五下午。
- 01:00 Voice 能運用螢幕上的 context 和 connected apps,也能在背景收集任務所需的其他 context↳ 它可用的 context(完成任務需要的背景資料)有三個來源:你的螢幕、你授權連上的 connected apps(已連接的 app),以及它自己在背景去找的。
- 01:31 範例中,Voice 把 Slack 上的請求與使用者的行事曆結合起來↳ 例子裡,它把 Slack(公司常用的工作聊天軟體)上別人提出的請求,和她的行事曆放在一起看。
- 01:31 Voice 也能使用 Gmail 或其他 connected tools 的 context,使用者不必自己逐一打開每個 app↳ Gmail 或其他已連接的工具也一樣,資料由它去翻,你不用一個一個打開查。
- 01:31 ChatGPT 問要週五還是週日回來,使用者想留下來過週末,並請它查週一、週二的行程↳ 它主動問她要週五還是週日回來。她想留在那邊過週末,就請它查週一、週二有沒有排事情。
- 01:31 查詢結果:8 月 31 日週一沒有任何行程;9 月 1 日週二下午 4 點前都空著↳ 查到的結果:8/31 週一整天空白,9/1 週二下午 4 點前也都沒事。
- 01:31 週二下午 4 點有 marketing and legal office hours,另外還有 AI tooling demos 和 happy hour;ChatGPT 指出若週日回來時間很充裕↳ 週二 4 點有行銷和法務的 office hours(固定開放時段,可以去找人問問題),還有 AI 工具展示和 happy hour(下班後的小聚)。它提醒她,週日回來時間很夠。
- 02:01 使用者請它在 Navan 準備機票和飯店(週二抵達、週日下午或傍晚回來),並交代不要訂,只做到最後確認步驟↳ 她請它在 Navan(訂機票、訂飯店的商務差旅平台)排好行程:週二到、週日下午或傍晚回。她特別交代不要真的訂,停在最後確認那一步。
- 02:01 ChatGPT 回應會把一切準備好,並在任何付款前停下↳ 它答應全部準備好,但只要遇到付錢的步驟就一定停下來。花錢的決定權留在她手上。
- 02:01 ChatGPT 告知 pitch deck 已完成,使用者請它在 Chrome 打開↳ 這時它回報簡報做好了,她請它用 Chrome 瀏覽器打開來看。
- 02:01 使用者可以在任務進行時先做別的事;任務完成時 Voice 會回報,由使用者決定要調整方向、分享,或推進到下一步↳ 任務在跑的時候,你可以先做別的事。做完它會開口告訴你,接下來要改方向、分享出去,還是往下一步走,由你決定。
- 02:31 使用者請 ChatGPT 透過 Slack 把 deck 傳給 Romain,ChatGPT 回報 Dev Day pitch ideas deck 已送出↳ 她請它用 Slack 把簡報傳給 Romain,它傳完就回報已送出,她不用自己開 Slack 找人貼檔案。
- 02:31 Paris 行程已在 Navan 準備好,沒有訂位也沒有扣款;機票和飯店開在兩個分頁,等使用者最後自己點擊確認↳ 巴黎行程在 Navan 已經準備好,沒下訂也沒扣款。機票、飯店各開一個分頁,最後那一下由她自己按確認。
- 02:31 使用者可以只維持一個對話,邊講需要做的事,邊把工作派給對應的任務,同時保持專注↳ 整段工作只用一個對話:想到什麼就講,它把事情分派給對應的任務去做,你的注意力不會被切得零零碎碎。
- 03:01 下次需要 ChatGPT 時不必停下手邊工作,只要開始對話、繼續工作即可↳ 下次要用 ChatGPT,不必停下手邊的事去開視窗打字,直接開口講,然後繼續做你的事。
📘 術語
ChatGPT Voice(ChatGPT 語音):陪著你工作的持續對話,可在要求時看螢幕,也能在背景持續處理工作
Dictation(聽寫/語音輸入):把你說的話轉成 prompt
prompt(提示詞):字幕未解釋,只說 Dictation 會把說的話轉成 prompt
real-time voice button(即時語音按鈕):開始 Voice 對話的方式之一
hotkey(快速鍵):開始 Voice 對話的另一種方式
on-screen context(螢幕上的脈絡資訊):Voice 可運用的螢幕畫面內容,例如讀出 off-site 的日期
connected apps / connected tools(已連結的 app/工具):Voice 可從中取得 context,例如 Slack、行事曆、Gmail,不必自己逐一打開
context(脈絡資訊):Voice 可在背景收集的任務相關資訊
Navan(Navan(服務名稱)):影片中用來準備機票與飯店,停在最後確認步驟、不下單
pitch deck(提案簡報):影片中 ChatGPT 為 Dev Day 點子製作的視覺化簡報
image generation(圖像生成):字幕未解釋,出現在「用 ChatGPT 和 image generation 設計客製 T 恤」的點子中
Codex(Codex):字幕未解釋,出現在「用 Game Boy 控制 Codex」的點子中
Dev Day(Dev Day):字幕未解釋,影片中是在發想 Dev Day 的 activation 點子
DX(DX):字幕未解釋全名,出現在 weekly DX agenda、DX team
off-site(外地團隊活動):字幕未解釋,範例中 DX 團隊的 off-site 在 Paris,8 月 26 日至 28 日
Dictation(聽寫/語音輸入):把你說的話轉成 prompt
prompt(提示詞):字幕未解釋,只說 Dictation 會把說的話轉成 prompt
real-time voice button(即時語音按鈕):開始 Voice 對話的方式之一
hotkey(快速鍵):開始 Voice 對話的另一種方式
on-screen context(螢幕上的脈絡資訊):Voice 可運用的螢幕畫面內容,例如讀出 off-site 的日期
connected apps / connected tools(已連結的 app/工具):Voice 可從中取得 context,例如 Slack、行事曆、Gmail,不必自己逐一打開
context(脈絡資訊):Voice 可在背景收集的任務相關資訊
Navan(Navan(服務名稱)):影片中用來準備機票與飯店,停在最後確認步驟、不下單
pitch deck(提案簡報):影片中 ChatGPT 為 Dev Day 點子製作的視覺化簡報
image generation(圖像生成):字幕未解釋,出現在「用 ChatGPT 和 image generation 設計客製 T 恤」的點子中
Codex(Codex):字幕未解釋,出現在「用 Game Boy 控制 Codex」的點子中
Dev Day(Dev Day):字幕未解釋,影片中是在發想 Dev Day 的 activation 點子
DX(DX):字幕未解釋全名,出現在 weekly DX agenda、DX team
off-site(外地團隊活動):字幕未解釋,範例中 DX 團隊的 off-site 在 Paris,8 月 26 日至 28 日
✏️ 小考一題
根據影片,Dictation 和 ChatGPT Voice 的差別是什麼?
A. Dictation 能串接 Slack 和 Gmail;Voice 只能用在行事曆B. Dictation 能看到你的螢幕;Voice 只能聽聲音C. Dictation 把說的話轉成 prompt;Voice 是陪著你工作、持續進行的對話D. Dictation 可以在背景處理任務;Voice 必須停在同一個 app看答案
答案:C。[00:30] 字幕說 Dictation 把說的話轉成 prompt,Voice 是持續進行、陪著使用者工作的對話,能在要求時看螢幕,並在切換 app 時於背景繼續工作。
💛 覺得有幫助?支持一下


課本免費、沒有廣告,支持與否都能照常讀 🐰