·如果用戶發(fā)送一張冰箱內(nèi)部的照片，AI虛擬志愿者不僅能夠正確識(shí)別里面的內(nèi)容，還可以推斷和分析這些內(nèi)容可以做什么菜，并提供這些食材的食譜。

學(xué)習(xí)法語的用戶可以假裝在巴黎咖啡館點(diǎn)咖啡，或者與人工智能扮演的人討論未來的假期計(jì)劃。完成對(duì)話后，用戶將獲得人工智能對(duì)其準(zhǔn)確性的反饋。

人工智能研究組織OpenAI于3月14日發(fā)布了其大型語言模型GPT-4的最新版本。GPT-4是一個(gè)多模態(tài)大型模型，可以接受圖像和文本輸入。與GPT-3相比，它可以更準(zhǔn)確地解決難題，更具創(chuàng)造性和協(xié)作性，可以處理超過25,000字的文本。

在正式發(fā)布之前，GPT-4已經(jīng)提供了對(duì)微軟New Bing的支持。此外，還有很多日常應(yīng)用選擇“嘗試”并與GPT-4合作，包括教育學(xué)習(xí)軟件、殘疾人助手、支付平臺(tái)等，展示了這一新大模式的更多應(yīng)用可能性。

為視障人士提供圖像信息指導(dǎo)

Be My Eyes 成立于2012 年，是一家丹麥初創(chuàng)公司，致力于為盲人或弱視人士提供技術(shù)援助。該公司將視力障礙人士與志愿者聯(lián)系起來，幫助他們完成日常生活任務(wù)，例如導(dǎo)航到目的地。

人工智能虛擬志愿者幫助視障人士理解圖片信息。

在GPT-4 的支持下，Be My Eyes 應(yīng)用程序現(xiàn)在配備了人工智能虛擬志愿者，可以像人類志愿者一樣幫助殘疾人。該初創(chuàng)公司分享了一個(gè)例子，視障人士能夠訪問軌道交通系統(tǒng)中的人工智能導(dǎo)航，了解自己在地圖上的位置，并獲得到達(dá)目的地的逐步提示。

新版本的Be My Eyes 應(yīng)用程序首次集成了GPT-4 多模式功能，不僅可以實(shí)現(xiàn)清晰的聊天，還可以檢查和理解用戶提供的圖像。通過該應(yīng)用程序，用戶可以將圖像發(fā)送給人工智能驅(qū)動(dòng)的虛擬志愿者，后者將回答有關(guān)圖像的任何問題，并為各種任務(wù)提供即時(shí)視覺幫助。

例如，如果用戶發(fā)送冰箱內(nèi)部的照片，虛擬志愿者不僅能夠正確識(shí)別其中的內(nèi)容，還能夠推斷和分析可以用這些內(nèi)容制作哪些菜肴。然后，該工具還可以提供這些食材的食譜，發(fā)送有關(guān)如何制作菜肴的說明。

一位Be My Eyes 用戶演示了該應(yīng)用程序如何幫助她完成一系列實(shí)時(shí)操作。新機(jī)器人可以用來描述衣服的外觀、識(shí)別植物、閱讀地圖、翻譯標(biāo)簽、引導(dǎo)她到健身房的某個(gè)跑步機(jī)，并告訴她在自動(dòng)售貨機(jī)上按哪個(gè)按鈕。

但目前，容易出錯(cuò)的人工智能還很難完全取代人類志愿者。

新功能正在與一小群Be My Eyes 用戶進(jìn)行封閉測(cè)試，并將在未來幾周內(nèi)擴(kuò)展。 “我們希望在未來幾個(gè)月內(nèi)廣泛提供虛擬志愿服務(wù)，”該團(tuán)隊(duì)寫道，“就像我們現(xiàn)有的志愿者服務(wù)一樣，這個(gè)工具將對(duì)所有使用免費(fèi)會(huì)員Be My Eyes 應(yīng)用程序的盲人和低視力用戶有用?！?

AI幫你學(xué)英語

語言學(xué)習(xí)軟件提供商Duolingo 于3 月14 日宣布，正在為在iOS 操作系統(tǒng)上學(xué)習(xí)西班牙語和法語的英語用戶推出新的“Duolingo Max”訂閱，該訂閱由GPT-4 新功能提供支持。該公司還計(jì)劃在短期內(nèi)將新功能推廣到更多課程和平臺(tái)。

Duolingo Max 服務(wù)接口。

Duolingo Max 的費(fèi)用為每月29.99 美元或每年167.99 美元，并解鎖兩項(xiàng)新的人工智能功能：“角色扮演”和“解釋我的答案”。

其中，“角色扮演”功能提供了AI聊天機(jī)器人，讓用戶可以與AI練習(xí)現(xiàn)實(shí)世界的對(duì)話技巧。得益于GPT-4，機(jī)器人的響應(yīng)和交互能力將非常強(qiáng)大，可以引導(dǎo)用戶完成不同場(chǎng)景下的對(duì)話。例如，用戶可以假裝在巴黎咖啡館點(diǎn)咖啡，或者與人工智能扮演的人討論未來的假期計(jì)劃。完成對(duì)話后，用戶將獲得人工智能對(duì)其準(zhǔn)確性的反饋。

在Duolingo 上使用AI 練習(xí)外語。

Duolingo 表示，人類專家對(duì)用戶在角色扮演過程中所處的場(chǎng)景進(jìn)行編程，并確保最初的場(chǎng)景提示與用戶在課程中學(xué)到的內(nèi)容相同。專家們還會(huì)在聊天中寫下初始消息，并告訴AI 模型從哪里開始對(duì)話。

“解釋我的答案”功能可以讓用戶更深入地了解他們?cè)诰毩?xí)中給出的答案。用戶可以在完成某些練習(xí)后點(diǎn)擊一個(gè)按鈕，開始與Duolingo 的吉祥物——一只可愛的卡通綠鳥聊天，了解為什么答案是對(duì)或錯(cuò)的，并可以要求AI 提供示例或進(jìn)一步解釋。該公司表示，該功能旨在幫助用戶在犯錯(cuò)誤但不知道原因時(shí)提供幫助。

Duolingo 表示，人工智能將不斷審查這兩個(gè)功能中生成的答案，以確保它們是正確的。當(dāng)微軟今年早些時(shí)候?qū)PT-4 納入Bing 時(shí)，用戶經(jīng)常收到令人不安的回應(yīng)。 Duolingo 可能希望防止其聊天機(jī)器人發(fā)生類似情況，因此Duolingo 表示將確保AI 的語氣有趣且令人鼓舞。

GPT-4 比人類編寫的摘要更好地總結(jié)

Stripe 是一個(gè)流行的支付網(wǎng)關(guān)平臺(tái)，可幫助企業(yè)和個(gè)人處理國(guó)際支付。該公司已經(jīng)使用GPT-3 來執(zhí)行分發(fā)票證和總結(jié)用戶問題等任務(wù)，現(xiàn)在開始使用GPT-4。

Stripe 表示，GPT-4 可以比人工審閱者更好地了解用戶的業(yè)務(wù)并更好地掃描網(wǎng)站以獲取工作摘要。該公司的開發(fā)人員表示，更新后的模型可以輕松理解用戶的問題、突出顯示重要部分、總結(jié)解決方案，甚至閱讀非常詳細(xì)的文檔。

該公司還使用GPT-4 分析社交媒體Discord 上帖子的語法，以標(biāo)記可疑帳戶、掃描入站通信并識(shí)別協(xié)同攻擊。

Stripe 應(yīng)用機(jī)器學(xué)習(xí)團(tuán)隊(duì)的產(chǎn)品負(fù)責(zé)人Eugene Mann 表示：“GPT-4 是一個(gè)游戲規(guī)則改變者。它開辟了很多領(lǐng)域?！彼f，許多企業(yè)，例如夜總會(huì)，都將其網(wǎng)站保持神秘。因此需要大量搜索和點(diǎn)擊才能弄清楚發(fā)生了什么。現(xiàn)在，Stripe 使用GPT-4 掃描這些網(wǎng)站并提供優(yōu)于人工編寫的片段的片段。 “當(dāng)我們開始檢查結(jié)果時(shí)，我們意識(shí)到，‘等一下，人類錯(cuò)了，模型是正確的，’”曼恩說。 “GPT-4 基本上比人類審閱者更好?！?

為學(xué)生定制個(gè)性化課程

可汗學(xué)院是一個(gè)非營(yíng)利性教育組織，其使命是為任何地方的任何人提供免費(fèi)的世界一流的教育。該組織為各個(gè)年齡段的學(xué)生提供數(shù)千門數(shù)學(xué)、科學(xué)和人文課程。

3 月14 日，可汗學(xué)院宣布將使用GPT-4 為其人工智能助手Khanmigo 提供支持，該助手既充當(dāng)學(xué)生的虛擬導(dǎo)師，又充當(dāng)教師的課堂助手。

Khan Academy 將于2022 年開始測(cè)試最新版本的OpenAI 語言模型，并將首先向有限數(shù)量的參與者提供Khanmigo 試點(diǎn)項(xiàng)目，并邀請(qǐng)公眾加入候補(bǔ)名單。早期參與者會(huì)觀察到錯(cuò)誤，尤其是數(shù)學(xué)問題中的錯(cuò)誤，并標(biāo)記它們以供糾正。

GPT-4 的主要功能之一是能夠理解自由形式的問題和提示。此功能為可汗學(xué)院提供了最關(guān)鍵的支持：向每個(gè)學(xué)生提出個(gè)性化問題以促進(jìn)更深入的學(xué)習(xí)。

可汗學(xué)院表示，開發(fā)人員目前正在測(cè)試幫助教師編寫課堂提示和教材，或總結(jié)計(jì)算機(jī)編程課程中某些要點(diǎn)的功能。

“我們認(rèn)為GPT-4 正在開辟教育的新領(lǐng)域，”可汗學(xué)院首席學(xué)習(xí)官Kristen DiCerbo 說。 “很多人長(zhǎng)期以來一直夢(mèng)想著這項(xiàng)技術(shù)。它具有變革性，我們計(jì)劃負(fù)責(zé)任地對(duì)其進(jìn)行測(cè)試，以探索它是否可以有效地用于學(xué)習(xí)和教學(xué)?！?