·如果用戶發(fā)送冰箱內(nèi)部的照片，AI虛擬志愿者不僅能夠正確識(shí)別里面的東西，還能推斷和分析可以用這些東西做什么菜，并為這些食材提供食譜。

(資料圖片僅供參考)

·學(xué)習(xí)法語的用戶可以假裝在巴黎的一家咖啡館點(diǎn)咖啡，或者與AI扮演的某個(gè)人討論未來的假期計(jì)劃。完成對(duì)話后，用戶將獲得有關(guān)其準(zhǔn)確性的AI反饋。

人工智能研究機(jī)構(gòu)OpenAI 3月14日發(fā)布了其大型語言模型的最新版本GPT-4。GPT-4是一個(gè)多模態(tài)大模型，可以接受圖像和文本輸入，相比GPT-3能夠更準(zhǔn)確地解決難題，更具創(chuàng)造性和協(xié)作性，可處理超過25000個(gè)單詞的文本。

在正式發(fā)布前，GPT-4就已為微軟公司的新必應(yīng)（New Bing）提供了支持。此外，還有多款日常應(yīng)用選擇“嘗鮮”與GPT-4合作，包括教育學(xué)習(xí)軟件、殘障人士助手和支付平臺(tái)，展示了這一新的大模型在應(yīng)用上更多的可能性。

為有視覺障礙人士提供圖像信息指導(dǎo)

成立于2012年的Be My Eyes是一家丹麥初創(chuàng)公司，致力于為盲人或視力低下的人提供技術(shù)幫助。該公司協(xié)助有視覺障礙的人與志愿者聯(lián)系，志愿者可以幫助他們完成日常生活任務(wù)，比如導(dǎo)航到目的地。

人工智能虛擬志愿者可幫助視障人士了解圖片信息。

在GPT-4的支持下，Be My Eyes應(yīng)用程序現(xiàn)在擁有一個(gè)人工智能虛擬志愿者，它可以像人類志愿者一樣幫助殘障人士。這家初創(chuàng)公司分享了一個(gè)例子，視障人士能夠在軌道交通系統(tǒng)中獲取AI導(dǎo)航，以了解他們?cè)诘貓D上的位置，并逐步獲得提示到達(dá)目的地。

Be My Eyes應(yīng)用程序的新版本是第一個(gè)集成GPT-4多模態(tài)功能的應(yīng)用程序，不僅能夠清晰地聊天，還能夠檢查和理解用戶提供的圖像。用戶可以通過該應(yīng)用程序?qū)D像發(fā)送給人工智能虛擬志愿者，該志愿者將回答有關(guān)該圖像的任何問題，并為各種任務(wù)提供即時(shí)的視覺幫助。

例如，如果用戶發(fā)送他們冰箱內(nèi)部的照片，虛擬志愿者不僅能夠正確識(shí)別里面的東西，還能推斷和分析可以用這些東西做什么菜。然后，該工具還可以為這些食材提供食譜，發(fā)送有關(guān)如何制作菜肴的指南。

Be My Eyes的一位用戶展示了該應(yīng)用程序如何幫助她完成一系列實(shí)時(shí)操作。新的機(jī)器人可以用來描述裙子的外觀、識(shí)別植物、閱讀地圖、翻譯標(biāo)簽、引導(dǎo)她去健身房的某臺(tái)跑步機(jī)，并告訴她在自動(dòng)售貨機(jī)上按哪個(gè)按鈕。

但目前，容易犯錯(cuò)的AI還難以完全取代人類志愿者。

這項(xiàng)新功能正在Be My Eyes的小部分用戶中進(jìn)行封閉測(cè)試，將在未來幾周擴(kuò)大測(cè)試范圍。“我們希望在未來幾個(gè)月內(nèi)廣泛地提供虛擬志愿者。”該團(tuán)隊(duì)寫道，“而且就像我們現(xiàn)有的志愿者服務(wù)一樣，這個(gè)工具對(duì)所有使用Be My Eyes應(yīng)用程序的盲人和低視力成員免費(fèi)。”

AI陪你學(xué)習(xí)英語

語言學(xué)習(xí)軟件提供商多鄰國(guó)（Duolingo）3月14日宣布，該公司正在推出一個(gè)新的“Duolingo Max”訂閱，為在iOS操作系統(tǒng)上學(xué)習(xí)西班牙語和法語的英語用戶提供由GPT-4支持的新功能。該公司還計(jì)劃短期內(nèi)將新功能推廣到更多課程和平臺(tái)。

Duolingo Max服務(wù)界面。

Duolingo Max每月收費(fèi)29.99美元或每年167.99美元，可解鎖兩項(xiàng)新的人工智能功能——“角色扮演”和“解釋我的答案”。

其中，“角色扮演”功能提供了一個(gè)AI聊天機(jī)器人，允許用戶與AI練習(xí)真實(shí)世界中的對(duì)話技巧。得益于GPT-4，機(jī)器人的響應(yīng)與互動(dòng)能力將十分強(qiáng)大，可指導(dǎo)用戶完成不同的場(chǎng)景對(duì)話。例如，用戶可以假裝在巴黎的一家咖啡館點(diǎn)咖啡，或者與AI扮演的某個(gè)人討論未來的假期計(jì)劃。完成對(duì)話后，用戶將獲得有關(guān)其準(zhǔn)確性的AI反饋。

在多鄰國(guó)上與人工智能練習(xí)外語。

多鄰國(guó)表示，人類專家會(huì)編寫用戶在角色扮演中所處的場(chǎng)景，并確保最開始的場(chǎng)景提示與用戶在其課程中學(xué)到的一樣。專家們還在聊天中寫下初始消息，并告訴AI模型從哪里開始對(duì)話。

“解釋我的答案”功能則讓用戶可以更深層次了解自己在練習(xí)中給出的答案。用戶可以在完成某些練習(xí)后點(diǎn)擊一個(gè)按鈕，開始與多鄰國(guó)的吉祥物、一只可愛的卡通綠色鳥聊天，了解答案正確或錯(cuò)誤的原因，并可以要求AI提供示例或進(jìn)一步說明。該公司表示，該功能旨在在用戶犯錯(cuò)卻不知道原因時(shí)提供幫助。

多鄰國(guó)表示，AI會(huì)不斷審查這兩項(xiàng)功能中生成的回答，以確保答案是正確的。當(dāng)微軟今年早些時(shí)候?qū)PT-4納入必應(yīng)時(shí)，用戶經(jīng)常收到令人不安的回答。多鄰國(guó)可能希望防止類似情況發(fā)生在其聊天機(jī)器人上，因此，多鄰國(guó)表示將確保AI的語氣是有趣的、鼓勵(lì)性的。

GPT-4總結(jié)的摘要優(yōu)于人撰寫的摘要

Stripe是一個(gè)流行的支付網(wǎng)關(guān)平臺(tái)，幫助企業(yè)和個(gè)人處理國(guó)際支付事務(wù)。該公司已經(jīng)在使用GPT-3完成分發(fā)票據(jù)和總結(jié)用戶問題等任務(wù)，目前開始使用GPT-4。

Stripe表示，GPT-4可以更好地了解用戶業(yè)務(wù)，并比人工審查人員更好地掃描網(wǎng)站以獲得工作摘要。該公司的開發(fā)人員說，更新后的模型可以很容易地理解用戶的問題，突出重要的部分，總結(jié)解決方案，甚至閱讀十分詳細(xì)的文檔。

該公司還使用GPT-4分析社交媒體Discord上帖子的語法，以標(biāo)記可疑賬戶，掃描入站通信并識(shí)別協(xié)同攻擊。

Stripe應(yīng)用機(jī)器學(xué)習(xí)團(tuán)隊(duì)的產(chǎn)品負(fù)責(zé)人尤金·曼恩（Eugene Mann）表示：“GPT-4改變了游戲規(guī)則。它開辟了很多領(lǐng)域。”他說，許多企業(yè)，比如夜總會(huì)都會(huì)保持其網(wǎng)站的神秘，因此需要大量搜索和點(diǎn)擊才能了解發(fā)生了什么。現(xiàn)在，Stripe使用GPT-4掃描這些網(wǎng)站并提供摘要，這些摘要的表現(xiàn)優(yōu)于人撰寫的摘要。“當(dāng)我們開始檢查結(jié)果時(shí)，我們意識(shí)到，‘等一下，人類錯(cuò)了，模型是正確的。’”曼恩說，“GPT-4基本上比人類評(píng)論員好。”

為學(xué)生定制個(gè)性化課程

可汗學(xué)院（Khan Academy）是一家非營(yíng)利性教育組織，其使命是為任何地方的任何人提供免費(fèi)、世界一流的教育。該組織為所有年齡段的學(xué)生提供數(shù)千門數(shù)學(xué)、科學(xué)和人文學(xué)科課程。

3月14日，可汗學(xué)院宣布，它將使用GPT-4為其人工智能驅(qū)動(dòng)的助手Khanmigo提供動(dòng)力，Khanmigo既是學(xué)生的虛擬導(dǎo)師，也是教師的課堂助手。

可汗學(xué)院2022年開始測(cè)試OpenAI語言模型的最新版本，并將首先向數(shù)量有限的參與者提供Khanmigo試點(diǎn)計(jì)劃，公眾被邀請(qǐng)加入候補(bǔ)名單。早期的參與者將觀察錯(cuò)誤，特別是在數(shù)學(xué)問題中，并標(biāo)記它們以進(jìn)行糾正。

GPT-4的主要能力之一是能夠理解自由形式的問題和提示。這種能力為可汗學(xué)院提供了最關(guān)鍵的支持：向每個(gè)學(xué)生提出個(gè)性化的問題，以促進(jìn)更深入的學(xué)習(xí)。

可汗學(xué)院表示，目前開發(fā)人員在測(cè)試一些功能，幫助教師編寫課堂提示和教學(xué)材料，或是在計(jì)算機(jī)編程課程中總結(jié)某些特定要點(diǎn)。

可汗學(xué)院首席學(xué)習(xí)官克里斯汀·迪塞爾博（Kristen DiCerbo）表示，“我們認(rèn)為GPT-4正在為教育開辟新的領(lǐng)域。”“長(zhǎng)期以來，很多人都?jí)粝胫@種技術(shù)。這是變革性的，我們計(jì)劃負(fù)責(zé)任地進(jìn)行測(cè)試，以探索它是否可以有效地用于學(xué)習(xí)和教學(xué)。”

關(guān)鍵詞：