·如果用户发送一张冰箱内部的照片，AI虚拟志愿者不仅能够正确识别里面的内容，还可以推断和分析这些内容可以做什么菜，并提供这些食材的食谱。

学习法语的用户可以假装在巴黎咖啡馆点咖啡，或者与人工智能扮演的人讨论未来的假期计划。完成对话后，用户将获得人工智能对其准确性的反馈。

人工智能研究组织OpenAI于3月14日发布了其大型语言模型GPT-4的最新版本。GPT-4是一个多模态大型模型，可以接受图像和文本输入。与GPT-3相比，它可以更准确地解决难题，更具创造性和协作性，可以处理超过25,000字的文本。

在正式发布之前，GPT-4已经提供了对微软New Bing的支持。此外，还有很多日常应用选择“尝试”并与GPT-4合作，包括教育学习软件、残疾人助手、支付平台等，展示了这一新大模式的更多应用可能性。

为视障人士提供图像信息指导

Be My Eyes 成立于2012 年，是一家丹麦初创公司，致力于为盲人或弱视人士提供技术援助。该公司将视力障碍人士与志愿者联系起来，帮助他们完成日常生活任务，例如导航到目的地。

人工智能虚拟志愿者帮助视障人士理解图片信息。

在GPT-4 的支持下，Be My Eyes 应用程序现在配备了人工智能虚拟志愿者，可以像人类志愿者一样帮助残疾人。该初创公司分享了一个例子，视障人士能够访问轨道交通系统中的人工智能导航，了解自己在地图上的位置，并获得到达目的地的逐步提示。

新版本的Be My Eyes 应用程序首次集成了GPT-4 多模式功能，不仅可以实现清晰的聊天，还可以检查和理解用户提供的图像。通过该应用程序，用户可以将图像发送给人工智能驱动的虚拟志愿者，后者将回答有关图像的任何问题，并为各种任务提供即时视觉帮助。

例如，如果用户发送冰箱内部的照片，虚拟志愿者不仅能够正确识别其中的内容，还能够推断和分析可以用这些内容制作哪些菜肴。然后，该工具还可以提供这些食材的食谱，发送有关如何制作菜肴的说明。

一位Be My Eyes 用户演示了该应用程序如何帮助她完成一系列实时操作。新机器人可以用来描述衣服的外观、识别植物、阅读地图、翻译标签、引导她到健身房的某个跑步机，并告诉她在自动售货机上按哪个按钮。

但目前，容易出错的人工智能还很难完全取代人类志愿者。

新功能正在与一小群Be My Eyes 用户进行封闭测试，并将在未来几周内扩展。 “我们希望在未来几个月内广泛提供虚拟志愿服务，”该团队写道，“就像我们现有的志愿者服务一样，这个工具将对所有使用免费会员Be My Eyes 应用程序的盲人和低视力用户有用。”

AI帮你学英语

语言学习软件提供商Duolingo 于3 月14 日宣布，正在为在iOS 操作系统上学习西班牙语和法语的英语用户推出新的“Duolingo Max”订阅，该订阅由GPT-4 新功能提供支持。该公司还计划在短期内将新功能推广到更多课程和平台。

Duolingo Max 服务接口。

Duolingo Max 的费用为每月29.99 美元或每年167.99 美元，并解锁两项新的人工智能功能：“角色扮演”和“解释我的答案”。

其中，“角色扮演”功能提供了AI聊天机器人，让用户可以与AI练习现实世界的对话技巧。得益于GPT-4，机器人的响应和交互能力将非常强大，可以引导用户完成不同场景下的对话。例如，用户可以假装在巴黎咖啡馆点咖啡，或者与人工智能扮演的人讨论未来的假期计划。完成对话后，用户将获得人工智能对其准确性的反馈。

在Duolingo 上使用AI 练习外语。

Duolingo 表示，人类专家对用户在角色扮演过程中所处的场景进行编程，并确保最初的场景提示与用户在课程中学到的内容相同。专家们还会在聊天中写下初始消息，并告诉AI 模型从哪里开始对话。

“解释我的答案”功能可以让用户更深入地了解他们在练习中给出的答案。用户可以在完成某些练习后点击一个按钮，开始与Duolingo 的吉祥物——一只可爱的卡通绿鸟聊天，了解为什么答案是对或错的，并可以要求AI 提供示例或进一步解释。该公司表示，该功能旨在帮助用户在犯错误但不知道原因时提供帮助。

Duolingo 表示，人工智能将不断审查这两个功能中生成的答案，以确保它们是正确的。当微软今年早些时候将GPT-4 纳入Bing 时，用户经常收到令人不安的回应。 Duolingo 可能希望防止其聊天机器人发生类似情况，因此Duolingo 表示将确保AI 的语气有趣且令人鼓舞。

GPT-4 比人类编写的摘要更好地总结

Stripe 是一个流行的支付网关平台，可帮助企业和个人处理国际支付。该公司已经使用GPT-3 来执行分发票证和总结用户问题等任务，现在开始使用GPT-4。

Stripe 表示，GPT-4 可以比人工审阅者更好地了解用户的业务并更好地扫描网站以获取工作摘要。该公司的开发人员表示，更新后的模型可以轻松理解用户的问题、突出显示重要部分、总结解决方案，甚至阅读非常详细的文档。

该公司还使用GPT-4 分析社交媒体Discord 上帖子的语法，以标记可疑帐户、扫描入站通信并识别协同攻击。

Stripe 应用机器学习团队的产品负责人Eugene Mann 表示：“GPT-4 是一个游戏规则改变者。它开辟了很多领域。”他说，许多企业，例如夜总会，都将其网站保持神秘。因此需要大量搜索和点击才能弄清楚发生了什么。现在，Stripe 使用GPT-4 扫描这些网站并提供优于人工编写的片段的片段。 “当我们开始检查结果时，我们意识到，‘等一下，人类错了，模型是正确的，’”曼恩说。 “GPT-4 基本上比人类审阅者更好。”

为学生定制个性化课程

可汗学院是一个非营利性教育组织，其使命是为任何地方的任何人提供免费的世界一流的教育。该组织为各个年龄段的学生提供数千门数学、科学和人文课程。

3 月14 日，可汗学院宣布将使用GPT-4 为其人工智能助手Khanmigo 提供支持，该助手既充当学生的虚拟导师，又充当教师的课堂助手。

Khan Academy 将于2022 年开始测试最新版本的OpenAI 语言模型，并将首先向有限数量的参与者提供Khanmigo 试点项目，并邀请公众加入候补名单。早期参与者会观察到错误，尤其是数学问题中的错误，并标记它们以供纠正。

GPT-4 的主要功能之一是能够理解自由形式的问题和提示。此功能为可汗学院提供了最关键的支持：向每个学生提出个性化问题以促进更深入的学习。

可汗学院表示，开发人员目前正在测试帮助教师编写课堂提示和教材，或总结计算机编程课程中某些要点的功能。

“我们认为GPT-4 正在开辟教育的新领域，”可汗学院首席学习官Kristen DiCerbo 说。 “很多人长期以来一直梦想着这项技术。它具有变革性，我们计划负责任地对其进行测试，以探索它是否可以有效地用于学习和教学。”