语音输入功能类似于手机上的语音助手，用户只需按下一个按钮，说出自己的问题，ChatGPT就会将其转换为文本，然后生成答案，再将答案转换为语音，播放给用户。OpenAI表示，这样的交互方式更加自然和便捷，而且由于LLM的技术优势，答案的质量也会更高。OpenAI还开发了一种新的文本转语音模型，可以根据几秒钟的样本语音，生成与之相似的人声。用户可以从五种选项中选择ChatGPT的声音，而且这种模型还有更多的潜在用途。例如，OpenAI正在与Spotify合作，将播客翻译成其他语言，同时保留播客主持人的声音。不过，这种模型也存在一些风险，比如可能被恶意利用来冒充公众人物或进行诈骗。因此，OpenAI表示，这种模型不会被广泛开放，而是会受到严格的控制和限制。
图像输入功能则类似于Google Lens，用户可以拍摄自己感兴趣的事物，并上传到ChatGPT中。ChatGPT会尝试识别用户想要询问的内容，并给出相应的回答。用户还可以用
应用中的绘图工具来帮助表达自己的问题，或者配合语音或文本输入来进行交流。ChatGPT的优势在于它可以进行多轮对话，而不是一次性搜索。如果用户对答案不满意或想要更多信息，可以继续向ChatGPT提问，从而得到更准确和全面的答案。当然，图像搜索也有一些潜在问题。例如，在处理人物
图片时，OpenAI表示他们限制了ChatGPT对人物进行分析和直接评价的能力，既为了保证准确性，也为了保护隐私，这意味着上传一个人的照片就能知道他/她是谁还无法实现。
IT之家注意到，自从2022年初推出ChatGPT以来，OpenAI一直在努力为其
机器人增加更多功能和能力，同时避免造成新的问题出现。通过这次更新，该公司试图在这条界线上寻找平衡点，通过有意识地限制其新模型能做什么来实现这一目标。但是这种方法并不是长久之计，随着越来越多的人使用语音控制和图像搜索，以及ChatGPT逐渐成为一个真正的多模态、有用的虚拟助手，要保持安全和合理的边界会变得越来越困难。
