我的AI学习一周总结:ChatGPT开放插件系统–山维空间

好好学习,天天向上。卷到最后,就是胜利。

今天早上醒来,到处是ChatGPT插件系统的新闻,官方新闻在这里:

We’veimplementedinitialsupportforpluginsinChatGPT.Pluginsaretoolsdesignedspecificallyforlanguagemodelswithsafetyasacoreprinciple,andhelpChatGPTaccessup-to-dateinformation,runcomputations,orusethird-partyservices.

除了一般的能力整合,更吸引我们注意的是,这次OpenAI还公开了一些带来更多可能性的功能(通过官方插件,不知道会不会开放给第三方)。

类似NewBing,这个功能让ChatGPT可以从互联网上获取资讯,然后结合强大的文本理解和推理能力,一方面对接用户的自然语言询问,另一方面代替用户从茫茫文海中查找合适的内容。

这个能力十分让人期待,不过也让我隐隐有些担心:大家都依赖ChatGPT快速获得答案之后,互联网信息污染会不会越来越容易,也越来越容易造成破坏了?

GPT的模型本身就能很好的理解和生成代码,但由于它并不是真的理解语法规范,所以生成的代码能不能执行比较看运气。如今,通过Codeinterpreter,它可以在页面沙箱里执行的python代码,于是至少有三个方面的改善:

ChatGPTRetrieval插件可以访问个人和组织专属信息源,根据用户自己的数据生成更精准的回答。这个产品是开源的,可以部署在用户自己的环境里,相当炸裂,这下LangChain和LlamaIndex岌岌可危,我之前想搞的SecondMe也可以换个方向了。

但是,这也印证了开发者的担忧:大厂偷家怎么办?本来核心技术就在大厂,我们辛辛苦苦帮他们把产品方案趟出来,裤衩一声,大厂发布了自己的版本,我们呢?

可以想像,就像抖音快手分别带火大量新品牌一样,我认为所有厂商都不会放过这个机会,大家一定会涌入ChatGPT插件市场,试图用AI给自己引入新的用户。未来,CEO(ChatEngineOptimization)可能会和SEO一样重要。比如,通过在知乎问答“脸上长痘怎么办”里注入自己的品牌内容,可能比做一堆垃圾内容农场,更有价值。这么一想,利好知乎、Quora。

我倒不觉得插件系统会对其它AI厂商带来什么威胁——或者不如说,不会让威胁更大,因为模型领先太多。相反,ChatGPT很可能通过自己的发展,给其它厂商打了个样出来,让大家知道怎么做产品。

比如,多模态重要还是接入互联网重要?我觉得可能是后者,至少对百度而言,过去一周被反复处刑的文生图功能,是不是可以先放放?集中精力优化大模型,然后多做一些应用层的接口,可能更受市场欢迎。

所以我更关心技术天花板在哪里。比如访问网络的能力,我能不能在API里使用?怎么用?这关系到我能否拥有自己的产品入口,以及我应该怎么搭建我的基础设施。

现在几乎所有AI产品都在排队,OpenAI更是排队大户。我觉得除了产品本身的成熟度之外,他们的云服务承载能力和运营成本也是排队的一个重要原因。

假设将来产品基本成熟了,单客成本会是多少呢?有多少用户能用上呢?我觉得也是个问题。所有的工具,都会加剧人与人之间的差异,将来善用AI工具的人一定比全手工的人高效很多,那么AI会不会导致新的不平等呢?

这些问题可能都是国内才会遇到的,即然我是简中写作,那可能还有些作用吧。我们使用的是AutoDL的服务器,看起来是建在华为云上。服务器官方提供代理,可以加速GitHub访问,但是我们这个区刚好没有,惨兮兮……当真是没有困难创造困难也要上。

SDwebui默认仅允许本地环境在线安装扩展,我们部署在服务器上的环境必须添加--enable-insecure-extension-access到COMMANDLINE_ARGS里才可以。配置并重启服务之后就可以了。

ssh-keygen-ted25519-C"meathill+sd@gmail.com"然后把key添加到GitHub。再接着把ssh协议的仓库链接复制到“Extension>InstallfromURL”里安装,即可。

安装完成后,很多时候仅重载前端界面不行,还是要重启整个服务。

AutoDL提供的镜像默认不包含面部修复功能,在第一次使用该功能时,SDwebui会尝试下载对应的包。因为服务器在墙内,下载地址在GitHub,所以速度很慢,可能会超时或者断线失败。此时可以手动辅助处理,先下载到本地,然后上传到服务器。大约有以下几个文件:

我总结了最近几周的开发经验,主要是使用VercelEdgeFunction提供API服务时踩过的坑,汇集成一篇博客,推荐有类似需求、做类似技术选型的同学参考:

各大厂商发布了不少围绕AI打造的新品和改进的老产品,正如下图所示:

这里简单列几个,大家有空可以试试。不过大部分都只是有限开放,要先加入wishlist,等排队。

市场很热,OpenAI的掌舵者对节奏的把握也很强,隔三差五就把大家刺激一波。我的观点还是:书上得来终觉浅,绝知此事要躬行。工程上总会有各种各样奇奇怪怪的问题等待我们去解决,有些可以用AI加速,有些则需要自己摸索。所以对大家来说,越早动手,工程积累越多,优势越大。

THE END
1.ChatGPT语音对话插件分享推荐1款插件实现与chatgpt进行语音交流,并且自动语音朗读回复你的内容。https://flowus.cn/share/54fb1015-a632-4b55-a4d6-1b67a0e0b296
2.chatgpt语音插件导读:为帮助您更深入了解chatgpt语音插件,小编撰写了chatgpt语音插件,chatgpt语音聊天插件,chatgpt发音插件,chatgpt语音助手插件,chatgpt语音对话插件等5个相关主题的内容,以期从不同的视角,不同的观点深入阐释chatgpt语音插件,希望能对您提供帮助。 本文目录一览 http://chatgpt.kuyin.cn/article/3184014.html
3.chatgpt语音助手插件导读:为帮助您更深入了解chatgpt语音助手插件,小编撰写了chatgpt语音助手插件,chatgpt语音插件,chatgpt提问助手插件,语音助手与chatgpt,chatgpt语音助手等5个相关主题的内容,以期从不同的视角,不同的观点深入阐释chatgpt语音助手插件,希望能对您提供帮助。 http://chatgpt.cmpy.cn/article/1674484.html
4.ChatGPT常见插件功能:VoiceControlforChatGPT语音输入和朗读"Voice Control for ChatGT"是一款Google Chrome插件,允许你通过语音与ChatGPT进行交互。这款插件提供了一个录音按钮,使你能够录制并发送你的语音查询到ChatGPT,从而无需输入文字。然后,AI的回应将被大声朗读,确保了流畅的听觉交互。这使得与智能的对话伙伴互动以及探索先进AI的能力变得容易 。 https://www.shangyexinzhi.com/article/12034896.html
5.chatgpt怎么装语音插件?Worktile社区5. 使用语音插件:一旦安装和配置完成,你就可以开始使用语音插件了。根据你的需求,使用合适的函数或方法来处理音频输入和输出。例如,你可以使用语音插件中的函数将语音转换为文本,然后将文本传递给ChatGPT进行处理。 注意:语音插件的安装和使用可能会依赖于特定的代码库、操作系统或其他软件要求。确保阅读并遵循相关的文https://worktile.com/kb/ask/539697.html
6.voicecontrolforchatgpt插件官网,可以通过语音控制chatGPT并且voice control for chatgpt插件 00000 链接直达 ?>1.免费ai视频生成+写作(可联网)?>2.超强免费ai视频神器3.免费ai写作绘画 voice control for chatgpt插件官网,可以通过语音控制chatGPT并且对话 什么是概述voice control for chatgpt? Voice Control for ChatGPT 是一个与您的设备兼容的 Chrome 扩展程序,它https://feizhuke.com/sites/voice-control-for-chatgpt.html
7.voicecontrolforchatgpt插件官网,可以通过语音控制chatGPT并且标签:chatgpt插件 00000 链接直达 ?>1.免费ai视频生成+写作(可联网)?>>2.免费ai视频神器推荐3.免费ai写作绘画 voice control for chatgpt插件官网,可以通过语音控制chatGPT并且对话 什么是概述voice control for chatgpt? Voice Control for ChatGPT 是一个与您的设备兼容的 Chrome 扩展程序,它允许您通过语https://biemoyu.com/sites/voice-control-for-chatgpt.html
8.推荐7款实用的ChatGPT浏览器插件5.ChatGPT Writer AI帮我们写邮件 这个插件可以帮我们在网站上,写邮件或是回复信息,该插件登录 OpenAI后就可以单独使用 你需要点击扩展程序来打开它,它会问你想要写什么,然后会输出内容,如果需要回复邮件,则把要回复的邮件内容输入进去,它在Gmail上的效果更好。【链接】 https://www.jianshu.com/p/d9af33c6109f
9.chatgpt文本聊天秒变语音聊天工具插件chatgpt 文本聊天秒变语音聊天工具插件余汉波 广东 0 打开网易新闻 体验效果更佳“第一次是犯错,第二次是选择” WILL观影团 1562跟贴 打开APP 飞机,为什么不敢飞过中国西藏? 三维地图看世界 4295跟贴 打开APP 美军:中国人都是活阎王,陆军被打到怀疑人生,司令被自己人撞死 老黑科普 422跟贴 打开APP 一口气https://m.163.com/v/video/VMUUJINLM.html
10.voicewavechatgpt插件如何使用启动Voicewave ChatGPT插件:打开浏览器,并在插件栏中找到Voicewave ChatGPT插件图标。点击图标打开插件。 选择语音合成设置:在插件中,您可以选择合成语音的设置。您可以选择合成器的声音风格、语速、音调等参数,以满足您的需求。 输入文本:在插件中的文本框中输入您想要转换成语音的文本。 https://www.chatairc.com/18383/
11.TalktoChatGPTchrome扩展插件下载安装Chrome浏览器插件下载和安装教程(图文讲解) 截图 简介 通过麦克风与 ChatGPT 交谈并通过声音听到其响应。使用语音识别和文本转语音技术 通过麦克风与 ChatGPT 交谈并通过声音听到其响应。您不再需要键盘即可与 ChatGPT 交互!它是完全免费和开源的。 要使用它,请打开 ChatGPT 主页。页面右上角将出现一个框 - 单击“https://crx.bysjb.cn/info/hodadfhfagpiemkeoliaelelfbboamlk
12.ChatGPT.好友ChatGPT电脑客户端学AI很简单ChatGPT.好友插件使用教程 简介 ChatGPT.好友是一款基于OpenAI的GPT模型和谷歌的gemini-pro模型的AI插件,支持语音对话、AI绘画、AI音乐等功能。目前用已有超20万用户!本教程将详细介绍如何安装和使用这款插件。 用户界面 安装步骤 先下载一款utools效率工具,呼之即来,即用即走,下载地址:uTools下载然后就可以在uTools里https://www.yizz.cn/sites/6152.html
13.VoiceControlforChatGPT上一张 Voice Control for ChatGPT chrome谷歌浏览器插件_扩展截图 下一张 Voice Control for ChatGPT chrome谷歌浏览器插件_扩展截图 简介: 通过语音控制和朗读扩展 ChatGPT。 ChatGPT 的语音控制允许您与 ChatGPT 进行语音对话。通过引入录音按钮,您可以录制语音查询并将其发送到 ChatGPT,从而无需打字。随后,人工https://www.chajianxw.com/product-tool/43222.html
14.UE5&ChatGPT自然语言智能聊天系统封装高级教学ABOUTCG视频教程本套课程将为大家带来ChatGPT实时聊天技术,实现文字交流,语音聊天,图片生成等功能。本套课程将会带着大家一起封装UE5的ChatGPT插件,实现文字交流,实时语音聊天,图片生成等。 课程信息 教学总时长约13小时,使用软件:Unreal Engine。 适用行业:游戏引擎;难易度:中级。 https://www.aboutcg.org/courseDetails/1836/introduce
15.voicecontrolforchatgpt标签:chatgpt插件voice control for chatgpt 链接直达手机查看 voice control for chatgpt插件官网,可以通过语音控制chatGPT并且对话 什么是概述voice control for chatgpt? Voice Control forChatGPT是一个与您的设备兼容的 Chrome 扩展程序,它允许您通过语音与 ChatGPT 进行对话。这个扩展在输入字段下方添加了一个按钮https://openi.cn/sites/11124.html
16.如何搭建一个基于ChatGPT的QQ机器人(YunzaiBot)修改配置,编辑plugins/chatgpt/index.js文件主要修改其中的SESSION_TOKEN常量,修改为你的openai账号的token。 右键检查 在应用中找到__Secure-next-auth.session-token 然后复制下方的Cookie填入index.js文件 启动机器人 node app 其他插件 https://github.com/yhArcadia/Yunzai-Bot-plugins-index https://www.xuemy.cn/archives/170.html
17.chatgpt好用的办公插件,办公软件插件2. 文件管理:ChatGPT办公插件可以帮助用户快速检索和整理文件。用户只需提供文件名或关键词,插件就能够快速找到相关文件,并提供下载链接或分享方式,节省了查找文件的时间。 3. 语音转写:通过ChatGPT办公插件,用户可以将会议录音、讲座录音等语音文件自动转写为文字。用户可以方便地回顾会议内容、搜索关键信息,提高了工作http://www.kuyin.tv/article/1933724.html
18.ChatGPT插件与简要介绍(已收集70个)了解添加插件后的chatgpt能做文章浏览阅读5.4k次,点赞3次,收藏8次。70个ChatGPT插件与简要介绍,了解添加插件后的chatgpt能做什么。_chatgpt的info.jsonhttps://blog.csdn.net/qq_44029998/article/details/130681977
19.推荐7款非常实用的ChatGPT浏览器插件!hi大家好,我是小鱼。今天通过这款高亮标注插件,就可以让我们在茫茫资讯中更加快速的掌握我们需要的关键内容,筛选资源也会更加方便。 7. Voice Control for ChatGPT 这是一款基于 ChatGPT 的语音控制插件,通过这款语音控制插件,我们就可以在浏览器上跟着ChatGPT进行语音对话。https://juejin.cn/post/7215506439259045945
20.推荐一些好用的ChatGPT扩展工具腾讯云开发者社区谷歌的 chrome 应用商店里,搜索“沉浸式翻译”,可以免费使用谷歌的双语翻译。并且还支持设置ChatGPT的 api key 来翻译。 2. VoiceWave - Voice Control ChatGPT 语音扩展插件,安装好之后,在 ChatGPT 的回答上就会出现一个声音的图标。这样就能够用语音和 GPT 对话了。非常适合通过 ChatGPT 学习外语的朋友。 https://cloud.tencent.com/developer/news/1067758
21.推荐一些好用的ChatGPT扩展工具谷歌的chrome应用商店里,搜索“沉浸式翻译”,可以免费使用谷歌的双语翻译。并且还支持设置ChatGPT的api key来翻译。 2. VoiceWave - Voice Control ChatGPT 语音扩展插件,安装好之后,在 ChatGPT 的回答上就会出现一个声音的图标。这样就能够用语音和 GPT 对话了。非常适合通过 ChatGPT 学习外语的朋友。 https://blog.51cto.com/u_14184689/7054155