摘要:在国内使用ChatGPT有些不便,是否可以基于OpenAI开放的API做一个给自己或者同事们使用的聊天机器人,甚至集成到更多的场景….
本文分享自华为云社区《使用 FunctionGraph 快速构建自己的“ChatGPT”》,作者:ChatGPT 、果宝、历川。
ChatGPT是一个基于GPT-3模型的聊天机器人,可以与用户进行自然、流畅和有趣的对话。ChatGPT可以理解和使用多种语言,如英语、中文、日语、西班牙语、法语或德语;还可以根据用户的兴趣和需求,提供相关建议和创意内容,如诗歌、故事、代码、歌词等。ChatGPT是一个强大而灵活的工具,可以用于娱乐、学习或工作。
但是在国内使用ChatGPT有些不便,是否可以基于OpenAI开放的API做一个给自己或者同事们使用的聊天机器人,甚至集成到更多的场景…. 效果如下:
说干就干,我们先从做一个自己的机器人开始,首先我们从OpenAI获取用于鉴权的秘钥。
然后写一个请求OpenAI接口的代码,并写一个web服务接口开放出去,再搭配一个交互用的前端即可。看起来是1小时的工作量,但是如何部署这个服务呢? 购买一个云服务器再安装环境或者配置容器也太麻烦了,于是我问了ChatGPT:
可以看到, 使用FunctionGraph只需要聚焦完成请求OpenAI接口的功能函数,不需要购买和配置资源,甚至不需要写Web接口的代码。 于是一个简单的方案如下:
其中,
注:“函数” 是指客户部署在FunctionGraph上的代码,它可以是一个或多个文件组成的程序,甚至编译好的二进制文件。 如Python 脚本文件,Java的jar 包。
首先创建并开发FunctionGraph函数,打开华为云FunctionGraph 产品页面,由于只有一个简单的问题查询接口,这里我们选用事件函数 使用Python 3.9 运行时。
注:事件函数,可以由某类事件触发函数运行,如用户对该函数发送了HTTP请求,关联到该函数的消息队列里产生了新消息,都会自动触发函数运行。
对于事件函数,通常程序入口方法(这里是 handler)会有两个参数:
图:FunctionGraph 函数源码
上图为本次调用的入口方法handler(),在函数中,我们:
图:函数配置环境变量
注:示例中我们使用了OpenAI的sdk ,也可以将sdk放在函数代码里一起上传,或利用函数的依赖管理能力,通过添加依赖的方式实现:
图:函数配置依赖
在编辑好代码后,只需要点击部署按钮即可完成部署。
通常对于使用函数开发WEB 后端的场景,我们使用API 网关服务,来将函数开放出去供前端访问。为函数在API网关上注册API非常简单,只需要在函数页面上创建APIG触发器:
注意:这里将后端超时时间设定为一个较大的时间,如60s,因为OpenAi的接口响应较慢。在北京4局点中,APIG服务有共享版,支持按需计费,若有较大的流量可以考虑购买APIG独享实例。
图:为GPT函数绑定APIG触发器
APIG触发器上的调用URL,可以直接用于向后端发送请求,该URL 为测试URL,每日仅可访问1000次,可以点击触发器跳转到APIG页面绑定自己的域名。
最后,通过访问配置的域名访问页面,开始体验!
至此,我们其实已经完成了整个简单聊天系统的搭建,案例中我们使用了一个简单的前端页面,开发者也可以考虑集成到如VSCode插件,语音聊天机器人,微信公众号等等。
更进一步,若想使用Serverless技术,开发更为完整,适合生产环境的应用,需要添加鉴权,数据库连接等功能。
以上我们已经基于FunctionGraph 函数创建了一个简易聊天系统的后端的服务,但是该接口没有任何鉴权,如果开放接口,所有用户都可以访问。
如果需要用户登录后才可以使用,如何做?一个思路是在原有业务代码里增加鉴权,这里我们也可以考虑使用APIG自定义鉴权即APIG组合FunctionGraph 鉴权的形式。 一个新的解决方案,如下。
使用APIG 自定义鉴权有以下优势:
和普通函数的创建流程一样,只需要注意响应的格式,一个使用JWT 鉴权的简单案例如下。
编辑对应的API,选择自定义鉴权,选择到我们创建的函数:
一个鉴权拒绝的示例如下:
基于以上自定义鉴权模式,开发者可以组合自己已有的鉴权逻辑放到自定义鉴权函数中。如果进一步想基于FunctionGraph 创建一个 “登录” 或token授权函数,可以考虑以下方案。
我们首先需要创建一个函数,该函数用于接收用户登录请求,然后去数据库请求,判断用户合法则返回鉴权token。
创建一个普通的事件函数即可,一个简单的示例如下,随后可以为其创建APIG 触发器。
注意,如果需要函数访问VPC里的资源,如本例中的RDS,需要在函数页面配置RDS所在的VPC。
使用函数,系统会自动收集用户打印在控制台的日志,用户无需处理日志落盘,收集或直接上报。对于每一条请求日志,FunctionGraph 还会显示请求执行耗时,使用内存及请求状态。
用户可以基于关键词,请求状态进行过滤和检索。
图:函数用户日志页面
同时,平台自动收集函数运行指标,如调用次数,运行时间,错误次数,被拒绝次数,并发数等。
图:函数监控
在用户更新函数代码时,为保障“ChatGPT”业务稳定运行,可以配置APIG触发器的后端服务指向函数别名:
图:函数别名
图:FunctionGraph别名灰度版本
拥抱Serverless,释放生产力,函数工作流 FunctionGraph
|