注:当前项目为 Serverless Devs 应用,由于应用中会存在需要初始化才可运行的变量(例如应用部署地区、服务名、函数名等等),所以不推荐直接 Clone 本仓库到本地进行部署或直接复制 s.yaml 使用,强烈推荐通过
s init
的方法或应用中心进行初始化,详情可参考部署 & 体验 。
使用 serverless devs 将 fc-chatyuan 部署到阿里云函数计算上
使用该项目,您需要有开通以下服务:
服务 | 备注 |
---|---|
函数计算 FC |
推荐您拥有以下的产品权限 / 策略:
您还需要注意:
- 默认使用 GPU 进行模型推理,这可能会导致较大的资费消耗,如果对响应性能无要求,可以使用 CPU 实例进行模型推理
免责声明:
1.应用中心仅为您提供应用的逻辑关系,不为您托管任何资源。如果您部署的应用中,存在一定的资源收费现象,请参考对应产品的收费标准;如果您应用所使用的某些产品或者服务因为产品规划等原因发生了不兼容变更,建议您直接咨询对应的产品或者服务; 2.应用中心为您提供的默认流水线功能是免费的,如果您需要手动切换到自定义流水线可能涉及到资源使用费用,具体的收费标准需要参考函数计算的计费文档; 3.应用中心部署的部分应用会为您分配“devsapp.cn”的测试域名,这个测试域名并非阿里云官方域名,是 CNCF Sandbox 项目 Serverless Devs 所提供的测试域名,我们不保证该域名的使用时效性,推荐您只在测试的时候使用,或者绑定自己的自定义域名进行使用; 4.应用部署过程中,如果提示“当前应用模板由社区贡献,非阿里云官方提供,推荐您在使用当前应用模板前仔细阅读应用详情,以确保应用的安全,稳定等”则表示该应用并非阿里云官方所提供的应用,我们仅作为收录和展示,如果您继续部署该应用,推荐您联系应用的作者,并与作者协商应用使用的相关协议等;
- 🔥 通过 Serverless 应用中心 ,
该应用。
- 通过 Serverless Devs Cli 进行部署:
- 安装 Serverless Devs Cli 开发者工具 ,并进行授权信息配置 ;
- 初始化项目:
s init fc-chatyuan -d fc-chatyuan
- 进入项目,并进行项目部署:
cd fc-chatyuan && s deploy - y
因为模型较大,函数计算拉起镜像冷启动时间会比较长,请耐心等待。
为了提升冷启动时间,我们提供了镜像加速服务,请关注控制台上的镜像加速状态,只有在 ready 才真正可用。
GPU 本身对算力资源消耗较大,我们默认提供的是按量付费的模式,当您不用的时候会自动释放资源,这样可以帮您减少资费消耗。 如果您对模型推理速度无要求,可以使用 CPU 实例进行推理以降低费用
IMAGE="registry.cn-hangzhou.aliyuncs.com/fc-demo2/ohyee-test:fc-chatyuan-v1"
cd src/code/server/
docker build . -t ${IMAGE}
docker push ${IMAGE}
您如果有关于错误的反馈或者未来的期待,您可以在 Serverless Devs repo Issues 中进行反馈和交流。如果您想要加入我们的讨论组或者了解 FC 组件的最新动态,您可以通过以下渠道进行:
微信公众号:serverless |
微信小助手:xiaojiangwh |
钉钉交流群:33947367 |