面向 AI 助手:本页的 Markdown 版本位于 https://ark.volcengine.com/region:cn-beijing/docs/platform-capabilities-overview.md,全部文档索引见 https://ark.volcengine.com/llms.txt。

平台能力速览

前提条件#

  1. 注册账号:在使用火山引擎的服务之前需要用户注册火山引擎账号并完成相关认证,详见 账号注册流程。
  2. 实名认证:在火山引擎上购买和使用云资源的过程中,为遵守相关法律法规,也为保障您的合法权益,需要先进行实名认证,您可以按需进行个人实名认证或者企业实名认证,详见 实名认证基本介绍。
  3. 创建子账号(可选):如果您的账号为多人使用,为更好地进行权限管理,建议使用主账号前往 【访问控制】-【用户】 创建子账号并通过预置策略为其分配适当的权限。

模型与推理体验#

模型广场#

完成账号与权限设置后,进入火山方舟控制台(访问地址),在模型广场查看目前已发布的大模型,点击某个模型卡片可查看该模型的详细信息。更多详情可见 模型广场介绍。

模型仓库#

模型仓库展示所有精调产出的模型,您可以在此处管理自己的模型,查看模型的基本信息、接入点信息,发起评测、进行推理体验等,更多详情可见 管理自定义模型。

推理体验#

如果您对模型广场中某个已发布的模型感兴趣或想快速验证精调模型的效果,可以进入体验中心进行推理试用。更多详情可见 模型体验介绍。

API 调用模型#

模型广场中的模型支持 API 调用,您可以进入模型详情页点击右上角的 API 接入查看相关的调用教程。

模型精调与评测#

火山方舟允许用户上传自己的数据进行模型精调,只需简单的几个步骤即可产出更加贴合客户业务场景的模型。

准备数据#

在创建精调任务之前需要完成数据的准备,目前支持 JSONL 格式的数据集,详细说明请参考格式总览。目前支持两种数据上传的方式:

  1. 从本地上传数据:适用于小规模的数据集。
  2. 从 TOS 中导入数据:需先将数据上传至 TOS,具体操作可见 TOS控制台快速入门,然后在创建精调任务时选择对应的 TOS 目录。当数据集规模较大时建议使用这种方式,避免在上传过程中因网络问题导致传输中断。

创建模型精调任务#

  1. 数据准备好后,创建模型精调任务。
  2. 进入创建精调任务页面,按实际情况进行任务名称、描述、基础模型、数据集等信息的选择或填写。
  3. 数据填写完毕后,点击提交精调任务,即可完成任务创建。更多操作,可见 创建模型精调任务。

查看并管理模型精调任务#

  1. 进入模型精调列表页,可查看已提交的所有模型精调任务。
  2. 点击某个任务名称,即可进入对应的详情页,可查看基本信息、效果指标、日志、时间线、模型产出信息。

创建模型评测任务#

  1. 模型训练完成后,可以 创建模型评测任务,按实际情况进行任务名称、描述、评测模型、数据集等信息的选择或填写。
  2. 数据填写完毕后,点击提交评测任务,即可完成任务创建。 更多操作,可见创建模型评测任务。

查看并管理模型评测任务#

  1. 进入模型评测列表页,可查看已提交的所有模型评测任务。
  2. 点击某个任务名称,即可进入对应的详情页,可查看基本信息、评测报告、日志。

更多操作,可见创建模型评测任务。

将精调后的模型发布成模型服务#

在精调任务完成训练后,可以通过接入模型部署对应的精调模型版本。
更多操作,可见使用精调后的模型进行在线推理 。

IAM 权限管理实践#

当您账号涉及到多人使用,或者为组织所有,您可以使用 IAM 来实现不同账号的权限管理。
访问控制 IAM (Identity and Access Management) 是一套权限管理系统,是火山引擎提供的免费服务之一。您可以为火山引擎账号(主账号)创建IAM用户(子账号),并根据不同用途授予子账号相应的访问权限,以达到不同企业员工之间的权限隔离。

例如,您组织中有负责运营的人员,您不希望他们发生如删除模型等高危操作,您可以配置子账户的权限为ArkReadOnlyAccess策略,允许其仅可查看方舟内的全部资源,但不允许对资源进行操作,从而提升资源的安全性。

更多关于权限管理的详细实践,如项目维度权限管理、用户组权限管理,请参见使用 IAM 管理权限。