本章节主要介绍数据标准智能助手。 数据标准智能助手专门用于辅助数据标准治理的智能体。它通过自然语言处理技术，将复杂的标准制定流程转化为简单的对话交互，支持从单字段定义到大规模标准文档解析的全场景覆盖。 快速入门：进入助手入口 访问助手：在 首页菜单点击“数据标准智能助手”进入。 初始界面：进入后，助手会展示欢迎语及其核心能力，并提供预设的“示例问法”（如：新增身份证的标准），点击即可快速发起任务。 工具栏操作：对话框下方设有快捷操作项，支持一键发起 [新增标准]、[编辑标准] 或 [删除标准]。 核心场景操作指南 1.自然语言智能生成标准 通过描述业务需求，助手将调用底层 standardmcpserver 智能推荐标准属性。 发起需求：在对话框输入“新增身份证的标准”。 自动执行：助手将启动【新增字段标准】工具，实时检索行业规范并进行查重判断。 结果预览：系统会在对话流中展示“标准列表”卡片，自动填充以下关键字段： 标准中文名/英文名：如“身份证” / idcard。 描述：如“身份证标准格式:长度18位”。 数据类型与长度：如“字符型”、长度“18”。 人工干预： 用户可直接在列表中修改参数，或点击“AI智能补全”完善缺失信息。 目录确认：在卡片顶部选择该标准归属的“目录”。 应用保存：检查无误后点击“应用”完成标准创建。 2.标准运维管理（编辑/上线/删除） 查询：输入“查询数据标准列表”，助手展示前 20 条标准详情（含版本、创建人等）。 状态变更：通过对话输入“上线/下线数据标准 XXX”，助手确认意图后执行。 注意：已经处于“已发布”状态的标准不允许直接修改，需下线后方可编辑。

业务场景 一般是现有系统已经存在瓶颈，热点查询业务首先迁移到缓存。数据的变更还是在数据库，对新的业务系统不透明。 业务要求 数据由其他可靠性存储设备保存，缓存只保存热点数据 通过设置缓存失效时间来保证缓存更新 缓存数据不存在则重新获取 增加数据核对工具异步刷新缓存 需求分析 1. 建立用户、建立redis数据分区、建立访问分区，选择热点存储模版（刷盘策略、主从同步策略不一样）； 2. 建立环境后，建立分组（表），根据开发示例验证分组可用； 3. 缓存API使用可以参考开发示例代码； 4. 使用api设置缓存key超时时间； 5. 缓存使用加载可以参考热key的缓存构建； 6. 使用定时任务扫描数据源获取增量更新数据修改缓存或者在数据变更事件发送的业务代码处更新缓存。 需要注意的问题：缓存穿透 可靠性存储的方案 若配置数据对数据一致性要求较高或者热点变化非常频繁可以考虑可靠性存储场景来设计，但此方案需要业务数据的修改透明，能整体迁移到缓存。如下缓存部分的设计将变的简单 业务要求： 数据由缓存保存，不允许丢失。 需求分析：配置类数据可以整体当次热点数据，存放在缓存，简化系统架构方案 建立redis数据分区，选择持久化存储模版（刷盘策略、主从同步策略不同）； 缓存API使用可以参考开发示例代码。

本文介绍弹性文件存储卷概述。 Serverless集群支持使用天翼云弹性文件存储卷。当前cstorcsi插件支持使用弹性文件静态存储卷，通过将弹性文件存储卷挂载到容器指定目录下，以实现数据持久化需求。 弹性文件提供按需扩展的高性能文件存储，可为云上多个弹性云主机、容器、物理机等计算服务提供大规模共享访问，具备高可用性和高数据持久性。提供标准的POSIX文件访问接口，可以将现有应用与文件存储无缝集成。 使用限制 规格类型 当前cstorcsi插件支持SFS Turbo标准型、SFS Turbo性能型。 文件协议 当前cstorcsi插件仅支持NFS协议。 容量 单个文件系统最小容量为500GB。 文件系统加密 当前暂不支持使用加密。 性能规格 SFS Turbo标准型、SFS Turbo性能型规格对比：弹性文件性能对比。 说明 最大IOPS、最大带宽两个参数的值均为读写总和，比如最大IOPSIOPS读+IOPS写。 最大IOPS大小与容量无关。 时延是指低负载情况下的最低延迟，非稳定时延。 使用场景 根据业务需求，弹性文件类型的存储常见以下使用场景： 使用弹性文件动态存储卷（暂不支持）：即用户无需预先创建文件系统和PV，只需创建PVC时指定存储类（StorageClass），存储插件cstorcsi就会自动创建文件系统及对应PV资源，推荐使用。 使用弹性文件静态存储卷：即用户预先创建文件系统，并创建对应的PV资源。之后在创建PVC时选择已有PV进行挂载。适用于已有可用的底层存储或底层存储需要包周期的场景。 有状态负载挂载弹性文件：支持有状态负载通过PVC模版的方式，实现为每一个Pod关联一个独有的PVC及PV，当Pod被重新调度后，仍然能够根据该PVC名称挂载原有的数据。

本文介绍天翼云花卷慧办的产品定义。 产品定义 花卷慧办是一款面向现代企业的一体化协同办公平台，依托息壤算力，以多模态AI智能引擎为核心驱动为客户提供企业级智能办公平台。本产品集成了消息、日程管理、待办任务、在线会议、空间、知识库管理、防钓鱼邮件客户端和办公智能体等核心功能模块，形成一个一站式的智能办公解决方案。它采用云端架构，支持多端同步，用户可在PC、Mac、iOS、Android等设备上无缝使用，满足日常办公和远程协作需求。 云会议 提供高清流畅、便捷易用、安全可靠的会议服务，随时随地高效开会。 云空间 集成企业文档和个人文件存储，包含企业空间、协作空间、个人空间等。 防钓鱼邮件客户端 防钓鱼邮件客户端，通过本地规则引擎、云端情报、慧泽大模型等能力全面增强检测准确率，并实时反馈是否为钓鱼邮件。 知识库 实现知识的快速存储、检索和更新，方便企业随时随地访问和共享知识资源。 智能体 能主动对接办公场景中 “日程待办、会议创建、信息查询” 等多维度需求，为用户提供 “一站式、个性化、预判式” 办公支持的智能化交互模块。

审计建议 建议记录以下审计信息： 调用时间。 调用方系统或任务 ID。 脱敏后的 AccessKey ID。 桌面编码。 会话 ID。 调用工具名称。 结果状态和错误码。 审计日志中不应包含完整 Secret、敏感文件正文或未脱敏截图。 合规说明 如需对外提供合规材料，建议由产品、安全和法务共同确认以下内容： 数据存储位置。 日志保存周期。 临时文件清理周期。 权限模型和审计能力。 适用的企业安全认证或合规声明。

就近访问 用户上传对象时，可以选择就近存储。OOS通过系统自动调度，将数据写入距离客户较近的资源池，以实现较低的访问延迟。 用户下载对象时，可以从距离较近的资源池中获取数据，提高下载速度。 全国统一管理 OOS将多个地区的存储资源池连为一体，为用户提供了具有统一名字空间的对象存储服务。用户可以通过一个域名地址，访问全国的所有对象，数据可以在各个资源池间流动。 简单易用 OOS提供标准REST API、丰富的SDK、数据迁移工具，并可通过云存储网关支持iSCSI协议 ，让用户业务快速上云。OOS不限制存储空间大小，用户可根据所需存储量无限扩展存储空间；还可以通过设置生命周期规则，将到期数据批量删除或者转储为更低成本的低频访问型存储。 精准控制 OOS提供统一身份认证、Bucket权限、Bucket策略、签名验证等多种访问控制方式，对数据资源进行精准控制。支持操作跟踪和Bucket日志管理，实时记录访问请求的详细信息。

支持的文件类型 支持嵌入/提取水印的文件类型 具体的文件格式 文档 PDF、PPT、Word、Excel 图片 .jpg、.jpeg、.jpe、.png、.bmp、.dib、.rle、.tiff、.tif、.ppm、.webp、.tga、.tpic、.gif json数据 整型、浮点型、字符串型。 使用场景 数字水印在政府部门、医疗、金融、科研等行业应用广泛，主要用于版权保护和追踪溯源。在数据版权保护方面，数字水印技术可用于数字作品被下载或复制时，数据库业务需要提供数据给第三方时，可以通过数字水印技术明确版权归属，有效解决版权纠纷。在使用过程中可追踪溯源方面，数字水印技术可以记录使用者信息，以识别身份并提醒使用者注意安全规范。当发生数据泄露事件时，可以通过数字水印技术追踪泄露源头，挖掘泄露原因。 优势特点 1. 支持明暗双重水印：数字水印技术可以根据需要对数据进行明水印或暗水印处理，不影响使用效果，同时有效应对图像处理工具或拍照截图等绕过方式窃取数据。 2. 可检测性强、不易被篡改：数字水印技术可以检测并保证数据的完整性，不会被篡改或丢失。 3. 高鲁棒性：数字水印技术在传输或使用过程中具有较高的鲁棒性，即使数据载体经过改动或受到攻击损坏后，仍然有较大概率提取出水印。

如果您选择通过对应的工具或SDK方式访问天翼云对象存储,本文将带您了解如何下载工具及使用。 操作场景 如果您选择通过客户端或SDK访问ZOS，您需要提前下载对应的工具或SDK源码，并进行相关的初始化配置。 如果您选择通过控制台或API访问ZOS，则可以跳过以下步骤。 S3Browser S3Browser是一个支持S3接口服务的免费windows客户端工具，通过S3Browser可查看ZOS中目前已经存在的桶和文件。 S3Browser安装及使用可参考S3Browser。 SDK SDK是对天翼云对象存储ZOS提供的RESTful API进行封装的工具，旨在简化用户的开发工作。用户通过使用SDK提供的接口函数，可以直接调用并实现对ZOS的各项业务能力的使用，同时保持原有功能的基本不变。 天翼云支持多种SDK开发方式，例如JAVA、C、C++、Python、Go等。SDK安装包下载及使用可参考开发者文档。 自动化策略工具 自动化策略工具（PolicyEditor）由若干条策略组成。使用自动化策略工具，可以在界面上逐条添加或删除策略，并自动生成策略的JSON文本，自动化策略工具中，每条策略需要设置其效果、授权账号、授权资源、授权操作。 自动化策略工具使用可参考自动化策略工具。

本章节主要介绍MySQL数据迁移到MRS Hive分区表。 MapReduce服务（MapReduce Service，简称MRS）提供企业级大数据集群云服务，里面包含HDFS、Hive、Spark等组件，适用于企业海量数据分析。 其中Hive提供类SQL查询语言，帮助用户对大规模的数据进行提取、转换和加载，即通常所称的ETL（Extraction，Transformation，and Loading）操作。对庞大的数据集查询需要耗费大量的时间去处理，在许多场景下，可以通过建立Hive分区方法减少每一次扫描的总数据量，这种做法可以显著地改善性能。 Hive的分区使用HDFS的子目录功能实现，每一个子目录包含了分区对应的列名和每一列的值。当分区很多时，会有很多HDFS子目录，如果不依赖工具，将外部数据加载到Hive表各分区不是一件容易的事情。云数据迁移服务（CDM）可以请轻松将外部数据源（关系数据库、对象存储服务、文件系统服务等）加载到Hive分区表。 下面使用CDM将MySQL数据导入到MRS Hive分区表为例进行介绍。 操作场景 假设MySQL上有一张表tripdata，保存了自行车骑行记录，里面有起始时间、结束时间，起始站点、结束站点、骑手ID等信息，tripdata表字段定义如下图“MySQL表字段”所示。 使用CDM将MySQL中的表tripdata导入到MRS Hive分区表，流程如下： 1.在MRS Hive上创建Hive分区表 2.创建CDM集群并绑定EIP 3.创建MySQL连接 4.创建Hive连接 5.创建迁移作业

数据所在位置 使用条件 迁移方法 迁移速度评估 使用限制 物理机文件系统 物理机可以访问待迁移数据； 物理机和HPFS网络互通，保证可挂载文件系统； 命令拷贝 速度取决于物理机网卡，可多台并行拷贝。 只支持GPU裸金属物理机挂载 HPFSPOSIX 协议的并行文件系统。 弹性云主机文件系统 云主机可以访问待迁移数据； 弹性云主机和HPFS在同一VPC网络下，保证可挂载文件系统； 命令拷贝 速度取决于云主机配置的网络带宽，可多台并行拷贝。 只支持云主机挂载NFS协议的并行文件系统。 对象存储ZOS ZOS数据可以在互联网/内网环境下载； 互联网/内网下载的客户端和HPFS互通，保证可挂载文件系统； 工具迁移 客户端侧公网出口带宽直接影响上传时间。 通过互联网访问ZOS的数据，迁移过程会产生请求和流量等相关的费用。 客户本地 用户本地数据量巨大（几十TB），且数据归属于客户，可插拔盘操作； 用户在公有云有独立归属的数据迁移服务器可进行插盘操作； 数据迁移服务器和HPFS互通，保证可挂载文件系统； 数据快递 单USB口的机械硬盘可达到150MB/s。 专属资源的客户，拥有独立的机房设备。

本节为您介绍数据库迁移工具同步对象选择。 数据库迁移工具提供同步对象选择，用户可自行选择要同步的表对象。 操作步骤： 1. 在可选对象方框中勾选要同步的表对象，可以进行全选、取消全选、表名搜索操作。 2. 点击“>”箭头按钮，将选中的对象放置已选对象方框中，可进行全选、取消全选。 3. 点击“<”箭头按钮，可将选中的对象移回可选对象方框，不进行同步。

本章节主要介绍约束与限制。 CDM系统级限制和约束 1. 集群创建好以后不支持修改规格，如果需要使用更高规格的，需要重新创建一个集群。 2. ARM版本的CDM集群不支持Agent功能。CDM集群为ARM或X86版本，依赖于底层资源的架构。 3. CDM暂不支持控制迁移数据的速度，请避免在业务高峰期执行迁移数据的任务。 4. 当前CDM集群cdm.large实例规格网卡的基准/最大带宽为0.8/3 Gbps，单个实例一天传输数据量的理论极限值在8TB左右。同理，cdm.xlarge实例规格网卡的基准/最大带宽为4/10 Gbps，理论极限值在40TB左右；cdm.4xlarge实例规格网卡的基准/最大带宽为36/40 Gbps，理论极限值在360TB左右。对传输速度有要求的情况下可以使用多个数据集成实例实现。上述数据量为理论极限值，实际传输数据量受数据源类型、源和目的数据源读写性能、带宽等多方面因素制约，实测cdm.large规格最大可达到约8TB每天（大文件迁移到OBS场景）。推荐用户在正式迁移前先用小数据量实测进行速度摸底。 5. 迁移文件或对象时支持文件级增量迁移（通过配置跳过重复文件实现），但不支持断点续传。例如要迁移3个文件，第2个文件迁移到一半时由于网络原因失败，再次启动迁移任务时，会跳过第1个文件，从第2个文件开始重新传，但不能从第2个文件失败的位置重新传。 6. 文件迁移时，单个任务支持千万数量的文件，如果待迁移目录下文件过多，建议拆分到不同目录并创建多个任务。 7. 用户在CDM上配置的连接和作业支持导出到本地保存，考虑到密码的安全性，CDM不会将对应数据源的连接密码导出。因此在将作业配置重新导入到CDM前，需要手工编辑导出的JSON文件补充密码或在导入窗口配置密码。 8. 不支持集群自动升级到新版本，需要用户通过作业的导出和导入功能，实现升级到新版本。 9. 在无OBS的场景下，CDM系统不会自动备份用户的作业配置，需要用户通过作业的导出功能进行备份。 10. 如果配置了VPC对等连接，可能会出现对端VPC子网与CDM管理网重叠，从而无法访问对端VPC中数据源的情况。推荐使用公网做跨VPC数据迁移，或联系管理员在CDM后台为VPC对等连接添加特定路由。 11. CDM迁移，当目的端为DWS和NewSQL的时候，不支持将源端的主键和唯一索引等约束一起迁移过去。 12. CDM迁移作业时，需确保两个集群版本的JSON文件格式保持一致，才可以从将源集群的作业导入到目标集群。

本章节主要介绍在DRDS控制台查看操作日志的步骤。 操作步骤 1. 在天翼云官网首页的顶部菜单栏，选择产品 > 数据库 > 关系型数据库 > 分布式关系型数据库 ，进入分布式关系型数据库产品页面。然后单击管理控制台 ，进入概览页面。 2. 在左侧导航栏，选择DRDS > 操作记录 ，进入操作日志页面。然后在顶部菜单栏，选择区域和项目。 您可以在操作日志列表中查看用户在控制台执行的各项操作，包括来源、用户名、操作分类、操作类型、操作对象名称、状态、操作对象ID以及操作时间。 3. 在操作日志列表上方，设置操作分类、操作类型、操作对象、操作内容、用户名以及操作时间，进行筛选查询。 支持的操作分类包括：DBPROXY（DRDS实例）、DBPROXYGROUP（DRDS实例分组）、RDS（MySQL实例）、GiServer（全局索引）、DBPROXYCDC节点（日志节点）和DBPROXYZKCDC（元数据同步工具），操作对象包括各个分类下的实例。 对于各操作分类，所支持查看的操作类型如下表所示： 说明 具体操作类型以实际界面显示为准，本文仅作参考。 操作日志发布之前的历史任务也会进行展示。 操作分类 操作类型 DBPROXY 新增集群、删除集群 DBPROXY 新增节点、删除节点 DBPROXY 新增关联RDS、删除关联RDS DBPROXY 启动参数设置 DBPROXY 执行ddl语句 DBPROXY ddl审计设置 DBPROXY 创建库表、删除库表 DBPROXY 分片规则设置 DBPROXY 创建用户、删除用户、修改密码、编辑用户、添加用户权限、修改用户权限、删除用户权限、设置用户角色 DBPROXY 创建逻辑库、删除逻辑库 DBPROXY 新增角色、添加角色权限、删除角色权限、删除角色 DBPROXY 重启节点、停止节点、批量停止节点、发布节点 DBPROXY 分片变更 DBPROXY 设置字段加密配置 DBPROXY 修改日志配置 DBPROXY 设置GC算法 DBPROXYGROUP 新增分组、修改分组、删除分组、分组属性设置 DBPROXYGROUP 新增/修改黑/白名单、删除黑/白名单 DBPROXYGROUP 关联RDS属性设置 DBPROXYGROUP 新增分组DML审计、更新分组DML审计、删除分组DML审计 DBPROXYGROUP 新建用户分组、修改用户分组 RDS 新增RDS集群、删除RDS集群 RDS 新增节点、修改节点、删除节点 GISERVER 新增集群、删除集群 GISERVER 新增节点、发布节点、停止节点、批量停止节点、重启节点 GISERVER 重置GTID GISERVER 节点属性设置 GISERVER 启动参数设置 GISERVER 关联缓存设置 GISERVER 关联DBProxy设置 GISERVER 修改日志设置 DBPROXYCDC 部署日志节点、操作日志节点、日志节点修改密码、重新初始化日志节点、发布日志节点 DBPROXYZKCDC 部署元数据同步工具、修改元数据同步工具、删除元数据同步工具、操作元数据同步工具

本节为您介绍数据库迁移工具转换规则配置。 经过选择的同步对象，可进行转换规则配置。 增量类型选择 配置要处理的增量类型，分别是增量插入、增量更新、增量删除 数据过滤规则设置 只支持单条件且值为字符串，配置好转换规则之后，点击下一步启动，启动同步，即创建同步任务。并进入同步进度页面 表名映射 点击目标表名，可设置源端和目标端的表名映射关系 列名映射 点击目标字段，可设置源端和目标端的字段名映射关系 是否同步 可选择过滤指定字段不进行同步

当您天翼云账号的可用额度（费用中心总览）不足以抵扣待结算账单时，您的账号将会立即进入欠费状态；相关服务将被冻结，不可继续使用。您可以及时为业务续费或释放相关业务资源，确保服务正常可用。 欠费通知 若您的账号发生欠费，系统会以邮件或短信的形式提醒您。请留意来自天翼云的提醒邮件、短信，避免影响业务正常使用。 欠费说明 从欠费之日起，系统将会终止为您提供 CAE 服务；同时，您在 CAE 上所创建的应用与任务实例将被停止。 为了保证您的业务不受影响，请及时续费。 说明如果您无需持续使用 CAE，请及时释放相关实例资源以避免持续产生费用： 若需删除 CAE 应用，请参见删除应用。 若您的 CAE 应用或任务集成使用了天翼云其他云服务，可能会产生额外费用；例如网络、存储、数据库、中间件、可观测等。在删除相关服务资源前，请注意做好数据备份。 欠费影响 当您的天翼云账号发生欠费，云应用引擎平台将会按照下列策略处理： 欠费时间未超过15天 将冻结您的云应用引擎服务，包括应用实例、任务等 当欠费时间超过15天 云应用引擎服务将进行停机 平台会保留您的应用数据与配置，如您需再次使用云应用引擎服务，请及时充值续费

本节介绍分布式缓存服务Redis版产品定义。 产品定义 分布式缓存服务Redis版是一种兼容Redis协议的NoSQL内存数据库产品，具备高性能、高可用、可水平扩展的特性，提供丰富的产品类型满足用户高读写性能场景需求，主要用于持久化数据的存储或缓存数据的存储。 为什么选择天翼云分布式缓存服务Redis 全面兼容Redis协议：基于开源Redis协议进行安全加固，客户端兼容Redis协议。 丰富的产品规格实例：提供多种缓存实例规格，灵活满足应用的多样化需求。 可靠的备份与恢复机制：支持手动备份与定时自动备份，自定义备份策略，实现将已备份的数据恢复到缓存实例中。 完善的监控运维工具：提供完备的日志、监控和告警功能，异常情况能自动告警并通知相关人员，多种监控指标及服务器运行情况支撑实时、历史监控运维。 对比自建原生Redis的优势 对比自建原生Redis，天翼云分布式缓存服务具备以下优势： 差异项 天翼云分布式缓存服务Redis 原生Redis 安装部署 实时开通，支持一键升级，无需关心服务部署的硬件及软件。 需要自行完成采购硬件、机房托管、部署机器等工作，周期较长，且需要自行维护节点关系。 备份恢复 支持手动备份与定时自动备份，一键恢复还原备份点。 仅支持一次性全量恢复。 运维管理 提供可视化运维监控平台，支持数十种的监控指标的实时监控。 需使用管理方式复杂的第三方监控工具实现服务监控。 扩展能力 支持节点性能线性扩展，支持在线扩容，业务无感知。 并发受限，升级依赖社区。

版本发布是指将当前的工作流工具编排画布， 部署到服务器，并将使用接口暴露在工具广场上，供全部用户使用。支持用户发布时选择单一渠道或多渠道，如工具广场、后端api或工具广场+后端api形式。 发布到工具广场 发布过程需要审核，审核通过后才会在工具广场上可见。 发布到后端api 星辰MaaS智能体平台支持将工具发布为API，给用户提供调用服务。 当选择发布成API后，点击页面顶部Tab进入服务管理页面。 展示系统自动生成的当前应用API，可一键复制。 点击“API密钥”按钮，打开API密钥弹窗，在此可一键创建密钥、一键复制。 点击“查阅API文档”按钮。 版本查看 在工具列表右侧，有“查看版本”按钮，点击后查看全部版本（含草稿版本）

本文介绍DMS助手功能，包括智能问答和对话管理。 功能介绍 DMS助手是一款专为数据库领域定制的智能问答机器人，旨在提供即时、精准的技术支持。它不仅内置了MySQL、PostgreSQL等主流数据库的知识库，还集成了DMS文档资源，能够高效响应您在使用数据库及DMS时可能遇到的各类问题： 数据库知识解答：对于数据库中的基础知识或专业术语，DMS助手能够提供全面而详尽的解释。例如，您可以提问：“数据库事务是什么？” 数据库参数说明：当您想要了解数据库中某项参数的具体详情时，DMS助手可以为您提供相关信息。例如，您可以提问：“MySQL中optimizersearchdepth默认值是什么？” 数据库操作指导：在您进行数据库操作遇到问题或需要指导时，DMS助手可以为您提供相关帮助和建议。例如，您可以提问：“我想创建一张student表，sql怎么写？” DMS使用帮助：当您想要了解DMS的特定功能或概念，或在使用DMS过程中遇到困难时，DMS助手可以为您提供解释和指导。例如，您可以提问：“DMS中的团队是什么意思？” 为了便于您核实答案的准确性，DMS助手在提供解答的同时，会附带官方文档的参考链接。这不仅方便您进行信息核实，也有助于您对相关主题进行更深入的学习和探索。 前提条件 用户已登录数据管理服务。 注意事项 请避免过于频繁发送消息，系统对消息的发送频率有限制。 每个对话允许的消息数量最多为100条。一旦达到上限，您将无法在当前对话中继续发送消息。如需继续提问，请新建一个对话。 您可以保留的历史对话数量上限为500条。如果达到这个限制，您将无法创建新的对话。在这种情况下，请考虑删除一些不再需要的旧对话，以释放空间供新的对话使用。

导出流程 您可以将数据架构中已创建的流程导出到文件中。 1.在数据架构控制台，单击左侧导航树中的“流程设计”，进入流程设计页面。 2.单击流程列表上方的“导出”按钮，等待几秒钟后，页面右上角提示“流程导出成功”，可以查看导出的流程。 说明 “主题”或“流程”作为层级联动性质, 导出均默认为全量导出, 不支持筛选。 导入流程 1.在数据架构控制台，单击左侧导航树中的“流程设计”，进入流程设计页面。 2.单击流程列表上方的“导入”按钮导入流程。 3.在“导入流程”对话框中，根据页面提示配置如下参数，然后先单击“添加文件”后，再单击“上传文件”。 下表为导入配置参数说明 参数名 说明 更新已有数据 如果所要导入的流程，在DataArts Studio数据架构中已经存在，是否更新已有的流程。支持以下选项： 不更新 ：当流程已存在时，将直接跳过，不处理。 更新 ：当流程已存在时，更新已有的流程信息。 在导入流程时，只有创建或更新操作，不会删除已有的流程。 上传模板 选择所需导入的流程设计文件。 所需导入的流程设计文件，可以通过以下两种方式获得。 下载流程模板并填写模板： 在“导入配置”页签内，单击“下载流程模板”下载模板，然后根据业务需求填写好模板中的相关参数并保存后，先添加再上传，完成模板上传。模板参数的详细描述请参见下表。 导出的流程 ： 您可以将某个DataArts Studio实例的数据架构中已建立的流程设计信息导出到Excel文件中。导出后的文件可用于导入。导出流程的操作请参见上方“导出流程”。 下载的流程模板参数如下表所示，其中名称前带“ ”的参数为必填参数，名称前未带“ ”的参数为可选参数。一个流程需要填写一条记录。 参数名 说明 上级流程 第一层的流程，其上级流程为空，不用填。 非第一层的流程，其上级流程不能为空。上级流程为多级流程时，流程之间以“/”分隔。例如“集成产品开发/开发生命周期”。 名称 流程名称。 责任人 流程的责任人，可以手动输入名字或直接选择已有的责任人。 描述 流程的描述信息。 4. 导入结果会在“导入流程”对话框的“上次导入”中显示。如果导入结果为“成功”，单击“关闭”完成导入。如果导入失败，您可以在“备注”列查看失败原因，将模板文件修改正确后，再重新上传。

引入依赖库 支持的依赖库说明 FunctionGraph支持引入标准库及第三方依赖库。 标准库 对于标准库，无论是在线编辑或是线下开发打包上传至FunctionGraph，均可以直接在代码中引入，使用其功能。 FunctionGraph支持的非标准库 FunctionGraph内置一些三方件，如下表所示。像标准库一样，在编写代码时直接引入，使用其功能。 Node.js Runtime集成的三方件 名称 功能 版本号 q 异步方法封装 1.5.1 co 异步流程控制 4.6.0 lodash 常用工具方法库 4.17.10 esdkobsnodejs OBS sdk 2.1.5 express 极简web开发框架 4.16.4 fgsexpress 在FunctionGraph和API Gateway之上使用现有的Node.js应用程序框架运行无服务器应用程序和REST API 。提供的示例允许您使用Express框架轻松构建无服务器Web应用程序/服务和RESTful API 。 1.0.1 request 简化http调用，支持HTTPS并默认遵循重定向 2.88.0 Python Runtime支持的非标准库 模块 功能 版本号 dateutil 日期/时间处理 2.6.0 requests http库 2.7.0 httplib2 httpclient 0.10.3 numpy 数学计算 1.13.1 redis redis客户端 2.10.5 obsclient OBS客户端 smnsdk 访问云smn服务 1.0.1 其他第三方库（除了上面表格列举的非标准三方库，FunctionGraph没有内置别的非标准三方库） 将依赖的第三方库打包，上传至OBS桶，在创建函数时配置依赖包的OBS存储地址，在函数代码中即可使用其功能。

本文介绍如何批量更新、删除或插入数据。 批量更新 常用的批量更新为 update …… set …… from(values()) as ……，将values的值构成虚表，统一更新。 update table1 set col2tmp.col2 from (values (XXX,'XXX'),(XXX,'XXX'),(XXX,'XXX')) as tmp (col1,col2) where test.col1tmp.col1; 批量删除 使用truncate，直接将表所有数据行截断，无法进行回滚。 truncate tablename; drop，也是直接将表全部删除，不可回滚。不同在于，drop会将整个表数据与表结构全部删除，truncate会保留表结构，即表可以继续使用。 drop tablename; 批量插入 使用 insert into ... select的方法，对数据源限制较多。 insert into table1(col1, col2) select col1 , col2 from table2; 使用insert into … values (), () … ，SQL编写麻烦，数据量多时，较难检查其正确性。 insert into tablename(col1, col2) values (XXX, 'XXX'), (XXX, 'XXX'); 使用三方工具或者编程语言实现批量处理（推荐） 使用SQL编写批量数据处理其实较为繁琐，原因是SQL语句较为冗余，也不便于检查错误。因而生产中最为常用的方式，是使用其他编程语言的数据库驱动，利用该语言的开发便利性，批量导入数据，例如java语言连接数据库使用的jdbc，搭配上合适的函数框架，可以很轻松实现批量操作数据。

本文主要介绍数据中台的数据源准备。 若您想在数据中台操作您的数据库或数据仓库，需先在数据中台的数据源管理页面，将数据库或数据仓库创建为数据中台的数据源，并将该计算资源绑定至数据中台相应的功能模块使用。例如，同步doris数据前，需先创建doris数据源，创建完成后可在数据集成模块选择该数据源，控制同步任务读取或写入的数据库或数据仓库。 当您建立了自己的数据源之后，就拥有了当前数据源的管理和授权权限（不包括数据权限），对于数据源来说，权限主要有两个层面。已公开的数据源 数据源配置操作说明 步骤一：在数据源接入管理页面，点击新建数据源，选择需要新建的数据源类型 在数据准备>数据源接入页面，点击【新建数据源】按钮，弹出数据源类型选择框。 以MySQL类型为例，将会跳转至数据源配置页面。不同的数据源类型，其配置项也不同。 步骤二：配置数据源基础信息 数据源基础信息包括以下内容： 配置项 配置说明 数据源名称 必填项，用户自定义的数据源英文名称，数据源英文名称有唯一性校验，数据源发布后不可更改。 数据源中文名称 必填项，用户自定义的数据源中文名称，数据源发布后不可更改。 数据源版本 数据源所属的版本信息，下拉选项，用于标识该数据源的版本。 数据源驱动 用于数据源连通的驱动文件包，驱动文件包的创建详见【2.3.5.1驱动管理操作说明】 数据源描述 数据源的补充信息 步骤三：配置数据源环境信息 每个数据源分为开发环境与生产环境两个环境。每个类型的数据源的配置项也不同。 两个环境的配置项相同，配置内容可以相同，也可以不相同。 以开发环境配置为例： 配置项 配置说明 IP：端口 以JDBC连接方式进行连接的数据源类型，需要配置其IP地址及对应端口。 数据库 用于区分数据源开发环境与生产环境的数据库名 认证方式 数据源安全保障机制，根据不同的数据源类型提供账密认证、kerberos认证等方式 用户名 若认证方式为账密认证，此处填写账户用户名 密码 若认证方式为账密认证，此处填写账户对应的密码 扩展参数 若连接数据源需要除上述配置项以外的配置项，在此处进行配置，以KV键值对的方式进行配置的输入。 步骤四：连通性测试 环境配置完成后，支持进行连通性测试，验证配置的正确性。 步骤五：数据源发布 当数据源连通性测试完成后，可以进行数据源的发布，发布后的数据就可以在后续模块中进行使用了。

术语 说明 日志项目 日志项目是用于管理日志服务的资源单元，通常可将某个独立项目/业务的日志对应至一个日志项目中。每个日志项目可包含多个日志单元。 日志单元 日志单元是进行日志数据的采集、存储、检索和分析的基本单元，日志数据以日志单元的方式进行管理，通常可将一个应用/服务下的日志采集至一个日志单元中。 日志 日志是应用系统运行过程中产生的记录数据，这些数据包括用户的操作、接口的访问、系统发生的错误等。通常以文本形式存储在应用系统所在的设备上。 采集器 云日志服务提供的日志采集工具。 主机组 主机组是一组需要采集日志的云主机列表，是一个虚拟分组，云日志服务通过主机组来管理所有需要通过采集器采集日志的云主机。 采集配置 采集配置是指采集器执行日志采集时的策略，包括文件采集路径、分词模式等。

本章节介绍DRDS最佳实践相关内容，从而帮助用户更好地使用DRDS。 章节名称 简介 分片数目的选择 介绍DRDS如何更合理地选择分片数目。 分片策略 介绍DRDS如何更合理地进行分片。 单片表和全局表 介绍了DRDS单片表和全局表的创建和使用。 读写分离 介绍了DRDS读写分离的配置与使用。 DRDS事务模型 介绍了DRDS提供针对分布式节点的场景下的分布式事务解决方案。 通过JDBC连接池连接DRDS 介绍了如何通过JDBC连接池与DRDS对接，实现数据操作。 数据迁移方案 介绍了通过数据同步工具进行DRDS数据迁移的详细操作步骤。 SQL使用规范 介绍了SQL使用规范的通用八个原则供用户参考。

本文介绍网络异常工具的使用方法。 对象存储ZOS提供网络异常工具。您可以在界面中，选择网络异常的问题，查询对应的解决方案。 使用方法 使用网络异常工具的步骤如下： 1. 点击进入网络异常工具。 2. 点击“常见网络异常”中的具体网络问题。工具当前支持4种常见网络异常问题，分别是：Connection refused、Connection timeout、Socket timeout、Connection reset。 3. 可以看到对应的问题原因及解决方案。

3.3 SM4工具类 import org.bouncycastle.jce.provider.BouncyCastleProvider; import javax.crypto.Cipher; import javax.crypto.KeyGenerator; import javax.crypto.SecretKey; import javax.crypto.spec.SecretKeySpec; import java.security.Security; public class SM4Util { static { Security.addProvider(new BouncyCastleProvider()); } // 生成SM4密钥 public static byte[] generateKey() { try{ KeyGenerator keyGenerator KeyGenerator.getInstance("SM4", "BC"); keyGenerator.init(128); // 可选 128 或 256 SecretKey secretKey keyGenerator.generateKey(); return secretKey.getEncoded(); } catch (Exception e) { //TODO 处理异常 } } // 加密 public static byte[] encrypt(byte[] keyBytes, byte[] data) { try{ SecretKeySpec keySpec new SecretKeySpec(keyBytes, "SM4"); Cipher cipher Cipher.getInstance("SM4/ECB/PKCS5Padding", "BC"); cipher.init(Cipher.ENCRYPTMODE, keySpec); return cipher.doFinal(data); } catch (Exception e) { //TODO 处理异常 } } // 解密 public static byte[] decrypt(byte[] keyBytes, byte[] encryptedData) { try{ SecretKeySpec keySpec new SecretKeySpec(keyBytes, "SM4"); Cipher cipher Cipher.getInstance("SM4/ECB/PKCS5Padding", "BC"); cipher.init(Cipher.DECRYPTMODE, keySpec); return cipher.doFinal(encryptedData); } catch (Exception e) { //TODO 处理异常 } } } 3.4 Hmacsm3工具类 import org.apache.commons.codec.binary.Base64; import org.bouncycastle.crypto.digests.SM3Digest; import org.bouncycastle.crypto.macs.HMac; import org.bouncycastle.crypto.params.KeyParameter; import java.security.SecureRandom; public class HmacSM3Util { / 计算 HMACSM3 @param key 密钥 @param data 数据 @return HMACSM3 值 / public static byte[] hmacSM3(byte[] key, byte[] data) { HMac hmac new HMac(new SM3Digest()); hmac.init(new KeyParameter(key)); hmac.update(data, 0, data.length); byte[] result new byte[hmac.getMacSize()]; hmac.doFinal(result, 0); return result; } / 生成指定长度的随机密钥 @param length 密钥长度（字节） @return 随机生成的密钥 / public static byte[] generateRandomKey(int length) { SecureRandom random new SecureRandom(); byte[] key new byte[length]; random.nextBytes(key); return key; } // 示例用法 public static void main(String[] args) { // 生成随机密钥 byte[] key generateRandomKey(16); // 16字节长度的随机密钥 // 待计算的数据 byte[] data "Hello, HMACSM3!".getBytes(); // 计算 HMACSM3 值 byte[] hmacValue hmacSM3(key, data); // 打印结果 System.out.println("HMACSM3 值: " + Base64.encodeBase64String(hmacValue)); } }

本文主要介绍如何使用备份创建镜像。 云主机备份支持将弹性云主机的备份创建为镜像，可利用镜像发放弹性云主机，达到快速恢复业务运行环境的目的。 当云主机被误删除的时候，可以使用云服务备份创建镜像达到恢复数据的目的。 前提条件 在进行本文操作之前，您需要完成以下准备工作： 请确保弹性云主机在备份前已完成如下操作： Linux弹性云主机优化并安装Cloudinit工具 Windows弹性云主机优化并安装Cloudbaseinit工具 创建镜像前备份的状态必须为“可用”，或者状态为“创建中”并在备份状态列显示“可用于创建镜像”时，才允许执行创建镜像操作。 说明 备份开始创建后会进入“创建中”的状态，一段时候过后，“创建中”的下方会出现“可用于创建镜像”的提示。此时，虽然备份仍在创建中，不能用于恢复，但是可以执行创建镜像的操作。 用于创建镜像的备份必须包含系统盘的备份。 仅支持使用弹性云主机的备份创建镜像，不支持使用物理机的备份创建镜像。 功能说明 考虑到由同一个备份创建的镜像都是相同的，为了节省镜像配额，一个备份只允许创建一个包含系统盘和所有数据盘的整机镜像，可通过这一个整机镜像发放多个弹性云主机。 已经创建过镜像的备份不允许手动或自动删除，如果想要删除备份，需要先删除该备份创建的镜像。如果备份是随备份策略产生，那在创建镜像后，该备份将不再计算在备份策略的保留规则内，即不会过期自动清理。 使用备份创建镜像时，镜像会对备份进行压缩，所以产生的镜像可能会比备份小。

态势感知SA与企业主机安全HSS服务的区别。 服务含义区别 态势感知（Situation Awareness，SA）是可视化威胁检测和分析的安全管理平台 。着重呈现全局安全威胁攻击态势，统筹分析多服务威胁数据和云上安全威胁，帮助企业构建全局安全体系，呈现全局安全攻击态势。 主机安全服务（Host Security Service，HSS）是以工作负载为中心的安全产品，集成了主机 安全、容器 安全和 网页防篡改 ，旨在解决混合云、多云数据中心基础架构中服务器工作负载的独特保护要求。 简而言之，SA是呈现全局 安全态势的服务，HSS是提升主机 和容器安全性的服务。 服务功能区别 SA通过采集 全网安全数据 （包括HSS、WAF、AntiDDoS等安全服务检测数据），使用大数据AI、机器学习等分析技术，从资产安全、威胁告警、基线检查维度，分类呈现资产安全状况。 HSS通过在主机中安装Agent，使用AI、机器学习和深度算法等技术分析主机中风险，并从HSS云端防护中心下发检测和防护任务，全方位保障主机安全。同时可从可视化控制台，管理主机Agent上报的安全信息。 SA与HSS主要功能区别： 功能项 子功能项 共同点 不同点 资产安全 主机资产 呈现主机资产的整体安全状态。 SA：仅支持同步HSS主机资产风险信息，列表呈现各主机资产的整体安全状况。 HSS：不仅支持呈现主机的安全状况，还支持深度扫描主机中的帐号、端口、进程、Web目录、软件信息和自启动任务。 资产安全 网站资产 SA：支持检查和扫描网站安全状态，列表呈现各网站资产的整体安全状况。 HSS：不支持该功能。 基线检查 云服务基线 SA：针对云服务关键配置项，从“安全上云合规检查1.0”、“护网检查”风险类别，了解云服务风险配置的所在范围和风险配置数目。 HSS：不支持该功能。 基线检查 主机基线 SA：不支持该功能。 HSS：针对主机，提供基线检查功能，包括检测复杂策略、弱口令及配置详情，包括对主机配置基线通过率、主机配置风险TOP5、主机弱口令检测、主机弱口令风险TOP5的统计。

函数计算提供了一个统一的执行环境，使得您的函数能够无缝地访问和集成各种云服务和其他资源。 无论是天翼云提供的服务如消息服务、对象存储服务、数据库服务，还是您自建的服务，甚至是调用其他函数计算实例，这些操作在函数内部执行时，与您在本地环境中的操作体验是一致的。 要实现这些服务的访问，您需要确保您的函数代码中包含了必要的依赖库。这些依赖库应当与您的函数代码一起被打包，并上传至函数计算平台。一旦部署完成，您的函数就可以在执行时调用这些依赖库，从而与外部服务进行交互。

本节为您介绍云迁移服务CMS中数据库迁移工具数据订阅快速配置,包括注意事项及操作步骤。 注意事项 本文仅简单介绍数据订阅的通用配置流程，不同情况下的高级配置请阅读数据订阅。 操作步骤 1. 进入数据订阅的任务列表界面。 2. 单击“创建订阅”按钮，进入订阅任务配置界面。 3. 填写订阅任务的参数信息。 4. 填写好源库信息后，单击测试连接按钮。 5. 通过连接测试后点击“下一步：选择订阅对象”。 6. 将需要订阅的表选中，并点击“>”箭头，将表移到右侧已选对象框中。 7. 确定需要订阅的表后，点击“下一步:启动”，启动订阅任务。 8. 启动订阅任务后，即可查看订阅任务实时进度。

数据集准备 数据集下载 使用 wget 工具从指定地址下载数据集文件。以下命令行下载 alpaca 数据集为例： python 下载数据 cd ./dataset wget cd.. 【备选】使用模乐社区下载权重 apt install gitlfs git lfs install git clone 此过程会将数据集文件存储到指定目录中，下载完成后请检查文件完整性，为后续的数据预处理环节做好准备。 数据集预处理 下载完成后，需对原始数据集进行预处理，以便适配模型训练的需求。以下是预处理的关键步骤： python 处理数据 mkdir ./dataset/llama27bhf/ python ./tools/preprocessdata.py input ./dataset/train00000of00001a09b74b3ef9c3b56.parquet tokenizernameorpath ./modelfromhf/llama27bhf/ outputprefix ./dataset/llama27bhf/alpaca workers 4 loginterval 1000 tokenizertype PretrainedFromHF 运行完成后，终端显示如下信息： 通过以上步骤，您已成功将原始数据集转换为可直接用于训练的数据格式，此时也可以在文件管理器中看到生成的数据预处理文件。 模型训练

数据集准备 1.数据集下载 使用 wget 工具从指定地址下载数据集文件。以下命令行下载 alpaca 数据集为例： plaintext 下载数据 cd ./dataset wget cd.. 【备选】使用模乐社区下载权重 apt install gitlfs git lfs install git clone 此过程会将数据集文件存储到指定目录中，下载完成后请检查文件完整性，为后续的数据预处理环节做好准备。 2.数据集预处理 下载完成后，需对原始数据集进行预处理，以便适配模型训练的需求。以下是预处理的关键步骤： plaintext 处理数据 mkdir ./dataset/llama27bhf/ python ./tools/preprocessdata.py input ./dataset/train00000of00001a09b74b3ef9c3b56.parquet tokenizernameorpath ./modelfromhf/llama27bhf/ outputprefix ./dataset/llama27bhf/alpaca workers 4 loginterval 1000 tokenizertype PretrainedFromHF 运行完成后，终端显示如下信息： 通过以上步骤，您已成功将原始数据集转换为可直接用于训练的数据格式，此时也可以在文件管理器中看到生成的数据预处理文件。 模型训练