存储过程命令对象
社区干货
分析一例 mysqldump bug
客户的命令中使用了 --all-databases 参数,备份命令如下:```sqlmysqldump -h 111.62.xx.xx -urudonx -p$password --all-databases --set-gtid-purged=OFF --master-data=2 --single-transaction --routines > all_databaes.sql```使用具有 super user 将备份文件导入到自建的测试环境中:```sqlmysql> source /root/all_databases.sql```待导入完成之后,问题可以复现,进行如下检查,发现没有任何存储过程和函数:```sql...
云原生环境下的日志采集、存储、分析实践
存储、查询、分析、可视化、告警以及消费投递,将日志的生命周期进行闭环。## Kubernetes 下日志采集的开源自建方案### 开源自建火山引擎早期为了快速上线业务,各团队基于开源项目搭建了自己的日志系统,以满足基本的日志查询需求,例如使用典型的开源日志平台 Filebeat+Logstash+ES+Kibana 的方案。但是在使用过程中,我们发现了开源日志系统的不足:- 各业务模块自己搭建日志系统,造成重复建设。- 以 ES 为中心的日志架构可...
云原生环境下的日志采集、存储、分析实践
存储、查询、分析、可视化、告警以及消费投递,将日志的生命周期进行闭环。 Kubernetes 下日志采集的开源自建方案 **开源自建**火山引擎早期为了快速上线业务,各团队基于开源项目搭建了自己的日志系统,以满足基本的日志查询需求,例如使用典型的开源日志平台 **Filebeat+Logstash+ES+Kibana** 的方案。但是在使用过程中,我们发现了开源日志系统的不足:* 各业务模块自己搭建日志系统,造成...
ECS 云服务器自定义镜像导入
## 实验名称云服务器自定义镜像导入## 实验介绍本期实验练习介绍了如何向火山引擎导入一个自定义镜像文件,并转换为镜像。在开始实验前需要先进行如下准备工作:- TOS对象存储中创建存储桶- 安装VirtualBox虚拟... 设置virtualbox命令的环境变量。打开控制面板—>点击环境变量—>选择“Path”,点击“新建”—>输入“C:\Program Files\Oracle\VirtualBox”—>点击完成。
特惠活动
存储过程命令对象-优选内容
存储过程命令对象-相关内容
跨账号迁移 vePFS 中的数据
您可以先将源数据迁移到相同地域的 TOS 存储桶,然后通过跨区域复制功能,将数据复制到与目的 vePFS 相同地域的 TOS 存储桶,实现数据的跨地域迁移。跨区域复制的详细说明,请参见跨区域复制。 操作步骤步骤一:将源端 vePFS 需要迁移的数据拷贝至对象存储本文以 centos 系统的 ECS 实例为例,介绍如何将对象存储的数据拷贝至 vePFS。 登录 ECS 实例。 执行以下命令,切换到 tmux,避免迁移过程中会话断开。 bash tmux new -s target1 ...
使用对象存储静态存储卷
本文介绍如何创建对象存储类型存储卷和存储卷声明,以及工作负载如何使用对象存储静态存储卷。 前提条件已创建容器服务集群,操作方法参见 创建集群。 确保当前集群已安装对象存储服务组件 csi-tos。操作方法,请参见... 单击存储卷列表左上角 创建存储卷。 在弹出的 创建存储卷 页面,完成参数配置。 配置项 说明 创建方式 选择存储卷的创建方式,目前支持静态创建。 名称 根据系统提示,自定义存储卷的名称,需确保存储卷名称在集群内...
将 vePFS 中的数据定时备份到对象存储
本文介绍通过 tosutil 工具,将 vePFS 上的数据备份至对象存储 TOS 的流程及操作步骤。 适用场景保存在 vePFS 的训练的核心数据,对数据安全性要求比较高,需要把数据进行定期备份。 训练过程中的 checkpoint 数据,定... 执行以下命令,创建用于存放备份脚本和备份日志信息的目录。本文以创建 backp 目录为例。 bash cd /optmkdir backup 执行以下命令,创建备份脚本,本文以 backup_vepfs_to_tos.sh为例,并使用文本编辑器打开。 bash ...
下载对象(cp)
您可以使用 cp 命令下载存储桶中的对象。 命令语法Linux/macOS下载单个对象 Bash ./tosutil cp tos://bucket/key file_urlfolder_url [-dryRun] [-tempFileDir=xxx] [-u] [-vchecksum] [-p=1] [-threshold=1048576... prefix String 批量操作时的对象名前缀。 -r Bool 执行批量上传、下载或复制操作。 -dryRun Bool 测试模式运行,不执行实际的上传、下载或复制操作。 -tempFileDir String 分片下载时保存临时文件的文...
Workspace功能总览
将数据上传并存储到存储桶中 Bio-OS中每个Workspace均对应一个tos对象存储桶,此存储桶信息可以从环境信息中查看,Workspace对应的存储桶可以存储一下内容: 用户自身的样本数据,可通过页面、命令行等方式上传 工作流运行过程中输出结果、运行日志等信息 Notebook 文件,如.ipynb文件 注意:在Notebook中分析中产生的数据不会存储到存储桶中,而是默认存储在Notebook所在Server本地,如有需要,需手动将数据复制到存储桶中。 在数据模...
使用 Terraform 管理对象存储
对象存储的方法。 关于实验 预计部署时间:30分钟 级别:初级 相关产品:TOS 受众: 通用 实验说明 点击此链接登录控制台。 如果您还没有账户,请点击此链接注册账户。 实验步骤 安装和初始化Terraform参考如下步骤安装 Terraform 登录Terraform官网或进入下载页,建议使用0.13.x或者更高的版本,下载对应操作系统的安装包。 解压安装包,并将terraform可执行文件所在目录添加到系统环境变量PATH中。 在命令行中执行如下命令验证配置...
删除桶、对象或分片上传任务(rm)
您可以使用 rm 命令删除桶及桶内的对象和分片任务。 删除桶 注意事项删除存储桶前,请确保桶内的对象及分片均已删除。 删除资源时需要工具会提示您进行二次确认,取值说明如下:y:表示确认删除。 n:表示不删除,不会执行删除操作。 命令格式Linux/macOSBash ./tosutil rm tos://bucket [-f] [-e=xxx] [-re=xxx] [-i=xxx] [-k=xxx] [-t=xxx] [-conf=xxx]WindowsBash tosutil rm tos://bucket [-f] [-e=xxx] [-re=xxx] [-i=xxx] [-k=...
创建存储桶(mb)
您可以通过 mb 命令创建存储桶。 命令语法Linux/macOSBash ./tosutil mb tos://bucket [-acl=xxx] [-sc=xxx] [-e=xxx] [-re=xxx] [-i=xxx] [-k=xxx] [-t=xxx] [-conf=xxx]WindowsBash tosutil mb tos://bucket [-acl=xxx] [-sc=xxx] [-e=xxx] [-re=xxx] [-i=xxx] [-k=xxx] [-t=xxx] [-conf=xxx] 参数说明通用可选参数的说明,请参见通用可选参数。 参数名 参数类型 描述 bucket String 存储桶名。存储桶命名规范,请参见常用概...
常见问题
过程中请勿对开发机进行任何操作,包括但不限于关机、重启及容器内读写数据等,否则将会导致镜像构建失败。 Q:基于开发机构建镜像时报推送失败A:如果您的镜像是推送到 CR 体验版的镜像仓库,单层镜像数据量超过 10GiB 或请求并发数超过 20 个时会推送失败。您可以将镜像保存到标准版镜像仓库,也可以在保存时排除非必要的文件或目录,例如临时数据文件、checkpoint 等。体验版镜像仓库的更多限制详见镜像仓库使用限制。 volc 命令行 Q...
