本文介绍: 注意:由于 Stream load同步导入方式,所以并不会在 Doris 系统记录导入信息用户无法异步通过查看导入命令看到 Stream load。待导入表的 Partition 信息,如果待导入数据属于指定的 Partition 则不会被导入。待导入数据函数变换配置,目前 Stream load 支持函数变换方法包含列的顺序变化以及表达式变换,其中表达式变换方法查询语句的一致。由于 Stream load 是一种同步的导入方式,所以导入的结果通过创建导入的返回值直接返回用户

Stream load 是一个同步的导入方式,用户通过发送 HTTP 协议发送请求本地文件数据流导入到 Doris 中。Stream load 同步执行导入并返回导入结果。用户可直接通过请求返回判断本次导入是否成功。

1 适用场景

Stream load 主要适用于导入本地文件,或通过程序导入数据流中的数据

目前Stream Load支持两个数据格式:CSV(文本)和JSON。

基本原理

下图展示了Stream load 的主要流程省略了一些导入细节

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注