postgresql – AWS Redshift从S3加载数据

发布时间：2020-12-13 15:52:44 所属栏目：百科来源：网络整理

导读：所以我正在尝试从S3存储桶中将数据加载到我的Redshift数据库中.我有一个表’Example’,其字段’timestamp’的格式为’YY-MM-DD HH：MM：SS’. 使用copy query加载数据,所以我可以加载特定的模式/前缀,但我想在某个时间戳之后加载数据,比如大于’2014-07-09 1

所以我正在尝试从S3存储桶中将数据加载到我的Redshift数据库中.我有一个表’Example’,其字段’timestamp’的格式为’YY-MM-DD HH：MM：SS’.

使用copy query加载数据,所以我可以加载特定的模式/前缀,但我想在某个时间戳之后加载数据,比如大于’2014-07-09 10:00:00′.我该如何处理？

解决方法

您有两种选择：

>在将文件加载到S3之前处理文件(并仅上载时间戳大于$SOME_TIMESTAMP的数据)
>使用COPY命令将文件加载到中间表中(可以是临时表 – 只要您保持在同一个会话中)然后运行：

insert into YOUR_ORIGINAL_TABLE (select * from YOUR_TEMP_TABLE where timestamp > WHATEVER_YOU_NEED)

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!