跳转到主要内容
Google Storage 端口从 Google Storage 云存储服务中上传和下载文件。

核心功能

  • Google Cloud Storage 集成,支持 OAuth 身份验证及令牌(Token)自动刷新
  • 基于存储桶(Bucket)的文件组织,支持双向文件传输
  • 支持 Glob 模式匹配过滤,并提供下载后可选删除文件及覆盖保护功能
  • 提供可选的缓存功能,确保仅下载新增或更新的文件

概述

每个 Google Storage 端口与一个特定的 Google Storage 账号连接。在远程存储中,存储桶被设置为上传和/或下载目标。可以在存储桶中指定上传和下载路径,并且过滤规则只用于发送和接收指定的文件名和/或文件扩展名。 工作流中到达 Google Storage 端口的文件将被上传至上传目标文件夹,在下载目标文件夹下的文件会被下载并进入 工作流。 账号认证基于 OAuth,因此使用 Google Storage 端口连接之前必须先获取 OAuth 认证。一旦与 Google 的认证完成,Google Storage 端口会处理刷新 OAuth 令牌的过程,以确保身份验证会一直持续。

端口配置

本部分包含所有可配置的端口属性。

设置

授权

与授权访问远程存储有关的设置。
Google 在生成 OAuth 认证时可能需要 OAuth 回调/重定向 URL。 的回调/重定向 URL 与应用程序托管处的地址和端口相同,加下面的源路径:src/oauthCallback.rst。例如,如果 托管在 ‘mydomain.com’ 的 8001 端口,应指定下面的 URL 为回调/重定向 URL:http://mydomain.com:8001/src/oauthCallback.rst

服务器配置

与目标存储服务器相关的设置。

发送

与上传文件到远程存储服务有关的设置。

接收

与从远程存储中下载文件有关的设置。

缓存

与缓存和比较多次下载之间文件相关的设置。
启用缓存时,文件名不区分大小写。例如,端口无法区分 TEST.TXTtest.txt

高级设置

高级设置

先前目录中没有包含的设置。

代理配置

消息

日志

杂项

自动化

自动化设置

与端口自动处理文件有关的设置。

性能

告警选项卡

SLA 选项卡

建立连接

Google Storage 需要 OAuth 认证以建立连接。OAuth 认证应该通过 Google Console 从 Google 直接获取,然后在设置选项卡上的以下端口字段中指定:
  • OAuth 客户端 ID
  • OAuth 客户端密码
Google 在生成 OAuth 认证时可能需要 OAuth 回调/重定向 URL。 的回调/重定向 URL 与应用程序托管处的地址和端口相同,加下面的源路径:src/oauthCallback.rst。例如,如果 托管在 ‘mydomain.com’ 的 8001 端口,应指定下面的 URL 为回调/重定向 URL:http://mydomain.com:8001/src/oauthCallback.rst 一旦与 Google 的认证完成,Google Storage 端口会处理刷新 OAuth 令牌的过程,以确保身份验证会一直持续。

上传和下载

上传

要上传文件,将服务器配置部分的 桶名称 字段设置为目标存储桶,然后将发送部分的 远程文件夹 字段设置为文件应被上传的文件夹。每个 Google Storage 端口上传到一个特定的文件夹位置。 使用 覆盖远程文件 选项,可以确定是覆盖还是跳过远程文件夹中已存在的文件。 配置之后,放置在端口 事务 选项卡中的文件将会被上传至远程存储。如果 发送自动化 启用,上传将会自动进行;否则,可以通过 事务 选项卡发送单个文件。

下载

要下载文件,将接收部分的 远程文件夹 字段设置为下载文件的文件夹。多个下载文件夹可以使用逗号分隔。 可以将高级设置选项卡上的 接收过滤规则 字段设置为全局过滤规则,以指定应从远程存储下载哪些文件(例如 *.txt)。可以使用负模式来确定 下载哪些文件(例如 -*.tmp)。使用逗号分隔列表指定多个过滤规则。 使用 删除 选项用于切换是否从远程存储中删除成功下载的文件。 配置之后,将会根据 接收自动化设置的设置下载文件,或者在 事务 选项卡中通过点击 接收 按钮手动下载。

示例