Skip to main content

ListAzureBlobStorage

描述:

从Azure云存储容器中获取Blob列表。 通过配合FetchAzureBlobStorage组件来获取更多Blob细节. 该组件仅能运行在集群模式的主节点上。如果选择了新的主节点,则新节点可以在上一个节点停止的位置开始,而不会有复制的数据。

标签:

azure, microsoft, cloud, storage, blob, 微软, 云存储

参数:

如下列表中,必填参数则标识为加粗. 其他未加粗参数,则表示为可选参数。表中同时提到参数默认值设置, 参数还支持 表达式语言, 并且 如果将一个参数认定为"敏感", 表示是加密状态. 在输入一个敏感参数时, 确保 orchsym.properties 文件中存在属性设置 orchsym.sensitive.props.key.

名字默认值允许值列表描述
容器名指定Azure云存储容器的名字

支持表达式语言 (仅支持变量)
SAS令牌共享访问的签名令牌, 包括开头的'?'。 指定SAS令牌(推荐)或帐户密钥。允许将SAS令牌存储为流文件属性存在一定的风险。虽然它通过允许从数据流属性动态提取帐户名来提供更灵活的流,但必须注意限制对事件来源数据的访问(例如,通过严格控制控制此组件的数据朔源策略),则数据朔源应该放在加密的磁盘分区上

敏感状态
支持表达式语言 (仅支持变量)
云存储账号指定云存储账号。允许将SAS令牌存储为流文件属性存在一定的风险。虽然它通过允许从数据流属性动态提取帐户名来提供更灵活的流,但必须注意限制对事件来源数据的访问(例如,通过严格控制控制此组件的数据朔源策略),则数据朔源应该放在加密的磁盘分区上

敏感状态
支持表达式语言 (仅支持变量)
云存储账号秘钥指定云存储账号的秘钥。 这是一个类似管理员的密码,提供对此帐户中每个容器的访问权限。建议使用共享访问签名(SAS)令牌,而不是使用策略进行细粒度控制。 允许将SAS令牌存储为流文件属性存在一定的风险。虽然它通过允许从数据流属性动态提取帐户名来提供更灵活的流,但必须注意限制对事件来源数据的访问(例如,通过严格控制控制此组件的数据朔源策略),则数据朔源应该放在加密的磁盘分区上

敏感状态
支持表达式语言 (仅支持变量)
前缀指定用于搜索列表的前缀

支持表达式语言 (仅支持变量)
代理配置控制器服务API:
ProxyConfigurationService
实现:
StandardProxyConfigurationService
指定网络请求的代理配置服务,支持HTTP, SOCKS

连线:

名字描述
success所有接收到的数据将输出到此连线

读取属性:

未提供。

写入属性:

名字描述
azure.containerAzure容器名字
azure.blobnameAzure Blob名字
azure.primaryUriBlob内容的主地址
azure.secondaryUriBlob内容的第二地址
azure.etagAzure Blob的Etag
azure.lengthBlob的长度
azure.timestampAzure Blob的时间戳
mime.typeAzure Blob内容的Mime类型
lang内容的语言代码
azure.blobtypeBlob的类型,可以是page或block类型

状态管理:

范围描述
CLUSTER在获取了Blob列表后,将存储最新的Blob时间戳。这允许组件仅列出下次运行组件时在此日期之后添加或修改的Blob。状态会存储在整个集群中,因此该组件只能在主节点上运行,并且如果选择了新的主节点,则新节点可以在上一个节点停止的位置开始,而不会有复制的数据。

限制:

该组件没有限制

输入流要求:

组件禁止提供输入流。

系统资源考量:

未提供。

参考:

DeleteAzureBlobStorage, FetchAzureBlobStorage, PutAzureBlobStorage