ListAzureBlobStorage
描述:
从Azure云存储容器中获取Blob列表。 通过配合FetchAzureBlobStorage组件来获取更多Blob细节. 该组件仅能运行在集群模式的主节点上。如果选择了新的主节点,则新节点可以在上一个节点停止的位置开始,而不会有复制的数据。
标签:
azure, microsoft, cloud, storage, blob, 微软, 云存储
参数:
如下列表中,必填参数则标识为加粗. 其他未加粗参数,则表示为可选参数。表中同时提到参数默认值设置, 参数还支持 表达式语言, 并且 如果将一个参数认定为"敏感", 表示是加密状态. 在输入一个敏感参数时, 确保 orchsym.properties 文件中存在属性设置 orchsym.sensitive.props.key.
名字 | 默认值 | 允许值列表 | 描述 |
---|---|---|---|
容器名 | 指定Azure云存储容器的名字 支持表达式语言 (仅支持变量) | ||
SAS令牌 | 共享访问的签名令牌, 包括开头的'?'。 指定SAS令牌(推荐)或帐户密钥。允许将SAS令牌存储为流文件属性存在一定的风险。虽然它通过允许从数据流属性动态提取帐户名来提供更灵活的流,但必须注意限制对事件来源数据的访问(例如,通过严格控制控制此组件的数据朔源策略),则数据朔源应该放在加密的磁盘分区上 敏感状态 支持表达式语言 (仅支持变量) | ||
云存储账号 | 指定云存储账号。允许将SAS令牌存储为流文件属性存在一定的风险。虽然它通过允许从数据流属性动态提取帐户名来提供更灵活的流,但必须注意限制对事件来源数据的访问(例如,通过严格控制控制此组件的数据朔源策略),则数据朔源应该放在加密的磁盘分区上 敏感状态 支持表达式语言 (仅支持变量) | ||
云存储账号秘钥 | 指定云存储账号的秘钥。 这是一个类似管理员的密码,提供对此帐户中每个容器的访问权限。建议使用共享访问签名(SAS)令牌,而不是使用策略进行细粒度控制。 允许将SAS令牌存储为流文件属性存在一定的风险。虽然它通过允许从数据流属性动态提取帐户名来提供更灵活的流,但必须注意限制对事件来源数据的访问(例如,通过严格控制控制此组件的数据朔源策略),则数据朔源应该放在加密的磁盘分区上 敏感状态 支持表达式语言 (仅支持变量) | ||
前缀 | 指定用于搜索列表的前缀 支持表达式语言 (仅支持变量) | ||
代理配置 | 控制器服务API: ProxyConfigurationService 实现: StandardProxyConfigurationService | 指定网络请求的代理配置服务,支持HTTP, SOCKS |
连线:
名字 | 描述 |
---|---|
success | 所有接收到的数据将输出到此连线 |
读取属性:
未提供。
写入属性:
名字 | 描述 |
---|---|
azure.container | Azure容器名字 |
azure.blobname | Azure Blob名字 |
azure.primaryUri | Blob内容的主地址 |
azure.secondaryUri | Blob内容的第二地址 |
azure.etag | Azure Blob的Etag |
azure.length | Blob的长度 |
azure.timestamp | Azure Blob的时间戳 |
mime.type | Azure Blob内容的Mime类型 |
lang | 内容的语言代码 |
azure.blobtype | Blob的类型,可以是page或block类型 |
状态管理:
范围 | 描述 |
---|---|
CLUSTER | 在获取了Blob列表后,将存储最新的Blob时间戳。这允许组件仅列出下次运行组件时在此日期之后添加或修改的Blob。状态会存储在整个集群中,因此该组件只能在主节点上运行,并且如果选择了新的主节点,则新节点可以在上一个节点停止的位置开始,而不会有复制的数据。 |
限制:
该组件没有限制
输入流要求:
组件禁止提供输入流。
系统资源考量:
未提供。
参考:
DeleteAzureBlobStorage, FetchAzureBlobStorage, PutAzureBlobStorage