在 GCP 的数据融合管道中,GCSFile 属性有一个名为“Regex path filter”的字段。它是如何工作的?。我没有得到这方面的适当文件。
1 回答
2
您可以在此处找到正则表达式文档。
它是如何工作的?它应用于文件名而不是整个路径。
例如,假设您有以下路径:gs://<my-bucket>/<my/complete/path>/
并且此路径中有一些 CSV 和 JSON 文件。
要仅过滤 CSV 文件,您将使用正则表达式.*\.csv
请注意,此正则表达式只会过滤您的路径之后开始的内容。
于 2019-12-30T13:13:37.240 回答