在Google Cloud中，如何查看与gPubSub主题/订阅匹配的所有DataFlow流源/接收器？

提问者：小点点

我们有100个Google Cloud PubSub主题/订阅、DataFlow和BigQuery/BigTable表。

我可以列出pubsub主题：gcloudbetapubsub主题列表我可以使用xargs并为每个主题列出其订阅：gcloudbetapubsub主题列表-订阅$topic_id

我可以列出所有的BigQuery表：bq ls[project_id：][dataset_id]和所有的BigTable表：cbt-project$project-实例$实例ls

我可以列出所有正在运行的DataFlow作业：gcloudbetadataflow作业列表--status=active但我不能列出所有的源和汇：gcloudbetadataflow作业描述$job_id-不显示此信息

如果我们有1000个流、队列

我的问题是：使用Google Cloud工具（控制台和/或CLU），如何获得我们系统流源的鸟瞰图

共1个答案

匿名用户

每个作业的控制台中都有一些可用的信息。

如果单击PubSubIO.Read步骤，您可以在那里看到Pubsub主题。在管道摘要中，您可以看到管道选项，其中可以包含输出表名称和您指定的其他选项。

后一个摘要在CLI中可用。当您使用“--ful”检索信息时，它位于“displayData”下。