我想玩Google Cloud Pub/Sub并在Dataflow中处理消息。Pub/Sub中是否有任何公共数据提要可供我开始使用?
在Dataflow WordCount示例中,输入是从Cloud Storage中的文件读取的,gs://dataflow-sample/shaverspeare/kinglear. txt
。似乎所有项目都可以访问dataflow-sample
,这对于入门来说非常方便。Pub/Sub有类似的吗?
目前,Google将此公共主题项目/pubsub-public-data/topic/taxirides-realtime维护为Cloud Dataflow代码实验室的一部分。
您可以在此处找到有关如何使用它的更多信息。
此外,您可以将数据流与BigQuery一起使用。Google提供了这组全面的公共数据。
什么是Cloud Pub/Sub中的公共数据集?在Cloud Pub/Sub中,您有主题、向这些主题发送消息的发布者和从这些主题接收消息的订阅消费者。每个主题都属于一个项目,因此拥有公共主题是没有意义的,如果这是您要问的。