我正在开发一个基本上 stores user event logs in a database and shows insights about user action 的node.js应用程序 . 要实现此事件,必须使用 Mapreduce 作业进行分析,该作业将运行 once a day automatically (每晚) .
我完全迷失了,因为有几种技术,如果不使用命令行就找不到办法,也没有关于调度的信息( I want that the whole analysis process to be entirely automated )
拜托,您能否就我应该使用哪些谷歌技术或在哪里找到一个好的教程提供建议?
谢谢
1 回答
你想看看:
Dataproc(开箱即可运行Hadoop / Spark作业)
Dataflow(使用Dataflow / Beam编程模型开发'pipelines')