我是Scala&Spark的新手 . 我们正在尝试使用DataFrames将一堆Informatica映射(使用复杂的转换)转换为Spark . 我能够将其中一个Informatica映射转换为Spark通过Scala和DataFrames,其中所有业务规则都嵌入在Scala spark DataFrame中 .

我们是否可以实施任何框架或方法,以便所有业务规则与框架分离 . 每当业务规则发生变化时,我都不必更改框架,反之亦然 .