Filter 类
生成新的 DynamicFrame,其中包含满足指定谓词函数的输入 DynamicFrame 中的记录。
示例
我们建议您使用 DynamicFrame.filter() 方法在 DynamicFrame 中筛选记录。要查看代码示例,请参阅 示例:使用筛选条件获取筛选后的字段选择。
方法
__call__(frame, f, transformation_ctx="", info="", stageThreshold=0, totalThreshold=0))
返回新的 DynamicFrame,其通过从满足指定谓词函数的输入 DynamicFrame 中选择记录生成。
frame– 要将指定筛选函数应用到的源DynamicFrame(必需)。-
f– 要应用到DynamicFrame中的每个DynamicRecord的谓词函数。该函数必须将DynamicRecord作为实际参数,并且如果DynamicRecord满足筛选要求,则返回 True,否则返回 False(必需)。一个
DynamicRecord表示DynamicFrame中的一条逻辑记录。其类似于 SparkDataFrame中的一行,但其具有自描述性,可用于不符合固定架构的数据。 transformation_ctx– 用于标识状态信息的唯一字符串 (可选)。info– 与转换中的错误关联的字符串(可选)。stageThreshold– 在转换出错之前可能在其中发生的最大错误数(可选)。默认值为 0。totalThreshold– 在处理出错之前可能全面发生的最大错误数(可选)。默认值为 0。
apply(cls, *args, **kwargs)
继承自 GlueTransform apply。
name(cls)
继承自 GlueTransform 名称。
describeArgs(cls)
继承自 GlueTransform describeArgs。
describeReturn(cls)
继承自 GlueTransform describeReturn。
describeTransform(cls)
继承自 GlueTransform describeTransform。
describeErrors(cls)
继承自 GlueTransform describeErrors。
describe(cls)
继承自 GlueTransform describe。