火花疊加dbfs過濾不被尊重

[拉曼]

我有一個拚花與一列g1模式文件

StructField (g1, IntegerType,真的)

現在我有一個查詢過濾g1。

SQL查看器中奇怪的是火花是加載該文件的所有行。

即使在物質計劃我可以看到“pushedFilter”狀態被設置。

這是創建一個增量dbfs表。

任何指針這將是有益的。

謝謝

[ajaypanday6781]

嗨@Raman Gupta請你分享你的代碼和物理計劃相同

[拉曼]

由於@Ajay Pandey請找到附加的物理方案。

查詢:選擇identityMap、segmentMembership _repo workEmail,人,住宅電話,workPhone, workAddress personalEmail,從final_segment_index_table_v2 homeAddress (g1 g1 < > = 128和256)。

謝謝