如何在hive sql中如用select id, name,age where age=20 在mongodb端进行过滤查询? 目前必须取消谓词下推才能正常执行,不然会报错 ,但取消谓词下推会把mongodb表所有的数据加载的hive表,这样是在hive端进行过滤的
MongoDB数据增量同步到Hive(方案一通过BSON文件映射)一、背景 随着monggo中数据量越来越大,全量同步到数仓,已不太现实,考虑增量同步的方式,我们在探索增量同步的过程中,方案不断在改进优化,这里记录一下我们mongo增量同步...