SQL很简单,如下: select * from test2 where `dt`=20210124 and `hour`=02 and `supply_id`=2027 limit 1000;
提交之后很快就finished,并且没有查询到任何数据。 但实际是有数据的,通过spark-sql确认过相同的语句可以查询到数据。 看了JM和TM的日志中有No more splits available。 目前来看貌似一个split也没有。这个应该是1.12的新sourceAPI。 不清楚是不是bug,还是有什么使用注意点呢?
