全局字典文件用于精确去重,咨询一下,这个文件有什么备份措施吗?
查看了metadata backup的部分代码,应该是备份HBase上的数据,遇到列中没有数据的,判定是push down到HDFS上了,然后到HDFS上读取。但没有找到相关的对全局字典进行备份的逻辑。在构建全局字典任务结束后,也没有看到存放到HBase中这部分代码(好像元数据中确实没有)。 是暂时没有这个功能还是我遗漏掉了某部分代码逻辑?感谢指导!
全局字典文件用于精确去重,咨询一下,这个文件有什么备份措施吗?
查看了metadata backup的部分代码,应该是备份HBase上的数据,遇到列中没有数据的,判定是push down到HDFS上了,然后到HDFS上读取。但没有找到相关的对全局字典进行备份的逻辑。在构建全局字典任务结束后,也没有看到存放到HBase中这部分代码(好像元数据中确实没有)。 是暂时没有这个功能还是我遗漏掉了某部分代码逻辑?感谢指导!