多表利用DIH批量导入数据并建立索引注意事项

 2023-09-16 阅读 24 评论 0

摘要: 如果希望同时对多个表进行全文检索,那我们该如何处理呢?利用DIH导入数据并建立索引时。schema.xml中配置了uniqueKey为id <uniqueKey>id</uniqueKey>   如果多表主键都为id的话索引会被覆盖 <!--deltaImportQuery和deltaQuery为增量导入时使

 如果希望同时对多个表进行全文检索,那我们该如何处理呢?利用DIH导入数据并建立索引时。schema.xml中配置了uniqueKey为id

<uniqueKey>id</uniqueKey>

  如果多表主键都为id的话索引会被覆盖

复制代码
    <!--deltaImportQuery和deltaQuery为增量导入时使用。--><entity name="case"  pk="id"query="SELECT id,title, summary, 'case' as type FROM case"deltaImportQuery="SELECT id, title, summary, 'case' as type from case WHERE id='${dih.delta.id}'"deltaQuery="SELECT id, title, summary, 'case' as type FROM case  WHERE create_time > '${dih.last_index_time}'"><!--field用于配置schema.xml中field和数据库字段的对应关系。把一个数据表导入另一个数据库,column:数据库中字段名称,name:schema.xml中配置的名称--><field column="id" name="id"/><field column="title" name="title"/>       <field column="summary" name="summary"/>  </entity><!--deltaImportQuery和deltaQuery为增量导入时使用。--><entity name="casetest"  pk="id"query="SELECT id,title, summary, 'case_test' as type FROM casetest"deltaImportQuery="SELECT id, title, summary, 'case_test' as type from casetest WHERE id='${dih.delta.id}'"deltaQuery="SELECT id, title, summary, 'case_test' as type FROM casetest  WHERE create_time > '${dih.last_index_time}'"><!--field用于配置schema.xml中field和数据库字段的对应关系。column:数据库中字段名称,name:schema.xml中配置的名称--><field column="id" name="id"/><field column="title" name="title"/>       <field column="summary" name="summary"/><field column="type" name="type"/></entity>
复制代码

  由于id是唯一键,如果id重复索引会被覆盖掉。数据库为什么要建立索引、此时可以加个简易的标识,以便构造不同表的uniqueKey

  修改后配置文件

复制代码
    <!--deltaImportQuery和deltaQuery为增量导入时使用。--><entity name="case"  pk="id"query="SELECT concat('case_Type_', id) as id,title, summary, 'case' as type FROM case"deltaImportQuery="SELECT concat('case_Type_', id) as id, title, summary, 'case' as type from case WHERE id='${dih.delta.id}'"deltaQuery="SELECT concat('case_Type_', id) as id, title, summary, 'case' as type FROM case  WHERE create_time > '${dih.last_index_time}'"><!--field用于配置schema.xml中field和数据库字段的对应关系。column:数据库中字段名称,name:schema.xml中配置的名称--><field column="id" name="id"/><field column="title" name="title"/>       <field column="summary" name="summary"/>  </entity><!--deltaImportQuery和deltaQuery为增量导入时使用。可以在多个列上创建复合索引吗,--><entity name="casetest"  pk="id"query="SELECT concat('case_test_Type_', id) as id,title, summary, 'case_test' as type FROM casetest"deltaImportQuery="SELECT concat('case_test_Type_', id) as id, title, summary, 'case_test' as type from casetest WHERE id='${dih.delta.id}'"deltaQuery="SELECT concat('case_test_Type_', id) as id, title, summary, 'case_test' as type FROM casetest  WHERE create_time > '${dih.last_index_time}'"><!--field用于配置schema.xml中field和数据库字段的对应关系。column:数据库中字段名称,name:schema.xml中配置的名称--><field column="id" name="id"/><field column="title" name="title"/>       <field column="summary" name="summary"/><field column="type" name="type"/></entity>
复制代码





本文转自秋楓博客园博客,原文链接:http://www.cnblogs.com/rwxwsblog/p/5053320.html,如需转载请自行联系原作者

版权声明:本站所有资料均为网友推荐收集整理而来,仅供学习和研究交流使用。

原文链接:https://hbdhgg.com/3/69046.html

发表评论:

本站为非赢利网站,部分文章来源或改编自互联网及其他公众平台,主要目的在于分享信息,版权归原作者所有,内容仅供读者参考,如有侵权请联系我们删除!

Copyright © 2022 匯編語言學習筆記 Inc. 保留所有权利。

底部版权信息