Elasticsearch之Template详解_elasticsearchtemplate,作为一个软件测试程序员
上面我们讲了Index Template,主要是在创建索引的时候,来根据template的统配规则,确定当前创建的索引是否符合,从而将template里面的配置信息应用在我们新创建的索引中,通常应用于要生成相同配置的索引场景下,比如日志数据管理、统一索引管理等。主要是应用于具体的索引中去的,定义在某个索引的mapping设置中,会根据我们设定的数据类型,匹配一些设定的规则,来动态设定字段类型。这个
先自我介绍一下,小编浙江大学毕业,去过华为、字节跳动等大厂,目前阿里P7
深知大多数程序员,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!
因此收集整理了一份《2024年最新软件测试全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上软件测试知识点,真正体系化!
由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新
如果你需要这些资料,可以添加V获取:vip1024b (备注软件测试)
正文
示例2
再创建一个模板,匹配规则为:索引的名称以template开头的,设定分片数量为1,副本数量为3。
date_detection
:mapping设置,如果字符串符合日期的类型,就自动匹配为日期,true为开启,false为关闭
numeric_detection
:mapping设置,如果字符串是数字的话,自动映射数字类型。
put _template/template_test
{
“index_patterns”:[“template*”],
“order”:1,
“settings”:{
“number_of_shards”:1,
“number_of_replicas”:3
},
“mappings”:{
“date_detection”:false,
“numeric_detection”:true
}
}
我们创建一个匹配通配规则的索引,获取信息。可以看到如下,匹配到了template_test
,因为template_default
的order为0,所以以template_test
的分片副本设置为准。
put template_index2
get template_index2
{
“template_index2” : {
“aliases” : { },
“mappings” : {
“date_detection” : false,
“numeric_detection” : true
},
“settings” : {
“index” : {
“routing” : {
“allocation” : {
“include” : {
“_tier_preference” : “data_content”
}
}
},
“number_of_shards” : “1”,
“provided_name” : “template_index2”,
“creation_date” : “1640524532090”,
“number_of_replicas” : “3”,
“uuid” : “QsP_eZuhQKWiaGvF_6ux4A”,
“version” : {
“created” : “7160099”
}
}
}
}
}
我们来插入一个文档,再获取mapping,看看ES是否自动将日期和数字做了转换。
put template_index2/_doc/1
{
“date”:“2021-12-01T00:00:00.000Z”,
“num”:“10000”
}
{
“template_index2” : {
“mappings” : {
“date_detection” : false,
“numeric_detection” : true,
“properties” : {
“date” : {
“type” : “text”,
“fields” : {
“keyword” : {
“type” : “keyword”,
“ignore_above” : 256
}
}
},
“num” : {
“type” : “long”
}
}
}
}
}
可以看到,由于我们设置的 "date_detection":false,"numeric_detection":true
。所以就算匹配到了date类型也会给到text的字段类型,数值类型被匹配到了long类型。
示例3
我们再创建一个匹配模板的索引,指定setting的分片和副本数量,看看是否会以我们设定的为准。
put template_index3
{
“settings”:{
“number_of_shards”:2,
“number_of_replicas”:2
}
}
{
“template_index3” : {
“aliases” : { },
“mappings” : {
“date_detection” : false,
“numeric_detection” : true
},
“settings” : {
“index” : {
“routing” : {
“allocation” : {
“include” : {
“_tier_preference” : “data_content”
}
}
},
“number_of_shards” : “2”,
“provided_name” : “template_index3”,
“creation_date” : “1640524899092”,
“number_of_replicas” : “2”,
“uuid” : “nW7wNjmmQaqjgasWG8_7zQ”,
“version” : {
“created” : “7160099”
}
}
}
}
}
由索引的mapping信息可以看到,当前这个索引时匹配到了template_test
这个模板的,但是由于我们在创建索引的时候指定了分片和副本的信息,所以以我们指定的为准。
二、Dynamic Template
上面我们讲了Index Template,主要是在创建索引的时候,来根据template的统配规则,确定当前创建的索引是否符合,从而将template里面的配置信息应用在我们新创建的索引中,通常应用于要生成相同配置的索引场景下,比如日志数据管理、统一索引管理等。
Dynamic Template主要是应用于具体的索引中去的,定义在某个索引的mapping设置中,会根据我们设定的数据类型,匹配一些设定的规则,来动态设定字段类型。
比如:字符串全匹配Keyword、is开头的字段设置为boolean,long_开头的字段设置为long等等…都可以由我们来设置模板动态匹配,为匹配到的字段自定设置我们自定义的字段类型。
示例1
比如我们创建一个索引,需要将索引中的字段name中的子字段给copy_to到一个新字段full_name
以供查询,但是name中的address属性是不需要的。
put template_mapping
{
“mappings”:{
“dynamic_templates”:[
{
“full_name”:{
“path_match”:“name.*”,
“path_unmatch”:“*.address”,
“mapping”:{
“type”:“text”,
“copy_to”:“full_name”
}
}
}
]
}
}
然后我们插入一个文档
put template_mapping/_doc/1
{
“name”:{
“first”:“程”,
“middle”:“大”,
“last”:“帅”,
“address”:“上海市汤臣一品”
}
}
获取下ES根据我们设定的Dynamic Template自动生成的mapping。
get template_mapping/_mapping
{
“template_mapping” : {
“mappings” : {
“dynamic_templates” : [
{
“full_name” : {
“path_match” : “name.*”,
“path_unmatch” : “*.address”,
“mapping” : {
“copy_to” : “full_name”,
“type” : “text”
}
}
}
],
“date_detection” : false,
“numeric_detection” : true,
“properties” : {
“full_name” : {
“type” : “text”,
“fields” : {
“keyword” : {
“type” : “keyword”,
“ignore_above” : 256
}
}
},
“name” : {
“properties” : {
“address” : {
“type” : “text”,
“fields” : {
“keyword” : {
“type” : “keyword”,
“ignore_above” : 256
}
}
},
“first” : {
“type” : “text”,
“copy_to” : [
“full_name”
]
},
“last” : {
“type” : “text”,
“copy_to” : [
“full_name”
]
},
网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
需要这份系统化的资料的朋友,可以添加V获取:vip1024b (备注软件测试)
一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
“copy_to” : [
“full_name”
]
},
网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
需要这份系统化的资料的朋友,可以添加V获取:vip1024b (备注软件测试)
[外链图片转存中…(img-VKKVN7Ul-1713299806226)]
一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
开放原子开发者工作坊旨在鼓励更多人参与开源活动,与志同道合的开发者们相互交流开发经验、分享开发心得、获取前沿技术趋势。工作坊有多种形式的开发者活动,如meetup、训练营等,主打技术交流,干货满满,真诚地邀请各位开发者共同参与!
更多推荐
所有评论(0)