温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Elasticsearch单字段支持的最大字符数是多少

发布时间:2022-03-21 16:56:45 来源:亿速云 阅读:522 作者:iii 栏目:大数据

这篇文章主要介绍“Elasticsearch单字段支持的最大字符数是多少”,在日常操作中,相信很多人在Elasticsearch单字段支持的最大字符数是多少问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Elasticsearch单字段支持的最大字符数是多少”的疑惑有所帮助!接下来,请跟着小编一起来学习吧!

01

ignore_above的作用?

ES中用于设置超过设定字符后,不被索引或者存储。

Strings longer than the ignore_above setting will not be indexed or stored.

02

ignore_above用法

PUT ali_test

{

  "mappings": {

    "ali_type": {

        "properties": {

               "url": {

              "type":"keyword",

               "ignore_above":256

            },

               "url_long": {

              "type":"keyword"

            },

             "url_long_long": {

              "type":"keyword",

               "ignore_above":32766

            }

        }

    }

  }

}

03

当字符超过给定长度后,能否存入?

验证表名,对于以上mapping中设置的url,url_long,url_long_long3个字段。超过256字符的url,都可以存入。

3.1 keyword类型,普通长度验证

插入url长度为:1705个字符,如下所示:

post ali_test/ali_type/1

{

  "url" : "1705个字符的url"

}

url参考地址:http://t.cn/zH6FHG7

检索:

GET ali_test/ali_type/_search

{

  "query": {

    "term": {

"url" : "1705个字符的url"

}

}

}

返回结果:

{

  "took": 1,

  "timed_out": false,

  "_shards": {

    "total": 5,

    "successful": 5,

    "failed": 0

  },

  "hits": {

    "total": 0,

    "max_score": null,

    "hits": []

  }

}

结论:

1705个字符,url、url_long、url_long_long都可以存入,可以通过head插件查看结果。

但是url term检索无法检索返回结果,原因: url字段设置了"ignore_above":256,导致超出256个字符后不被索引。

Elasticsearch单字段支持的最大字符数是多少

3.2 对于keyword类型,临界长度验证

post 32767个字符的文档,报错如下:

{
    "error":{
        "root_cause":[
            {

                "type":"illegal_argument_exception",

                "reason":"Document contains at least one immense term in field="url_long" (whose UTF8 encoding is longer than the max length 32766), all of which were skipped.  Please correct the analyzer to not produce such terms.  The prefix of the first immense term is: '[104, 116, 116, 112, 58, 47, 47, 119, 119, 119, 46, 103, 111, 111, 103, 108, 101, 46, 99, 111, 109, 47, 115, 101, 97, 114, 99, 104, 63, 104]...', original message: bytes can be at most 32766 in length; got 32767"

            }
        ],
        "caused_by":{

            "type":"max_bytes_length_exceeded_exception",

            "reason":"max_bytes_length_exceeded_exception: bytes can be at most 32766 in length; got 32767"

        }
    },
    "status":400

}

post 32766个字符后,能提交成功,返回结果如下:

{

  "_index": "ali_test",

  "_type": "ali_type",

  "_id": "2000",

  "_version": 1,

  "result": "created",

  "_shards": {

    "total": 2,

    "successful": 2,

    "failed": 0

  },

  "created": true

}


结论:keyword类型的最大支持的长度为——32766个UTF-8类型的字符。

也就是说term精确匹配的最大支持的长度为32766个UTF-8个字符。

04

text类型和keyword类型的存储字符数区别?

text类型:支持分词、全文检索,不支持聚合、排序操作。适合大字段存储,如:文章详情、content字段等;

keyword类型:支持精确匹配,支持聚合、排序操作。适合精准字段匹配,如:url、name、title等字段。

一般情况,text和keyword共存,设置mapping如下:

{

  "mappings": {

    "ali_type": {

        "properties": {

            "title_v1": {

                 "analyzer":"ik_max_word",

                    "type":"text",

                 "term_vector" : "with_positions_offsets",

                    "fields":{

                        "keyword":{

                            "ignore_above":256,

                            "type":"keyword"

                        }

                    }

            }

        }

    }

  }

}

到此,关于“Elasticsearch单字段支持的最大字符数是多少”的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注亿速云网站,小编会继续努力为大家带来更多实用的文章!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI