当前位置: 首页 > article >正文

批量创建ES索引

7.x

from elasticsearch import Elasticsearch# 配置 Elasticsearch 连接
# 替换为你的 Elasticsearch 地址、端口、用户名和密码
es = Elasticsearch(['http://10.10.x.x:43885'],basic_auth=('admin', 'XN272G9THEAPYD5N5QORX3PB1TSQELLB')
)# # 测试连接
# try:
#     # 尝试获取集群的健康状态
#     health = es.cluster.health()
#     print("集群健康状态:")
#     print(f"  集群名称: {health.get('cluster_name')}")
#     print(f"  状态: {health.get('status')}")
#     print(f"  节点数量: {health.get('number_of_nodes')}")
#     print(f"  数据节点数量: {health.get('number_of_data_nodes')}")
#     print(f"  活跃主分片: {health.get('active_primary_shards')}")
#     print(f"  活跃分片: {health.get('active_shards')}")
#     print(f"  初始化中分片: {health.get('initializing_shards')}")
#     print(f"  未分配分片: {health.get('unassigned_shards')}")
#     print(f"  挂起的未分配分片: {health.get('delayed_unassigned_shards')}")
#     print(f"  待处理任务数: {health.get('number_of_pending_tasks')}")
#     print(f"  活跃分片百分比: {health.get('active_shards_percent_as_number')}%")
# except Exception as e:
#     print(f"连接或查询失败: {e}")# 批量创建索引并设置每个索引的分片数为 2
try:for i in range(1000, 2000):  # 创建x个索引index_name = f"your_index_{i}"settings = {"settings": {"number_of_shards": 2,  # 设置2个分片"number_of_replicas": 1  # 可根据需要设置副本数}}response = es.indices.create(index=index_name, body=settings)# print(f"\n创建索引 '{index_name}' 结果:")# print(response)
except Exception as e:print(f"创建索引失败: {e}")

6.x

cluster.max_shards_per_node是不是在6.x版本限制不住呢???

在这里插入图片描述

在这里插入图片描述

from elasticsearch import Elasticsearches = Elasticsearch(['http://10.10.x.x:30519'],headers={"Content-Type": "application/json"}  # 强制指定 Content-Type 为 application/json
)# 创建索引
try:for i in range(2000, 3000):  # 创建1000个索引index_name = f"your_index_{i}"settings = {"settings": {"number_of_shards": 2,  # 设置2个分片"number_of_replicas": 1  # 可根据需要设置副本数}}response = es.indices.create(index=index_name, body=settings)print(response)  # 打印响应信息
except Exception as e:print(f"创建索引失败: {e}")

根据你提供的错误信息:

ApiError(406, 'Content-Type header [application/vnd.elasticsearch+json; compatible-with=8] is not supported', 'Content-Type header [application/vnd.elasticsearch+json; compatible-with=8] is not supported')

这是由于 Elasticsearch 版本Elasticsearch Python 客户端 之间的兼容性问题。具体来说,你可能正在使用一个与 Elasticsearch 版本不兼容的客户端,或者请求的 Content-Type 头部不符合目标 Elasticsearch 集群的要求。

解决方案:

1. 确认 Elasticsearch 版本
  • 确保你连接的 Elasticsearch 集群版本与你所使用的 Elasticsearch Python 客户端版本兼容。
  • 根据错误消息,似乎你的集群可能是基于 Elasticsearch 8.x 版本。你可以通过以下命令检查集群版本:
    curl -X GET "http://10.10.180.211:30519/_cluster/health?pretty"
    
    该命令会返回 Elasticsearch 集群的版本和健康状态等信息。
2. 更新 Elasticsearch Python 客户端版本
  • 确保你使用的是适用于 Elasticsearch 8.x 的 Python 客户端版本。如果你的集群是 Elasticsearch 8.x,使用较老的客户端(例如针对 7.x 版本的客户端)可能会导致此类错误。
  • 更新 Elasticsearch Python 客户端:
    pip install --upgrade elasticsearch
    
3. 指定正确的 Content-Type
  • 从错误信息来看,问题可能与请求的 Content-Type 头部有关。Elasticsearch 8.x 版本可能期望不同的 Content-Type 头部。

  • 你可以尝试通过 headers 参数手动指定请求的 Content-Type。例如:

    from elasticsearch import Elasticsearches = Elasticsearch(['http://10.10.180.211:30519'],headers={"Content-Type": "application/json"}  # 强制指定 Content-Type 为 application/json
    )# 创建索引
    try:for i in range(1000, 2000):  # 创建1000个索引index_name = f"your_index_{i}"settings = {"settings": {"number_of_shards": 2,  # 设置2个分片"number_of_replicas": 1  # 可根据需要设置副本数}}response = es.indices.create(index=index_name, body=settings)
    except Exception as e:print(f"创建索引失败: {e}")
    
4. 更新 Elasticsearch 客户端库的版本
  • 如果你已经确认 Elasticsearch 是 8.x 版本,并且使用了支持的客户端库版本,但仍然出现问题,你可以尝试将客户端库更新到最新版本。
    pip install elasticsearch==8.x  # 确保安装 8.x 版本的 Elasticsearch 客户端
    

pip3 install elasticsearch==6.8.2

5. 验证请求和响应
  • 如果问题依然存在,你可以通过打印响应并调试 requests 来验证发送的 HTTP 请求和 Elasticsearch 服务器返回的响应。例如:

    response = es.indices.create(index=index_name, body=settings)
    print(response)  # 打印响应信息
    
总结:
  • 确保你的 Python 客户端和 Elasticsearch 版本兼容,特别是在升级到 Elasticsearch 8.x 后,必须使用相应版本的 Python 客户端。
  • 尝试手动设置请求的 Content-Type 头部,确保其符合 Elasticsearch 8.x 的要求。
  • 通过更新客户端和检查日志,确保所有配置都是正确的。

如果以上方法仍然无法解决问题,请提供更多的详细信息,包括 Elasticsearch 集群的版本和你使用的客户端版本,这样我可以帮助你进一步定位问题。

相关文章:

批量创建ES索引

7.x from elasticsearch import Elasticsearch# 配置 Elasticsearch 连接 # 替换为你的 Elasticsearch 地址、端口、用户名和密码 es Elasticsearch([http://10.10.x.x:43885],basic_auth(admin, XN272G9THEAPYD5N5QORX3PB1TSQELLB) )# # 测试连接 # try: # # 尝试获取集…...

模块初阶学习

当我们在过去想要实现一个功能时,例如Swap交换函数时,我们需要不断考虑参数的正确与否。如果是在c语言,我们还需要不断更改函数名字,以防止函数名重复。在c我们可以通过函数名重载解决这个问题,但还是有一些小问题&…...

rust学习-rust中的保留字

rust学习-rust中的保留字 已使用的保留字未来可能使用的保留字 保留字是语言中预定义的标识符,不能用作变量名、函数名或其他自定义标识符,Rust的保留字大致可以分为两类:已使用的保留字和未来可能使用的保留字 已使用的保留字 as&#xff1…...

MySQL中的读锁与写锁:概念与作用深度剖析

MySQL中的读锁与写锁:概念与作用深度剖析 在MySQL数据库的并发控制机制中,读锁和写锁起着至关重要的作用。它们是确保数据在多用户环境下能够正确、安全地被访问和修改的关键工具。 一、读锁(共享锁)概念 读锁,也称为…...

专利申请的价值

独占市场 一种产品只要授权专利权,等于在市场上拥有独占权。 政策奖励 各地方政府均出台响应文件, 对专利申请者进行奖励或者补助。 申报项目 申报高新技术企业、创新基金等 各类计划、项目的必要前提条件 专利申请 技术保护 防止新的技术与产品被他人 抄…...

使用 OpenCV 和 Python 轻松实现人脸检测

目录 一、准备工作 二、加载人脸检测模型 三、读取图像并进行人脸检测 四、处理视频中的人脸检测 五、优化人脸检测效果 六、总结 在人工智能和计算机视觉领域,人脸检测是一项非常基础且重要的技术。通过人脸检测,我们可以在图像或视频中识别并定位人脸,进而进行后续的…...

自然语言处理——从原理、经典模型到应用

1. 概述 自然语言处理(Natural Language Processing,NLP)是一门借助计算机技术研究人类语言的科学,是人工智能领域的一个分支,旨在让计算机理解、生成和处理人类语言。其核心任务是将非结构化的自然语言转换为机器可以…...

kotlin内联函数——runCatching

1.runCatching作用 代替try{}catch{}异常处理,用于捕获异常。 2.runCatching函数介绍 参数:上下文引用对象为参数返回值:lamda表达式结果 调用runCatching函数,如果调用成功则返回其封装的结果,并可回调onSuccess函…...

2025年新开局!谁在引领汽车AI风潮?

汽车AI革命已来。 在2025年伊始开幕的CES展上,AI汽车、AI座舱无疑成为了今年汽车行业的最大热点。其中不少车企在2025年CES上展示了其新一代AI座舱,为下一代智能汽车的人机交互、场景创新率先打样。 其中,东软集团也携带AI驱动、大数据支撑…...

YOLO目标检测3

一. 参考资料 《YOLO目标检测》 by 杨建华博士 本篇文章的主要内容来自于这本书,只是作为学习记录进行分享。 二. 搭建YOLOv1的网络 2.1 YOLOv1的网络结构 作者带我们构建的YOLOv1网络是一个全卷积结构,其中不包含任何全连接层,这一点可以…...

css3 svg制作404页面动画效果HTML源码

源码介绍 css3 svg制作404页面动画效果HTML源码&#xff0c;源码由HTMLCSSJS组成&#xff0c;记事本打开源码文件可以进行内容文字之类的修改&#xff0c;双击html文件可以本地运行效果 效果预览 源码如下 <!doctype html> <html> <head> <meta charse…...

LINUX 平台最快子网路由转发,内核使能选项配置

阅读本文之间&#xff0c;可线性参考以下文献。 Linux 命令行配置为单臂旁路由。_linux单臂路由-CSDN博客 Linux 软路由命令行配置&#xff08;参考&#xff09;_linux软路由-CSDN博客 VGW在 Windows 平台上局域网就绪的旁路由器程序_windows旁路由-CSDN博客 本文介绍 LINUX…...

「 机器人 」扑翼飞行器混合控制策略缺点浅谈

前言 将基于模型的控制与强化学习策略融合在扑翼飞行器中,虽然能够兼顾系统稳定性与极限机动能力,但也面临了更高的系统复杂性、对硬件算力与可靠性的额外要求,以及难以回避的能量效率等方面挑战。以下从四个方面进行归纳与分析。 1. 系统复杂性增加 1.1 两种控制方法的并存…...

RNN实现阿尔茨海默症的诊断识别

本文为为&#x1f517;365天深度学习训练营内部文章 原作者&#xff1a;K同学啊 一 导入数据 import torch.nn as nn import torch.nn.functional as F import torchvision,torch from sklearn.preprocessing import StandardScaler from torch.utils.data import TensorDatase…...

HackTheBox靶机:Sightless;NodeJS模板注入漏洞,盲XSS跨站脚本攻击漏洞实战

HackTheBox靶机&#xff1a;Sightless 渗透过程1. 信息收集常规探测深入分析 2. 漏洞利用&#xff08;CVE-2022-0944&#xff09;3. 从Docker中提权4. 信息收集&#xff08;michael用户&#xff09;5. 漏洞利用 Froxlor6. 解密Keepass文件 漏洞分析SQLPad CVE-2022-0944 靶机介…...

docker安装elk6.7.1-搜集java日志

docker安装elk6.7.1-搜集java日志 如果对运维课程感兴趣&#xff0c;可以在b站上、A站或csdn上搜索我的账号&#xff1a; 运维实战课程&#xff0c;可以关注我&#xff0c;学习更多免费的运维实战技术视频 0.规划 192.168.171.130 tomcat日志filebeat 192.168.171.131 …...

XML实体注入漏洞攻与防

JAVA中的XXE攻防 回显型 无回显型 cve-2014-3574...

Flutter 与 React 前端框架对比:深入分析与实战示例

Flutter 与 React 前端框架对比&#xff1a;深入分析与实战示例 在现代前端开发中&#xff0c;Flutter 和 React 是两个非常流行的框架。Flutter 是 Google 推出的跨平台开发框架&#xff0c;支持从一个代码库生成 iOS、Android、Web 和桌面应用&#xff1b;React 则是 Facebo…...

使用 Docker Compose 一键启动 Redis、MySQL 和 RabbitMQ

目录 一、Docker Compose 简介 二、服务配置详解 1. Redis 配置 2. MySQL 配置 3. RabbitMQ 配置 三、数据持久化与时间同步 四、部署与管理 五、总结 目录挂载与卷映射的区别 现代软件开发中&#xff0c;微服务架构因其灵活性和可扩展性而备受青睐。为了支持微服务的…...

【问题解决】el-upload数据上传成功后不显示成功icon

el-upload数据上传成功后不显示成功icon 原因 由于后端返回数据与要求形式不符&#xff0c;使用el-upload默认方法调用onSuccess钩子失败&#xff0c;上传文件的状态并未发生改变&#xff0c;因此数据上传成功后并未显示成功的icon标志。 解决方法 点击按钮&#xff0c;调用…...

spring框架之IoC学习与梳理(1)

目录 一、spring-IoC的基本解释。 二、spring-IoC的简单demo&#xff08;案例&#xff09;。 &#xff08;1&#xff09;maven-repository官网中找依赖坐标。 &#xff08;2&#xff09;.pom文件中通过标签引入。 &#xff08;3&#xff09;使用lombok帮助快速开发。 &#xff…...

MQ的可靠消息投递机制

确保消息在发送、传递和消费过程中不会丢失、重复消费或错乱。 1. 消息的可靠投递 消息持久化&#xff1a; 消息被发送到队列后会存储在磁盘上&#xff0c;即使消息队列崩溃&#xff0c;消息也不会丢失。例如&#xff1a;Kafka、RabbitMQ等都支持持久化消息。Kafka通过将消息存…...

Mono里运行C#脚本35—加载C#语言基类的过程

前面大体地分析了整个Mono运行过程,主要从文件的加载,再到EXE文件的入口点, 然后到方法的编译,机器代码的生成,再到函数调用的跳板转换,进而解析递归地实现JIT。 但是还有很多功能没有解析的,就是C#语言相关最多的,就是类的加载,以及类语言设计的实现属性, 比如类的…...

location+rewrite实现隐性域名配置

隐性域名&#xff1a;访问www.a.com 则跳转到www.b.com的页面&#xff0c;但是地址栏还是显示www.a.com 1、配置基于根目录的隐性域名&#xff08;就是nginx反向代理&#xff09; 访问http://www.bbb.org:8002&#xff0c; 跳转http://www.accp.org:8001的页面&#xff0c;地址…...

150 Linux 网络编程6 ,从socket 到 epoll整理。listen函数参数再研究

一 . 只能被一个client 链接 socket例子 此例子用于socket 例子&#xff0c; 该例子只能用于一个客户端连接server。 不能用于多个client 连接 server socket_server_support_one_clientconnect.c /* 此例子用于socket 例子&#xff0c; 该例子只能用于一个客户端连接server。…...

centos7 配置国内镜像源安装 docker

使用国内镜像源&#xff1a;由于 Docker 的官方源在国内访问可能不稳定&#xff0c;你可以使用国内的镜像源&#xff0c;如阿里云的镜像源。手动创建 /etc/yum.repos.d/docker-ce.repo 文件&#xff0c;并添加以下内容&#xff1a; [docker-ce-stable] nameDocker CE Stable -…...

周末总结(2024/01/25)

工作 人际关系核心实践&#xff1a; 要学会随时回应别人的善意&#xff0c;执行时间控制在5分钟以内 坚持每天早会打招呼 遇到接不住的话题时拉低自己&#xff0c;抬高别人(无阴阳气息) 朋友圈点赞控制在5min以内&#xff0c;职场社交不要放在5min以外 职场的人际关系在面对利…...

【go语言】map 和 list

一、map map 是一种无序的键值对的集合。 无序 &#xff1a;map[key]键值对&#xff1a;key - value map 最重要的一点是通过 key 来快速检索数据&#xff0c;key 类似于索引&#xff0c;指向数据的值。map 是一种集合&#xff0c;所以我们可以像迭代数组和切片那样迭代他。…...

PCIe 个人理解专栏——【2】LTSSM(Link Training and Status State Machine)

前言&#xff1a; 链路训练和状况状态机LTSSM&#xff08;Link Training and Status State Machine&#xff09;是整个链路训练和运行中状态的状态转换逻辑关系图&#xff0c;总共有11个状态。 正文&#xff1a; 包括检测&#xff08;Detect&#xff09;&#xff0c;轮询&…...

《DiffIR:用于图像修复的高效扩散模型》学习笔记

paper&#xff1a;2303.09472 GitHub&#xff1a;GitHub - Zj-BinXia/DiffIR: This project is the official implementation of Diffir: Efficient diffusion model for image restoration, ICCV2023 目录 摘要 1、介绍 2、相关工作 2.1 图像恢复&#xff08;Image Rest…...