【TDH】Search 安装问题

墨蓝 2021-09-17 01:34 428阅读 0赞

最近在星环的TDH集群上需要安装一个新的组件——Search，在安装过程中遇到了不少问题，故将主要的问题总结整理如下，以供后续参考~

1、一开始默认安装会出现search server启动不成功、search head启动不成功等问题，也就是默认安装后search无法正常启动。报错如下：主要是/search/data权限问题。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70][]

2、需要将安装界面设置的path.data每个路径所属用户以及群组权限进行修改。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 1][]

例如node2：

chown -R 1000:1000 /search/data
    chmod 777 /search/data

3、安装后报错，查看具体报错日志，显示“max virtual memory areas vm.max\_map\_count \[65530\] is too low, increase to at least \[262144\]”（即：search用户拥有的内存权限太小）

查看具体报错id：

kubectl get po -o wide |grep search

查看报错id对应的日志：

kubectl logs id

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 2][]

4、扩大内存  
查看当前内存：

sysctl -a |grep vm.max_map_count

扩大内存（大于262144）：

sysctl -w vm.max_map_count=262411

5、Search安装好之后，在inceptor建es表报错：Can not create table: java.lang.IllegalArgumentException:Conf missing for elasticsearch, check your hive-site.xml。  
      需要在8180inceptor界面更新依赖，点击以下“确认”后会重新配置inceptor且重启inceptor。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 3][]

6、重启inceptor后beeline登录inceptor报错如下：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 4][]

7、报错原因应该是安装search后TDH-client发生变动，需要在8180重新下载客户端重新安装，但是由于之前安装在/opt/TDH-Client/的客户端有改动kafka和flume的设置，重装后需要重新设置这两个组件，所以暂时不重装客户端。采用以下方法手动执行pod。

查找inceptor server pod：

kubectl get po |grep inceptor

手动执行inceptor server：

kubectl exec -it inceptor-server-inceptor1-2559126348-x42cb bash

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 5][]

可以看到能够正常登录inceptor。

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70]: /images/20210726/6e74e9f4475c4b0ca53d898895c275a2.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 1]: /images/20210726/dbd015382fbb4b44b2d36d3fb112166e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 2]: /images/20210726/0530fbc7f8e2468fb1e2c855ce4327a2.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 3]: /images/20210726/6dee326d38084a3c87cda54292fae80a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 4]: /images/20210726/3e317068a58145dda129a538d2f6e26c.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2dka3l4eTIwMTM_size_16_color_FFFFFF_t_70 5]: /images/20210726/4112c35d37a84234bd8a722688b84c42.png