apache-doris

介绍

该介绍来自官网

Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库，以极速易用的特点被人们所熟知，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景，也能支持高吞吐的复杂分析场景。基于此，Apache Doris 能够较好的满足报表分析、即席查询、统一数仓构建、数据湖联邦查询加速等使用场景，用户可以在此之上构建用户行为分析、AB 实验平台、日志检索分析、用户画像分析、订单分析等应用。

Apache Doris 最早是诞生于百度广告报表业务的 Palo 项目，2017 年正式对外开源，2018 年 7 月由百度捐赠给 Apache 基金会进行孵化，之后在 Apache 导师的指导下由孵化器项目管理委员会成员进行孵化和运营。目前 Apache Doris 社区已经聚集了来自不同行业数百家企业的 400 余位贡献者，并且每月活跃贡献者人数也超过 100 位。 2022 年 6 月，Apache Doris 成功从 Apache 孵化器毕业，正式成为 Apache 顶级项目（Top-Level Project，TLP）

Apache Doris 如今在中国乃至全球范围内都拥有着广泛的用户群体，截止目前， Apache Doris 已经在全球超过 2000 家企业的生产环境中得到应用，在中国市值或估值排行前 50 的互联网公司中，有超过 80% 长期使用 Apache Doris，包括百度、美团、小米、京东、字节跳动、腾讯、网易、快手、微博、贝壳等。同时在一些传统行业如金融、能源、制造、电信等领域也有着丰富的应用。

官网地址：https://doris.apache.org/

influxdb

InfluxDB是一个用于存储和分析时间序列数据的开源数据库。也是使用最多的一个时序数据库。

什么是时序数据库？时序数据库是近几年一个新的概念，与传统的Mysql关系型数据库相比，它的最大的特点是：数据按照时间顺序存储。

举例来说，日志数据，是以时间顺序存储的，所以用时序数据库存储是一种很好的选择。使用Mysql在存储的过程中，不是对这种基于时间的数据进行优化的，所以，在查询、插入上有一些瓶颈。

ldap添加用户脚本

因每次添加用户步骤繁琐且ldap字段较多比较容易输错，故写一个了用户添加的脚本，这里地址以及ldap认证信息已经写死了，无需修改。

戴尔服务器新硬盘阵列配置

公司内网的服务器都是戴尔型号的，戴尔的服务器添加硬盘需要额外做一个硬盘阵列的配置，否则系统无法识别到这块硬盘，也无法对新硬盘做任何操作。

非运维相关服务

这里记录一些非运维技术性服务的安装部署及运维相关问题。因公司用到，故记录一下。

jenkins

介绍

Jenkins是一个开源的、提供友好操作界面的持续集成(CI)工具，起源于Hudson，主要用于持续、自动的构建/测试软件项目、监控外部任务的运行。Jenkins用Java语言编写，可在Tomcat等流行的servlet容器中运行，也可独立运行。通常与版本管理工具(SCM)、构建工具结合使用。常用的版本控制工具有SVN、GIT，构建工具有Maven、Ant、Gradle。

ldap

什么是ldap

1
2
3
4

首先LDAP是一种通讯协议，LDAP支持TCP/IP。协议就是标准，并且是抽象的。在这套标准下，AD（Active Directory）是微软出的一套实现。
那AD是什么呢？暂且把它理解成是个数据库。也有很多人直接把LDAP说成数据库(可以把LDAP理解成存储数据的数据库)。像是其他数据库一样，LDAP也是有client端和server端。server端是用来存放资源，client端用来操作增删改查等操作。
而我们通常说的LDAP是指运行这个数据库的服务器。
可以简单理解AD =LDAP服务器＋LDAP应用。

linux三剑客

grep

简介

• 简介：文本过滤工具,用于查找文件里符合条件的字符串
• 支持正则表达式匹配

在linux中，最常用的文本过滤工具就是grep，一般常用有命令输出的字符过滤或文件文本的过滤。

k8s弹性伸缩

k8s弹性伸缩主要针对k8s中容器的资源使用率来对其进行自动调整，k8s的弹性伸缩一共有三种：

• CA（Cluster Autoscaler）：Node级别自动扩/缩容

  cluster-autoscaler组件

• HPA（Horizontal Pod Autoscaler）：Pod个数自动扩/缩容

• VPA（Vertical Pod Autoscaler）：Pod配置自动扩/缩容，主要是CPU、内存

  addon-resizer组件

(k8s的HPA和VPA都需要先了解limitrange，其扩容缩容都需要根据limitrange来进行调整)

简介

Ansible 简单的说是一个配置管理系统(configuration management system)。
你只需要可以使用 ssh 访问你的服务器或设备就行。它也不同于其他工具，因为它
使用推送的方式，而不是像 puppet 等 那样使用拉取安装agent的方式。
常规的集群命令管理系统需要一台server端用于执行命令，而所有被执行的客户端上还需要安装agent端，但ansible本身直接通过ssh来调用执行命令，所以无需安装任何agent端。