时序数据库influxdb安装与简单使用

时间:2024-03-16 16:32:57

influxdb简介

influxdb是一个时序数据库,可以用来存储大量的数据,比如GPS、曲线数据等。

本文主要是介绍influxdb的安装与简单使用,有关influxdb的更多理论知识,请自行查找资料。

 

说明

这里使用xshell远程linux,xftp远程linux进行上传下载文件。之前分享了一个xshell的工具,参考博客:

https://blog.csdn.net/zll1058098666/article/details/106522567

这里只是为了演示安装步骤、启动、使用,仅做练习使用。生产环境下安装时候,请注意以下几项

  1. 配置文件中,数据文件的保存目录
  2. 用户名、密码的复杂度、保密性
  3. 配置文件中,influxdb相关的内存、线程数等配置
  4. 其他

本安装步骤中,实际上是直接解压包,运行influxdb软件。

 

下载

这里演示离线Binaries包安装,安装包下载地址

https://dl.influxdata.com/influxdb/releases/influxdb-1.7.1_linux_amd64.tar.gz

 

 

上传

上传下载的文件influxdb-1.7.1_linux_amd64.tar.gz 到linux系统

时序数据库influxdb安装与简单使用

 

 

解压

tar -zxvf /usr/influxdb/influxdb-1.7.1_linux_amd64.tar.gz -C /usr/influxdb

时序数据库influxdb安装与简单使用

时序数据库influxdb安装与简单使用

 

 

重命名文件夹

mv /usr/influxdb/influxdb-1.7.1-1 /usr/influxdb/influxdb

时序数据库influxdb安装与简单使用

时序数据库influxdb安装与简单使用

 

 

解压后,目录中内容如下

时序数据库influxdb安装与简单使用

 

 

启动目录

时序数据库influxdb安装与简单使用

 

 

配置文件目录

时序数据库influxdb安装与简单使用

 

 

启动命令

 

默认配置启动

/usr/influxdb/influxdb/usr/bin/influxd

时序数据库influxdb安装与简单使用

 

指定配置配置文件启动

/usr/influxdb/influxdb/usr/bin/influxd -config /usr/influxdb/influxdb/etc/influxdb/influxdb.conf

 

 

后台启动

使用/usr/influxdb/influxdb/usr/bin/influxd启动,会占用控制台,可以将influxdb作为后台服务运行

可以使用nohup命令实现

默认配置文件启动

nohup /usr/influxdb/influxdb/usr/bin/influxd >/dev/null 2>&1 &

指定配置文件启动

nohup /usr/influxdb/influxdb/usr/bin/influxd -config /usr/influxdb/influxdb/etc/influxdb/influxdb.conf >/dev/null 2>&1 &

 

 

配置文件

这里对配置文件中,各项配置做了注释,难免有错误,可以对照官方文档,作进一步学习

# reporting-disabled = false           # 该选项用于上报influxdb的使用信息给InfluxData公司,默认值为false

# bind-address = "127.0.0.1:8088" # 备份恢复时使用,默认值为8088

### [meta]

[meta]

  dir = "/var/lib/influxdb/meta"  # meta数据存放目录

  # retention-autocreate = true  # 用于控制默认存储策略,数据库创建时,会自动生成autogen的存储策略,默认值:true

  # logging-enabled = true  # 是否开启meta日志,默认值:true

### [data]

[data]

  dir = "/var/lib/influxdb/data"  # 最终数据(TSM文件)存储目录

  wal-dir = "/var/lib/influxdb/wal"  # 预写日志存储目录

  # wal-fsync-delay = "0s" #在同步写入之前等待的总时间,默认0s

  # index-version = "inmem" #用于新碎片的切分索引的类型。

  # trace-logging-enabled = false #跟踪日志记录在tsm引擎周围提供了更详细的输出

  # query-log-enabled = true  # 是否开启tsm引擎查询日志,默认值: true

  # Valid size suffixes are k, m, or g (case insensitive, 1024 = 1k).

  # cache-max-memory-size = "1g"  # 用于限定shard最大值,大于该值时会拒绝写入,默认值:1000MB,单位:byte

  # Valid size suffixes are k, m, or g (case insensitive, 1024 = 1k).

  # cache-snapshot-memory-size = "25m"  # 用于设置快照大小,大于该值时数据会刷新到tsm文件,默认值:25MB,单位:byte

  # cache-snapshot-write-cold-duration = "10m"  # tsm引擎 snapshot写盘延迟,默认值:10Minute

  # compact-full-write-cold-duration = "4h"  # tsm文件在压缩前可以存储的最大时间,默认值:4Hour

  # max-concurrent-compactions = 0 #压缩并发的最大数量,默认设置为0表示runtime.GOMAXPROCS(0)*50% ,否则以设置的非零值为准

  # Valid size suffixes are k, m, or g (case insensitive, 1024 = 1k).

  # max-index-log-file-size = "1m" #限制索引日志文件大小

  # max-series-per-database = 1000000  # 限制数据库的级数,该值为0时取消限制,默认值:1000000

  # max-values-per-tag = 100000  # 一个tag最大的value数,0取消限制,默认值:100000

  # tsm-use-madv-willneed = false #如果为true,mmap的建议值MADV_WILLNEED会被提供给内核

### [coordinator]

[coordinator]

  # write-timeout = "10s"  # 写操作超时时间,默认值: 10s

  # max-concurrent-queries = 0  # 最大并发查询数,0无限制,默认值: 0

  # query-timeout = "0s"  # 查询操作超时时间,0无限制,默认值:0s

  # log-queries-after = "0s"  # 慢查询超时时间,0无限制,默认值:0s

  # max-select-point = 0  # SELECT语句可以处理的最大点数(points),0无限制,默认值:0

  # max-select-series = 0  # SELECT语句可以处理的最大级数(series),0无限制,默认值:0

  # max-select-buckets = 0  # SELECT语句可以处理的最大"GROUP BY time()"的时间周期,0无限制,默认值:0

### [retention]

[retention]

  # enabled = true  # 是否启用该模块,默认值 : true

  # check-interval = "30m" # 检查时间间隔,默认值 :"30m"

### [shard-precreation]

[shard-precreation]

  # enabled = true # 是否启用该模块,默认值 : true

  # check-interval = "10m"  # 检查时间间隔,默认值 :"10m"

  # advance-period = "30m"  # 预创建分区的最大提前时间,默认值 :"30m"

[monitor]

  # store-enabled = true # 是否启用该模块,默认值 :true

  # store-database = "_internal" # 默认数据库:"_internal"

  # store-interval = "10s" # 统计间隔,默认值:"10s"

### [http]

[http]

  # enabled = true # 是否启用该模块,默认值 :true

  # bind-address = ":8086" # 绑定地址,默认值 :":8086"

  # auth-enabled = false # 是否开启认证,默认值:false

  # realm = "InfluxDB" # 配置JWT realm,默认值: "InfluxDB"

  # log-enabled = true  # 是否开启日志,默认值:true

  # suppress-write-log = false #在启用日志时是否抑制HTTP写请求日志

  # access-log-path = "" #当启用HTTP请求日志时,该选项指定了路径。如influxd不能访问指定的路径,它将记录一个错误并将请求日志写入stderr

  # write-tracing = false  # 是否开启写操作日志,如果置成true,每一次写操作都会打日志,默认值:false

  # pprof-enabled = true  # 是否开启pprof,默认值:true

  # debug-pprof-enabled = false  # 是否开启pprof,默认值:true

  # https-enabled = false # 是否开启https ,默认值 :false

  # https-certificate = "/etc/ssl/influxdb.pem" # 设置https证书路径,默认值:"/etc/ssl/influxdb.pem"

  # https-private-key = ""# 设置https私钥,无默认值

  # shared-secret = "" # 用于JWT签名的共享**,无默认值

  # max-row-limit = 0 # 配置查询返回最大行数,0无限制,默认值:0

  # max-connection-limit = 0  # 配置最大连接数,0无限制,默认值:0

  # unix-socket-enabled = false  # 是否使用unix-socket,默认值:false

  # bind-socket = "/var/run/influxdb.sock" # unix-socket路径,默认值:"/var/run/influxdb.sock"

  # max-body-size = 25000000 #客户端请求主体的最大值,以字节为单位。0无限制,默认值0

  # max-concurrent-write-limit = 0 #并发处理的最大写入次数,0无限制,默认值0

  # max-enqueued-write-limit = 0 #排队等待处理的最大数量,0无限制,默认值0

  # enqueued-write-timeout = 0 #在队列中等待处理的最长时间,0或者setting max-concurrent-write-limit=0无限制,默认值0

### [ifql]

[ifql]

  # enabled = true# 是否启用该模块,默认值 :true

  # log-enabled = true# 是否开启日志,默认值:true

  # bind-address = ":8082" #ifql RPC服务使用的绑定地址默认是8082

### [logging]

[logging]

  # format = "auto" #日志格式,默认是自动

  # level = "info" #日志级别默认info

  # suppress-logo = false #当程序启动时,会抑制打印出来的logo输出

### [subscriber]

[subscriber]

  # enabled = true            # 是否启用该模块,默认值 :true

  # http-timeout = "30s"  # http超时时间,默认值:"30s"

  # insecure-skip-verify = false      # 是否允许不安全的证书

  # ca-certs = "" # 设置CA证书

  # write-concurrency = 40            #设置并发数目,默认值:40

  # write-buffer-size = 1000          # 设置buffer大小,默认值:1000

### [[graphite]]

[[graphite]]

  # enabled = false# 是否启用该模块,默认值 :false

  # database = "graphite"# 数据库名称,默认值:"graphite"

  # retention-policy = "" # 存储策略,无默认值

  # bind-address = ":2003"# 绑定地址,默认值:":2003"

  # protocol = "tcp"# 协议,默认值:"tcp"

  # consistency-level = "one" # 一致性级别,默认值:"one

  # batch-size = 5000 # 批量size,默认值:5000

  # batch-pending = 10# 配置在内存中等待的batch数,默认值:10

  # batch-timeout = "1s" # 超时时间,默认值:"1s"

  # udp-read-buffer = 0# udp读取buffer的大小,0表示使用操作系统提供的值,如果超过操作系统的默认配置则会出错。 该配置的默认值:0

  # separator = "." # 多个measurement间的连接符,默认值: "."

  # tags = ["region=us-east", "zone=1c"] #将被添加到所有指标的默认标签。这些可以在模板级别上覆盖或者从指标中提取的标签

  # templates = [ 

  #   "*.app env.service.resource.measurement",

  #   # Default template

  #   "server.*",

  # ]

### [collectd]

[[collectd]]

  # enabled = false# 是否启用该模块,默认值 :false

  # bind-address = ":25826"  # 绑定地址,默认值: ":25826"

  # database = "collectd"# 数据库名称,默认值:"collectd"

  # retention-policy = "" # 存储策略,无默认值

  # typesdb = "/usr/local/share/collectd" # 路径,默认值:"/usr/share/collectd/types.db"

  # security-level = "none" #安全级别

  # auth-file = "/etc/collectd/auth_file"

  # batch-size = 5000 #从缓存中批量获取数据的量,默认值:5000

  # batch-pending = 10 #可能在内存中等待的批次的数量,默认值:10

  # batch-timeout = "10s" #即使没有达到缓冲区的限制,至少要刷新一下,默认值:"10s"

  # read-buffer = 0 #udp读取buffer的大小,0表示使用操作系统提供的值,如果超过操作系统的默认配置则会出错。默认值:0

  # parse-multivalue-plugin = "split" #两种处理方式split和join,split会分到不同的表中,join会将记录作为一个单独的记录处理。默认是split

### [opentsdb]

[[opentsdb]]

  # enabled = false# 是否启用该模块,默认值 :false

  # bind-address = ":4242"# 绑定地址,默认值:":4242"

  # database = "opentsdb"  # 默认数据库:"opentsdb"

  # retention-policy = ""# 存储策略,无默认值

  # consistency-level = "one" # 一致性级别,默认值:"one"

  # tls-enabled = false # 是否开启tls,默认值:false

  # certificate= "/etc/ssl/influxdb.pem" # 证书路径,默认值:"/etc/ssl/influxdb.pem"

  # log-point-errors = true# 出错时是否记录日志,默认值:true

  # batch-size = 1000 #从缓存中批量获取数据的量,默认值:1000

  # batch-pending = 5 #可能在内存中等待的批次的数量,默认值:5

  # batch-timeout = "1s" #即使没有达到缓冲区的限制,至少要刷新一下,默认值:"1s"

### [[udp]]

[[udp]]

  # enabled = false# 是否启用该模块,默认值 :false

  # bind-address = ":8089" # 绑定地址,默认值:":8089"

  # database = "udp"# 数据库名称,默认值:"udp"

  # retention-policy = "" # 存储策略,无默认值

  # precision = "" #接收点的时间点的精度("" or "n", "u", "ms", "s", "m", "h")

  # batch-size = 5000#从缓存中批量获取数据的量,默认值:5000

  # batch-pending = 10 #可能在内存中等待的批次的数量,默认值:10

  # batch-timeout = "1s" #即使没有达到缓冲区的限制,至少要刷新一下,默认值:"1s"

  # read-buffer = 0# udp读取buffer的大小,0表示使用操作系统提供的值,如果超过操作系统的默认配置则会出错。 该配置的默认值:0 

### [continuous_queries]

[continuous_queries]

  # enabled = true# 是否启用该模块,默认值 :true

  # log-enabled = true# 是否开启日志,默认值:true

  # query-stats-enabled = false #控制查询是否被记录到自我监控数据存储中

  # run-interval = "1s" # 时间间隔,默认值:"1s"

### [tls]

[tls]

  # ciphers = [

  #   "TLS_ECDHE_ECDSA_WITH_CHACHA20_POLY1305",

  #   "TLS_ECDHE_RSA_WITH_AES_128_GCM_SHA256",

  # ]

  # min-version = "tls1.2"

  # max-version = "tls1.2"

 

 

 

控制台,常用命令

进入influxdb命令控制台

/usr/influxdb/influxdb/usr/bin/influx

常用命令

 

create database “db_name” 创建数据库

drop database “db_name” 删除数据库

show databases; 查询几个数据库

use database_name; 使用数据库

show measurements; 显示该数据库中的表

创建表,直接在插入数据的时候指定表名(weather就是表名)

insert weather,altitude=1000,area=北 temperature=11,humidity=-4

drop measurement “measurement_name” 删除表

建立保留策略(retention policy)

create retention policy rp_collectd on collectd duration 1w replication 1 default

duration: 1h, 90m, 12h, 7d, 4w, INF 最小1h, 最大INF

通过http添加数据

curl -i -XPOST ‘http://localhost:8086/write?db=testDB’ –data-binary ‘weather,altitude=1000,area=北 temperature=11,humidity=-4’

 

-- 查看所有的数据库

show databases;

-- 使用特定的数据库

use database_name;

-- 查看所有的measurement

show measurements;

-- 查询10条数据

select * from measurement_name limit 10;

-- 数据中的时间字段默认显示的是一个纳秒时间戳,改成可读格式

precision rfc3339; -- 之后再查询,时间就是rfc3339标准格式

-- 或可以在连接数据库的时候,直接带该参数

influx -precision rfc3339

-- 查看一个measurement中所有的tag key

show tag keys

-- 查看一个measurement中所有的field key

show field keys

-- 查看一个measurement中所有的保存策略(可以有多个,一个标识为default)

show retention policies;

 

 

 

Admin密码

show users ; 显示用户

CREATE USER "username" WITH PASSWORD 'password' 创建用户

CREATE USER "username" WITH PASSWORD 'password' WITH ALL PRICILEGES 创建管理员权限的用户

drop user 'username' 删除用户

SET PASSWORD FOR admin ='123456789'

 

注意:新建用户时候,用户名要用双引号,密码用单引号

 

开启密码登录

修改配置文件

/usr/influxdb/influxdb/etc/influxdb/influxdb.conf

时序数据库influxdb安装与简单使用

然后重启influxdb服务

控制台命令

/usr/influxdb/influxdb/usr/bin/influx -username root -password root

 

-username后边的root,是添加好的用户名

-password后边的root,是添加好的用户名的密码

 

 

influxdb远程

influxdb作为数据库服务器,可以使用工具查看influxdb上的相关数据。

这种远程工具很多,这里分享一个百度网盘上的工具

链接: https://pan.baidu.com/s/1VF2v5ri9qL6tUpOrvmPWkA

提取码: c972

该远程工具,与navicat类似,不再截图演示。

 

 

文章中,难免有错误,请大家批评指正。