当前位置: 首页>行业 >

环球短讯!No.6 – 时序数据库随笔 – InfluxDB&Flux调试环境搭建

来源: 清一色财经 | 时间: 2023-05-06 16:22:52 |

本篇为大家介绍了InfluxDB和Flux的开发调试环境,便于后续对上一篇提到的用户问题进行解决的操作演示。

01 上篇回顾

这是上一篇结尾我们抛出来的InfluxDB社区问题,那么要想解决这个问题,我们首先先建立InfluxDB的开发环境,以源码的方式了解其应用和实现。所以本篇我们为搭建介绍InflxuDB的开发调试环境。


(资料图)

02 依赖安装

要想进行InfluxDB的开发调试,我们需要一些基础软件安装(MacOS),如下:

brew
/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"
go
brew install go@1.15......flux git:(master) ✗ go versiongo version go1.15.9 darwin/am
git
brew install gitgit:(master) ✗ git --versiongit version 2.30.2
bazaar
brew install bazaargit:(master) ✗ bzr versionBazaar (bzr) 2.7.0
rust
curl --proto "=https" --tlsv1.2 -sSf https://sh.rustup.rs | sh
make pkg-config protobuf yarn
brew install make pkg-config protobuf yarngit:(master) ✗ make --versionGNU Make 4.3......

如果上面一切顺利,我们设置一下环境变量 ~/.bash_profile :

export GOPATH=/Users/jincheng/goexport GOROOT=/usr/local/opt/go@1.15/libexecexport PKG_CONFIG=/Users/jincheng/go/bin/pkg-configexport PKG_CONFIG_PATH=$(find /usr/local/Cellar -name "pkgconfig" -type d | grep lib/pkgconfig | tr "\n" ":" | sed s/.$//)export PATH=$GOROOT/bin:$GOPATH/bin:$PKG_CONFIG_PATH:$PATH

别忘记 source ~/.bash_profile, 我们进入正题,下载源码。

03 源码构建

很多时候我们对一项功能的了解,需要对源码有一定的了解,学习InfluxDB我们同样需要源码方式进行。

下载
git clone https://github.com/influxdata/influxdb.git
编译
make......make[2]: Leaving directory "/Users/jincheng/work/influxdb/storage/flux"make[1]: Leaving directory "/Users/jincheng/work/influxdb/storage"env GO111MODULE=on go build -tags "assets" -ldflags "-s -w  -X main.commit=eeba0f3268" -o bin/darwin/influx ./cmd/influxenv GO111MODULE=on go build -tags "assets" -ldflags " -X main.commit=eeba0f3268" -o bin/darwin/influxd ./cmd/influxd

如上我们发现会生成两个二进制文件,一个是influxd服务,一个是influx的客户端。

下载依赖
go clean -modcache && go mod tidy && go mod vendor

执行完如上命令会在项目目录下生成一个vendor目录,里面下载了go.mod里面配置的项目所有依赖。

04 GoLand运行调试

GoLand是进行Go开发调试的IDE工具,我们后面关于InfluxDB源码部分分享就在GoLand环境中进行。

IDE配置

在GoLand中进行InfluxDB的开发调试,需要简单的配置一下,GOROOT/GOPATH/Go Modules ,如图:

其中GOROOT/GOPATH和~/.bash_profile保持一致。

运行主服务

运行 influxd/main.go ,出现如下界面证明已经influxd的服务已经启动成功,并在8086端口监听。

如果一切顺利,那么服务监听在8086端口。

调试主服务

我们如果看看源代码的执行路径,往往我们期望debug的方式运行 influxd/main.go ,如果出现debug启动出现如下错误,说明我们的环境变量没有在IDE中生效:

如上情况我们可以创建或者在~/.zshrc中增加一行配置让 ~/.bash_profile配置生效。

source ~/.bash_profile

然后重启电脑,再试一下。如果顺利,我们设置一下断点,可以类似界面如下:

如果一切顺利,那么调试模式下的服务也是监听8086端口。

05 操作测试

好的,服务启动了,下面我们利用客户端继续数据操作的测试。上面编译的时候大家发现其实我们会生成2个二进制可执行文件,一个是influxd,一个是influx。我们刚才debug启动了influxd的服务,我们同样可以启动influx的客户端,进行数据操作,客户端我们之间运行可执行文件(如果你愿意也可以IDE启动)。

初始化
bin/$(uname -s | tr "[:upper:]" "[:lower:]")/influx setup \--username iot \--password 2021iotdb \--org org \--bucket iot \--retention 1h \--token where-were-going-we-dont-need-roads \--forceConfig default has been stored in /Users/jincheng/.influxdbv2/configs.User  Organization  Bucketiot  org    iot

如上执行成功表明我们完成了setup,创建了名为 iot 的bucket,在v2中bucket相当于v1中的database。

插入数据
bin/$(uname -s | tr "[:upper:]" "[:lower:]")/influx write --bucket iot --precision s "m v=2 $(date +%s)"bin/$(uname -s | tr "[:upper:]" "[:lower:]")/influx write --bucket iot --precision s "m v=168 $(date +%s)"bin/$(uname -s | tr "[:upper:]" "[:lower:]")/influx write --bucket iot --precision s "n v=222 $(date +%s)"

如上我们插入了3条数据,接下来我们查询一下。

查询数据
bin/$(uname -s | tr "[:upper:]" "[:lower:]")/influx query "from(bucket:"iot") |> range(start:-1h)"

执行之后,我们会查询到刚才插入的数据,同时IDE中调试模式启动的influxd服务也会打印相应的日志信息。

上面是简单查询记录,下面我们在进行一下聚合计算:

bin/$(uname -s | tr "[:upper:]" "[:lower:]")/influx query "from(bucket:"iot") |> range(start:-1h) |> sum()"

到此,我们InfluxDB的调试模式启动服务,客户端创建bucket,插入数据和查询数据就有了一个直观的印象。

06 Flux查询语言

上面我利用influx客户端进行query命令,其实执行的是Flux的查询语言,Flux是influxDB社区提供的新的查询语言,那么Flux是否可以在IDE中进行运行和调试呢?当然!我们对Flux的开发调试环境搭建一下,并且对查询操作进行演示。

下载&编译
git clone https://github.com/influxdata/flux.git...make...go clean -modcache && go mod tidy && go mod vendor
GoLand 运行

我们需要配置flux的命令,为 repl,然后运行,如下:

启动repl之后,我们可以进行数据处理操作,如下图:

查询数据

Flux可以直接和InfluxDB服务连接,进行数据查询,上面我们在influx客户端输入的查询语句其实就是Flux查询语言,那么我们当然可以在Flux中进行数据查询,我们启动Flux repl,进行查询如下:如下:

import "influxdata/influxdb"data = influxdb.from(bucket:"iot") |> range(start:-1h) |> sum()data |> yield()

如图,发生了错误,原因是Flux去尝试连接influxdb的9999端口服务,不过我们上面看到我们的服务是监听8086了,所以我们要修改一下默认端口(这就是源码debug的好处了)。

修改端口之后,我们发现连接已经建立,但是权限还有问题,如下:

这个就需要我们连接的Token信息,如下:

cat ~/.influxdbv2/configs 

我们读取数据时候携带token和org信息,如下:

import "influxdata/influxdb"data = influxdb.from(bucket:"iot", token:"where-were-going-we-dont-need-roads", org:"org") |> range(start:-1h) |> sum()data |> yield()

好,到这里我们Flux读取InfluxDB数据部分也有了一个直观的了解。

07 InfluxDB&Flux社区贡献

目前看InflxdbV2版本的贡献者并不多,我在源码构建的时候发现的这些默认端口问题都是influx社区待改进的patch,我也提交了相关的PRs。

For InfluxDB: https://github.com/influxdata/influxdb/pull/20809

For Flux: https://github.com/influxdata/flux/pull/3514

作者介绍

孙金城,清一色社区编辑,ApacheFlinkPMC成员,ApacheBeamCommitter,ApacheIoTDBPMC成员,ALCBeijing成员,ApacheShenYu导师,Apache软件基金会成员。关注技术领域流计算和时序数据存储。

关键词:

 

热文推荐

环球短讯!No.6 – 时序数据库随笔 – InfluxDB&Flux调试环境搭建

本篇为大家介绍了InfluxDB和Flux的开发调试环境,便于后续对上一篇提到的用户问题进行解决的操作演示。

2023-05-06

方锰石_关于方锰石介绍|世界消息

方锰石,关于方锰石介绍这个很多人还不知道,现在让我们一起来看看吧!1、方锰石是一种岩石,绿色,绿色黑色

2023-05-06

追梦:科尔问我跟库里 用谁顶替卢尼首发 我俩推荐杰迈克尔-格林

追梦:科尔问我跟库里用谁顶替卢尼首发我俩推荐杰迈克尔-格林,追梦,音乐专辑,湖人主场,谢莉·卢尼,亚里·库

2023-05-06

快讯丨北京石景山2023年计划新建公租房300套

财经网讯日前,北京市石景山区住建委公布石景山区2023年保障性住房年度建设计划。据悉,石景山区今年计划新

2023-05-06

实时:开封市通许县咸平街道:开展基干民兵点验 提高队 伍应战能力

5月6日,开封市通许县人民武装部检查组到咸平街道开展应急排基干民兵点验活动,对咸平街道民兵组织整顿工作

2023-05-06

能否与特斯拉Model Y一战?小鹏G6新车解析

小鹏汽车最新车型G6已在上月上海车展正式亮相,G6也被外界认为是小鹏汽车扭转颓势最为关键的一款产品,也被

2023-05-06

微速讯:康养中国|这就是平凉!

丝绸之路三千里平凉作为“西出长安第一城”是丝路经济带重要节点城市华夏文明五千年黄帝问道广成子肇启中华

2023-05-06

“围城”下的立讯精密:苹果业务占比超7成,还能深度捆绑吗? 环球新视野

曾经有人将果链比喻成“围城”:外面的企业想进去,里面的企业想出来。不过,对于已经身处果链中央的立讯精

2023-05-06

坐飞机用5G?工信部批复5G地空通信试验频率

【TechWeb】5月6日消息,据工业和信息化部官网消息,为深入贯彻落实党的二十大关于加快建设网络强国的决策

2023-05-06

精彩看点:JCA:药物senolytics或能清除与机体心血管疾病相关的“僵尸”细胞

来自伦敦国王学院等机构的科学家们通过研究发现,使用清除衰老剂Senolytics通过消除与心血管疾病和其它年龄

2023-05-06

清华大学团队揭示星系外气体进入星系的详细过程

清华大学团队揭示星系外气体进入星系的详细过程  【科技前沿】清华大学团队揭示星系外气体进入星系的详细

2023-05-06

【天天报资讯】餐饮业迎来强势复苏(大数据观察)

制图:张芳曼核心阅读“五一”假期,服务消费持续回暖,餐饮业迎来强势复苏,重点餐饮企业销售额同比增长57

2023-05-06

【世界时快讯】合同今夏到期!Stein:活塞是狄龙-布鲁克斯的潜在追求者

据TheAthletic名记Shams日前报道,多位消息人士透露,灰熊已经告知狄龙-布鲁克斯,任何情况下都不会与之续

2023-05-06

生源地是什么意思是出生地的意思吗(生源地是什么意思)

1、意思就是这个学生的出生地是哪里的。以上就是【生源地是什么意思是出生地的意思吗,生源地是什么意思】

2023-05-06

恒顺醋业05月05日被沪股通减持9.2万股 世界看点

05月05日,恒顺醋业被沪股通减持9 2万股,最新持股量为569 85万股,占公司A股总股本的0 57%。

2023-05-06

背后起小痘痘怎么解决_背后起小痘痘怎么办|天天观焦点

欢迎观看本篇文章,小升来为大家解答以上问题。背后起小痘痘怎么解决,背后起小痘痘怎么办很多人还不知道,

2023-05-06

苹果联合创始人:想死就买特斯拉!_热点评

苹果联合创始人史蒂夫·沃兹尼亚克在一次电视采访中指责特斯拉CEO埃隆·马斯克,指他没有兑现关于自动驾驶

2023-05-06

“五一档”电影业显著恢复 中腰部电影期待春天|当前滚动

被电影行业寄予厚望的2023年“五一档”终于落下了帷幕。灯塔专业版的数据显示,“五一档”累计票房15 19亿

2023-05-06

快讯2023-05-06 01:31:24 世界热消息

5月6日电,美股高开高走,纳指涨2%,道指涨1 3%,标普500指数涨1 6%。

2023-05-06

浙江队客场0:0战平武汉三镇拿到赛季第1分,三镇踢起“快乐足球”|报资讯

北京时间5月5日晚,在2023赛季中超联赛第5轮的一场比赛中,前四轮遭遇四连败的浙江队,在客场0:0艰难逼平的

2023-05-06

资讯

天津津门虎队教练于根伟:机会来了要冷静

天津津门虎队明天将迎来中超联赛第五轮比赛,未尝一胜的现实也让全队上下倍感压力。昨天,主教练于根伟在谈及全队问题时表示:球员们在完成

2022-06-20     
北京推出14条秋游文化线路

金秋时节,北京市文化和旅游局以赏银杏品文化为主题,推出14条“叶落的季节——漫步北京赏银杏品文化主题线路”,邀市民和游客以步行、骑行

2021-10-27     
基因编辑发力 培育高质量人源化供体猪

此次人体试验,仅仅验证了基因编辑猪克服异种器官移植的超急性排斥反应,还需解决延迟性排斥反应、消耗性血栓等问题。但通过这次试验,能更

2021-10-27     
中国经济高质量发展步伐稳健 长期向好基本面未变

在全球疫情走势和经济走势趋于复杂的背景下,中国经济巨轮将驶向何方,举世关注。2020年10月26日至29日,党的十九届五中全会在京举行,明确

2021-10-27     
南美解放者杯决赛允许近4.5万观众入场

南美洲足联主席多明格斯25日与今年解放者杯决赛对阵的两支俱乐部负责人会晤,宣布决赛现场观众人数增加到球场容量的75%,即近4 5万人。今年

2021-10-27     
22年从警生涯 面对荣誉他说不要给我报功

9月24日,时任安徽省安庆市公安局迎江分局刑警大队大要案中队中队长周磊因在工作中激烈搏斗引发心源性猝死,倒在了工作岗位上,经医院抢救

2021-10-27