网易首页 > 网易号 > 正文 申请入驻

开源物联网大数据平台赋能智慧物流

0
分享至

在智能物流时代,数据无论对物流装备还是物流系统的作用都至关重要。WMS、WCS等软件系统的基础便是数据库软件。物流装备行业迫切需要读取速度更快,计算效率更高,而且开源可改进的数据库软件系统。对高校而言,开源代码对算法人才培养必然起到很好的促进作用。在这方面,涛思数据提供了很好的行业借鉴和产学研合作基础。

近期,工业和信息化部等八部门联合印发《物联网新型基础设施建设三年行动计划(2021—2023年)》,明确到2023年底,在国内主要城市初步建成物联网新型基础设施,物联网连接数突破20亿。这一数字背后,意味着更加庞大的数据规模。在物流领域同样如此,随着行业的发展,无论车联网规模还是不同规模物流中心内智能设备的接入量都在大幅增加。面对随之而来的具有时效性强、实时数据量大等特点的海量数据,如何实现高效的数据存储和处理至关重要。

基于此,各种涵盖数据采集、存储、查询、分析和计算等功能的物联网数据平台开始不断涌现,北京涛思数据科技有限公司(以下简称“涛思数据”)便是其中之一。但是,不走寻常路的涛思数据,不仅摒弃传统基于Hadoop生态的搭建方式,推出专为时序空间大数据设计的时序数据库平台,更是以开源的方式,突破行业传统思维,开创了一条大胆创新探索之路,成为时序数据领域炙手可热的标杆企业。

活力四射的涛思数据团队

谋定而动 做一块物联网世界的“小砖头”

与涛思数据创始人陶建辉的初次会面,刚好在一场大雪之后。突然而至的大雪一夜之间便褪去了北京绚丽多彩的秋色,但雪后碧蓝的天空,光秃的树枝,与涛思数据所在的望京CBD设计别致的建筑群相互映衬着,倒也具有别样的美。大自然总是充满神秘莫测的变化,而对于软件行业出身的陶建辉来说,最熟悉的却莫过于变化。软件行业可以说是技术更新换代速度最快的行业之一,就拿App来说,其平均寿命大概只有10个月。想做一款“长命”的基础性软件产品的念头,很久之前就开始在陶建辉的脑中萌生。最终,两方面的原因坚定了他的信念。

一是蓬勃的市场需求。随着互联网的发展,特别是通讯成本的急剧下降,各式各样的数据被采集并发送到云端,数据量呈现爆炸式地增长。“10年前,你很难想象,几乎每辆车、每台设备都在源源不断地产生数据;现在,这一切都在发生;未来,这一趋势还将加速。工业领域在传统的实时监控技术上,各种大数据分析技术、特别是人工智能技术,让采集的大数据产生了巨大的商业价值,催生了一个前所未有的市场。”他表示。

二是技术的相对落后。他进一步分享道:“相对于数据量的快速增长,数据处理的技术却相对落后。虽然市场上已经有从存储、计算到分析较为完整的大数据处理框架,包括各种免费开源系统,但需要耗费大量的存储空间和计算资源。一个运营商光存储查询半年的上网记录就需要使用数千台服务器,而且还需要不断扩容。因此海量数据的增长对技术提出了更大的挑战,也给我们这些技术极客们提供了一个巨大的机会。”

如何弥补现有技术的缺陷,充分满足庞大的市场需求,成为陶建辉接下来要考虑的重点。在对整个物联网和大数据生态进行研究后,他发现,通用大数据方案通常会将开源的Kafka、Redis、HBase、MongoDB、Cassandra等大数据软件拼装起来,利用集群来处理海量数据。因涉及多种系统,开发效率低、运行效率差、运维复杂、应用推向市场慢等问题频发。对于数据采集量巨大的物联网、工业互联网等行业,传统的通用大数据方案更加难以为继。而通过存储结构的优化则可以大大提升性能。海量时序空间数据处理(从采集、存储、查询、计算到分析)无疑是个巨大的机会。正是在此背景之下,2017年6月涛思数据正式成立,随后,物联网大数据平台TDengine应运而生。

“作为一款基础性软件,TDengine就好比一块小小的砖头,无论整个软件世界如何变化,迭代,若干年后它依然可以发挥价值,如此我便很知足了。”陶建辉笑着补充道。尽管涛思数据成立已经4年多了,但在回忆公司创立过程时,他的脸上依然满是似乎创业者初期才有的激情与昂扬。

涛思数据自 2017 年成立以来获奖无数

首开先河 率先行业实现软件开源

TDengine定位是物联网大数据平台,即时序数据处理平台,其核心是将时序数据实时数据和历史数据操作合一透明,同时具备缓存、数据订阅、流式计算、消息队列等功能,为物联网数据处理提供全栈解决方案。

TDengine 时序数据处理平台

所谓时序数据,即带时间标签的数据,指按照时间的顺序变化、时间序列化的数据。陶建辉通过对物联网、工业互联网数据进行调研,总结出这类数据的十大特征:

(1)所有采集的数据都是时序的;

(2)数据都是结构化的;

(3)一个采集点的数据源是唯一的;

(4)数据很少有更新或删除操作;

(5)数据一般是按到期日期来删除的;

(6)数据以写操作为主,读操作为辅;

(7)数据流量平稳,可以较为准确的计算;

(8)数据都有统计、聚合等实时计算操作;

(9)数据一定是指定时间段和指定区域查找的;

(10)数据量巨大,一天的数据量就超过100亿条。

针对这些特点,TDengine定义了创新的时序数据存储结构,通过无锁设计和多核技术让数据插入和读出的速度比现有通用数据库高出10倍以上。除此之外,涛思数据还赋予了TDengine两个核心技术创新点,分别是“一个数据采集点一张表”以及“超级表”,保证TDengine插入和查询效率最优化,同时便于进行聚合查询、多维分析。

除了在产品性能、性价比上不断提升,TDengine能够形成更加广泛的影响,还在于陶建辉一个大胆的决定——开源。这一举动在国外软件市场尚不足为奇,但在相对保守的国内市场来说,无疑反响强烈。TDengine自2019年7月正式宣布开源,2020年8月,宣布将集群版本开源以来,所获成绩喜人,在开源社区GitHub(世界上最大的代码托管平台)已收获17k Stars。在资本市场,涛思数据也备受关注,近两年已经先后获得近千万美元的Pre-A轮融资、1000多万美元的A轮融资以及4700万美元的B轮融资。

在陶建辉看来,开源是中国软件走向世界的最好捷径。在目前的这些成绩之外,陶建辉内心始终有一个坚定的目标——做时序数据领域的全球第一。“在基础软件领域,无论操作系统、数据库、软件开发工具还是现在的大数据处理平台,几乎都是美国公司的天下。在基础软件领域占有一席之地,是我们所有IT人的梦想,更是一个国家科技实力的象征。”谈及中国软件的现状他略显遗憾,但是随即恢复了对于未来发展的信心,“中国拥有全球最大的数据市场,其采集的数据量和场景之多已经超过美国。在中国市场成功的大数据产品,一定会被全球市场所接纳。”

开源不仅为涛思数据带来了巨大的成功,为行业做出了很好的表率;对于中国软件人才的培养来说,也具有非常积极的意义。

陶建辉表示,高校学生往往在跟导师做项目时才能够接触到源代码,而各类开放平台上的开源软件也非常有限,但是随着TDengine的开源,学生可以免费接触到无数源代码,这无疑是最好的学习机会和资源,会对中国软件整体水平的提高起到积极的促进作用。为了促进大学生对开源的认识和理解,陶建辉先后在清华大学、复旦大学、重庆大学、西南大学、北京大学、中国人民大学、北京邮电大学和中国科学技术大学等20多个高校,分享 TDengine的核心技术,开源背后的思考,鼓励大学生积极参与到开源建设中来。

值得一提的是,对于程序员来说,他们往往是默默地改变着大家生活的一群人,随着软件的开源,他们从产品背后开始走出来,和更广泛的人群有了交流和互动,在相互促进之下,不仅可以进一步提升专业能力,用代码打造属于自己的“名片”,同样也有利于行业整体水平的提高。这些在陶建辉眼中,都是比企业成功更加有意义、有价值的事情。

赋能物流 加速行业数字化转型

时序数据的处理,是一切数字化、智能化的基础。在TDengine广泛的服务领域中,物流是非常重要的部分。并且随着物流行业的快速发展、自动驾驶等技术的升级和愈加广泛的应用,对时序数据处理的需求也在不断扩大。

“在物流领域最典型的应用如物流车辆的实时位置和运行轨迹数据,以及物流机器人、穿梭车等移动装备的位置、电池状态,以及路径规划、环境监测、轨迹追踪等等数据,通过TDengine,我们可以实现用更小的空间存储更加海量的数据,同时在最短的时间,将用户需要的数据进行调用,以及分析计算等,为其他更多功能的实现提供支撑。”他针对TDengine在物流领域的应用进行了说明,并进一步举例,国内某快递巨头旗下互联网科技公司,由于其原来采用的时序数据库OpenTSDB性能较差、占用存储空间多、对大跨度高频词的查询支持不够等原因,将目光转向了TDengine,在将大数据监控平台迁移到TDengine之后,其所需服务器从之前的21台减少到3台。此外,TDengine在部署、写入速度、查询速度、存储效率、缓存、流式计算等方面均凸显出明显的优势。此外,如在烟草等行业,随着企业业务的发展,生产中需要监测的指标从几万个增加到几十万甚至百万个以上,TDengine的应用有利于企业提升数据存取效率、打破传统数据孤岛、提升数据有效利用率。

“技术是涛思数据的立身之本,通过技术创新潜心研发极致的产品,让技术创造价值是我们努力的方向。”在整个交流过程中,从他不时爽朗的笑声中,听得出他对涛思数据未来发展的极大信心;从他始终富有激情且面带微笑的脸上,也看得出他对手中事业的热爱。“一般来说,程序员的黄金年龄是25~35岁,像我这样50岁还在写代码的程序员已经是稀有动物了。”陶建辉自嘲到,“但是,我还会继续写,写一辈子。”陶建辉站在大大的落地窗前,窗外视野开阔,阳光正好。

陶建辉简介

涛思数据创始人。

获得2020中国开源杰出贡献人物。

1994年到美国留学,1997年起,先后在芝加哥Motorola、3Com等公司从事无线互联网的研发工作。2008年初回到北京创办和信,后被联发科收购。2013年初创办快乐妈咪,后被太平洋网络收购。

2017年5月创办涛思数据,专注物联网大数据的处理,产品TDengine开源后,在GitHub全球趋势排行榜上多日排名第一位。涛思数据已获红杉、GGV、经纬、明势资本等多家机构的近7000万美元的投资。

战略合作

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
俄军伤亡人数破55万,白俄罗斯与中国军演备受关注

俄军伤亡人数破55万,白俄罗斯与中国军演备受关注

史政先锋
2024-07-07 20:05:21
刚刚,杭州官宣:全部取消!

刚刚,杭州官宣:全部取消!

最金华
2024-07-07 22:11:59
身价重回1400亿!王健林,为什么还在“疯狂甩卖”

身价重回1400亿!王健林,为什么还在“疯狂甩卖”

侃见财经
2024-07-07 09:27:09
张文宏团队最新研究:2023年呼吸道感染激增可能与疫苗接种有关

张文宏团队最新研究:2023年呼吸道感染激增可能与疫苗接种有关

生命科学前沿
2024-07-05 08:19:33
川藏线逆行孕妇称被网暴:我被罚200,现在民宿生意被下架,很惨

川藏线逆行孕妇称被网暴:我被罚200,现在民宿生意被下架,很惨

兰子记
2024-07-07 17:05:10
高血脂还吃红薯?医生怒斥:血脂高的人,别再傻傻吃这3种菜了!

高血脂还吃红薯?医生怒斥:血脂高的人,别再傻傻吃这3种菜了!

碧晴养生汇
2024-07-06 23:18:23
网友质疑华容县政府救灾不力:洞庭湖决堤本来能堵住,为何用沙子堵口子?

网友质疑华容县政府救灾不力:洞庭湖决堤本来能堵住,为何用沙子堵口子?

小萝卜丝
2024-07-07 10:57:49
无缘四强!巴西队遭群嘲,小罗言论成真,12.7亿身价4战5球

无缘四强!巴西队遭群嘲,小罗言论成真,12.7亿身价4战5球

天涯沦落人
2024-07-07 11:43:02
两天内,信长星、胡昌升、许昆林、任振鹤四位省级党政“一把手”,多了新身份

两天内,信长星、胡昌升、许昆林、任振鹤四位省级党政“一把手”,多了新身份

政知新媒体
2024-07-07 22:23:44
自由市场转交易市场!接下来几周你期待看到什么交易?

自由市场转交易市场!接下来几周你期待看到什么交易?

直播吧
2024-07-07 21:05:32
钓鱼网红周翠翠夫妻溺水去世,朋友:两口子人很好,他们有两个年幼的女儿

钓鱼网红周翠翠夫妻溺水去世,朋友:两口子人很好,他们有两个年幼的女儿

极目新闻
2024-07-07 17:41:22
朝鲜援俄炮弹质量太差,频频炸膛,吓得俄军不敢用!

朝鲜援俄炮弹质量太差,频频炸膛,吓得俄军不敢用!

非虚构故事
2024-07-06 18:41:49
多家俄媒关注:被传“离开俄罗斯”的俄前副防长舍夫佐娃现身受访,否认传闻

多家俄媒关注:被传“离开俄罗斯”的俄前副防长舍夫佐娃现身受访,否认传闻

环球网资讯
2024-07-07 12:10:41
广东一民办本科副教授转岗高职院校辅导员,3名海归硕士同时获聘

广东一民办本科副教授转岗高职院校辅导员,3名海归硕士同时获聘

澎湃新闻
2024-07-05 22:10:29
民营企业与重庆北碚殡仪馆协议合伙经营60年,15年后企业代表被强制驱逐,双方对簿公堂

民营企业与重庆北碚殡仪馆协议合伙经营60年,15年后企业代表被强制驱逐,双方对簿公堂

极目新闻
2024-07-07 17:52:33
4-2!伊藤美诚夺女单冠军,日乒已获四冠,排名139位黑马憾夺亚军

4-2!伊藤美诚夺女单冠军,日乒已获四冠,排名139位黑马憾夺亚军

湘楚风云
2024-07-07 20:12:49
接线员:“你在哪里?” 报案人:“在你心里”

接线员:“你在哪里?” 报案人:“在你心里”

警民直通车上海
2024-07-07 14:12:11
土耳其取消对中国车加征40%关税,比亚迪10亿美元投资建厂

土耳其取消对中国车加征40%关税,比亚迪10亿美元投资建厂

青木在德国
2024-07-07 21:40:03
希捷被要求补税15亿人民币,直接关门去了泰国

希捷被要求补税15亿人民币,直接关门去了泰国

小刀99
2024-07-07 10:20:04
医生们为小学生4分错题“联名上书”,承载着“不套标准答案”的教育期待

医生们为小学生4分错题“联名上书”,承载着“不套标准答案”的教育期待

极目新闻
2024-07-07 13:05:18
2024-07-08 03:34:44
物流技术与应用
物流技术与应用
新鲜热辣的物流干货!
5439文章数 7110关注度
往期回顾 全部

财经要闻

齐创阶段新高 一线城市楼市又可以了?

头条要闻

道德沦丧的彭国甫被处理 曾称"千万莫让别人戳脊梁骨"

头条要闻

道德沦丧的彭国甫被处理 曾称"千万莫让别人戳脊梁骨"

体育要闻

转发这篇索斯盖特,你也能运气爆棚!

娱乐要闻

49岁林志玲在日本带娃被偶遇

科技要闻

临时加关税 欧版"元PLUS"成本涨近8000欧元

汽车要闻

18.98万起 宝马新电动MINI COOPER上市

态度原创

教育
健康
房产
手机
军事航空

教育要闻

16年高考,是对是错?唐尚珺的故事引人深思

人类为何至今无法攻克渐冻症?

房产要闻

超大规模!海口迈瀛片区征收补偿方案曝光!

手机要闻

7月7款新机大盘点:性价比、折叠屏均在,冲击力非常凶猛

军事要闻

美媒:外国雇佣兵在乌克兰杀害俄战俘

无障碍浏览 进入关怀版