老男人
首页 时尚 玩车 保健 情感
更多
腕表 饮食 视频 美女 百科
0
老男人 > 科技 > 正文

火山引擎ByteHouse助力大地量子精准、高效预测天气

2023-08-10 19:24:31 发布人:hao333 阅读( 9754)

伴随着气象技术的发展以及城市气象设施的完善,气象监测服务能力在不断提高,实现短期甚至中长期的气象预测成为可能。

伴随着气象技术的发展以及城市气象设施的完善,气象监测服务能力在不断提高,实现短期甚至中长期的气象预测成为可能。

短期、长期的天气形势预测,不仅能帮助相关行业、有关部门针对性地进行极端天气防范准备,降低气象灾害带来的影响;还可以提升对风力、水力等可再生能源的利用效率,实现可持续发展,推动环境保护。

而大地量子正是这样一家深耕气象领域的公司。作为定位为AI大模型与数字孪生的公司,大地量子通过对PB级卫星遥感数据、气象数据的AI开发,打造业界领先的天气预测、清洁能源功率预测、绿电交易预测、碳汇碳排等技术产品,并利用自有的AI与超算优势,完成下一代气象预报系统。

火山引擎ByteHouse助力大地量子精准、高效预测天气

预测一个地理位置的气象情况,实际是根据周围的观测站点的大量信息,做重合面积的地理信息查询,包括经纬度、温度、湿度等具体数值。除此之外,大自然中变幻莫测的风、雨、云、电,也会为数据的计算能力和实时查询也带来了巨大的难点。具体可以包括以下三点:

第一,地理信息数据处理能力,业务需要丰富的geo函数,用于整合海量的历史气象数据,对目标点位/区域实现天气预测;第二,高时效性查询需求,风场、云层预测等模型需要实时查询能力,快速做到结果反馈;第三,由于查询的接口众多,高并发扩展也是交互式业务不可或缺的能力之一。

如何解决这些痛点?大地量子选择了与火山引擎云原生数据仓库ByteHouse进行合作。

随着字节跳动业务的快速发展,产生了海量的产品使用数据分析需求。这类场景数据指标计算相对复杂、数据总量大且查询模式多变,要求底层数据计算引擎具备高可用性,以及具备应对超大数据规模下交互式实时响应的能力。ByteHouse的极致性能和强大计算能力,正是源于内部场景的多年积累和检验。

在字节跳动内部实践场景和海量数据打磨下的技术能力也复制在大地量子上,并进行了进一步升级。

据介绍,ByteHouse起初是基于开源ClickHouse引擎进行技术架构重构和优化。但相比起原生的ClickHouse,火山引擎ByteHouse基于独家自研的高可用引擎及查询优化器,可以为企业提供快速、稳定、安全的查询服务和数据写入性能。

从技术层面看,ByteHouse 提供了 PB 级数据秒级响应,通过增强的自研引擎,确保95%以上的查询均可在秒级返回,同时通过自研的HAEngine和元数据持久化等优化,ByteHouse提供了新的生产级高可用方案,能够保障其在大数据量场景下依然不会影响到查询分析体验。

大地量子通过将现场采集及大模型生成的气象数据导入到ByteHouse中,通过ByteHouse的多边形计算、方差、平均值等计算函数能力,支撑GEO查询和空间计算,满足其对预测系统以及交互式查询需求。另外,针对大地量子不同阶段数据波动情况,ByteHouse也提出了定制化解决方案。例如,在业务数据低谷期,ByteHouse提供集群节点进行自助升级能力,在保持产品功能更新的同时,能更灵活帮助大地量子控制产品版本,降低运维负担。

在降本增效层面,大地量子也利用ByteHouse进行了极致优化。ByteHouse 能支持用户自定义冷存储的比例,该能力帮助大地量子将查询频次较少的历史数据进行冷存,起到降低存储成本的作用,最终实现查询效率和成本之间的平衡。

目前,在业务实践中,平均查询任务时长始终保持在50毫秒以内,同时可以做到400QPS的峰值并发,火山引擎ByteHouse的高效率表现为大地量子提供了最有力的用数支持。

未来,大地量子将把部分功能作为API接口对外开放,ByteHouse的高查询性能足以满足预测系统及后续交互式查询需求,进一步为大地量子提供了查询并发的保障,为业务扩展提供基础。除此之外,由于ByteHouse 支持无损和自助水平扩容,随着数据量持续增加,大地量子也计划通过 ByteHouse 集群的水平扩容来动态调整和支持计算、存储能力,为高性能查询提供更强保障。

除了在气象领域落地,火山引擎ByteHouse还与中国地震台网中心、海王集团、莉莉丝游戏、极客邦科技等诸多行业企业达成了深度合作,凭借新一代的云原生架构,高效方便的运维模式,以及高性能更灵活的实时查询能力,为企业抓稳数字化机遇建立了夯实的地基,推动企业的数智化转型升级。

          
  • 上一篇:火山引擎DataLeap:更强的数据目录搜索能力,做到一步找数

相关阅读

RelatedReading
  • 从物理按钮到手势交互:华为专利引发车载控制变革 从物理按钮到手势交互:华为专利引发车载控制变革
  • 吉利控股集团旗下公司获得垂直起降飞行器专利授权 吉利控股集团旗下公司获得垂直起降飞行器专利授权
  • 浅谈骁龙8 Gen 2的“芯力量”,三个原因站稳旗舰标配地位 浅谈骁龙8 Gen 2的“芯力量”,三个原因站稳旗舰标配地位
  • 想要数据查询分析更准确灵活?火山引擎ByteHouse物化视图功能助你一臂之力 想要数据查询分析更准确灵活?火山引擎ByteHouse物化视图功能助你一臂之力
  • 零零信安:暗网分析报告——Part 2 RaidForums的残骸 零零信安:暗网分析报告——Part 2 RaidForums的残骸
  • TORVA拓屋:4.0智能洗碗机工厂发挥领航者的力量,引领洗碗机行业发展 TORVA拓屋:4.0智能洗碗机工厂发挥领航者的力量,引领洗碗机行业发展

猜你喜欢

Guessyoulike
亿航智能受邀参加长春航展论坛,分享适航认证创新经验

亿航智能受邀参加长春航展论坛,分享适航认证创新经验

hao333 1080次阅读2023-07-29 08:57
洗衣机E4是什么意思(洗衣机出现E4标识是啥意思)

洗衣机E4是什么意思(洗衣机出现E4标识是啥意思)

龙鑫 5598次阅读2023-05-14 10:41
当珠宝遇见“万年历” 此刻纵享“奢华”

当珠宝遇见“万年历” 此刻纵享“奢华”

hao333 8528次阅读2023-06-09 08:00
中宏人寿H1在辽宁万张保单投诉量居人身险公司首位

中宏人寿H1在辽宁万张保单投诉量居人身险公司首位

hao333 7731次阅读2023-08-04 14:40
专题页

HOT榜单

  • 生物医药板块涨1.18% 冠昊生物涨11.06%居首

  • 锂电池板块涨1.65% 英可瑞涨19.98%居首

  • 拓尔思涨19.99% 机构净买入9131万元

  • 森泰股份上市首日涨15% 超募4.2亿元去年营收降1成

  • 食品加工制造板块跌0.27% 来伊份涨3.82%居首

  • 官方晒蒂法8岁、13岁美术设定图 身着连衣裙天真烂漫

  • 期待6月!《2077》DLC将于夏日游戏节放出新内容

  • 半导体板块跌0.47% 峰岹科技涨12.32%居首

  • 碳中和板块涨1.12% 曙光数创涨23.07%居首

  • 亚联发展涨停 机构净卖出7473万元

换一组看看

频道最IN
>鲁大师2023年Q1季度电动车报告:九号独占八榜,差异化竞争完成产品破圈

鲁大师2023年Q1季度电动车报告:九号独占八榜,差异化竞争完成产品破圈

>什么叫k线上的乌云盖顶(乌云盖顶k线形态图解)

什么叫k线上的乌云盖顶(乌云盖顶k线形态图解)

>《死亡细胞》原生PS5版曝光 含恶魔城DLC

《死亡细胞》原生PS5版曝光 含恶魔城DLC

关于我们 法律声明 联系我们 广告服务 隐私条款
@老男人网 版权所有/信息产业部备案号:蜀ICP备13015099号-1