多领域应用落地,火山引擎ByteHouse加速云数仓升级
2023-07-10 19:06:44来源:中关村在线
近日,火山引擎数智平台VeDI直播活动「超话数据」在线举办,来自火山引擎的产品及解决方案专家分享了以ByteHouse为代表的云数仓产品在字节跳动的演进过程、关键技术以及最佳实践,并通过五个步骤拆解,带领开发者快速上手云数仓。
(资料图片仅供参考)
现如今,企业正加速走向数字化、智能化,对数据的应用也提出了全新要求,特别是在数据实时分析、实时部署方面的诉求更加强烈,而云数据仓库为用户实现云原生、智能运维、弹性资源等业务需求带来了很好支撑,成为今天企业数字化基础设施中的关键“底座”。
ByteHouse则是这样一款云原生数据仓库。ByteHouse起初是基于开源ClickHouse引擎进行技术架构重构和优化,在字节跳动内部大规模应用,其中部署规模超过1万8000台,单集群超过2400 台,现已通过火山引擎对外输出。
火山引擎ByteHouse
据ByteHouse产品专家介绍,面对企业级数据处理需求,相比起原生的ClickHouse,火山引擎ByteHouse基于独家自研的高可用引擎及查询优化器,可以为企业提供快速、稳定、安全的查询服务和数据写入性能。在云原生架构下,火山引擎ByteHouse提供了极致扩展的统一数据分析平台,具有出色的弹性伸缩和可扩展性,确保资源可以灵活地水平扩展;同时,ByteHouse支持多级资源隔离,为用户资源提供更安心的安全保障。
除了高可用的基础能力,火山引擎ByteHouse还从业务角度出发提供了完整的运维监控和排障能力,帮助企业实现业务云上托管,降低运维成本。
不仅仅具备强大的技术能力和易用的产品特性,火山引擎ByteHouse在广告、气象、行为分析等领域已经积累丰富的落地经验。在此次活动中,火山引擎解决方案专家通过广告、气象、行为分析3个领域案例,详细拆解云原生数据仓库如何能在业务场景中丝滑落地。
首先,在广告受众预估领域,为了帮助广告主确定目标人群,判断投放价值,广告平台需要为广告主提供受众筛选能力,即根据不同筛选条件、标签或人群包,确定每次营销活动覆盖的人员类型、人员规模。其难度在于,广告平台用户体量大、人群包数量大,导致单个查询中涉及多个人群包计算,使得查询复杂度高;另外,广告平台对数据时效性要求高,数据查询效率要达到秒级响应。
面对此类需求,ByteHouse支持BitMap数据格式,降低人群包数据内存占用,配合uid的数据分片方式,提升数据查询并发能力,实现高效的人群包交、并、补计算,满足QPS峰值查询需求,最终达到查询秒级响应的效果。
火山引擎ByteHouse在广告受众预估领域落地
其次,在气象领域,ByteHouse帮助AI大模型与数字孪生公司大地量子实现对气象数据的精准预测。根据风向、湿度、温度、风力等历史气象数据,结合风场、云层等模型能力预测未来能源情况,是大地量子的主要应用场景。大地量子通过将现场采集及大模型生成的气象数据导入到ByteHouse中,由ByteHouse支撑GEO查询和空间计算能力,满足其对预测系统以及交互式查询需求。目前,大地量子的平均查询响应时长不仅在50毫秒以内,预测精准度也得到有效提升。
最后,在行为分析领域,极客邦科技则通过ByteHouse实现以用户为中心的精细化营销。作为致力于为数字人才提供全方位、高质量新闻资讯、课程内容、大会、指导等服务项目的企业,极客邦科技会根据用户画像、在端内的操作行为等数据为用户精准推送课程、活动,洞察用户全链路行为,以便提供更好服务。但随着用户数量变大且持续增长,数据查询需求愈加复杂,同时也面临快速响应的问题,在技术层面遇到很多挑战。
增长分析平台DataFinder与云原生数据仓库ByteHouse的组合使用则帮助极客邦科技更好洞悉客户全链路营销旅途。ByteHouse的高可用引擎和查询优化器可以将用户表、事件表等数据高效去重、分析和计算,再通过DataFinder SDK实现事件分析、留存分析、转化分析等能力,实现用户精准洞察和营销能力升级。
不仅仅在广告、气象等领域落地,ByteHouse 还将持续通过创新的技术和功能,帮助更多行业构建高效、稳定和可扩展的实时数据分析平台,提供强大的数据处理和分析能力,助力企业更好实现数字化升级。(作者:周明)
标签:
相关阅读
精彩推荐
阅读排行
相关词
- 沃尔沃XC90
- 上海张江拟7月18日对“22张江二”付息,利率为2.83%
- 2023全国新能源产业创新发展(唐山)论坛——氢能专场于南湖国际会展中心成功举办!
- 房子产权是多少年
- 哈森股份(603958.SH):预计上半年净利润140万元到210万元 同比扭亏为盈
- 小米行车记录仪不停的重启怎么办
- 红米怎么设置默认媒体音量
- 周一复盘总结-7.10
- 量价均超2019年 暑期北京酒店火到8月
- 从低碳向“零碳”发展,北京移动通过技术创新推进新基建低碳化
- 三星Galaxy Tab S9曝光 售价10000+
- 天通股份: 您可以关注下国内外行业研究机构的相关报告来了解铌酸锂的市场规模
- 季度便览|国家统计局:2023年上半年教育文化娱乐价格同比上涨1.7%
- 荣耀X40 GT又降价500 到手只要1499
- 谷歌Pixel 8手机大曝光:预装安卓14系统
- 幼儿园突发刑案,6死1伤!遇害者身份仍在核实,25岁男子被捕
- “结婚登记必须提供户口簿”违背婚姻自由?民政部回应
- 金证股份董事赵剑被监管警示 定期报告窗口期违规减持
- 今日白银价格行情查询(2023年7月10日)
- 7月10日超大账户抢筹(减持)的50只股(附名单及解读)
- 新款Beosound 2家居音响新配色上架:自然色、雅黑色和金色三种配色
- 河南大学生毕业卖胡辣汤,一早上卖出去一碗,终于明白:现实残酷
- 【解局】美国向乌提供集束弹药,为什么惹众怒?
- 微视频:盛世中华 何以中国
- 【地评线】东湖评论:人才工作要做好“引育用留”文章
- 又一考公巨头炸锅了
- 成都大运会低碳办赛系列主题活动举行
- 全球连线|收集海外珍稀汉籍 探寻文化发展脉络
- 专访:北约峰会可能使乌克兰危机进一步升级——访德国联邦议院议员塞维姆·达代伦
- 守护暑期安全伴成长!莘县公安局积极组织开展暑假安全教育宣传活动
- 北京检察机关依法对顾晓园涉嫌贪污、受贿案提起公诉
- 瑞丰银行现两笔折价近10%大宗交易;新华保险周涨9.40%领涨保险板块;中国太保现39.17亿大宗交易
- 知乎匿名“匿了”,“谢邀,匿了”终成历史
- 【解局】美国向乌提供集束弹药,为什么惹众怒?
- 16中9砍21分,5星高中生比克里斯托弗强太多,火箭20号签豪赌血赚
- 乘联会:6月全国乘用车厂商批发223.6万辆,同比增长2.1%
- 盲盒头部品牌成被执行人 泡泡玛特遭强制执行1700万
- 贝因美、小鹿蓝蓝“联合研发实验室”正式揭牌
- 智驾的风口已来 | 湮灭与新生
- 银行板块跌0.01% 成都银行涨1.39%居首
- 京东金条利息怎么算的?附注意事项
- 细思极恐!超百部“明星、网红换脸”色情视频仅售几十元,揭秘幕后→
- 【新华500】新华500指数(989001)10日涨0.48%
- 怎样画人物女孩 怎样画人
- 新一代广角天线在北京乡村完成试点验证
- 行业首款裸耳3D空间音频平板!荣耀平板MagicPad沉浸音效值得期待
- 4K分辨率低至899元!联合创新28英寸IPS显示器28D1U促销
- 成都大运会低碳办赛系列主题活动举行
- 房子过户需要多少钱的手续费 房子过户需要多少钱
- 江苏丰县农村文化骨干忙“充电”
- 129元!倍思推出Q电2代快充充电宝:双快充线、22.5W快充
- 商务部:对原产于日本和美国的进口光纤预制棒所适用的反倾销措施发起期终复审调查
- 传音在印度推出Tecno Camon 20 Premier 5G手机,搭载联发科天玑8050
- 苹果2023第三财季财报分析 会议时间公布
- 农行助力重庆秀山建设“心灵家园”呵护留守儿童
- 中报预增 加码新能源布局 苏常柴A连续涨停
- 格灵深瞳携手华为助推大模型联合创新
- 亿达科创亮相数交会 共话数字健康新发展
- 【一线调研】广东中山改造低效园区 推动集约发展
- 曝广东队接触前北京首钢超级外援!身高1米96,法甲联赛顶级后卫
- “感受澳门乐无限”诚邀港人来澳度暑假
- 结婚登记提供户口簿违背婚姻自由?民政部回应
- 曼联队长接班:马奎尔被撸B费上位 3后卫OR拉师傅
- 再见尤文!3年1亿,投奔本泽马,联手坎特冲亚冠,对抗武磊奥斯卡
- 2023年07月09日全国生蚝报价分析
- 韩国在野议员团将访日 抗议福岛核污染水排海计划
- 亚信科技、清华AIR、英特尔成功举办“6G智能网络与计算”论坛
- 联合国警告苏丹或爆发“全面内战”,埃及将主办苏丹问题峰会
- ST华铁担保总金额为36.98亿元
- 第一类医疗器械包括什么(一类医疗器械包括什么)
- 2023年全球零信任现状报告发布丨面临集成挑战,如何突破知易行难
- 欧洲主要股指集体低开
- ST天顺更正追加确认关联交易
- 郧西安家乡以“练”备战 练出防汛“硬实力”
- 美国法官驳回种族大屠杀幸存者的诉讼 美媒:这里没有正义
- “商汤日日新”大模型体系全面升级,飞速迭代赋能百业日日生新
- 利亚德:目前处于数据储备阶段,与合作伙伴共同研发
- 宜科自动化拟冲刺资本市场,辅导券商为华泰联合证券
- 11日至14日 省内多条河流将会出现涨水过程
- 解难点,疏堵点,东阿公安筑牢夏季公共安全监管防线
- 金域医学&华为云,携手打造医检行业大模型
- 视频丨传·承大运
- 2022哈尔滨市各省重点中学报考指导位次(配额+排名)
- 和评理 | 北约已搞乱欧洲 不要再搞乱亚洲
- 美国芝加哥再迎“暴力周末”:多地枪击案致22人中枪5人死亡
- 多方质疑!向乌克兰提供集束弹药,美国在打什么算盘?
- 2023生态文明贵阳国际论坛举办绿色创新产品展
- 非洲+中蒙+中亚”,嘉友国际股价连涨三天!这些行业持续发力,机构看好未来发展前景|大涨解读
- 2023哈尔滨中考总成绩位次表
- 北约成员国坚持冲突结束后再谈乌克兰“入约”问题
- 再动南海试试!菲舰强闯仁爱礁与中方发生冲突,我外交部对菲摊牌
- 买贵双倍赔!小米13 Ultra保护壳降至169元
- “氢”“水”“风”“光”入画来
- 一辆配备福特野马发动机的罕见 DeTomaso Guara Barchetta 已挂牌出售
- 苹果2023财年第三季度财报公布:库克回应股东提问
- 稀有气体的用途(三个常用用途带你了解)
- 塞尔达传说:王国之泪制作人:我们在尝试新想法
- K60 Ultra全面曝光:配置和外观都定了
- 《原始袭变》跨平台功能首日推出 但Steam无法联机其他平台
- 税友股份收监管工作函 就大额投资创投业务明确要求
- 小米“小爱同学”上线“敲木鱼”功能,可模拟敲击木鱼
- 盐城建湖钟庄街道人大助力防汛安全工作
- 月薪3万元被突然解雇 聂某某要求支付96万元赔偿金
- 2023年暑期档票房破70亿元
- 英雄联盟msi历届冠军-msi历届冠军名单一览
- 省公安厅发布一周典型电诈案件预警 当心境外“高薪诚聘”骗局
- 2023海南华中师范大学黎安滨海学校招聘教师工作公告(第六号)
- 7月10日《西安日报》速览
- 错过待明年!Apple iPhone 13 5G智能手机优惠至4928元
- “互联护苗2023”网络举报宣传系列活动今日启动
- 众安保险600万是真的吗?众安保险1块钱能报销吗
- 2023年暑期档总票房破70亿
- 小米集团宣布成立降本增效专项组
- 请求权不适用诉讼时效的规定(请求权)
- 比LCD更准!OLED屏幕色彩还原准确
- 2023 WAIC展台黑科技:3分钟即可现场定制数字人分身,成今年最大看点
- 银欣SF 120 ARGB风扇开箱评测
- 微软更新WSA系统,修复OneDrive文件夹不显示问题
- 三峡电站投产发电20年累计发出清洁电能超16000亿千瓦时
- 非遗保护传承关键在人(金台随笔)
- 协同布局算力一张网
- 我省积极实施2023届高校毕业生就业“百日冲刺”行动,一系列稳就业举措持续发力—— 搭手“扶上马” 携手“送一程”
- 6月中小企业发展指数发布 工业建筑业等多个指数升幅明显
- 百余名台商义乌参访 称“恨不得开拖拉机扫货回家”
- 月见草栽培方法(月见草怎么栽培)
- 上海历年出梅时间表一览
- 线下演出市场持续升温 演艺经济成拉动消费新引擎
- 任汇川获批担任三星财险董事长 市场规模或盈利能力能否实现质的提升?
- 恩施州教科院关于2023年全州普通高中高三年级9月教学质量监测及评价分析服务的询价采购公告
- 叶仲斌任成都工业学院党委书记,刘保县任党委副书记、院长
- 吉林哪个学校的计算机科学与技术专业好点?
- 锂资源储量丰富!《全球矿产资源储量评估报告2023》发布
- 山东好景丨小山村里来了“白衣天使”
- 龙光集团:上半年完成交付近2.4万套
- 存在财务核算不规范等等问题,东方国信(300166.SZ)及相关人员收到北京证监局警示函
- 12GB+256GB售价3799元,iQOO 11S手机首销
- 全国平均月薪10266元 买iPhone 14只用一周薪资
- 温暖2023 | 十大最具影响力短视频火热征集中
- 滴普科技FastData入选中国信通院《湖仓一体技术与产业研究报告》
- 2099元!小米电视EA65(L65MA-EA)上架:97.5%屏占比
- 6月中小企业发展指数发布 工业建筑业等多个指数升幅明显
- 西安市体育消费券明日10时开始发放
- 建议积极参与半年报行情 券商看好低位修复方向
- 蔚来推出实时监测网站 用户可查询换电信息、充电信息
- 双联过滤器功率(双联过滤器)
- 我的世界能量水晶储电背包怎么用(我的世界能量水晶怎么充电)
- 靠谱的csgo开箱网站有哪些 csgo安全可靠的开箱网站推荐
- 华信永道正式登陆北交所,上市首日一度涨超45%
- 恒工精密创业板上市,盘中一度涨逾28%
- 中国“双碳”目标引领储能行业加速布局助力绿色发展
- 花盆里放油渣有什么作用,油渣怎么浇花