智能工控

京东科技埋点数据治理和平台建设实践-牛翰网

京东科技埋点数据治理和平台建设实践

导读 本文核心内容聚焦为什么要埋点治理、埋点治理的方法论和实践、奇点一站式埋点管理平台的建设和创新功能。读者可以从全局角度深入了解埋点、埋点治理的整体思路和实践方法,落地的埋点工具...
猿柒的头像-牛翰网钻石会员猿柒1年前
07810
一个平台搞定数据治理,让数据资产发挥价值-牛翰网

一个平台搞定数据治理,让数据资产发挥价值

根据北京研精毕智信息咨询发布的调查报告,2018-2021年,全球数据存储量由30ZB上升至55ZB左右,年平均增长率约为27.8%。到2022年,数据总存储量进一步增加至65ZB以上,较2021年同期新增了约10ZB...
猿柒的头像-牛翰网钻石会员猿柒1年前
05711
clickhouse的稀疏索引-牛翰网

clickhouse的稀疏索引

clickhouse官网 稀疏索引 在使用primary key的时候指定的key必须是在order by多个字段中排在前面 CREATE TABLE hits_UserID_URL( `UserID` UInt32, `URL` String, `EventTime` DateTime)ENGINE ...
猿柒的头像-牛翰网钻石会员猿柒1年前
0515
云行 | 速智未来 鹭岛展翼!中国电信天翼云推动数字厦门新跨越-牛翰网

云行 | 速智未来 鹭岛展翼!中国电信天翼云推动数字厦门新跨越

10月30日,“速智未来 鹭岛展翼”云智超一体化算力推动数字厦门新跨越系列活动在福建厦门成功举办。省市政府部门领导、中国电信福建公司领导、各合作伙伴企业代表与天翼云共聚一堂,活动现场举...
猿柒的头像-牛翰网钻石会员猿柒1年前
0415
Flink 内存配置学习总结-牛翰网

Flink 内存配置学习总结

设置进程内存(Process Memory) Apache Flink通过严格控制其各种组件的内存使用,在JVM之上提供高效的工作负载。 配置总内存(Total Memory) Flink JVM进程的总进程内存(total process memory)由F...
猿柒的头像-牛翰网钻石会员猿柒1年前
0547
记录ElasticSearch分片被锁定导致无法分配处理过程-牛翰网

记录ElasticSearch分片被锁定导致无法分配处理过程

本篇文章记录最近ES做节点替换, 从shard迁移过程中被锁定导致无法分配, 主shard正常,希望可以帮助其它人 failed to create shard,failed to obtain in-memory shard lock,ShardLockObtainF...
猿柒的头像-牛翰网钻石会员猿柒1年前
01869
基于Docker Desktop搭建Kafka集群并使用Java编程开发-牛翰网

基于Docker Desktop搭建Kafka集群并使用Java编程开发

一、引言 前段时间因课业要求使用Docker Desktop 部署Kafka集群并编写生产者消费者程序,折磨了我好几天,在查找大量资料后终于是把整个集群搭建完成了。现在我想要分享其中搭建的历程,希望能...
猿柒的头像-牛翰网钻石会员猿柒1年前
03915
clickhouse节点重做(节点替换)-牛翰网

clickhouse节点重做(节点替换)

测试验证环境: docker容器化部署的4节点2分片和2副本(centos7+clickhouse22.1.3) 172.17.0.6 clickhouse01172.17.0.7 clickhouse02172.17.0.8 clickhouse03 172.17.0.9 clickhouse04(故障节...
猿柒的头像-牛翰网钻石会员猿柒1年前
03915
如何构建新一代实时湖仓?袋鼠云基于数据湖的探索升级之路-牛翰网

如何构建新一代实时湖仓?袋鼠云基于数据湖的探索升级之路

在之前的实时湖仓系列文章中,我们已经介绍了实时湖仓对于当前企业数字化转型的重要性,实时湖仓的功能架构设计,以及实时计算和数据湖结合的应用场景。 在本篇文章中,将介绍袋鼠云数栈在构建...
猿柒的头像-牛翰网钻石会员猿柒1年前
02813
火山引擎 DataLeap 计算治理自动化解决方案实践和思考-牛翰网

火山引擎 DataLeap 计算治理自动化解决方案实践和思考

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群   【导读】本文旨在探讨火山引擎 DataLeap 在处理计算治理过程中所面临的问题及其解决方案,并展...
猿柒的头像-牛翰网钻石会员猿柒1年前
03415