智能工控

Apache DolphinScheduler 3.2.2 版本正式发布!-牛翰网

Apache DolphinScheduler 3.2.2 版本正式发布!

Apache DolphinScheduler 3.2.2 版本正式发布! 近日,Apache DolphinScheduler 发布了 3.2.2 版本。此版本主要基于 3.2.1 版本进行了 bug 修复,新增若干特性,并进行了众多改进和 Bug 修复,...
猿柒的头像-牛翰网钻石会员猿柒1年前
0256
简化数据流:Apache SeaTunnel实现多表同步的高效指南-牛翰网

简化数据流:Apache SeaTunnel实现多表同步的高效指南

Apache SeaTunnel除了单表之间的数据同步之外,也支持单表同步到多表,多表同步到单表,以及多表同步到多表,下面简单举例说明如何实现这些功能。 单表 to 单表 一个source,一个sink。 从mysql...
猿柒的头像-牛翰网钻石会员猿柒1年前
0859
DataOps 新趋势:联通数科如何利用 DolphinScheduler 实现数据一体化管理-牛翰网

DataOps 新趋势:联通数科如何利用 DolphinScheduler 实现数据一体化管理

引言 在DataOps(数据运营)的推动下,越来越多的企业开始关注数据研发和运营的一体化建设。DataOps通过自动化和流程优化,帮助企业实现数据的高效流转和管理。 当前,Apache DolphinScheduler...
猿柒的头像-牛翰网钻石会员猿柒1年前
0429
ElasticSearch第1讲(4万字详解 Linux下安装、原生调用、API调用超全总结、Painless、IK分词器、4种和数据库同步方案、高并发下一致性解决方案、Kibana、 ELK)-牛翰网

ElasticSearch第1讲(4万字详解 Linux下安装、原生调用、API调用超全总结、Painless、IK分词器、4种和数据库同步方案、高并发下一致性解决方案、Kibana、 ELK)

ElasticSearch 官方文档:https://www.elastic.co/guide/en/elasticsearch/reference/current/getting-started.html 非官方中文文档:https://learnku.com/docs/elasticsearch73/7.3 极简概括:...
猿柒的头像-牛翰网钻石会员猿柒1年前
04012
白鲸开源CEO郭炜荣获「2024中国数智化转型升级先锋人物」称号-牛翰网

白鲸开源CEO郭炜荣获「2024中国数智化转型升级先锋人物」称号

2024年7月24日,由数据猿主办,IDC协办,新华社中国经济信息社、上海大数据联盟、上海市数商协会、上海超级计算中心作为支持单位,举办“数智新质·力拓未来 2024企业数智化转型升级发展论坛—...
猿柒的头像-牛翰网钻石会员猿柒1年前
05411
ElasticSearch第3篇 大数据处理3大问题(“10000条”问题解决方案、hits total值统计总数不精确解决方案、大数据深度分页性能问题3种优化方案)-牛翰网

ElasticSearch第3篇 大数据处理3大问题(“10000条”问题解决方案、hits total值统计总数不精确解决方案、大数据深度分页性能问题3种优化方案)

“10000条”问题(个人称谓) 症状: 在数据量不大的情况下,可能还会使用from + size的传统分页方式,但是数量受限,只能取前10000条的数据。 缘由:ES限值10000条,是ES团队挑选一个不大不小...
猿柒的头像-牛翰网钻石会员猿柒1年前
0438
ElasticSearch第4篇(亿级中文数据量 ElasticSearch与Sphinx建索引速度、查询速度、并发性能、实测对比)-牛翰网

ElasticSearch第4篇(亿级中文数据量 ElasticSearch与Sphinx建索引速度、查询速度、并发性能、实测对比)

经过实测:1.09亿的数据量进行中文检索。ElasticSearch单机的检索性能在0.005~5.6秒之间,此检索速度可满足95%的业务场景(注意:每条ES文档平均65个汉字,数据源取自几千本小说,大部分文档在1...
猿柒的头像-牛翰网钻石会员猿柒1年前
0378
我用Awesome-Graphs看论文:解读Pregel-牛翰网

我用Awesome-Graphs看论文:解读Pregel

Pregel论文:《Pregel: A System for Large-Scale Graph Processing》 上次向大家分享了论文图谱项目Awesome-Graphs的介绍文章《论文图谱当如是:Awesome-Graphs用200篇图系统论文打个样》,这...
猿柒的头像-牛翰网钻石会员猿柒1年前
0475
React 的 KeepAlive 实战指南:深度解析组件缓存机制-牛翰网

React 的 KeepAlive 实战指南:深度解析组件缓存机制

Vue 的 Keep-Alive 组件是用于缓存组件的高阶组件,可以有效地提高应用性能。它能够使组件在切换时仍能保留原有的状态信息,并且有专门的生命周期方便去做额外的处理。该组件在很多场景非常有用...
猿柒的头像-牛翰网钻石会员猿柒1年前
03814
我用Awesome-Graphs看论文:解读PowerGraph-牛翰网

我用Awesome-Graphs看论文:解读PowerGraph

PowerGraph论文:《PowerGraph: Distributed Graph-Parallel Computation on Natural Graphs》 上次通过文章《论文图谱当如是:Awesome-Graphs用200篇图系统论文打个样》向大家介绍了论文图谱项...
猿柒的头像-牛翰网钻石会员猿柒1年前
0508