WXRedian | 大数据技能圈

公众号大数据技能圈

周期

共找到 16 条记录

Doris3.0史诗级版本发布 | 这九大特性我帮你总结好了↗

文摘 2024-10-17 00:02 重庆

近期Doris迎来了 3.0 版本发布，这九大特性值得关注：01存算分离全新架构从 Apache Doris 3.0 版本开始，Apache Doris 开始支持存算分离模 ...

大牛书单 | 技术总监跟我说这些是他翻烂的书

文摘 2024-10-17 00:02 重庆

文末有赠书福利。在技术领域，书籍是我们不断学习和进步的重要工具。本期大牛书单，我们邀请了8位鹅厂同事，为大家推荐一些他们读过的、觉得非常有价值的技术书籍。这些书籍涵盖了从单 ...

新一代数据质量监控平台Datavines，好用到爆！

文摘 2024-10-16 00:02 重庆

导读本文主要介绍长桥科技（长桥证券背后的科技公司）通过引入 Datavines 来解决多租户场景下数据质检任务挤占资源和耗时过长的问题，重点介绍了 Datavines ...

终于搞明白了 Flink CDC 2.0 原理，人麻了...

文摘 2024-10-15 00:01 重庆

Flink CDC Connectors 是 Apache Flink 的一组源端（Source）连接器，通过捕获变更数据（Change Data Capture）从不同数 ...

Doris 2.0.10 安装保姆级教程（内附Doris最新离线文档）↗

文摘 2024-10-14 00:02 重庆

Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库，以极速易用的特点被人们所熟知，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高 ...

鹅厂二面：Kafka 如何实现 Exactly Once 语义？幂等性与事务消息的原理是什么？

文摘 2024-10-13 00:01 重庆

01 前言在现代分布式系统中，确保数据处理的准确性和一致性是至关重要的。Apache Kafka，作为一个广泛使用的流处理平台，提供了强大的消息队列和流处理功能。 ...

太强了！这才是Apache Kafka 消息清理正确方式！

文摘 2024-10-12 00:00 重庆

01 前言消息的清理是 MQ 中间件的基本能力，可以避免 MQ 的存储占用空间无序增长。与其他消息产品不同，Apache Kafka(以下简称 Kafka) 中 ...

图解实时数仓技术架构演进

文摘 2024-10-11 00:01 重庆

导读当前大多数企业在数字化建设过程中，经过传统数据仓库的建设和发展，已经初步具备BI分析能力，越来越多的企业追求业务实时化，通过快速的数据分析报告提供智能决策，实现各行各业 ...

太强了! Flink CDC 3.0 支持表结构变更自动同步，再也不用挨个建表了↗

文摘 2024-10-10 00:00 重庆

Flink CDC 是基于数据库日志 CDC（Change Data Capture）技术的实时数据集成框架，配合 Flink 优秀的管道能力和丰富的上下游生态，Flink ...

股民的热情比行情更吓人

文摘 2024-10-09 00:00 重庆

人们常说，楼市和股市是中国人主要的投资渠道，仿佛是仅有的“合法赌场”。然而，楼市的投资门槛相当高，通常需要家庭的“六个钱包”共同支持，而现在楼市已经出现了泡沫化的迹象，不再 ...

FlinkCDC Streaming ELT 同步 MySQL 到 StarRocks 保姆级教程↗

文摘 2024-10-09 00:00 重庆

这篇教程将展示如何基于 Flink CDC 快速构建 MySQL 到 StarRocks 的 Streaming ELT 作业，包含整库同步、表结构变更同步和分库分表同步的 ...

马蜂窝基于 StreamPark 的 Flink On Kubernetes 生产实践

文摘 2024-10-09 00:00 重庆

导读本文主要介绍马蜂窝原有实时平台不支持 Flink On Kubernetes，通过引入 Apache StreamPark 来解决原有系统的弊端，分享了在引入 S ...

GPT-4o canvas不是对cursor的颠覆，而是人与AI交互的新探索

文摘 2024-10-09 00:00 重庆

谈一下Openai新发布的canvas。关于这个产品的介绍不多说了，网上已经有很多，主要谈下我对它以及相似竞品的比较，以及我的一些看法。1、vs Claude Artifa ...

FlinkCDC Streaming ELT 同步 MySQL 到 Doris 保姆级教程↗

文摘 2024-10-08 00:00 重庆

这篇教程将展示如何基于 Flink CDC 快速构建 MySQL 到 Doris 的 Streaming ELT 作业，包含整库同步、表结构变更同步和分库分表同步的功能。 ...

图解Kafka：架构设计、消息可靠、数据持久、高性能背后的底层原理

文摘 2024-10-07 12:37 重庆

导读在开发需要高吞吐量和高可靠性的消息系统时，Apache Kafka 被广泛认为是程序员的理想选择。本文将深入探讨 Kafka 的内部工作原理，不仅涵盖其整体架构，还包括 ...

Dinky 可视化读取 Paimon 元数据

文摘 2024-10-01 15:42 甘肃

导读：本文介绍了 Dinky 实时计算平台读取 Apache Paimon 元数据的基本操作。社区公告：问题反馈、代码提交、文章投稿与社区贡献请移步 Github ...

大数据技能圈

分享大数据前沿技术，实战代码，详细文档

分类

时事

民生

政务

教育

文化

科技

财富

体娱

健康

情感

旅行

百科

职场

楼市

企业

乐活

学术

汽车

时尚

创业

美食

幽默

美体

文摘

原创标签

时事社会财经军事教育体育科技汽车科学房产搞笑综艺明星音乐动漫游戏时尚健康旅游美食生活摄影宠物职场育儿情感小说曲艺文化历史三农文学娱乐电影视频图片新闻宗教电视剧纪录片广告创意壁纸头像心灵鸡汤星座命理教育培训艺术文化金融财经健康医疗美妆时尚餐饮美食母婴育儿社会新闻工业农业时事政治星座占卜幽默笑话独立短篇连载作品文化历史科技互联网

发布位置

广东北京山东江苏河南浙江山西福建河北上海四川陕西湖南安徽湖北内蒙古江西云南广西甘肃辽宁黑龙江贵州新疆重庆吉林天津海南青海宁夏西藏香港澳门台湾美国加拿大澳大利亚日本新加坡英国西班牙新西兰韩国泰国法国德国意大利缅甸菲律宾马来西亚越南荷兰柬埔寨俄罗斯巴西智利卢森堡芬兰瑞典比利时瑞士土耳其斐济挪威朝鲜尼日利亚阿根廷匈牙利爱尔兰印度老挝葡萄牙乌克兰印度尼西亚哈萨克斯坦塔吉克斯坦希腊南非蒙古奥地利肯尼亚加纳丹麦津巴布韦埃及坦桑尼亚捷克阿联酋安哥拉