加载中
从 Delta 2.0 开始聊聊我们需要怎样的数据湖

盘点行业内近期发生的大事,Delta 2.0 的开源是最让人津津乐道的,尤其在 Databricks 官宣 delta2.0 时抛出了下面这张性能对比,颇有些引战的味道。 虽然 Databricks 的工程师反复强调性能测...

携程 Spark 多租户查询服务演进,Apache Kyuubi 未来可期

当我们开始把大多数在 Hive 的查询和 ETL 作业迁移到 Spark,面临的几个问题是如何透明迁移 HiveServer2 服务以及如何保证稳定性。 与 HiveServer2 对应的 Spark Thrift Server 是 Apache S...

07/21 16:07
3.3K
Apache Kyuubi 在爱奇艺的实践:加速 Hive SQL 迁移 Spark

Hive 作为爱奇艺数仓的基础,Hive SQL 是爱奇艺大数据平台目前主要的数处理工具,各个业务积累大量的 Hive ETL 任务。Spark 相对于 MapReduce 有着更为灵活的的计算模型,这使得 Spark 相对于...

Curve 替换 Ceph 在网易云音乐的实践

Curve 块存储已在生产环境上线使用近三年,经受住了各种异常和极端场景的考验,性能和稳定性均超出核心业务需求预期 网易云音乐背景 网易云音乐是中国领先的在线音乐平台之一,为音乐爱好者提...

云原生行业应用崛起,从“可用”到“好用”有多远?

云原生与数字化转型正在相互促进。 根据中国信通院发布的《云计算白皮书》,2020年我国云原生在金融、制造、服务业等行业的应用快速崛起,行业数字化转型的带动效应初步显现。另一方面,采用...

06/23 14:48
1.7K
云原生时代,中间件应该如何“进化”?

云原生热度持续攀升,这一趋势也延伸了到中间件领域。借助云原生技术,中间件正在解决了自身的弹性、韧性、运维、交付等问题。同时,开发者使用中间件方式也越来越云原生化。 那么,在云原生...

Curve 进入 CNCF Sandbox,完善统一云原生开源存储拼图

2022 年 6 月 15 日,云原生计算基金会 (CNCF) 宣布,分布式存储系统 Curve 被正式接纳为 CNCF 沙箱(Sandbox)项目。Curve 由网易数帆开源,提供块存储和文件存储能力,旨在以网易分布式架构...

06/15 15:12
963
Loggie Geek Camp 最新进展:7 个 Feature 已提交

6 月第二周,由网易数帆和 Loggie 社区发起的开源协作活动—— Loggie Geek Camp 已进入冲刺期。 针对参与贡献者,本次活动提供了 User Case、捕捉 Bug、完善和提交 Feature 等四类任务,截至...

直播预告:新一代云原生日志 - Loggie 架构设计与实践

Loggie 是网易和中国工商银行联合开源的一个云原生可观测性的数据连接器,当前主要用于提供轻量级、高性能、云原生日志采集 Agent 和中转处理 Aggregator,支持多 Pipeline 和组件热插拔。基...

06/02 12:10
174
网易数帆 Envoy Gateway 实践之旅:坚守 6 年,峥嵘渐显

服务网格成熟度不断提升,云原生环境下流量处理愈发重要, Envoy Gateway 项目于近日宣布开源,“旨在大幅降低将 Envoy 作为 API 网关的使用门槛”,引发了业界关注。2018 年 11 月,Envoy 成...

IstioCon 回顾 | 网易数帆的 Istio 推送性能优化经验

在 IstioCon2022 上,网易数帆资深架构师方志恒从企业生产落地实践的视角分享了多年 Istio 实践经验,介绍了 Istio 数据模型,xDS 和 Istio 推送的关系,网易数帆遇到的性能问题和优化的经验...

Loggie Geek Camp 火热启动,社区大神带你玩开源

由开源构建的协作模式,正成为描绘数字蓝图、创造美好未来的主航道,中国工商银行、阿里云等组织已经在网易数帆“架构开发、内核开源”理念中与后者达成合作,来自华为、阿里云、中国移动、e...

2022 开源之夏 | Curve 邀你与中国存储软件共成长,赢万元奖金

Curve社区携手开源之夏,邀你开展有趣而精彩的开源之旅,直面社区大咖,积累项目经历,摘取丰厚奖金,共同推进我国基础软件自主创新 2022 年,Curve 社区再次加入系列高校开源活动——开源之...

Curve 基于 Raft 的写时延优化

1 背景 Curve(https://github.com/opencurve/curve )是网易数帆自主设计研发的高性能、易运维、全场景支持的云原生软件定义存储系统,旨满足Ceph本身架构难以支撑的一些场景的需求,于202...

04/26 10:16
1.8K
Slime 2022 展望:把 Istio 的复杂性塞入智能的黑盒

一、导读 网易数帆轻舟微服务团队很早就开始使用 Istio 做服务网格。在实践过程中,我们开发了很多 Istio 周边模块,方便了自身及网易集团内部客户使用 Istio。为了回馈社区,我们系统整理了...

04/22 09:26
2.5K
网易数帆王佰平:我的 Envoy Maintainer 之路

受邀成为 Envoy 社区国内首位且唯一的 Maintainer,网易数帆资深架构师王佰平讲述个人四年开源贡献的心得体会。 数字化浪潮下,云原生底层核心技术趋于成熟。根据中国信通院《云计算白皮书(...

IstioCon 2022,网易数帆六年优化经验即将揭秘

北京时间4月25~29日,Istio 社区第二届全球峰会 IstioCon 2022 将于线上举行,来自 Google、网易、IBM、腾讯等公司的 80+ 服务网格(Service Mesh)技术专家将带来 60+ 场技术分享,其中网易...

04/13 17:33
233
为什么你应该了解 Loggie

你可能对日志并不感兴趣。 不过没关系,本文也不打算介绍Loggie如何采集日志。 首先请不要被Loggie的名称限制了思维,我想重新定义一下: 什么是Log? 从本质上,Log即为Data。而Data,在我们...

汪源做客阿里云大咖说,论道 PolarDB 数据库开源与存储生态

开源对于生态对接的重要性是什么? 开源生态建设对于To B客户的意义在哪里? 开源是否是实现国产化替代的合适路径? 近日,网易副总裁、杭州研究院执行院长、网易数帆总经理汪源受邀参加阿里...

没有更多内容

加载失败,请刷新页面

返回顶部
顶部
http://www.vxiaotou.com