推特年度工程总结,数据感人,什么代码减少 60 万行、节省 1 亿美元


推特官方帐号发布了一年的工程总结,亮点数据包括:

  • 彻底重构 For you 服务和排名系统,代码行数从 700K 减少到 70K,减少了 90%,计算占用量减少了 50%,帖子吞吐量增加了 80%。

  • 重构了技术栈的 API 中间件层,并简化了架构删除超过 10 万行代码和数千个未使用的内部端,消除未采用的客户端服务。

  • 关闭萨克拉门托数据中心并重新配置 5,200 个机架和 148,000 台服务器,每年节省超过 1 亿美元。

  • 元数据获取后延迟减少了 50%,全局 API 超时错误减少了 90%。

  • 优化了对云服务提供商的使用,在本地进行更多工作,每月云成本降低了 60%。具体是将所有媒体/blob 工件移出云,使得整体云数据存储大小减少了 60%。同时,云数据处理成本降低了 75%。

  • 构建本地 GPU 超级计算集群,并设计、开发和交付 43.2Tbps 的新网络结构架构以支持集群。

  • 扩展网络主干容量和冗余,每年节省 1,390 万美元。



推荐阅读

  • 一名工程师修改配置导致推特宕机,马斯克回应:要彻底重写这堆 "ShitCode"
  • 马斯克硬核迁移推特服务器
  • 马斯克称 Twitter 数据被极端抓取,紧急上线“限流”机制
  • 马斯克连夜命令推特工程师修改算法

相關推薦

2022-10-30

地时间 10 月 27 日晚,特斯拉 CEO 马斯克以 440 亿美元收购推特交易已完成,获得该公司控制权。与此同时,推特首席执行官 Parag Agrawal、首席财务官 Ned Segal、法律总顾问 Sean Edgett 等 4 名高管也被马斯克解雇。马斯克本人则发布

2023-02-18

tformer 的报道,美东时间本周一(2月13日)凌晨02点36分,推特 CEO 马斯克的堂弟詹姆斯·马斯克在推特工程师的 Slack 群组向所有成员发了一条消息,称有一个非常紧急的关于推文曝光量的问题需要修复。睡眼惺忪的工程师登陆笔

2024-05-09

一点,但是以卖课退场,似乎也不完美。 我自己是土木工程专业毕业的,转行当程序员,现在51岁了,软件架构师,也算 半个程序员。我女儿现在读大一,已经表现出对编程序有浓厚兴趣。我元旦去她 学校看她,刚好遇到她为

2022-04-15

4月14日,推特用户 @Matt Greensmith 晒出一张高达 1.27 亿美金的 GitHub Actions 天价账单,并 @GitHub 质问到底咋回事。 GitHub Action 是 GitHub 于 2018 年推出的一个 CI\CD 服务。该账单显示,Matt 在一个月内使用了大约 160 亿分钟 Actions

2021-11-22

控的情况下,可适用于绝大多数场景。 我们可以简单总结一下日志框架的功能,大概是暂存、传输、入库保存、快速检索。 量级上升,成本高昂 技术方案的设计和取舍,往往强受限于成本。当成本高企到难以承受时,将

2022-12-23

兼容性。 MariaDB 的官方新闻稿提到,MariaDB 在 2022 财年的年度经常性收入 (ARR) 超过 5000 万美元,在 60 多个国家/地区拥有超过 600 家客户。

2023-07-07

、物流准备、预算、采购和配置管理活动。 3、网络安全工程师 数据泄露和网络威胁仍然是一个大问题,网络犯罪预计每年增长 15%,到 2025 年将达到每年 10.5 万亿美元的规模。网络安全领域迫切需要有技能和经验的专业人士来

2023-10-18

源PHP办公室,我们一起聊 AI!>>> stateof.ai 发布了 2023 年度人工智能现状报告 (State of AI Report 2023)。 这份报告由英国知名风投公司 Air Street Capital 的合伙人 Nathan Benaich 等作者联合撰写,报告从研究进展 (Research)、行业局势 (In

2024-10-22

成式 AI 怀疑论者将有意或无意地接受这项技术,用于从总结到创造性解决问题等任务。 PitchBook 新兴技术高级分析师 Brendan Burke 在接受 TechCrunch 采访时表示:“大型客户正在推出利用初创工具和开源模型的生产系统。最新的模

2022-10-28

理的......Kotlin 通常被认为是一种比 Java 更好的语言,在年度 Stack Overflow 开发者调查中,它的好感度要高于 Java。” 除了受欢迎程度外,Meta 还将最新的 Kotlin 版本与 Java 11(可用于 Android 开发的最新版本)进行了比较,并得出了

2023-01-03

刚成立 StockAI 时,就有网友在 StockAI 创始人 Danny Postma 的推特下询问,他们是否是使用 Stable Diffusion 来生成图像,Danny Postma 在回答中也确认了这一事实。 从 9 月成立,到 12 月宣布倒闭,StockAI 仅仅成立了 3 个月时间。不过这

2023-08-24

投资机构 Salesforce Ventures 领投,Salesforce CEO Marc Benioff 在推特证实了这一消息。Hugging Face 此次融资预计将筹集约 2 亿美元,其估值将达到 40 亿美元。 Hugging Face 成立于 2016 年,是一家开源模型库公司,其客户包括微软、亚

2023-11-16

代码还是导致了半个国家的主要通信线路瘫痪。 修复 工程师们花了 9 个小时才使 AT&T 的系统完全恢复正常。他们主要是通过将交换机回滚到之前的代码工作版本来实现的。 实际上,软件工程师花了两周时间进行严格的代

2022-11-19

31 日 —— 2021 年 12 月 31 日)年的财务报告,根据财报数据显示,Mozilla 在 2021 年的收入为 6 亿美元。 对比 2020 年的 4.96 亿美元收入,2021 年 Mozilla 增加了 1 亿多美元收入。2021 的收入仅次于 2019 年,但 2019 年的 8.28 亿