抖音集团如何巧用“数仓”降本

2024 年 8 月 26 至 30 日，VLDB 2024 将在中国广州举行。字节跳动基础架构云原生中间件团队、批式计算团队、应用研究中心研究成果分别被 VLDB 2024 接收，并受邀进行现场报告。

火山引擎云搜索服务 ESCloud 升级云原生新架构，提供数十亿级分布式向量数据库能力！

探讨使用火山引擎云数据库PostgreSQL版与大语言模型LLM，实现企业智能交互式问答系统，介绍其原理与向量化存储检索技术。

ByConity 已于2023年5月正式开源回馈社区，期待感兴趣的技术团队加入共建。

本文主要介绍火山引擎安全研究团队在差分隐私技术应用上的首个开源项目——Jeddak-DPSQL。

‍西瓜视频探索了Baseline Profiles优化方案在国内的落地方式，支持在任意AGP版本下使用，并推进国内厂商一起完成了优化验证，实现了启动展示时间减少约10%的优化效果

本文主要介绍火山引擎 RTC 如何充分利用多链路传输技术来提升用户的音视频通话体验。

随着字节跳动旗下业务的快速发展，数据急剧膨胀，原有的大数据架构在面临日趋复杂的业务需求时逐渐显现疲态。而伴随着大数据架构向云原生演进的行业趋势，字节跳动也对大数据体系进行了云原生改造。本文将详细介绍字节跳动大数据容器化的演进与实践。

为近期量子设备上的大规模和复杂周期系统的从头模拟研究铺平了道路。

如何简化数据工作流程并推动业务成功？

火山引擎云原生计算团队与 DataFun 联合出品云原生大数据知识地图，从理念概述、架构介绍、功能详述、场景及价值等方面对云原生大数据进行了详细解读。

本文的写作目的是希望从全局视角出发，全面对比当下主流状态库的使用体验，引导读者在有充分知识储备的背景下，避免个人好恶，整体提升状态库在实际项目中的选用标准。

根据《State of Frontend 2022》问卷调查， 最受欢迎的前五个工具库中，时间处理相关的库占据了两席。时间处理工具为什么如此受前端工程师青睐？JS Date 为什么无法满足开发需求？不同的时间库之间又存在哪些差异？

火山引擎 APM 团队打造出一站式小程序监控平台，旨在为开发者提供可跨平台、监控能力完善、简单易用的小程序监控服务。

Golang 的协程是语言本身一个非常重要的特性，协程的调度对整体的性能至关重要，本文主要以流程化的展示方式对协程的调度模型做快速的介绍，帮助大家了解协程调度的基本思路。

大语言模型引领 NLP 新热潮，机器翻译领域也不例外。 Google 研究团队的新论文更是展现了改变未来机器翻译训练方式的潜力——仅凭互联网单语数据模型就能完成语言互译。一起来了解一下他们的新算法吧！

之前玩过一个flash编程小游戏，叫“机器人流水线”。可惜的是，现在falsh已经停止运行了，这个原版的小游戏无法体验到。 不过最近几天，我凭着之前的印象，复刻出了这个小游戏!

为数据治理提效！一文读懂火山引擎DataLeap分布式数据自治的理念和实践

dynamicgo 是 CloudWeGo 自研的一套能动态处理 RPC 数据（不需要代码生成）同时保证高性能的 Go 基础库。

本文将从需求动机、技术实现及实际应用等角度，介绍基于不同架构的 ByteHouse 实时导入技术演进。

本文介绍视频架构 SRE 团队，针对部署在全球的多媒体处理平台，在报警触发应急响应的过程中，发现痛点。并透过团队研发的自动化工具提高处理异常的速度和准确性，并取得了 MTTR 大幅减少的收益。

2022 年，关于微服务发生了几件有趣的事情。

从基础概念、数据库内核特性优化、数据服务化、业务实践等角度全方位介绍湖仓一体架构在 LAS 的探索与实践。

前端领域最大的周年调查 state-of-css 2022 \x5cx26amp; state-of-js 2022 结果已经公布了，快来看看今年前端领域有哪些新变化吧。

一文读懂字节跳动数据血缘建设实践

Shmipc 是字节跳动服务框架团队研发的高性能进程间通讯库，它基于共享内存构建，具有零拷贝的特点，同时它引入的同步机制具有批量收割 IO 的能力，相对于其他进程间通讯方式能明显提升性能。

抖音基础技术团队通过对 Swift 编译器进行深度定制，将增量编译性能提升 60%，并已在抖音 iOS 工程落地验证。

本文主要讲述了使用 MySQL 作为 JanusGraph 存储后端时，在设计上面的思考，以及在实际过程中遇到的一些问题。

我们知道 Go 语的三位领导者中有两位来自 Plan 9 项目，这直接导致了 Go 语言的汇编采用了比较有个性的 Plan 9 风格。不过，我们不能因咽废食而放弃无所不能的汇编。

实操指南，教你快速上手轻量级云数仓

本文主要介绍 iOS 客户端图片加载 SDK，包括图片网络加载、图像解码、图片基础处理与变换以及图片服务质量监控上报等能力。

火山引擎多媒体实验室致力于探索和研发新一代的视频服务技术架构。硬件编码器由于其计算密度大、转码延时低、成本可持续等优点，成为大规模视频服务中不可或缺的技术。本文带领读者深入了解多媒体实验室推出的 FPGA 硬件编码器。

解析Apache Pulsar 的应用场景和用户案例

本文试图从技术角度，借助GPT的公开资料，解读如何入门GPT以及相关大语言模型，形成自己对问题的认知体系，加速对新知识的吸收和理解；并基于此讨论LLM的使用，以及带来的在产学研以及个人上带来的影响；最后提出几个需要关注的几个要点。

本文将讨论火山引擎EMR团队针对Iceberg组件的优化思路，通过引入索引来提高查询性能。

文章介绍字节跳动离线训练发展的三个阶段和关键节点，以及云原生离线训练中非常重要的两个部分——计算调度和数据编排，最后将结合前两部分分享字节跳动在实践中沉淀的4个案例。

字节跳动内部模型部署方案，利用编译技术实现了模型前后处理的训推一体化，在字节跳动内部以中台的形式服务了大量核心业务，相关的方案已经开源。

文章主要阐述了优先级反转的一些概念和解决思路，并结合iOS平台的几种锁进行了详细的调研。通过深入的理解，可以去规避一些不必要的优先级反转，从而进一步避免卡死异常。

sonic-cpp 是由字节跳动开源的一款面向 C++ 语言的高效 JSON 库，极致地利用当前 CPU 硬件特性与向量化编程，大幅提高了序列化反序列化性能，解析性能为rapidjsonde 2.5倍

大数据架构向云原生演进是行业的重要趋势，火山引擎协助关键金融客户在大数据云原生方向进行了深度实践，形成了整体解决方案，本文将分享火山引擎云原生大数据在金融行业的实践。

2023年1月14日，技术沙龙不见不散！

12月20日，线上见！

如何高效、有效进行数据治理？

本文整理自字节跳动基础架构工程师邵凯阳、林友权在 2022 Hadoop Meetup 上的演讲，文章主要从演进背景、解决方案、上线收益和未来规划四个方面介绍了字节跳动 YARN 云原生化演进实践。

本文详细分析总结了 ARC 环境下在多线程中执行赋值代码导致 EXC_BAD_ACCESS 崩溃的原因以及最常出现问题的场景。

Data Catalog 在公有云部署和发布中遇到挑战及解决方案

全面阐述如何开发一个完整的 Connector

字节跳动内部模型部署方案，利用编译技术实现了模型前后处理的训推一体化，在字节跳动内部以中台的形式服务了大量核心业务，相关的方案已经开源。