后期更为广大用户所熟悉的微软 Windows 系统的 RDP 协议的远程桌面【11】和基于 RFB 协议的支持跨平台的 VNC 系统【10】也都采用了类似的设计。三维图形渲染技术和专业显卡硬件的不断发展,对这些仅支持二维图形绘制的远程显示协议也提出了新的需求。X11 协议最早提出了 GLX 扩展,将进行三维图形渲染的 OpenGL 指令和二维绘制的 X11 指令以同样的格式进行打包,传递到客户端再进行三维绘制。而这样传输绘制指令的做法存在两个问题...
近年来,[云游戏](https://www.infoq.cn/article/S5XBvTDN7hoaTNEVi6lV "xxx")这个概念渐渐被广大游戏爱好者所了解。顾名思义,云游戏就是利用部署在数据中心里的强大的云服务来进行游戏画面的渲染。在云端生成的游戏... 对这些仅支持二维图形绘制的远程显示协议也提出了新的需求。 X11 协议最早提出了 GLX 扩展,将进行三维图形渲染的 OpenGL 指令和二维绘制的 X11 指令以同样的格式进行打包,传递到客户端再进行三维绘制。而这样传输绘...
活动邀请了 CloudWeGo 社区的多位 Maintainer 和 Committer 分享 Kitex 和 Hertz 在 AI 场景的设计和实现方案,并邀请了方正证券和来自字节跳动 Flow 的工程师分享 CloudWeGo 的落地实践,诚邀更多有微服务落地的企业... 是一种服务器主动发送数据到客户端的机制,基于 HTTP 提供单向流能力。随着 AIGC/LLM 的流行,字节跳动内部和社区都对 SSE 有强烈诉求。两位同学将会分享 SSE 的原理,Hertz SSE 的设计与实现,以及演示如何利用 SSE 能...
你也不能将其运用,因为你么有合适的场景。记录这些并不代表我真的都懂这些了(也不可能哈哈),而是希望自己以后碰到问题碰到场景的时候可以快速定位到文档,找寻一些其他的解决方案,并且更新自己不同时间段的不同理解### 迷茫阶段从上面的图中可以看到11月中下旬的时候已经没有更新了。经历了三个多月的疯狂记录和整理,我发现了一个神奇的现象(同样也是在课程中学到的):>**人类的不同的问题放到不同的场景当中起成了不同的名字,这...
= _uiState.asStateFlow()_uiState.value = _uiState.value.copy(bannerList = Result.Success(it))```需要更新 State 时,借助 data class 的 `copy` 方法可以快捷地拷贝构造一个新实例。Immutable 还体... 再请求远程数据。Flow 的使用可以很好地满足这类涉及多数据源请求的场景。而另一面在调用侧,只要提供合适的 CoroutineScope 就不必担心泄露的发生。## 1.4 KTX一些原本基于 Java 实现的 Android 库通过 KTX 提...
Kafka扩容需要大量数据拷贝和均衡。这些现有解决方案都不适用于为大规模客户提供弹性服务的公共云环境。![picture.image](https://p6-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/9e00553b5800468faa... RocketMQ5.0 面向云计算的场景进行重新设计,期望从架构层面解决根本性问题,对客户端、Broker到存储引擎全面升级,如下图所示:![picture.image](https://p6-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om...
UserAction ETL场景**在UserAction ETL场景中,我们遇到的核心需求是:**种类繁多且流量巨大的客户端埋点需求和ETL规则动态更新的需求。** 在字节内部,客户端的埋点种类繁多且流量巨大,而推荐关注... 主要使用PyJStorm和基于Python的规则引擎构建主要的流式数据处理链路。其特点是比较灵活,可以快速支持业务需求。但随着埋点流量快速上涨,PyJStorm暴露出很多稳定性和运维上的问题,性能也不足以支撑业务的增长...
Apache Zeppelin 是一个支持 20 多种语言 Notebook 的后端,可以用于数据摄入、发现、转换及分析,也能够实现数据的可视化,如饼图、柱状图、折线图等。典型使用场景是通过开发 Zeppelin 的代码片段或者 SQL,通过... JobGraph 的编译等操作都是在客户端进行的,这种模式会造成 client 所在机器负载高、网络压力大、CPU 资源不足等问题,所以 1.11 版本 Flink 推出了 Application Mode 的方式,主要将 Main 的 Job 生成操作放到 JobMa...
流式集成和增量集成。*** 批式集成模式基于Flink Batch模式打造,将数据以批的形式在不同系统中传输,目前支持了20多种不同数据源类型。* 流式集成模式主要是从MQ将数据导入到Hive和HDFS,任务的稳定性和实时性都... **将增量模式合并到流式集成中,从而可以摆脱对Spark的依赖,在计算引擎层面做到统一。**改造完成后,基于Flink的数据集成引擎就能同时支持批式、流式和增量模式,几乎可以覆盖所有的数据集成场景。同时,在...
随着云计算等技术发展以及海量数据应用场景等出现,对数据仓库提出全新要求,高性能、实时性、云原生等成为数据仓库发展关键词,也因此演变出不同的数仓发展路径。> > > > > **在字节跳动十年发展历程中,各类业务... ByteHouse提供客户丰富的企业级能力,如:兼容ANSI-SQL 2011标准、支持多租户、库表资产管理、基于角色的权限管理以及多样的性能诊断工具等。 ![picture.image](https://p3-volc-community-sign.by...
Apache Zeppelin 是一个支持 20 多种语言 Notebook 的后端,可以用于数据摄入、发现、转换及分析,也能够实现数据的可视化,如饼图、柱状图、折线图等。典型使用场景是通过开发 Zeppelin 的代码片段或者 SQL,通过提... **元数据存储**:Zeppelin 包含多种元数据,其中重要的元数据 Notebook 可以支持本地文件的存储、远程存储、对象存储等;在扩展之后能够支持火山引擎 TosNotabookRepo 的对象存储;另外一种存储则需要借助 K8s 里的...
上游数据流不稳定怎么办;如何解决模型越来越大的问题;如何做好多场景数据的混合训练;如何应对大规模候选的问题;如何解决转化事件大幅延迟的问题等等。**我们的工作**通过 A 公司的故事,大家能看到,开发一套... 流式多线程地存取,性能大副提升。为了减少 checkpoint 体积,会将过期特征淘汰。**在线推理*** 加载 saved\_model。Entry 本质上是 TF Serving,它会从 HDFS 上加载非 Embedding 部分,同时向 ZK 注册,以便上层...
针对内部许多混合计算的需求场景,字节跳动提出了整合 AP 和 TP 计算的 ByteHTAP 系统,同时将 Flink OLAP 作为ByteHTAP 的 AP 计算引擎。在字节跳动一年多的发展中, Flink OLAP 已经部署支持了 20+的 ByteHTAP 线上... Flink OLAP 在发展期间也遇到了很多挑战。不同于流式计算任务,OLAP 任务大部分都是秒级、毫秒级的小作业,具有 QPS 高、时延小的特点。以内部业务为例,业务方要求在高峰期支持大于 200 的 QPS,并且 Lantency p99 < ...