百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

搜狗开源srpc:自研高性能通用RPC框架

csdh11 2025-05-16 12:37 3 浏览

今年7月底,搜狗公司开源了内部的工业级C++服务器引擎Workflow,一路收获业内许多认可和关注。9月15日,作为Workflow最重要的生态项目——srpc,一个基于其打造的轻量级RPC框架,也在GitHub上开源了。

GitHub搜索“sogou srpc”即可找到该项目。

一个性能更好的thrift/brpc

srpc与thrift/brpc是协议与IDL均互通的。srpc除了自带的sogou-std协议以外,还实现了baidu-std协议和thrift framed协议,因此srpc可以与thrift或brpc(连接池模式)互通。另外,接口描述文件支持protobuf和thrift,这意味着用户不仅可以一键迁移基于protobuf或thrift作为IDL的项目,还可以用srpc作为一个性能更优的thrift框架或者brpc框架。

与thrift相比,srpc所实现的thrift framed协议在吞吐和长尾方面性能都远超thrift原生框架。且srpc对于thrift接口描述文件实现了解析和代码生成,因此用户在srpc上使用thrift IDL时无需依赖thrift库。

而在baidu-std协议的实现上,吞吐和长尾在大部分场景下依然是srpc更优。且由于workflow支持Windows(同机性能比linux快20%),所以这等同于用户得以在Windows下使用brpc。还有一点值得一提的是,同样是支持protobuf的RPC框架,由于srpc实现了部分IDL解析和代码生成,接口形式无需受protobuf原始限制,因而所提供的接口比brpc更为简洁,以server的rpc接口为例:

一个通用、易扩展的RPC框架

除了支持binary传输,还支持HTTP+json和HTTP+binary的传输方式,业务可以借用HTTP实现跨语言,而传输本身对业务透明。这是除了上述介绍的协议层和接口描述文件层以外,srpc的另外一个重要层次。其中传输方式和协议层还可以互相结合,如果接收方为任何一种协议+HTTP作传输的server,则用户都可以对其轻松地发送一个如下请求:

srpc内部实现层次精巧,非常注重纵向层次拆分和横向解耦。其中压缩层、序列化层、协议层是互相解耦的,利用函数重载、派生子类实现父类接口和模版特化等多种多态方式,来实现内部使用同一套代码的高度复用。后续架构升级或者用户进行二次开发,无论是中间再加一层、还是某层内横向添加一种内容,都不需要改动现有的代码,十分方便。

一个打通了Workfflow、功能更强大的任务流RPC

任务流是Workflow 在设计之初就引入的概念,其可将资源高度封装,用户可不用关心内部细节、不接触到连接池、线程池,仅需要了解业务关系就能实现复杂的业务逻辑。srpc除了提供同步、半同步接口外,其异步接口可以利用Context拿到Series来打通Workflow 任务流,这就意味着srpc可以把RPC调用当作任务流来组建。

srpc还可以使用Workflow 自带的其他功能,一方面是服务治理。Workflow 的upstream是本进程内把一批机器绑定到一个域名下,自带多种方式的负载均衡和熔断恢复等机制,srpc的client对应的是一个ip,或者一个带本地服务治理的集群,直接可以使用负载均衡和熔断恢复等机制。

另一方面,srpc 还可以调用 Workflow 其他资源。RPC只是网络资源,而Workflow 包含了如计算调度和异步文件IO等资源,还有目前已经实现的多种常用网络协议(包括HTTP、Redis、MySQL、Kafka),这些都可以为srpc所用。

srpc目前在搜狗搜索和搜狐集团团队中多个线上业务已经稳定使用一段时间,由于接口简介易上手,且直接打通workflow的任务流、计算调度、服务治理等功能,因此对开发效率有非常大的提升。但srpc相对来说也是一个很年轻且代码量不多(约一万行)的项目,搜狗后续还会持续推进其生态建设,有信心为不同的RPC开发场景提供更加全面的解决方案。(一鸣)

来源: 快科技

相关推荐

完美解决华硕主板机箱前置面板连接音箱无声音问题

#精品长文创作季#最近新组装了一台电脑主机,听歌时发现,音箱音频输入线插入主板自带的音频输出端口LINEOUT声音正常。但当将音箱音频输入线插入机箱自带的音频输出端口却没有声音。...

Java 监控直播流rtsp协议转rtmp、hls、httpflv协议返回浏览器

Java监控直播流rtsp协议转rtmp、hls、httpflv协议返回浏览器...

编译安装OpenCV全攻略,附本地源码包

本文以Ubuntu(适用于18,20,22版本,其他的未进行测试)为例,介绍了编译安装OpenCV的最佳实践。其他平台比如windows,只需要参考本文的思路做稍微调整即可。一、为什么需要编译安装Op...

音视频录制+RTMP直播推拉流

音视频录制:1,录音通过条件编译识别pc或者mac://条件编译技术识别pc或者mac#ifdefQ_OS_WIN#defineFMT_NAME"dshow"...

Python Socket.IO 简介

Socket.IO是一种传输协议,支持客户端与服务器之间基于事件的实时双向通信。客户端通常但不总是web浏览器,一般情况下,客户端是采用js编写的,当然,也可以用python、Java等。...

MyCat系列二--配置文件之server.xml

MyCat系列二--配置文件之server.xml从【安装与基本使用】一文中,可以看到MyCat运行,需要进行一些配置文件的相关配置,本文将重点介绍配置文件server.xml的基本元素信息,尽量了解...

3分钟搞懂Socket.IO:接口调试技巧

在数字化协作需求井喷的今天,即时通讯、协同文档、MMO游戏等场景对实时交互提出了严苛要求。传统HTTP协议"请求-响应"的离散式通信机制已难以满足需求,这正是Socket.IO这类实时...

「云原生」Containerd ctr,crictl 和 nerdctl 命令介绍与实战操作

一、概述作为接替Docker运行时的Containerd在早在Kubernetes1.7时就能直接与Kubelet集成使用,只是大部分时候我们因熟悉Docker,在部署集群时采用了默认的dockers...

搜狗开源srpc:自研高性能通用RPC框架

今年7月底,搜狗公司开源了内部的工业级C++服务器引擎Workflow,一路收获业内许多认可和关注。9月15日,作为Workflow最重要的生态项目——srpc,一个基于其打造的轻量级RPC框架,也在...

socket.io 权限认证

socket.io是一款流行的WebSocket库,提供了实时双向通信的能力。它支持多种身份验证方式,可用于保护某些敏感信息。接下来,我们将介绍如何使用socket.io权限认证1.安装依...

Linux高性能服务器设计

C10K和C10M计算机领域的很多技术都是需求推动的,上世纪90年代,由于互联网的飞速发展,网络服务器无法支撑快速增长的用户规模。1999年,DanKegel提出了著名的C10问题:一台服务器上同时...

19K 标星!开源局域网文件传输神器,AirDrop 跨平台替代品!

传统文件传输方式(如USB、蓝牙、邮件)要么速度慢,要么操作繁琐,而AirDrop仅限苹果生态。如果你还在为手机和电脑之间传文件来回折腾?还在装各种臃肿的客户端、扫码连Wi-Fi、用数据线拖来...

WebRTC 入门教程:搭建WebRTC信令服务器

前言我们在学习WebRTC时,首先要把实验环境搭建好,这样我们就可以在上面做各种实验了。对于WebRTC来说,它有一整套规范,如怎样使用它的接口、使用SDP进行媒体协商、通过ICE收集地址并进...

在 Go 中使用 Websockets 和 Socket.IO - 教程

注意-本教程是使用Go1.9版和googollee/go-socket.io编写的Websockets是我觉得有趣的东西,因为它们为我们提供了应用程序之间通信的替代选项,而不是标准的R...

2021 年 Node.js 开发人员学习路线图

Node.js自发布以来,已成为业界重要破局者之一。Uber、Medium、PayPal和沃尔玛等大型企业,纷纷将技术栈转向Node.js。Node.js支持开发功能强大的应用,例如实时追踪...