thrift开发问题总结

2023-11-11


作为目前最流行的RPC框架,thrift不仅提供了通信协议,同时提供了网络框架,解脱了程序员的生产力。thrift也是阿帕奇Hadoop系列的RPC实现工具。本文主要聚焦在实现的thrift系统中,遇到的各种问题。

但是thrift在隐藏一些底层细节的同时,也给应用层带来了一些不确定性,这些不确定和误解,导致一些异常事件的发生。总结如下:


1、thrift compile在生成文件的时候,生成PHP文件时,同一命名空间下,不同的thrift文件生成Types.php,会导致文件覆盖(cpp和Python没有此问题)


2、服务端在采用TBufferedTransport时,该对象实际会自己缓存read/write buffer,当catch到异常时,仅仅close对应的socket,buffer并不会清空。此时如果再次open socket发送数据,会导致buffer数据混乱,transport出现异常。解决的方法是把指向该TBufferedTransport的shared_ptr.reset()。


3、服务端和客户端采用的协议必须一样。服务端用TBufferedTransport,客户端不能用TFrameworkTransport,否则会异常。客户端报can't write xxx bytes的异常


4、有时候会设置服务端和客户端的超时,这时候如果另外一方在接/发数据的时候,未能在timeout时间内完成数据传输,则会由于另外一方的强制断开而报异常。异常的内容是:broken pipe


5、如果thrift服务经常catch到异常,且异常的内容每次都不同,如broken pipe, no more data to read等,很有可能是在客户端,多个线程共用一个socket,却没有加锁导致的Heisenbug


6、服务端hander中,用户实现的服务接口,不能有block的代码,如sleep(),lock.wait(),否则会导致工作线程被阻塞。这样引起的后果是:1,客户端请求线程被卡死在socket::read();2,服务端fd泄露


7、thrfit的client不能在多个线程间不加同步的复用,因为client不是线程安全的。
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

thrift开发问题总结 的相关文章

  • 马上:Zxing、Zbar、HMS Scankit 扫码优化

    Zxing zxing 一款Java Android 很流行的二维码 条形码扫码库 开源 可移植 简单易用的api 相信大家对接触过zxing 库 在高端性能机器扫码效果还是很不错的 但面对复杂的扫码环境而言强光 弯曲 形变等情况 Zxin
  • nacos 系列学习(一、nacos服务安装)

    前几章写了使用Eureka作为服务注册 开始学习使用nacos 1 下载 下载地址 https github com alibaba nacos releases tag 1 3 1 选择这个zip下载 下载完毕后我们可以看看目录结构 修改
  • Python读取excel表格数据并绘制成柱状图

    Python的功能十分强大 它不仅可以用来做爬虫 还可以用来做数据分析哦 那么今天我就带着大家用Python 分析表格数据 并绘制成柱状图 让大家感受一下用python来绘制图表是一种什么感觉 这是我们今天要分析的表格数据 表格名称为tes
  • API需要同时维护多个版本。如何优雅的设计?

    2019独角兽企业重金招聘Python工程师标准 gt gt gt 在项目中经常遇到 相同的数据 对不同的客户以及不同的终端 需要输出不同的数据 更有特殊的情况 需要对一个数据 在不同的终端表示形式不一样 综合多种考虑 需要一种支持扩展 并
  • C语言抽签(抽奖)小程序

    include
  • Caffe中Layer注册机制

    Caffe内部维护一个注册表用于查找特定Layer对应的工厂函数 Layer Factory的设计用到了设计模式里的工厂模式 Caffe的Layer注册表是一组键值对 key value LayerRegistry里用map数据结构维护一个
  • elementUI项目打包后样式错乱问题解决

    gt npm run dev 时样式完全没有问题 run build之后打包上传服务器之后样式乱了 一脸懵逼 1 检查样式发现重置element的样式没有生效 但是检查main js里面的样式引入顺序没有问题啊 2 尝试将css引入放入ap
  • Unity 宏定义

    一些自带的宏定义 UNITY EDITOR 编辑器调用 UNITY STANDALONE OSX 专门为Mac OS 包括Universal PPC和Intelarchitectures 平台的定义 UNITY DASHBOARD WIDG
  • Markdown、Word中插入公式及序号,并设置公式居中序号右对齐

    Markdown里实现这个功能非常简单 只需要在公式最后插入 tag index 即可 其中index为公式编号 如 S x
  • DNN框架中的NCHW与NHWC数据格式

    流行的深度学习框架中有不同的数据格式 典型的有NCHW和NHWC格式 下面从逻辑表达和物理存储角度用图的方式来理解这两种数据格式 最后以RGB图像为例来加深NHWC和NCHW数据存储格式的理解 Intel R MKL DNN Underst
  • 华为智慧搜索,下一片流量蓝海的“入海口”

    几年前开始 TMT业界就发出了一类质疑的声音 移动互联网的各个APP彼此割裂 是在 孤岛炼油 大量的应用程序和服务互不打通 形成了严重的数据孤岛 用户只能进行站内搜索 很难穿透APP壁垒 进行全局搜索 淮南子 氾论训 中写道 百川异源而皆归
  • Redis笔记&常用指令合集

    1 简介 NoSQL NoSQL Not Only SQL 意即 不仅仅是SQL 泛指非关系型的数据库 NoSQL不依赖业务逻辑方式存储 而以简单的key value模式存储 因此大大的增加了数据库的扩展能力 NoSQL特性 不遵循sql标
  • 关于目前自己iOS项目使用的第三方开源库

    1 AFNetworking 目前比较推荐的iOS网络请求组件 默认网络请求是异步 通过block回调的方式对返回数据进行处理 2 FMDB 对sqlite数据库操作进行了封装 demo也比较简单 3 MBProgressHUD 也是iOS
  • 实践理解 Transactional 是否生效

    实践理解 Transactional 是否生效 示例 新建一个订单表 tb order test 手动插入一条数据 然后在代码中 根据 id 更新 如果更新成功 那么 update time 会变化 代码中执行 1 0 由于 0不能做为除数
  • 【论文解读】PHMLD_Wei-Ting Chen_TIP2020

    问题提出 Related Works 随着学习技术的发展 已经提出了几种基于合成数据的除雾算法 唐等 7 使用随机森林计算每个补丁的传输值 蔡等 8 基于称为DehazeNet的端到端系统 预测了每个补丁的传输值 任等人 9 提出了MSCN
  • [C#]BeforeFieldInit 与类静态构造函数

    BeforeFieldInit 与类静态构造函数 罗朝辉 http kesalin cnblogs com 本文遵循 署名 非商业用途 保持一致 创作公用协议 如下代码 using System namespace BeforeFieldI
  • js识别当前设备是pc端

    项目开发中很多时候会遇到要求系统既要在pc中运行也可以在手机上访问的需求 这是时候就需要判断一下系统运行的平台来做页面适配 在main js中添加如下代码 function identifyDevicePlatform var os fun
  • linux中head方法单独取一行,linux head tail sed用法

    一 head 语法 head n k file 显示前10行 1 head 10 file txt 2 head n 10 file txt 3 head n 10 file txt 除最后k行 显示其它所有 head n 10 file
  • Nginx http_try_files_module precontent阶段 try_files指令

    http try files module http try files module 模块只提供了try files这一个指令 该模块对于我们使用反向代理的时候有很大的帮助 该模块是默认编译进nginx框架当中的 无法将其取消 在搭建wo

随机推荐

  • ExecutorService配置线程池对象、日程线程池对象和基本使用示例

    线程池是高级开发必备的技能之一 线程池在实际开发中使用频率非常高非常重要 这里介绍一下线程池的基本使用方法 一 频繁的创建线程有什么缺点 1 经常创建和销毁线程会消耗非常大的资源 例如并发情况下的线程 对性能影响很大 二 使用线程池的思路
  • 【JAVA】接口与多态

    接口 定义 接口用关键字interface定义 public interface 接口名 特点 接口不能实例化 创建对象 接口和类之间是实现关系 通过implements关键字表示 public class 类名 implements 接口
  • 快递项目——手写MVC实现快递后台和平台

    目录 编写流程 管理员的登陆 快递管理 子模块 编写的流程 标准流程 api文档 用户的管理 子模块 快递员管理 子模块 控制台显示 实体类 MVC Util工具类 微信包 配置文件 补充 ngrok内网穿透 问题汇总 编写流程 管理员的登
  • 汇编语言——串操作指令

    若要处理连续内存单元中的一批数据 通常需要借助于循环 80x86CPU提供了一组串操作指令 可用来处理内存中的数据 字节 字 双字 串 这些指令包括MOVS LODS STOS SCAS CMPS 为了指出操作对象的长度 在助记符后加上B
  • 下载的文件被Windows 11 安全中心自动删除

    今天从CSDN上下载了自己曾经上传的文件 但是浏览器下载完之后文件被Windows安全中心自动删除 说是带病毒 实际是没有病毒的 再说了即便有病毒也不应该直接删除啊 至少给用户一个保留或删除的选项 研究了一番 可以暂时关闭安全中心的实时保护
  • 基于UDP实现简易聊天

    概述 UDP没有创建连接 数据包是一次收发一个 没有流的概念 但是在UDP编程中需要用到的是Socket 因为应用程序在使用UDP时必须指定网络接口 IP地址 和端口号 服务器端 在服务器端 使用UDP也需要监听指定的端口 Java提供了D
  • OTSU算法 (大津算法)理解&代码

    OTSU算法 对图像进行二值化的算法 介绍 OTSU算法是一种自适应的阈值确定的方法 又称大津阈值分割法 是最小二乘法意义下的最优分割 它是按图像的灰度特性 将图像分成背景和前景两部分 因方差是灰度分布均匀性的一种度量 背景和前景之间的类间
  • SpringBoot的yml文件中map,对象,list的嵌套使用

    ems ems real ip map 127 0 0 110 Huawei NCE OTN 127 0 0 33 Huawei NCE ROADM ems collect config map Huawei NCE OTN host 12
  • PTA 求最大、次大和第3大的值 (25 分)

    本题目要求读入n个整数 要求用最少的比较次数 输出它们的最大值 第2大的值和第3大的值 例如 对于13 13 1 10 34 10这6个数 最大值为34 第2大的值为13 第3大的值为10 输入格式 输入有两行 第一行为整数个数n 1 00
  • Redis多数据中心复制管理系统—— X-Pipe

    Redis多数据中心复制管理系统 X Pipe Redis 在携程内部得到了广泛的使用 根据客户端数据统计 整个携程全部 Redis 的读写请求在每秒 200W 其中写请求约 10W 很多业务甚至会将 Redis 当成内存数据库使用 这样
  • 基于51单片机实现继电器控制照明设备(Proteus仿真)

    wechat 嵌入式工程师成长日记 具体功能实现 当按下开关时 继电器闭合点亮照明设备 灯泡 使用器件 照明设备 LAMP 按键 AT89C51 若干电阻 PNP晶体管 二极管 继电器 RTE24005F Proteus仿真原理图 仿真 知
  • C++字符串【string】和【char []】操作全攻略

    异想之旅 本人原创博客完全手敲 绝对非搬运 全网不可能有重复 本人无团队 仅为技术爱好者进行分享 所有内容不牵扯广告 本人所有文章仅在CSDN 掘金和个人博客 一定是异想之旅域名 发布 除此之外全部是盗文 一 char 类型 1 定义与输入
  • Linux_18.04 Failed to load module "canberra-gtk-module"

    解决办法 sudo apt install libcanberra gtk module
  • openGL之API学习(二十六)glTexImage2D

    给2维纹理分配显存空间 也可以从内存向显存拷贝数据 void glTexImage2D GLenum target GLint level GLint internalformat GLsizei width GLsizei height
  • 你需要知道的 Selenium4 新特性

    前言 最近又用到了Selneium 发现已经来到了 4 9 版本了 本篇文章来介绍下它较比 Selenium3 的一些新特性 记录下 当是做笔记了 最令人惊喜的是 Selenium4 会自动回收浏览器资源 本文所使用的 Selenium 版
  • linux常用命令及解释大全(一)

    目录 一 系统信息 二 关机 重启及登出 三 文件和目录 3 1 导航命令 3 2 查看命令 3 3 创建和删除命令 3 4 复制和链接命令 3 5 其他命令 四 文件搜索 五 挂载文件系统 六 磁盘空间 七 用户和群组 总结 前言 Lin
  • js 拦截alert对话框

  • 若依框架前后端分离版——导入功能

    引言 主要是记录自己使用若依框架并增加其导入功能的实现过程 前端部分 在相应的index vue中添加以下代码 1 数据导入的按钮 v hasPermi 是权限相关的配置
  • Git版本回退并提交远程

    1 进入远程git 在提交纪录中找到需要回退的版本 复制版本号 2 终端进入项目 并执行git reset hard 23a50a1fXXX41XXXXX0227 3 把修改推送至远程 执行已下指令 git push f u origin
  • thrift开发问题总结

    作为目前最流行的RPC框架 thrift不仅提供了通信协议 同时提供了网络框架 解脱了程序员的生产力 thrift也是阿帕奇Hadoop系列的RPC实现工具 本文主要聚焦在实现的thrift系统中 遇到的各种问题 但是thrift在隐藏一些