小田圭二
日本Oracle株式会社咨询部门经理。在解决性能问题方面有着丰富的经验,著有《图解OS、存储、网络:DB的内部机制》(絵で見てわかるOS/ストレージ/ネットワーク~データベースはこう使っている)、《图解Oracle的机制》(絵で見てわかるOracleの仕組み)等多部著作。
榑松谷仁
日本Oracle株式会社高级首席顾问。曾在Emprix公司(美国本部)就职,为SIer和一般企业提供压力测试、性能管理等方面的咨询服务。之后就职于日本Oracle株式会社,还负责为使用Java、WebLogic、Exalogic等中间件产品的客户提供咨询服务。
平山毅
在东京理科大学理工学部上学期间成为Sun Site用户,专业是计算机科学和统计学。曾在日本某大型互联网公司就职,目前在世界上最大的云计算供应商做架构师和咨询顾问,负责了多个大规模的国际性案件。喜欢的技术是Oracle、VCE、AWS。
冈田宪昌
曾在某IT公司做基础设施的设计、搭建和运维工作,后就职于日本Oracle株式会社,负责Oracle产品的设计和PM支持、DBA支持等。目前在某大型虚拟化软件供应商做咨询顾问和研发技术经理,负责为虚拟化基础设施和云计算的设计、运维等提供咨询服务。
第1章 性能的基础知识1
1.1 学习性能所必需的知识2
1.2 算法的优缺点与学习方法4
1.2.1 什么是算法4
1.2.2 算法的基础5
1.2.3 学习算法的窍门7
1.3 算法的应用实例及性能的差异8
1.3.1 日常生活中算法的例子8
1.3.2 对性能的影响程度9
1.3.3 评价算法的指标11
学习信息科学的重要性13
1.4 响应与吞吐的区别14
系统工程师学习编程的重要性16
1.5 算法的具体例子16
1.5.1 数组与循环处理16
1.5.2 链表与循环处理19
1.5.3 树与查找21
1.5.4 散列算法25
1.5.5 队列28
1.5.6 栈32
1.5.7 排序(快速排序)34
1.5.8 缓存①(回写)36
1.5.9 缓存②(直写)38
DMBS是数据结构与算法的宝库38
1.5.10 锁与性能40
【高级篇】锁的机制是如何实现的42
【高级篇】性能优劣不能只看正常情况44
第2章 性能分析的基础45
2.1 性能分析从测量开始46
2.2 什么是必要的性能信息46
2.2.1 “分段查找”原则46
2.2.2 性能信息的3种类型48
2.2.3 系统的模型与性能故障时的运作情况50
2.2.4 数据的种类及分析的窍门53
2.3 性能分析中的重要理论54
2.3.1 等待队列理论的术语55
2.3.2 计算等待队列的平均等待时间56
2.3.3 使用率和等待队列的例子57
2.3.4 实际上可以获取哪些信息59
需要定期确认性能吗?61
2.4 OS的命令61
2.4.1 sar62
2.4.2 vmstat64
时间同步非常重要66
2.4.3 ps66
2.4.4 netstat68
2.4.5 iostat70
2.4.6 top73
2.4.7 数据包转储(wireshark、tcpdump等)74
2.4.8 pstack76
2.4.9 系统调用(strace等)78
2.4.10 Profiler80
2.4.11 Windows环境81
第3章 实际系统的性能分析85
3.1 Web/AP服务器与Java/C应用程序86
3.1.1 Web服务器的访问日志86
3.1.2 应用程序、AP服务器的日志87
3.2 DB服务器的性能测量90
3.2.1 DBMS的性能测量的原理90
3.2.2 性能分析告一段落92
批处理的性能测量93
3.3 存储性能分析的思路94
3.3.1 存储的相关术语94
3.3.2 存储性能分析的思路:重视IOPS96
3.4 网络性能分析的思路100
性能故障数据应该保存多久?102
3.5 调查原因102
3.5.1 初学者容易掉入的陷阱103
3.5.2 应有的态度106
获取各种性能信息的时间要吻合吗?108
3.5.3 实际的调查流程108
性能分析的理想工具111
第4章 性能调优113
4.1 性能与调优114
4.1.1 现实中的性能114
4.1.2 在现场要保持“大局观”117
4.2 性能调优的准则118
4.2.1 设定既不能太粗也不能太细,要刚刚好119
4.2.2 调优要循序渐进120
4.2.3 通过重复使用来提速121
4.2.4 汇总处理(集中、Piggyback)121
4.2.5 提高速度与实现并行123
4.2.6 纵向扩展与横向扩展124
4.2.7 局部性124
编译器会与RDBMS走上同一条道路吗?125
4.3 现场可以使用的技巧126
4.3.1 省略循环,减少投接球126
4.3.2 访问频率高的数据存放入键值存储或散列表中127
4.3.3 访问频率高的数据放在使用位置附近127
4.3.4 把同步变成异步128
4.3.5 带宽控制130
4.3.6 LRU算法131
4.3.7 分割处理或者细化锁的粒度131
4.3.8 使用不丢失的回写缓存132
4.3.9 使用多层缓存132
4.3.10 使用巨帧和高速网络132
4.3.11 负载均衡、轮询133
4.3.12 关联性、绑定、粘滞会话134
4.3.13 写时复制135
4.3.14 日志136
4.3.15 压缩137
4.3.16 乐观锁137
4.3.17 列式数据库138
4.3.18 服务器的性能设置中,初始值=最大值?139
4.4 实际业务中碰到的性能问题139
4.4.1 性能比较的参考数据139
4.4.2 缓存命中率并不一定要高140
4.4.3 存储的调优方针141
4.4.4 虽然容量足够,但还是添加磁盘141
4.4.5 从性能角度看文件分割142
4.4.6 90百分位143
4.4.7 读取与写入的比例143
4.5 调优的例子144
4.5.1 例1:2层循环中select语句的执行144
4.5.2 例2:偶尔出现性能下降147
等待队列的前面发生了什么?149
第5章 性能测试151
5.1 性能测试的概要152
5.1.1 项目工程中的性能测试152
5.1.2 不同职责的性能测试相关人员153
5.2 常见的失败情况:9种反面模式156
5.2.1 不能在期限内完成156
5.2.2 性能很差!解决不了性能问题157
5.2.3 由于没有考虑到环境差异而导致发生问题158
5.2.4 压力场景设计不完备导致发生问题159
5.2.5 没有考虑到缓冲、缓存的使用而导致发生问题159
5.2.6 没有考虑到思考时间而导致发生问题160
5.2.7 报告内容难以理解导致客户不能认同162
5.2.8 客户因为存在不信任感而不能认同163
5.2.9 测试很花时间164
5.3 性能测试的种类167
5.3.1 实施的周期168
5.3.2 狭义的性能测试169
5.3.3 临界测试(临界性能、回退性能、故障测试)169
5.3.4 基础设施性能测试174
5.3.5 应用程序单元性能测试178
5.3.6 耐久测试179
5.3.7 关联领域180
5.4 项目工程中考虑的性能测试181
5.4.1 需求定义181
5.4.2 项目规划186
5.4.3 【基本设计】选择系统187
5.4.4 【基本设计】性能测试环境188
5.4.5 【基本设计】其他与性能设计相关的事项191
5.4.6 【性能测试设计】测试计划的细节192
5.4.7 【性能测试设计】人员配备与联络体制194
5.4.8 【基础设施集成测试】基础设施性能测试195
5.4.9 【集成测试】多并发运行测试197
5.4.10 【系统测试】压力测试、临界测试、耐久测试197
5.4.11 【运维测试】性能监控测试、故障测试198
5.4.12 【交付】性能测试结果的验收报告198
5.4.13 【运维】初期运行确认199
5.5 性能测试的课题与必要的技巧200
5.5.1 性能预估能力200
5.5.2 高效的反复实施能力202
5.5.3 Oracle Application Testing Suite的使用效果203
第6章 虚拟化环境下的性能209
6.1 虚拟化与性能210
6.2 虚拟化的概要211
6.2.1 什么是服务器虚拟化211
6.2.2 虚拟化的种类212
硬件辅助虚拟化214
6.3 服务器虚拟化的主要技术(过载使用)215
6.3.1 CPU的虚拟化技术215
6.3.2 内存的虚拟化技术218
6.4 虚拟化环境下性能的相关知识与分析方法225
6.4.1 性能分析的工具225
6.4.2 CPU的性能管理226
6.4.3 内存的性能管理231
6.4.4 存储的性能管理234
还没使用DRS吗?237
6.4.5 网络的性能管理240
延迟灵敏度功能243
第7章 云计算环境下的性能245
7.1 云计算环境下性能的相关知识246
7.1.1 云计算环境下性能会变差吗246
7.2 云计算与本地部署的差异247
7.2.1 云计算的定义248
7.2.2 从云计算的特点来看与本地部署环境的不同248
云计算实现的终极全球化251
7.2.3 云计算的实现形态251
混合结构的成本管理就是使用实物期权实现的投资组合管理252
7.2.4 从云计算的服务模式来看其与本地部署的差别253
云计算环境中可以把盈亏平衡点图形化(独自SaaS提供的最优费用模型)254
7.2.5 把握资源的变动因素与固定因素254
7.3 云计算环境的内部结构与最佳应用程序架构262
7.3.1 集中式?分布式?262
7.3.2 紧耦合?松耦合?264
7.3.3 SOAP?REST?265
能够把握抽象化的云计算环境的美国人——图与想象的重要性268
7.3.4 前端的分布式处理:网络的访问方法269
7.3.5 后端的分布式处理:数据存储的知识(从ACID到BASE)271
7.3.6 提高TCP通信的速度272
7.3.7 提高对象存储的速度272
7.3.8 C语言?Java语言?还是脚本语言?273
7.3.9 云计算环境下高性能服务的架构274
7.3.10 开放迁移与云计算迁移277
7.3.11 推测云计算的内部结构278
7.4 云计算环境下性能分析的方法278
7.4.1 获得云计算环境的基准数据的价值与不断进化的性能值278
性能领域是理科工程师的特权?280
7.4.2 Web系统的基本分析方法281
7.4.3 批处理系统的基本分析方法282
7.4.4 云计算的自动扩展功能283
7.4.5 解析云计算环境中的复杂信息的统计方法284
7.5 云计算环境中开发阶段的思维方式285
7.5.1 估算(基本设计)286
7.5.2 性能测试(系统测试)287
7.5.3 项目管理287
云计算环境下,经营者也需要关注详细的性能数据吗?288
7.6 云计算环境中运维阶段的思维方式289
7.6.1 容量管理289
阈值设置与系统安全系数、标准化的价值290
7.6.2 故障发生时的降规模容量运维292
7.6.3 生命周期与更新293
云计算实现的DevOps中性能调优的高效化294
参考文献296
作者简介297
拍卖之王从0到190亿美金的2100天。EBAY,1995年从创始人皮埃尔·奥米达的梦想出发,如今已然成为:全球最大的电子交易市场,全球
小米凭什么开创“小米模式”,火箭般一飞冲天?特斯拉凭什么接班苹果出任最新版“创新大神”,尽享万人追捧?余额宝凭什么一夜间
《海外征程2》内容简介:本书改编自华为前员工的真实经历,讲述了海外开拓者在海外拼搏的热血故事。拉美市场的战斗正式打响。4G网络
《素与练》内容简介:衣服是我们面对世界的表情。这是一本给普通人的日常美学穿搭书。皆川明说:“世界上有许多无法以“流行”二字
《C#并发编程经典实例》内容简介:本书全面讲解C#并发编程技术,侧重于.NET平台上较新、较实用的方法。全书分为几大部分:首先介绍
《疯狂Java讲义》2000年至今,Java语言一直是应用最广的开发语言,并拥有最广泛的开发人群。如今,Java已经不再简单地是一门语言
Java 7 编程高级进阶 本书特色 《java7编程高级进阶》包含了众多专家级编程技术,学习这些技术可以让你的java水平上升至一个新的台阶。借助真实环境下的...
结构弹塑性分析程序OpenSEES原理与实例 本书特色opensees是一个开源的弹塑性分析程序,它有很多未商业化仍在研究阶段的算法、单元及材料本构。opens...
《中国纪录电影》内容简介:本书从自己工作实际出发,凭借自身资源优势,以大量纪录影视作品实例,梳理中国纪录电影的发展轨迹,总
通道与图层篇-Photoshop层功之道-含配套视频光盘 本书特色 《Photoshop层功之道:通道与图层篇》由印刷工业出版社出版。通道与图层篇-Photos...
《JavaScript面向对象编程指南》内容包括:JavaScript作为一门浏览器语言的核心思想;面向对象编程的基础知识及其在JavaScript中
《矛与盾:黑客攻防与脚本编程》对每一个入侵步骤作详细的分析,以推断入侵者在每一个入侵步骤的目的以及所要完成的任务,并对入侵
《中国私募基金投资年度报告2015》内容简介:“私募股权(PE)”、“阳光私募”(即对冲基金)和“私募房地产”,是全球资产规模最大
《基于YANG的可编程网络》内容简介:整个网络行业正面临着自动化的压力,以实现规模化和更快的发展,本书介绍如何利用YANG来释放网
《藏在木头里的灵魂》内容简介:18世纪法国传教士笔下绝美中国建筑首次面世,完整重译十八世纪法文原版,体会深刻人文情怀与历史感
《硅谷工程师爸爸的超强数学思维课:建立孩子的几何思维》内容简介:如何开发孩子的数学思维?如何让孩子把数学与生活结合起来,学
《VerilogHDL高级数字设计》结构清晰,内容组织合理、适合于计算机机、电子等相关专业本科高年级学生或研究生课程,同时也通用于
《御风而行》内容简介:牛市真的来了?! 行情难觅,机会到来时,怎能轻易错过! 知名财经评论家水皮将观察中国股市20余年的经验倾
《数字调制解调基础(双色)》是21世纪电子电气工程师系列之一,主要讲解IT技术中最关键、最基本的调制解调技术,内容深入浅出,通
本书通过nendo工作室创始人佐藤大亲身体验的事例,介绍设计与创造的本质。不仅是设计师,普通读者也可以从佐藤大的独特思考中,发