您好,欢迎访问一九零五行业门户网

Jame’s Reading 09-10

scalability 也即 扩展性 http://t.cn/z8wbrus reddit 系统扩展的经验与教训,1. 尽可能的自动化,2. 没必要一开始即构建可扩展的架构,3.不要在刚开始时构建soa的架构,4.可扩展的关键是在用户感知到瓶颈之前解决掉扩展性的问题,5. 视ssd为便宜的内存,而不是昂
scalability 也即 扩展性http://t.cn/z8wbrus reddit 系统扩展的经验与教训,1. 尽可能的自动化,2. 没必要一开始即构建可扩展的架构,3.不要在刚开始时构建soa的架构,4.可扩展的关键是在用户感知到瓶颈之前解决掉扩展性的问题,5. 视ssd为便宜的内存,而不是昂贵的硬盘,6. 每种工具都有其对应的场景,合适的工具用在合适的地方.
http://t.cn/z8whedy 可扩展性的问题. 从并发连接的角度阐释扩展性的概念, 对于单个请求时间很短, 但需要大量长连接的业务, 基于进程/线程模型的系统(apache , oracle dedicated模式)在处理大量请求时, 扩展性表现较差; 而基于event驱动的系统(nginx/oracle mts/mysql)的表现就会好很多.
http://t.cn/ztc4ozu 扩展性与性能并不是一对冤家. 现阶段, 对于扩展性的关注远远超过对于性能的关注, 有很多人觉得只要解决好扩展性即ok了, 也就是只要将关键共享资源拆分掉就可以了. theo驳斥了这种说法, 1. 当前很多系统提升一倍性能不是难事, 2. 节约一半的服务器, 可以节约掉很多隐性成本.
http://t.cn/z8zefs6 2x2x2 requirements for database scalability, 关于数据库扩展性的简要介绍, 2*2*2的说法比较有意思, 第一个2: 水平扩展/垂直扩展, 水平扩展通过复制与拆分实现,垂直扩展通过数据库内存化(in memory db)以及快速持久化(rdma网络或者nvm来实现).
http://t.cn/zq0l5q1 20 obstacles to scalability 【by sean hull】实现系统扩张性(scalability)的20个障碍,这个内容此哥们已经重复多次, 这次做了一个整合,算是比较完整,也值得参考。唯一不认同的点是,多次使用at all costs,这是一种不理智的态度,但是,却是需要慎重考虑的。
http://t.cn/z8iuiqj scaling out and creating fault tolerant systems with mysql replication , 如何通过mysql复制实现scale out的可容错的系统, 名称很吓人, 主要三点内容: 1. 主备拓扑结构管理, 主备自动切换(mha), 2. 请求的负载均衡与连接池管理, 也即大部分数据库中间件做的主要事情(如tddl)
解决方案与应用案例http://t.cn/zy8w7v3 可接受的响应时间,1.页面响应时间没有行业标准,2. 关于人机交互的时延,有认知科学的结论,人感知不到1/4秒以内的差距,3. 8秒钟响应的规则过于简化了,4. 用户不再接受所谓的平均响应时延,5. “4秒钟规则”或许无法描述用户用户体验,6. 期望与体验的关系决定了用户的满意度
http://t.cn/z861npo 性能反模式,1.在项目结束时才去修复性能问题,2.度量并修复错误的指标,3. 忽视算法的作用,4. 集中关注自己能看到的东西,而不是根本的问题,5. 软件层次太多,6.过量的线程, 7.硬件使用不均衡,8.在cpu之间做无效的数据拷贝,…
http://t.cn/zo3hepd godaddy使用cassandra作为其session store,1. 使用a/b集群来提升集群升级的处理,2. 协作开发asp/asp.net 的协议来访问,提供连接池、压缩、配置管理等特性,3. 在cassandra支持ttl功能之前,通过设置人工的第二索引来做expire session的清理工作。
http://t.cn/z8mo36p 为什么cassandra不需要(使用)vector clocks by jonathan ellis ,看完,感觉jonathan基本讲明白了vector clock的问题,1. 性能问题(读,反序列化,序列化,写),2. 数据的多版本,3. 可以帮忙找到不一致,如何解决,还得用户自己来。但是,对于cassandra为啥不需要我没看明白
http://t.cn/zqhfmu8 numa (non-uniform memory access): an overview, numa概念的总体介绍, 1. numa只对内存访问密集型业务有好处, 2. node local与interleave之间的差异, 3. linux如何处理进程的numa内存分配, cpu调度如何优化numa相关的进程, 4. 常用的numa相关工具,numactl/numastat/numa_maps
http://t.cn/z8upsoz 对于时间序列的数据存储来讲,tokudb要明显优于innodb, 无论从数据加载时间, 还是数据的压缩效率上来讲, 都有好几倍的优势.
http://t.cn/z8w7lku linkedin新近在apache开源了其流处理平台(stream processing system). apache 地址: http://t.cn/zqdvp4j
http://t.cn/zqs7y8k oratop from mos (帖子原文), mos(oracle support)的地址: oratop – utility for near real-time monitoring of databases, rac and single instance (doc id 1500864.1)
性能优化以及其它http://t.cn/zqa8mz1 分布式一致算法与raft, riak的人介绍基本的分布式一致性, data loss的几种可能, 以及强同步情况下, 一致性与可用性的权衡, 最后介绍raft的算法, 以及他们基于erlang语言的实现.
http://t.cn/z8l4vyc 在排队的时候, 为什么自己所在的队列走的更慢. 本文从人的认知偏见等心理学因素上对此进行了解释.
http://t.cn/z8ij2nc 性能相关的书籍. 这篇文章里面收集了大量的各个领域与性能有关的书籍, 自然也包含很多我喜欢的书籍. neil gunther与daniel a. menasce写的容量规划系列的书,connie u. smith写的性能工程书籍, brendan gregg的性能分析系列,martin l. abbott 写的架构设计原则系列的书.
http://t.cn/zqdqcyq 如何通过修改sql语句中的一行,提升100倍的查询效率。我早期进入oracle database这一行,也是因为类似的案例。最初写的一个比较差劲的sql语句,第一次运行耗时13个小时,经过优化,最后运行23秒左右搞定。
#oracle tips# http://t.cn/zqhhgia 如何有效的kill一个session, alter system disconnect session ‘sid,serial#’ (immediate|post_transaction). 找个时间验证下, 由于kill session的问题,咱还背过一个大的故障呢, session kill了,process却没有干掉,导致max process报错了.
http://t.cn/zql4dm4 the top 5 proactive measures to minimize mysql downtime 1. 维护经过验证的备份,2.构建冗余组件以应对单点故障,3.变更都要经过验证,并有回滚计划,4.验证复制/副本的有效性,5.做好监控与趋势分析,提及的几个监控项比较实用。
http://t.cn/zqyu2x1 facebook的mysql工程师 domas mituzas 探讨durablity的问题。总体而言,durability是关于权衡的艺术,而在mysql中,为了实现持久性,付出的代价是相当高昂的,3次fsync操作才能确保一个事务的持久性。而mysql主备的可靠性设计还不够安全(crash-sage),5.6已经有了较大改善。
http://t.cn/zqa8kmi the antifragile organization(反脆弱的组织), netflix的ariel tseitlin介绍他们在netflix的高容错系统设计, 对与failure的态度, 如何处理failure, 如何做设计规避failure带来的问题. 后面是从各个可能带来failure的维度, 从系统层面做fault tolerance的设计.
反脆弱的概念因此塔勒布的新书《反脆弱》。netflix介绍他们的simian army系列的捣蛋鬼(monkey)系列(chaos monkey,latency monkey…..),基本设计思路为:1. 通过冗余来设计具有容错能力的应用,2. 通过构造故障来降低不确定性
故障review的几个关键问题,1.哪里出故障了? 2.如何快速发现此故障?3.如何避免此故障的再次发生?4. 如何避免这一类故障的再次发生?5. 如何提升我们下次处理此类故障的效率? by jeremy edberg, reliability architect, netflix
社科类图书阅读摘要在一个没有市场的社会中,竞争也是层出不穷的,只不过竞争的形式有所不同罢了.弱肉强食是竞争,权力斗争是竞争,走后门、论资排辈,等级特权等等,都是竞争形式.道理明确:凡是多过一个人需求同一经济物品,竞争必定存在. 摘自张五常《经济解释:科学说需求》第二章结尾。
尽管报复会带来许多伤害(经历过反目成仇或者艰难离婚的人应该明白我说的是什么),我还是要说报复的威胁–即使人们要付出巨大的代价–能够成为维护和支撑社会秩序有效的强制机制. 我并不主张”以眼还眼,以牙还牙”,但我猜测,报复的威胁总的来说是具有一定功效的. 摘自丹.艾瑞里《怪诞行为学》第5章.
对出现在我们面前的所有假说进行最具怀疑性的审查,与此同时对新思想最大限度地保持开放心态。如果你…没有一丝怀疑,那么就无法分辨有用的思想与没有价值的思想.如果所有思想都具有同等的有效性,那么你就失去了自我,因为那样..根本没有什么思想是有效的. 摘自《误区:思维中常犯的6个错误》54页.
1. 我们对某一事物付出的努力不仅给它带来改变, 也改变了自己对它的评价, 2. 付出越多, 产生的爱恋越深, 3. 我们对自己的作品估价过高, 这一偏见深入骨髓, 误以为别人也和我们的看法相同, 4. 如果付出巨大的努力仍然没有获得成功, 我们就不会感到过多依恋. 摘自丹.艾瑞里《怪诞行为学》
如果你在心仪的人追你的道路上设置一些障碍让他们追得更辛苦,他们一定更加珍惜你.从另一方面说,如果你把他逼到绝境还一个劲儿地拒绝他们, 那你就别指望说”我们直做朋友”. 摘自 丹.艾瑞里 《怪诞行为学》.
努力提高”中国制造“的技术含量,这是目前我们公共政策的主要方向。不严厉压缩权力寻租在租值中的比重,我认为是不可能实现这一转型的。在这一意义上,政治体制改革远比经济体制改革更紧迫。或者说,如果不改变政治运作的方式,任何显著有效的经济体制改革已经不再可能了。丁丁《行为经济学讲义》97页
“哈耶克说:一个伟大社会的制度特征,就在于他鼓励一切个体在一切可能的方向上探索,因为我们不知道未来可能的降临的灾难中,哪一个方向的探索可以拯救我们全体;拯救我们的英雄,由于大自然和我们生存环境的不确定性,必须是匿名的--于是只能鼓励一切方向的探索。“-汪丁丁《行为经济学讲义》93页
如果你有生活常识,那么你学习理论的时候就会不断回到你的常识,你会发现问题-要么是理论自身的问题,要么是常识的表达问题。生命体验是真实的,生命之树常青。所以,知识永远是知识过程,不是静止的一堆概念,知识过程是与你的人生体验纠缠在一起的,体验的丰富和深刻,使你的知识变得丰富和深刻。
柏格森(henri bergson)认为, 概念就是用来涵盖生命体验的, 如果你使用一个概念而毫无生命体验, 这概念对你而言就是苍白的, 它毫无意义, 你不曾为它的任何部分感动过. 摘自 汪丁丁 《行为经济学讲义-演化论的视角》
社会发展依赖于个体的创造性,因为创造是个体的事情. 可以个体创造精神需要社会的宽容,宽容又是整体的性质, 没有宽容, 个体自由也就消失了. 所以, 自由是整体的, 创造是个体的. 摘自: 汪丁丁 《行为经济学讲义》 第102页。
感激与承情虽然都是人因接受了某种帮助而产生的“情感”(emotions),但性质并不相同。一个人接受帮助或赠与后,感觉到承情是一种负债的感觉,帮助者或赠与者也希望他有这样一种感觉,会不断提醒他,一再要求他应该“感恩”或“知恩图报”,否则就是“不知感激”、“没良心”或者“忘本”。by 徐贲
http://t.cn/z8ifq1r 极权主义制造恐惧技术的最大特点是利用不确定性,只有这种不确定性才能造成恐惧效应的扩大。同时,也只有不确定性才能形成你内心的自我约束和自我审查。而不确定性起作用的条件,就是权力的总体性和任意性。任意性才能造成不确定性,而总体性才能扩大任意性的空间。
related posts:
jame’s reading 10-14jame’s reading 07-25jame’s reading 06-28 原文地址:jame’s reading 09-10, 感谢原作者分享。
其它类似信息

推荐信息