http://entelechie.ycool.com/ Wed, 23 Jul 2008 14:07:55 GMT Wed, 23 Jul 2008 14:07:55 GMT http://sta.yculblog.com/images/logo/general-88x31.gif http://entelechie.ycool.com/ http://entelechie.ycool.com/post.2931654.html 身体状态也不错，这么久没下水了还能游个400米，比较的心满意足了。

早起、用心干活、下班游泳、隔日健身，这样的生活状态很好。
终于有了一点传说中的归属感和节奏感。

还是忙，争取周整理些西藏的照片放上来：）... ]]> http://entelechie.ycool.com/post.2931654.html Tue, 22 Jul 2008 23:07:02 GMT http://entelechie.ycool.com/post.2929443.html 在北京待了一年，都有些不习惯南方粘呼呼的炎热了。

期间见到了老包、周总和netsnail师兄：
老包现在在淘宝的百花丛中是难逃招蜂引蝶的命运；
周总的徕卡毒性很大，男人都难逃对精密器械的那点小小的热爱，either do I；
netsnail还是嫩么滴屌、嫩么滴怪蜀黍。。。

这一趟，基本上断了去杭州的念头，一个公司还是贵在他完善的制度。
至于这次的其他收获，比如团队合作，待我自己理清楚先。
... ]]> http://entelechie.ycool.com/post.2929443.html Sat, 19 Jul 2008 12:07:27 GMT http://entelechie.ycool.com/post.2902998.html 想找人帮我在公司的logo前拍张照片留念，发现保安都下班了。

回家睡觉。。。Mama, I'm coming home.



... ]]> http://entelechie.ycool.com/post.2902998.html Fri, 06 Jun 2008 18:06:46 GMT http://entelechie.ycool.com/post.2902910.html
so why I am fuckin here.. I lost myself.
Peking, I am here to kick your ass.... ]]> http://entelechie.ycool.com/post.2902910.html Fri, 06 Jun 2008 15:06:18 GMT http://entelechie.ycool.com/post.2901261.html 如果8发边防证，偶还口以切哪里咩……

土人说：我有粽子；我说：我有肚子。
眼下的问题是赶回家过端午节。。。



ps:在某公司完成滴最后一个需求：
您滴服务器太快鸟，请每次发包后sleep()一下。。
我 囧rz～～... ]]> http://entelechie.ycool.com/post.2901261.html Tue, 03 Jun 2008 15:06:52 GMT http://entelechie.ycool.com/post.2897868.html 1. request per second
a jerky server model
这次做的是一个http log服务器，需要在有限的资源下支持尽可能高的PV。
提高PV，无非是改进两个指标：1. Connect Time；2. Process Time。
其实这两个问题都是一个思路，后面我们可以看到。

对于传统的长连接TCP服务，鉴于Erlang的低成本线程调度，一般采取的方案是每个TCP连接在gen_tcp:accept时spawn一个独立的线程处理后续的C/S交互。
但是对于眼下的http log服务，首先并不是一个keep-alive的连接：我们的设计目标是尽可能快的返回http响应并关闭TCP Socket，传统模型不是非常适用。
于是便有了一种callback模型：用一个daemon线程专司接收消息并创建监听线程，由监听线程阻塞在gen_tcp:accept上，例子如下：
start_server() ->
    DT = spawn(test, daemon, [Listen_Sock]),
    DT ! {new}.

daemon(Listen_Sock) ->
    receive
       {new} ->
          spawn(test, proc, [Listen_Sock, self()])
    end.

proc(Listen_Sock, DT) ->
    Client = gen_tcp:accept(Listen_Sock),
    DT ! {new},
    gen_tcp:send(Client, "HTTP 200\n\r"),
    % do further process
这种方案的好处在于，把spawn的开销从http处理中剥离了开来：
所有的处理线程都是预生成后阻塞在哪里，gen_tcp:accept后无需spawn直接执行后续的代码。
再配合+K true参数使用kqueue模型，可以预先生成多个proc的线程阻塞在accept上，可极大提高性能。

至于Process Time，同样是依赖预处理的思路：
因为http log服务涉及到Set-Cookie等操作，取localtime并格式化的过程中涉及到大量系统调用和字符串操作，在Erlang中开销不小。
解决办法是在daemon中预先生成好不同情况下需要返回的各色字符串，作为参数传给spawn出来的proc线程，剩下的操作无非是 条件判断->发送。

还有非常重要的一点是根据县城内处理数据的规模，使用spawn_opt设置合适的process heap大小
因为避免后期的heap扩充是开销非常大的一种操作，在轻量级线程内尤其要避免。


2. normal optimization[待续]
为了保证daemon进程的栈空间不增长，必须把函数写成tail-recursive。
这个积累还是很惊人的，而且属于不可回收空间；
如果你的服务运行那个多日因为内存问题挂掉，可以检查下所有的守护线程。

3. memory (crash dump)[待续]

4. 垃圾回收
期间遇到了比较到的严重的内存问题，造成服务器几个小时候因为alloc()失败而崩溃；
查看erlang:memory()的信息，发现processes占用绝大部分内存，开始误认为是产生了大量无用线程；
最后确诊还是因为deque大量申请释放，造成heap的回收效率问题以至于内存不够用。
使用spawn_opt设置fullsweep_after为0没有用，非常奇怪；必须显式调用erlang:garbage_collect()。

经过这几天压力测试，Erlang的garbage collection机制还是相当强健的：
在每秒近万次的不规则数据申请、释放的压力下，十几个小时后运行依然稳健，整体回收效率很高并且没有拖累到业务逻辑的性能。
可怜的Java…………

5. profiling[待续]
cprof

先列个题头，回头再写。。。

迅猛把活干完，然后去旅行。
What a wonderful world.


Ver. 3.14
周末肉过来了，去八达岭过了儿童节，很累。
所以洗洗睡了先，改日再写。

Ver. 3.141
在家了，一个劲的下雨。我华丽的假期... ]]> http://entelechie.ycool.com/post.2897868.html Mon, 02 Jun 2008 14:06:47 GMT 优化 profile dump optimization erlang accept 并发 gen_tcp http://entelechie.ycool.com/post.2894182.html
The most urgent is a vocation.... ]]> http://entelechie.ycool.com/post.2894182.html Thu, 22 May 2008 00:05:58 GMT http://entelechie.ycool.com/post.2889224.html 那一年的十月，在古尔沟看到救援队露营留下的余灰，我确信他们都是好人。

有人说这是上帝对人类的惩罚，但是为什么让那些淳朴的人民来遭难；
而我们这些生活在肮脏的城市里的人却安然无恙，甚至继续玩世不恭，
像对待超级女声一样带着笑意说出阵亡的数字，继续娱乐一切。


Anyway, God bless our fellow.


BTW:
部队虽然抵达了汶川县，但是映秀离汶川县城还很远，现在的道路损毁情况，只能看十五军了，上帝保佑。... ]]> http://entelechie.ycool.com/post.2889224.html Wed, 14 May 2008 01:05:13 GMT http://entelechie.ycool.com/post.2888443.html
1. 虽然K&R上说结构体必须memcpy或者一个元素一个元素的赋值，其实struct可以直接用=操作符做整体拷贝的；
2. offsetof()，用来计算结构体内成员偏移的宏；
3. 如果函数的返回值为struct，C也会类似C++的在函数形参里加上一个struct *指针的；
4. 可能大家都习惯malloc后做强转了，其实这是含糊的C/CPP编译器混用的恶果。作为C程序，其一void *可以自动转换，其二因为C默认函数返回int，如果malloc没有正确申明，int也会被错误的强转为指针且不报错；
5. sequence point间evaluation的顺序是不保证的；
6. void **是一个很无厘头的东西，void *作为万用指针，void **是什么？指向万用指针的特型指针？
7. 关于申明指针char *p还是char* p的问题，char* p, c这样误导性的代码就是答案。永远写成前者，这不是风格问题；
8. 3["abcde"] 等于 3 + "abcde" 等于"abcde" +3 等于"abcde"[3]，华丽的C语言。... ]]> http://entelechie.ycool.com/post.2888443.html Mon, 12 May 2008 16:05:24 GMT faq programming c http://entelechie.ycool.com/post.2887244.html
 - William Wallace


Background:
《成都警方处罚利用四川石化项目散布谣言者》；
上周的南方周末有半版的PX报道，我也觉得四川政府在满足民众知情权之前，如此强势的打压不是非常合理。

PS：
还好不是喉舌大报的新闻，不然英勇的南瓜泡沫死定了。... ]]> http://entelechie.ycool.com/post.2887244.html Sun, 11 May 2008 05:05:24 GMT http://entelechie.ycool.com/post.2885048.html 2. 对于数据结构，处理起来是list好，访问起来是array好，使用array:to_list(), array:from_list()进行转换；
3. 明天要研究下丫的debug怎么用，还有项目产品化流程。... ]]> http://entelechie.ycool.com/post.2885048.html Wed, 07 May 2008 09:05:14 GMT header array erlang 解析网络报文 list_to_bitstring http://entelechie.ycool.com/post.2881390.html 但我好像还要惨一点：我已然不会睡懒觉了……
不管头天晚上是10点上床还是次日凌晨1点睡觉，早上总是睡不过7：30。。。

我已尝试：
1. 提高房间空气质量；
2. 把窗帘拉的严严实实；
3. 头天晚上去健身房发泄；
4. 熬夜
…………
纷纷无效

以前起得早我还沾沾自喜，现在下午有段时间是实在扛不住了……
各位达人有什么建议不？
不要说早上起来吃安眠药……

我默默的怀念周末睡到9：30am的感觉……... ]]> http://entelechie.ycool.com/post.2881390.html Thu, 01 May 2008 10:05:58 GMT