ทดสอบ concurrency บน Seaside

ในการเรียนรู้ Web application framework ตัวใหม่ๆ
ประเด็นแรกที่ผมต้องการรู้ก็คือ
performance ในส่วน concurrency มันเป็นอย่างไร
จะได้ใช้เป็นเกณฑ์ตัดสินได้ถูกว่า solution ไหน ควรจะใช้ framework อะไร

seaside ก็เช่นเดียวกัน
เนื่องจากมันเป็น component oriented ของแท้
ผมก็เลยอยากรู้ว่ามันจะ handler load ได้ดีแค่ไหน

ผมทดลองสร้าง helloworld component ขึ้นมา
(แบบเดียวกับตอนที่ทดลอง yaws)
โดยมี method สำคัญๆแค่ 2 อันคือ

initialRequest: aRequest
 name := (aRequest at: 'name')

ใช้ extract parameter ที่ส่งเข้ามา
โดยเก็บค่าที่ได้ไว้ใน instance variable ที่ชื่อ name

renderContentOn: html
 html heading: 'Hello ', (self name)

อันนี้เป็น method ที่ใช้ในการ render

ทดลองสั่ง ab -n 300 -c 100
ผลลัพท์ที่ได้ ถ้า run บน squeak
ก็จะเกิด exception บานตะไท
ลดเหลือ -c 10 ถึงจะ run ผ่าน

ด้วยความอยากรู้ว่าถ้าเป็น commercial product หล่ะ
จะเป็นอย่างไร
ก็เลยไป load VisualWorks
ของ Cincom Smalltalk มาลองดู
(มันเป็น dual license, ถ้าเป็น research, learning
ก็จะ free)
ได้ผลลัพท์ดังนี้

Server Software:        
Server Hostname:        127.0.0.1
Server Port:            8008

Document Path:          /seaside/go/hello?name=world
Document Length:        1644 bytes

Concurrency Level:      100
Time taken for tests:   2.806422 seconds
Complete requests:      300
Failed requests:        0
Write errors:           0
Total transferred:      580056 bytes
HTML transferred:       493200 bytes
Requests per second:    106.90 [#/sec] (mean)
Time per request:       935.474 [ms] (mean)
Time per request:       9.355 [ms] (mean, across all concurrent requests)
Transfer rate:          201.68 [Kbytes/sec] received

Connection Times (ms)
              min  mean[+/-sd] median   max
Connect:        0    6   9.8      0      25
Processing:   633  874  98.2    900     992
Waiting:      631  873  98.1    899     991
Total:        658  880  89.2    900     992

Percentage of the requests served within a certain time (ms)
  50%    900
  66%    933
  75%    962
  80%    963
  90%    968
  95%    977
  98%    984
  99%    985
 100%    992 (longest request)   

ข้อสังเกต

• document length ที่ได้ใหญ่มาก
  เพราะว่า seaside มัน generate อะไรต่อมิอะไรให้เยอะแยะเชียว
  
• ช่วงเวลาระหว่างกลุ่ม 50% แรก กับที่เหลือ ต่างกันนิดเดียว?