RE: [JUG-Indonesia] Re: Kettle: Improving batch update performanc e

2008-08-31 Terurut Topik Tjong, Andreas
Kalau commit size-nya kegedean bukannya berarti memori yang dipake juga jadi lebih besar? Takutnya sebelum memori belum sempat dilepas, sudah keburu ditembak lagi, sehingga menyebabkan terjadinya bottleneck. _ From: jug-indonesia@yahoogroups.com [mailto:[EMAIL PROTECTED] On Behalf

Re: [JUG-Indonesia] Re: Kettle: Improving batch update performanc e

2008-08-31 Terurut Topik Feris Thia
Yup, argumennnya benar kok. Dan ada step antara juga yang bisa menyebabkan bottleneck seperti data conversion seperti yang baru kita temukan :) Casenya akan saya posting deh ntar dengan contoh data saya. Regards, Feris 2008/9/1 Tjong, Andreas [EMAIL PROTECTED] Kalau commit size-nya

RE: [JUG-Indonesia] Re: Kettle: Improving batch update performanc e

2008-08-29 Terurut Topik Tjong, Andreas
Apa pengaruhnya kalo commit size-nya digedein? Apa bisa mempercepat proses spoon? Udah 2 jam baru 100.000 nih soalnya Commit size saya set jadi : 50. _ From: jug-indonesia@yahoogroups.com [mailto:[EMAIL PROTECTED] On Behalf Of Feris Thia Sent: Friday, August 29, 2008 12:35 PM

Re: [JUG-Indonesia] Re: Kettle: Improving batch update performanc e

2008-08-29 Terurut Topik Feris Thia
Wow... lambat banget Hm, mempercepat proses Spoon adalah mengerti semua tentang strategi I/O secara general termasuk di dalamnya network latency, efisiensi batch update di SQL, cost untuk koneksi (dimana terkenal Oracle itu membuat koneksinya super mahal), dsbnya. Commit size (batch update)

Re: [JUG-Indonesia] Re: Kettle: Improving batch update performanc e

2008-08-29 Terurut Topik Feris Thia
O iya lupa kasih komentar, Commit sizenya kecil banget, kasian atuh... emang datanya per row gede ya ? :( 2008/8/29 Tjong, Andreas [EMAIL PROTECTED] Apa pengaruhnya kalo commit size-nya digedein? Apa bisa mempercepat proses spoon? Udah 2 jam baru 100.000 nih soalnya Commit

RE: [JUG-Indonesia] Re: Kettle: Improving batch update performanc e

2008-08-29 Terurut Topik Tjong, Andreas
-Indonesia] Re: Kettle: Improving batch update performanc e O iya lupa kasih komentar, Commit sizenya kecil banget, kasian atuh... emang datanya per row gede ya ? :( 2008/8/29 Tjong, Andreas andreas.tjong@ mailto:[EMAIL PROTECTED] aig.com Apa pengaruhnya kalo commit size-nya digedein

Re: [JUG-Indonesia] Re: Kettle: Improving batch update performanc e

2008-08-29 Terurut Topik Feris Thia
Hi Andreas, Ada beberapa skenario yang saya pikirkan Bottlenek di transfer paket antar jaringan, ini sudah susah banget ya di-optimize karena terkendala bandwidth. I/O share lagi ga ya antar input step dan output step ? Ok, tapi gapapa... yang mungkin bisa dilakukan adalah kalau tetap Spoon

Re: [JUG-Indonesia] Re: Kettle: Improving batch update performanc e

2008-08-29 Terurut Topik Feris Thia
Sori gambarnya kekecilan, harusnya yang ini : http://lh4.ggpht.com/feristhia.phi/SLfo6sbOTII/Abo/ECJ9lljqVog/s800/kettle_profiler.png 2008/8/29 Feris Thia [EMAIL PROTECTED] Hi Andreas, Ada beberapa skenario yang saya pikirkan Bottlenek di transfer paket antar jaringan, ini