The latest articles on DEV Community by CodeBanBan (@codebanban). https://dev.to/codebanban https://media2.dev.to/dynamic/image/width=90,height=90,fit=cover,gravity=auto,format=auto/https:%2F%2Fdev-to-uploads.s3.amazonaws.com%2Fuploads%2Fuser%2Fprofile_image%2F160551%2Fa133f441-cf0f-40d9-a7d7-71568a155971.jpeg https://dev.to/codebanban en CodeBanBan Fri, 04 Aug 2023 09:41:05 +0000 https://dev.to/codebanban/banthuekkaarprab-performance-aihrabb-code-name-peppermint-2-yaayaip-logger-database-1jlg https://dev.to/codebanban/banthuekkaarprab-performance-aihrabb-code-name-peppermint-2-yaayaip-logger-database-1jlg <p><a href="https://dev.to/codebanban/banthuekkaarprab-performance-aihrabb-code-name-peppermint-1-8g8">Part 1 Upgrade Server Spec</a></p> <p>หลังจาก Review ระบบปัจจุบันกันแล้ว<br> จึงตัดสินใจปรับ infra ของตัวระบบ<br> เพื่อให้รองรับการ scale ที่ง่ายขึ้น</p> <p>ระบบตอนแรก Design แบบ simple เลย คือ ตัวแอพ และ database อยู่ในเครื่องเดียวกันเลย<br> จึงทำให้เครื่องทำงานค่อนข้างหนัก<br> <a href="https://res.cloudinary.com/practicaldev/image/fetch/s--5MUMIwsN--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_800/https://dev-to-uploads.s3.amazonaws.com/uploads/articles/ng86nvoj068kh0qxfia8.jpg" class="article-body-image-wrapper"><img src="https://res.cloudinary.com/practicaldev/image/fetch/s--5MUMIwsN--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_800/https://dev-to-uploads.s3.amazonaws.com/uploads/articles/ng86nvoj068kh0qxfia8.jpg" alt="Image description" width="511" height="315"></a></p> <p>ทางทีมจึงตัดสินใจ แยกส่วน database ออกไปอีกเครื่อง<br> เพื่อช่วยกระจายการทำงานของแต่ละส่วน<br> จากที่คุยกัน ทีมตัดสินใจแยกเครื่อง database ออกไปอีก 2 ส่วน คือ</p> <ol> <li>Main DB ซึ่งเบื้องต้นจะทำ Replicate master/slave</li> <li>Logger DB ไว้เก็บ activity log ทุกๆการเรียก api</li> </ol> <p>แต่การย้ายทั้งหมดเป็นเรื่องค่อนข้างยาก จึงค่อยๆ ทยอยทำเป็นส่วนที่กระทบน้อยก่อน<br> ใน Part นี้ จึงเลือกย้าย Acitivity log ไปเครื่อง Logger DB ก่อน<br> ฝั่ง server จึงปรับออกมาเป็นตามนี้<br> <a href="https://res.cloudinary.com/practicaldev/image/fetch/s--CHwmQHFL--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_800/https://dev-to-uploads.s3.amazonaws.com/uploads/articles/4cqms2kbin7gjy7u9ax0.jpg" class="article-body-image-wrapper"><img src="https://res.cloudinary.com/practicaldev/image/fetch/s--CHwmQHFL--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_800/https://dev-to-uploads.s3.amazonaws.com/uploads/articles/4cqms2kbin7gjy7u9ax0.jpg" alt="Image description" width="800" height="325"></a></p> <p>หลังจากย้าย Activity Log ไปอีกเครื่องแล้ว<br> จะเห็นว่า CPU ลดลงมาอยู่ที่ 30%-35% ซึ่งทำให้เครื่องเสถียรขึ้นพอสมควร<br> <a href="https://res.cloudinary.com/practicaldev/image/fetch/s--VXzjUNY6--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_800/https://dev-to-uploads.s3.amazonaws.com/uploads/articles/vtq367pk5dn9kqtybjx0.jpg" class="article-body-image-wrapper"><img src="https://res.cloudinary.com/practicaldev/image/fetch/s--VXzjUNY6--/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_800/https://dev-to-uploads.s3.amazonaws.com/uploads/articles/vtq367pk5dn9kqtybjx0.jpg" alt="Image description" width="749" height="258"></a></p> devjournal database performance CodeBanBan Wed, 26 Jul 2023 09:58:42 +0000 https://dev.to/codebanban/banthuekkaarprab-performance-aihrabb-code-name-peppermint-1-8g8 https://dev.to/codebanban/banthuekkaarprab-performance-aihrabb-code-name-peppermint-1-8g8 <p>เกี่ยวกับ Project Code Name: <strong>Peppermint</strong></p> <ul> <li>โปรเจครัน production มาได้ประมาณ 5 ปี</li> <li>เริ่มจากที่คิดกันว่าจะเป็น product เล็กๆ คงมี User ใช้งานไม่เท่าไหร่</li> <li>ทีมเริ่มต้นมี 4 คน ใช้เวลาประมาณ 6 เดือน ปล่อย release แรก</li> <li>อีก 6 เดือนถัดมา เป็นการปรับแต่งตาม feedback ลูกค้า</li> <li>หลังจาก project เริ่มนิ่ง ทีมปรับเหลือคนมาดูแล แค่ 1 - 2 คน</li> <li>ด้วยความที่ต้องการเร่งให้ release เร็วที่สุด และประเมินแล้วว่ามี user ไม่น่าจะเยอะ ทางทีมเลยเลือกที่จะเขียนโดยไม่ได้คำนึงถึง performance ของระบบ เช่น การวนลูป Query Data</li> <li>ช่วงแรก ก็ทำงานได้เร็วปกติ</li> <li>แต่ช่วง 2 ปีหลัง เริ่มมีลูกค้าสนใจมาใช้งานเพ่ิมขึ้นต่อเนื่อง</li> </ul> <h2> จนกระทั้งช่วงปีใหม่ ของปี 2023 </h2> <ul> <li>ระบบเริ่มทำงานได้ช้ามาก เนื่องจากมี user เพิ่มขึ้น</li> <li>ทางทีมจึงทำการปรับ performance เบื้องต้น คือ optimize SQL บางคำสั่ง และทำ Index ให้กับ Table ที่ยังไม่ได้ทำไว้</li> <li>ผลลัพธ์ออกมาได้ผล คือ <code>ค่อนข้างพอไหว</code> </li> <li>แต่เนื่องจากยังมี product และ feature อื่นอยู่ในคิว ค่อนข้างเยอะ</li> <li>ทางทีมจึงตัดสินใจว่า ปล่อยไปก่อน น่าจะรับไหวได้อีกสักปี</li> </ul> <h2> June 2023 </h2> <ul> <li>ช่วงพีคของวัน ระบบอืดหนักมาก user บางคน ไม่สามารถทำรายการได้เลย</li> <li>ทางคนที่ช่วยดู server แจ้งว่า CPU average usage อยู่ที่ 95%++</li> <li>สรุปการแก้ไขเบื้องต้น คือ <code>Upgrade เครื่องโดยเพิ่ม CPU และ Ram เข้าไปก่อน</code> </li> <li>ผลการแก้ไข <code>ช่วยให้ CPU ลดลงมาอยู่ที่ประมาณ 45%</code> </li> <li>ทางทีมจึงเริ่มต้องลงมาปรับ performance อย่างจริงๆจัง เนื่องจากปริมาณ user ที่เพิ่มขึ้นต่อเนื่อง และมีตัวแทนมาเอา Product ไปขายแบบ white label</li> </ul> <p><a href="https://res.cloudinary.com/practicaldev/image/fetch/s--ZUnPFMt---/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_800/https://dev-to-uploads.s3.amazonaws.com/uploads/articles/fr7jn4yn15iq7neybyfd.jpg" class="article-body-image-wrapper"><img src="https://res.cloudinary.com/practicaldev/image/fetch/s--ZUnPFMt---/c_limit%2Cf_auto%2Cfl_progressive%2Cq_auto%2Cw_800/https://dev-to-uploads.s3.amazonaws.com/uploads/articles/fr7jn4yn15iq7neybyfd.jpg" alt="Image description" width="800" height="63"></a></p> <blockquote> <p>จากรูปจะเห็นว่า CPU ลดลงมาอย่างชัดเจน</p> </blockquote> devjournal database performance CodeBanBan Mon, 19 Jun 2023 10:11:08 +0000 https://dev.to/codebanban/banthuekkaaryaay-project-cchaak-gitlab-aip-bitbucket-phase1-2c4j https://dev.to/codebanban/banthuekkaaryaay-project-cchaak-gitlab-aip-bitbucket-phase1-2c4j <p>เริ่มจาก GitLab เริ่มบังคับให้มี member ได้แค่ 5 คน<br> แต่ package จ่ายเงินของ GitLab ตอนนี้เปลี่ยนเป็น Premium<br> ซึ่งราคาคนละ $29 / month<br> ซึ่งราคาแรงไปสำหรับทีม และ Product ที่ scale ยังเล็กอยู่<br> เลยตัดสินใจย้ายไปที่ Bitbucket กัน</p> <p>แต่เนื่องจากตัว CI/CD ทั้งหมดเขียนอยู่บน GitLab<br> ถ้าจะเขียนตัว CI/CD ใหม่หมดทุกโปรเจคให้มาเป็นของ Bitbucket<br> น่าจะต้องใช้เวลานานมาก<br> เลยตัดสินใจแบ่งเป็น 2 เฟส คือ<br> <strong>Phase1</strong> &gt; ใช้ Bitbucket เก็บไฟล์เท่านั้น เมื่อมีการ push ก็ให้ตัว Bitbucket ทำการ push ต่อไปที่ GitLab<br> แล้วทาง GitLab ก็จะรัน CI/CD ต่อได้เลย<br> <code>วิธีนี้ทำให้ไม่ต้องเขียน CI/CD ใหม่</code><br> <strong>Phase2</strong> &gt; คือ ค่อยๆ กลับมาเขียนตัว CI/CD ให้เป็นของ Bitbucket</p> <p><strong>ข้อเสีย</strong><br> จะแสดงชื่อคน push เป็นคนเดียวกันทั้งหมด<br> ถ้าจะดูชื่อคน commit จริงๆ ต้องกดเข้าไปดูใน commit อีกที</p> <p><strong>ขั้นตอน</strong></p> <ul> <li>สร้าง ssh key เพื่อให้ Bitbucket push code ไปที่ GitLab ได้ </li> </ul> <p><code>ssh-keygen -t rsa -b 4096 -N '' -f my_ssh_key</code><br> </p> <ul> <li>Add ssh key ใน GitLab Profile ของเรา</li> <li>Add ssh key ใน Project ที่ Bitbucket ของเรา</li> <li>Add <code>bitbucket_pipelines.yml</code> ใน project ของเรา </li> </ul> <div class="highlight js-code-highlight"> <pre class="highlight plaintext"><code>pipelines: branches: '*': - step: script: - git remote add gitlab [Repo URL ของเรา] - git push gitlab $BITBUCKET_BRANCH tags: '*': - step: script: - git remote add gitlab [Repo URL ของเรา] - git push gitlab $BITBUCKET_TAG </code></pre> </div> devjournal management