Skip to content
Học Công nghệ Thông tin thực chiếnHọc Công nghệ Thông tin thực chiến
  • KHÓA HỌC
  • KIẾN THỨC
  • KÊNH YOUTUBE
  • NGƯỜI SÁNG LẬP
Học Công nghệ Thông tin thực chiếnHọc Công nghệ Thông tin thực chiến
  • KHÓA HỌC
  • KIẾN THỨC
  • KÊNH YOUTUBE
  • NGƯỜI SÁNG LẬP
Cơ sở dữ liệu thực chiến

Stress test đĩa cứng SSD chuẩn NVMe khi tạo 1000 tỷ dòng dữ liệu

  • 03 Jan, 2025
  • Com 0

Sau khi tối ưu AlmaLinux 9 và tối ưu MySQL hết mức, bạn sẽ chạy proc ghithoigian để ghi 1000 tỷ dòng dữ liệu cho lẹ lẹ cho đỡ tốn điện, tốn thời gian, mệt sức.

Trong lúc chạy, tôi có đếm coi được bao nhiêu dòng rồi thì mất khá lâu để có kết quả của câu SELECT hơn 100 triệu dòng dữ liệu.

Nhìn lại máy ảo AlmaLinux 9 chạy trên VMware Workstation thấy có thông báo này:

[   32.525843] systemd-rc-local-generator[1099]: /etc/rc.d/rc.local is not marked executable, skipping.
[   32.816716] systemd-rc-local-generator[1194]: /etc/rc.d/rc.local is not marked executable, skipping.
[  662.402509] nvme nvme0: I/O 160 QID 4 timeout, completion polled
[  662.402523] nvme nvme0: I/O 224 QID 5 timeout, completion polled
[  692.614248] nvme nvme0: I/O 64 QID 3 timeout, completion polled
[  692.614281] nvme nvme0: I/O 64 QID 5 timeout, completion polled
[  726.405402] nvme nvme0: I/O 160 QID 2 timeout, completion polled
[  726.405425] nvme nvme0: I/O 224 QID 8 timeout, completion polled
[  756.609619] nvme nvme0: I/O 32 QID 4 timeout, completion polled
[  756.609640] nvme nvme0: I/O 224 QID 5 timeout, completion polled
[  756.696691] nvme nvme0: I/O 192 QID 3 timeout, completion polled
[  786.817438] nvme nvme0: I/O 96 QID 3 timeout, completion polled
[ 1291.646842] nvme nvme0: I/O 128 QID 4 timeout, completion polled
[ 1322.365841] nvme nvme0: I/O 32 QID 7 timeout, completion polled
[ 1322.365858] nvme nvme0: I/O 128 QID 8 timeout, completion polled
[ 1322.399287] nvme nvme0: I/O 128 QID 3 timeout, completion polled
[ 1352.573997] nvme nvme0: I/O 160 QID 1 timeout, completion polled
[ 1352.583032] nvme nvme0: I/O 224 QID 7 timeout, completion polled
[ 1352.604625] nvme nvme0: I/O 64 QID 2 timeout, completion polled
[ 1383.293815] nvme nvme0: I/O 160 QID 4 timeout, completion polled
[ 1413.501584] nvme nvme0: I/O 128 QID 3 timeout, completion polled
[ 1413.621736] nvme nvme0: I/O 160 QID 4 timeout, completion polled
[ 1444.224320] nvme nvme0: I/O 32 QID 1 timeout, completion polled
[ 1474.429489] nvme nvme0: I/O 160 QID 3 timeout, completion polled
[ 1474.429556] nvme nvme0: I/O 96 QID 4 timeout, completion polled
[ 1505.148996] nvme nvme0: I/O 192 QID 8 timeout, completion polled
[ 1537.916759] nvme nvme0: I/O 160 QID 2 timeout, completion polled
[ 1540.988603] nvme nvme0: I/O 224 QID 5 timeout, completion polled
[ 1571.197053] nvme nvme0: I/O 160 QID 4 timeout, completion polled
[ 1571.197094] nvme nvme0: I/O 224 QID 8 timeout, completion polled
[ 1601.404710] nvme nvme0: I/O 32 QID 4 timeout, completion polled
[ 1601.404725] nvme nvme0: I/O 128 QID 7 timeout, completion polled
[ 1663.872407] nvme nvme0: I/O 192 QID 2 timeout, completion polled
[ 1664.348934] nvme nvme0: I/O 224 QID 1 timeout, completion polled
[ 1694.587286] nvme nvme0: I/O 0 QID 4 timeout, completion polled
[ 1694.587328] nvme nvme0: I/O 192 QID 5 timeout, completion polled
[ 1725.308637] nvme nvme0: I/O 32 QID 4 timeout, completion polled
[ 1725.308655] nvme nvme0: I/O 96 QID 7 timeout, completion polled
[ 1755.515564] nvme nvme0: I/O 224 QID 1 timeout, completion polled
[ 1755.515603] nvme nvme0: I/O 64 QID 3 timeout, completion polled
[ 1755.515636] nvme nvme0: I/O 224 QID 5 timeout, completion polled

Tôi để ý chỉ khi xài câu lệnh SELECT đếm số dòng quá nhiều mới thấy lỗi nvme nvme0: I/O QID timeout, completion polled.

Đĩa cứng của máy ảo là SSD chuẩn NVMe gắn trên khe PCIe nhanh nhất hiện giờ. Có vẻ đây không phải là lỗi mà chỉ là thông báo mà thôi.

Bạn nào biết thông tin gì thêm nhớ cho tôi biết để thêm vào bài viết này, cảm ơn các bạn.

Tags:
NVMe completion polledNVMe IO QID timeoutPerformance testSSD NVMeTối ưu cơ sở dữ liệu MySQLTối ưu Linux serverTối ưu MySQL
Share on:
Tối ưu cơ sở dữ liệu MySQL từ việc tạo ra 1000 tỷ dòng dữ liệu
Cơ sở dữ liệu MySQL chứa 1000 tỷ dòng dữ liệu nặng bao nhiêu GB?

Search

Categories

  • An toàn thông tin thực chiến (10)
  • Cơ sở dữ liệu thực chiến (6)
  • Công nghệ ảo hóa máy chủ (1)
  • Công nghệ lõi Công nghệ Thông tin (1)
  • Công nghệ lõi Linux (8)
  • Công nghệ phần mềm thực chiến (7)
  • Công nghệ Thông tin thực chiến (1)
  • Đại số tổ hợp (1)
  • DevOps thực chiến (2)
  • Điện toán đám mây thực chiến (3)
  • Docker container (3)
  • Giải tích tổ hợp (1)
  • Hệ điều hành Linux thực chiến (6)
  • Học công nghệ thông tin thực chiến (1)
  • Lập trình an toàn thông tin (1)
  • Lập trình thực chiến (1)
  • Linux thực chiến (2)
  • Olympic Toán 30 tháng 4 (1)
  • Oracle DBA (11)
  • Podman container (3)
  • Tích hợp hệ thống công nghệ thông tin thực chiến (1)

Tags

AlmaLinux 8 (2) Anaconda installer (3) An toàn thông tin thực chiến (2) Biên dịch Linux kernel (4) Biên dịch nhân Linux (4) CentOS 5 (2) Container-Optimized OS (2) Container Operating System (4) Container OS (4) Cài Oracle 21c (3) Công nghệ lõi Linux (3) Công nghệ phần mềm thực chiến (3) Fedora CoreOS (3) Giao thức SMB (2) Hệ điều hành Linux thực chiến (4) Học an toàn thông tin (3) Linux hugepages (3) Linux kernel (3) Linux kernel module (2) Linux PAM (3) Linux security (5) MySQL database developer (3) MySQL DBA (3) Máy ảo Linux (2) netplan (3) Oracle 21c (2) Oracle database 12c (2) Oracle dbca (2) Oracle OUI (5) Oracle Universal Installer (5) Quản trị MySQL (3) Samba Active Directory Domain Controller (4) Samba AD DC (5) Samba AD Domain Controller (5) SMB protocol (3) Thuật toán băm mật khẩu (4) Thuật toán SHA512 (3) Thuật toán yescrypt (3) Tối ưu cơ sở dữ liệu MySQL (4) Tối ưu MySQL (4) Ubuntu netplan (3) Ubuntu netplan yaml (2) vmlinuz (3) VMware Workstation (2) Điện toán đám mây (3)

Học Công nghệ Thông tin chuyên sâu
Tiết kiệm tiền bạc, thời gian, công sức cho người học
© Copyright 2024 CâyTreOS – Học IT thế kỉ 21

Học Công nghệ Thông tin thực chiếnHọc Công nghệ Thông tin thực chiến