๐งฑ Proxmox VE ไผๆฅญ้จ็ฝฒ่ๅ:ๅข้、ๅฒๅญ、ๅไปฝ、็ถฒ่ทฏๅ จๆนไฝๆๅ
Proxmox VE(PVE)้ๆผธๆ็บไผๆฅญ่ๆ่กๅ้้จ็ฝฒ่ๆฌๅๅนณๅฐ็ไธปๅ้ธๆ,ๅๅ ๅพ็ฐกๅฎ: ้ซๅฏ้ ๆง、ๆฏๆดๅค็จฎๅฒๅญๆนๅผ、ๅฝๆง็ๅข้ๆถๆง、ๆดๅๅผๅไปฝ PBS、ๅฎๆด API ่ CLI、่ชๅๅๅๅ,่ไธๆฏ้ๆบ、ๅ ่ฒป(ไป่ฒปๅ ๅทฎๅจไผๆฅญ่จ้ฑ)。
ๆฌ็ฏ็บ็พ็ง็ดๆทฑๅบฆๆๅ,ๆถต่ๅข้、ๅฒๅญ、Ceph、ZFS、PBS、vzdump、็ถฒ่ทฏ、VLAN、Bonding、ๆไฝณๅฏฆๅ… ๆฏ 2025 ๅนดๆๅฎๆด็ Proxmox ไผๆฅญ้จ็ฝฒ่ๅ。
๐ ๅ งๅฎนๆถๆง็ธฝ่ฆฝ
๐งฑ Proxmox VE ไผๆฅญ้จ็ฝฒ่ๅ(ๅฎๆดๅฐๅ) -------------------------------------- 1. ๅข้(Cluster) ├─ Quorum / Corosync ├─ HA(High Availability) └─ Node Failover 2. ๅฒๅญ(Storage) ├─ Ceph ๅๆฃๅผๅฒๅญ(ไผๆฅญ้ฆ้ธ) ├─ ZFS(ๆฌๅฐ้ซๅฏ้ ) ├─ NFS / iSCSI(ๆขๆ SAN/NAS) └─ LVM / LVM-Thin 3. ๅไปฝ(Backup) ├─ Proxmox Backup Server(PBS) ├─ vzdump ๅไปฝ็ญ็ฅ └─ ๅฟซ็ ง / Incremental / Prune 4. ็ถฒ่ทฏ(Networking) ├─ Linux Bridge(vmbr0) ├─ Bonding(LACP) ├─ VLAN / Trunk ├─ MTU / Jumbo Frame └─ Storage Network / Cluster Network ๅ้ข -------------------------------------- ๅปบ่ญฐๆถๆง:ไธ็ถฒๅ้ข + Ceph ไธ็ฏ้ป + PBS
๐ ไธ、ๅข้ๆถๆง(Cluster Architecture)
1. Proxmox Cluster ๅฟ ๅๆฆๅฟต
Proxmox ็ๅข้ๅบๆผ:
- Corosync:่ฒ ่ฒฌๆๅก็ฎก็、Quorum ่จ็ฎ
- PMXCFS:ๅๆฃๅผ่จญๅฎๆช็ณป็ตฑ
- HA Manager:็ฏ้ปๆ ้่ชๅๅๆ
๐ ๆไฝณๅฏฆๅ:
- ๆๅฐไธๅฐ Node(้ฟๅ Quorum=2 ็กๆณ้ไฝ)
- Cluster Network ่ Storage Network ไธๅฎ่ฆๅ้
- ้ฟๅ ไฝฟ็จ Wi-Fi、VLAN-only、ๅฎ NIC ้ฒ่กๅข้้่จ
2. Cluster ASCII ๆถๆงๅ
Proxmox VE Cluster(3 Nodes) ----------------------------------------------------- | Node1 (10.10.1.11) | Node2 (10.10.1.12) | Node3 (10.10.1.13) |---------------------|--------------------|--------------------- | PVE | PVE | PVE | Corosync | Corosync | Corosync | VM/CT | VM/CT | VM/CT ----------------------------------------------------- Quorum:ๅฟ ้ ≥2 ๆ่ฝ็ถญๆๅข้ๆญฃๅธธ้ไฝ Cluster Network:10.10.1.0/24(็จ็ซ VLAN ๅปบ่ญฐ)
3. HA ้ไฝๆนๅผ(High Availability)
Proxmox HA ไพ้ :
- Watchdog(็กฌ้ซ้ฉ ๅ)
- PMXCFS Locking
- DRBD ๆ Ceph ๅ ฑไบซๅฒๅญ
่ฅไฝฟ็จ Ceph → ๆ ้ๅๆ้ๅบฆๆๅฟซ ่ฅ็จ ZFS ๆฌๅฐ → ๅฟ ้ ไฝฟ็จ migrate+replicate ๆ่ฝ HA
๐ ไบ、ไผๆฅญๅฒๅญๆถๆง(Storage Architecture)
1. ๅฒๅญ้ธๆๆๅ(2025 ๆๆฐๅปบ่ญฐ)
| ๅฒๅญ้กๅ | ้ฉ็จๅ ดๆฏ | ๅช้ป | ็ผบ้ป |
|---|---|---|---|
| Ceph | ไผๆฅญ、HA、ๅๆฃๅผ | ้ซๅฏ้ 、Self-healing、็กๅฎ้ป | ้่ฆ่ณๅฐ 3 ็ฏ้ป + SSD + 10GbE |
| ZFS | ๆฌๅฐ้ซๅฏ้ | ๅฟซ็ งๅฟซ、ๆชๆก็ณป็ตฑ็ฉฉๅฎ | ๅคง้ RAM、ๅฎ็ฏ้ป |
| NFS/iSCSI | ๆขๆ NAS/SAN | ๅฎนๆๆดๅ | ๅค้จ NAS ๅฃๅๅคง |
2. Ceph ๆถๆง(ๅผท็ๆจ่ฆ็ตฆไผๆฅญ)
Ceph RBD ๅๆฃๅผๆถๆง(3 MON + 3 OSD) ------------------------------------------------------- | Node1 | Node2 | Node3 | MON/OSD | MON/OSD | MON/OSD ------------------------------------------------------- Ceph RBD → ้้็ถฒ่ทฏๆไพไธ่ดๅๅกๅฒๅญ ็นๆง: - ๅๆฃๅผ - ้ซๅฏ้ (่ชๅ้ๅปบ) - ่ท PVE ๅฎ็พๆดๅ
ๅฎ่ฃๅปบ่ญฐ:
- ๆฏ็ฏ้ป่ณๅฐ:NVMe(DB/WAL)+ HDD/SSD OSD
- Network:10GbE(ๅฒๅญ็ถฒ่ทฏ)
- ๅ้ข Public Network / Cluster Network
3. ZFS ๆถๆง(ๅฎๆฉๅผท、้ๅบฆๅฟซ)
ZFS ้ฉๅ:
- ๆฌๅฐ VM
- ๅฟซ็ งๅคง้ไฝฟ็จ่
- ๆ HBA(้ RAID ๅก)
ๅปบ่ญฐ:
- ECC RAM
- RaidZ-1 / RaidZ-2 / Mirror
- ้ฟๅ RaidZ-3(ๆ่ฝๅทฎ)
๐ ไธ、ๅไปฝๆถๆง(Proxmox Backup)
1. Proxmox Backup Server(PBS)
PBS ๆฏ Proxmox ๅฎๆน็ dedup ๅไปฝ่งฃๆฑบๆนๆก,ๆไฝณ็นๆงๆ:
- Dedup ๅคงๅน ๆธๅฐๅฎน้
- Incremental ่ถ ๅฟซ
- ZSTD ๅฃ็ธฎ+้ฉ่ญ
- ๆฅตไฝ CPU ไฝฟ็จ็
ๆจ่ฆ PBS ๆถๆง:
PBS(็จ็ซไธปๆฉ / VM) --------------------------------------- Storage:ZFS RAIDZ-1 ๆ RAIDZ-2 Network:10GbE Retention:ๆฏๆฅ / ๆฏ้ฑ / ๆฏๆ
2. vzdump ็ญ็ฅ(ๆฒๆ PBS ็ๆฟไปฃๆนๆก)
ๅปบ่ญฐๆ็จ:
- ๆฏๆฅ:ๅทฎ็ฐๅไปฝ
- ๆฏ้ฑ:ๅฎๆดๅไปฝ
- ไฟ็:14~60 ๅคฉ
๐ ๅ、็ถฒ่ทฏๆถๆง(Network Design)
1. ไผๆฅญ PVE ๆไฝณ็ถฒ่ทฏๆๆจธ(ๅปบ่ญฐ)
Proxmox VE ไผๆฅญ็็ถฒ่ทฏๆๆจธ(ๅปบ่ญฐ) ----------------------------------------------------- NIC1:Management(vmbr0) NIC2:VM Network(Trunk + VLAN) NIC3:Ceph Public Network(10GbE) NIC4:Ceph Cluster Network(10GbE) NIC5:Bonding(LACP)ๅฐๅค ----------------------------------------------------- ๅฎๅ จๅ้ข → ๆ่ฝๆ้ซ、ๅปถ้ฒๆไฝ
2. VLAN ่จญ่จ
- vmbr0:็ฎก็ๅนณ้ข(ไธ Trunk)
- vmbr1:VM ๅฐๅค VLAN(Trunk)
- vmbr_ceph:Ceph ๅฐ็ถฒ
3. Bonding(LACP)ๅปบ่ญฐ:
mode=802.3ad(LACP) balance=layer3+4
๐ ไบ、ไผๆฅญ็ดๆไฝณๅฏฆๅๆธ ๅฎ(2025)
- Cluster / Ceph / Storage ็ถฒ่ทฏๅฟ ้ ๅ้ข
- ๆฏ็ฏ้ป่ณๅฐ 2 ้ก SSD(Ceph DB/WAL)
- PBS ไธ่ PVE ๆพๅจๅไธปๆฉ
- ๅไปฝ่ณๅฐ 3-2-1 ๅๅ
- ไฝฟ็จ LACP + VLAN Trunk
- ้ฟๅ RAID ๅก(ZFS ็กๆณๅชๅ)
๐ ็ต่ช
้ไปฝ「Proxmox VE ไผๆฅญ้จ็ฝฒ่ๅ」ๆถต่ๅข้、Ceph、ZFS、PBS、ๅไปฝ、 VLAN、Bonding ่ไผๆฅญ็ดๆไฝณๅฏฆๅ,ๆฏ 2025 ๅนดๆๅฎๆด็ PVE ๅปบ็ฝฎๅ่ๆๅ。
่ฅไฝ ่ฆๆๆไพ「ไธ่ผ็(PDF、PPT、Word)」ไนๅฏไปฅๅๅฉ่ฝๆ。
๐ฌ ็ไธไฝ ็่ง้ป,่ฎ่จ่ซๆด็ฒพๅฝฉ!
ๅฆๆไฝ ๅจ Proxmox ้จ็ฝฒไธ้ๅฐไปปไฝ็ถ้ ธ、ๆถๆง้ธๆ、ๅข้่ฆๅ、 Ceph ๆง่ฝๅ้ก、ๅไปฝๅฐ้ฃ,้ฝๆญก่ฟ็่จไธ่ตทไบคๆต。
ๆฒๆ็่จ:
ๅผต่ฒผ็่จ