DOMUtty xbd0 dk0 xbd1 dk1 CPU tin tout KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s us ni sy in id 0 45 15.33 0 0.006 15.33 0 0.006 29.09 38 1.079 29.09 38 1.079 0 0 0 0 100 0 284 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 198 0.000 0 0.000 0.000 0 0.000 32.00 6 0.183 32.00 6 0.183 0 0 0 0 100 0 132 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 119 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 108 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 110 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 105 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 117 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 106 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 176 0.000 0 0.000 0.000 0 0.000 32.00 2 0.069 32.00 2 0.069 0 0 0 0 100 0 206 0.000 0 0.000 0.000 0 0.000 32.00 42 1.301 32.00 42 1.301 0 0 0 0 100 0 312 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 141 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 240 0.000 0 0.000 0.000 0 0.000 32.00 16 0.498 32.00 16 0.498 0 0 0 0 100 0 145 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 227 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 139 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 284 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 266 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 343 0.000 0 0.000 0.000 0 0.000 32.00 5 0.158 32.00 5 0.158 0 0 0 0 100 0 181 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 246 0.000 0 0.000 0.000 0 0.000 32.00 14 0.442 32.00 14 0.442 0 0 0 0 100 0 142 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 192 0.000 0 0.000 0.000 0 0.000 32.00 10 0.299 32.00 10 0.299 0 0 0 0 100 0 133 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 218 0.000 0 0.000 0.000 0 0.000 32.00 44 1.385 32.00 44 1.385 0 0 0 0 100 0 139 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 189 0.000 0 0.000 0.000 0 0.000 32.00 38 1.193 32.00 38 1.193 0 0 0 0 100 0 211 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 348 9.368 0 0.001 9.368 0 0.001 32.00 107 3.337 32.00 107 3.337 0 0 1 0 99 0 218 0.000 0 0.000 0.000 0 0.000 32.00 45 1.405 32.00 45 1.405 0 0 0 0 100
DOM0 Toblerone# iostat 5tty ld0 ld1 ld2 dk0 dk1 dk2 dk3 vnd0 CPU tin tout KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s KB/t t/s MB/s us ni sy in id 0 5 8.398 3 0.028 16.79 0 0.007 35.95 33 1.159 35.96 33 1.159 16.80 0 0.007 8.398 3 0.028 0.500 0 0.000 16.42 0 0.005 0 0 0 1 99 0 204 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 32.72 5 0.147 32.72 5 0.147 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 1 0 99 0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 32.00 0 0.000 0.000 0 0.000 33.19 6 0.183 33.19 6 0.183 0.000 0 0.000 32.00 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 1 0 99 0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 34.16 2 0.069 34.16 2 0.069 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 33.86 39 1.301 33.86 39 1.301 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 1 0 99 0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 32.00 0 0.000 0.000 0 0.000 34.57 15 0.498 34.57 15 0.498 0.000 0 0.000 32.00 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 1 0 99 0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 32.00 0 0.000 0.000 0 0.000 34.25 5 0.158 34.25 5 0.158 0.000 0 0.000 32.00 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 34.77 13 0.442 34.77 13 0.442 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 28.00 0 0.000 0.000 0 0.000 33.44 9 0.299 33.44 9 0.299 0.000 0 0.000 28.00 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 1 0 99 0 68 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 32.00 3 0.000 0.000 0 0.000 34.18 42 1.385 34.18 42 1.385 0.000 0 0.000 32.00 3 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 18.74 1 0.023 0.000 0 0.000 34.23 36 1.193 34.23 36 1.193 0.000 0 0.000 18.74 1 0.023 0.000 0 0.000 0.000 0 0.000 0 0 0 0 99 0 68 18.00 0 0.000 9.368 0 0.000 33.71 101 3.337 33.71 101 3.337 9.368 0 0.000 18.00 0 0.000 0.000 0 0.000 9.368 0 0.000 0 0 1 0 99 0 68 32.00 3 0.000 0.000 0 0.000 34.73 41 1.405 34.73 41 1.405 0.000 0 0.000 32.00 3 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100 0 69 4.000 0 0.000 0.000 0 0.000 33.99 9 0.293 33.99 9 0.293 0.000 0 0.000 4.000 0 0.000 0.000 0 0.000 0.000 0 0.000 0 0 0 0 100
To me it looks more like locking issues or xen scheduling features. It makes progress, but very very slowly. Frank On 03/10/20 18:14, Manuel Bouyer wrote:
On Tue, Mar 10, 2020 at 04:20:22PM +0100, Frank Kardel wrote:This is my first XEN setup so I may have misconfigured something: I have a 4G DOM0 on a 512G System with a EPYC 7302P 16-Core Processor. On that I configured a 400G DOMU with 12 vcpus. like this: name = "system" kernel = "/netbsd-XEN3_DOMU.gz" memory = 400000 cpus="all" vcpus=4 maxvcpus=12 vif = [ 'mac=aa:00:00:d1:00:01,bridge=bridge0', 'mac=aa:00:00:d1:00:02,bridge=bridge1' ] disk = [ 'file:/data0/xen-roots/root-Alpine-system.img,0x0,w', 'phy:/dev/wedges/data1,0x1,w' ] On that I run postgresql 11 attempting to load a 1TB database. Usually this workload keeps a machine continually busy cpu/io-wise. I was expecting that I/O via the xen backend would be the bottleneck. Instead DOM0 is only seldom busy for IO. DOMU is crawling along sleeping at all sorts of places:What does iostat 5 show about the disks, in the dom0 and domU ?