Skip to content

Conversation

@eldenmoon
Copy link
Member

Proposed changes

Issue Number: close #xxx

Further comments

If this is a relatively large or complex change, kick off the discussion at dev@doris.apache.org by explaining why you chose the solution you did and what alternatives you considered, etc...

@doris-robot
Copy link

Thank you for your contribution to Apache Doris.
Don't know what should be done next? See How to process your PR

Since 2024-03-18, the Document has been moved to doris-website.
See Doris Document.

@eldenmoon
Copy link
Member Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 41792 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 7664601bb40beb14c045aecb2675aa6e5e093135, data reload: false

------ Round 1 ----------------------------------
q1	17606	4349	4240	4240
q2	2006	185	194	185
q3	10477	1231	1247	1231
q4	10191	806	811	806
q5	7464	2814	2682	2682
q6	221	140	142	140
q7	971	618	617	617
q8	9211	2100	2088	2088
q9	9384	6647	6689	6647
q10	9210	3846	3869	3846
q11	460	263	245	245
q12	491	231	236	231
q13	18081	3200	3182	3182
q14	270	215	239	215
q15	529	477	480	477
q16	526	424	408	408
q17	954	691	646	646
q18	8397	7961	7782	7782
q19	4766	1590	1568	1568
q20	630	303	300	300
q21	5181	3979	4163	3979
q22	360	277	283	277
Total cold run time: 117386 ms
Total hot run time: 41792 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4657	4410	4388	4388
q2	377	276	272	272
q3	3176	2953	2963	2953
q4	1907	1588	1625	1588
q5	5451	5459	5465	5459
q6	222	131	132	131
q7	2186	1781	1838	1781
q8	3248	3373	3392	3373
q9	8598	8606	8710	8606
q10	4046	3729	3805	3729
q11	591	490	484	484
q12	803	595	633	595
q13	16956	3130	3175	3130
q14	294	299	265	265
q15	530	477	487	477
q16	496	445	442	442
q17	1807	1532	1481	1481
q18	7787	7715	7413	7413
q19	1652	1546	1589	1546
q20	1998	1778	1788	1778
q21	12462	4824	4784	4784
q22	573	483	487	483
Total cold run time: 79817 ms
Total hot run time: 55158 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 170944 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 7664601bb40beb14c045aecb2675aa6e5e093135, data reload: false

query1	914	385	372	372
query2	6432	2184	2305	2184
query3	6646	213	210	210
query4	20405	17443	17438	17438
query5	4156	437	417	417
query6	242	152	149	149
query7	4579	295	296	295
query8	242	183	192	183
query9	8707	2376	2369	2369
query10	456	279	287	279
query11	10373	10298	10129	10129
query12	135	92	95	92
query13	1650	367	365	365
query14	10197	7407	6245	6245
query15	211	167	172	167
query16	7740	285	256	256
query17	1737	525	518	518
query18	1894	269	262	262
query19	209	153	158	153
query20	97	84	84	84
query21	191	135	127	127
query22	4289	4115	3876	3876
query23	33514	32988	33032	32988
query24	6608	2856	2813	2813
query25	503	364	361	361
query26	701	150	150	150
query27	1916	328	320	320
query28	3707	2022	2027	2022
query29	839	611	609	609
query30	253	176	173	173
query31	948	770	737	737
query32	85	51	53	51
query33	512	283	274	274
query34	848	477	494	477
query35	718	636	614	614
query36	1062	932	947	932
query37	108	71	78	71
query38	2912	2787	2777	2777
query39	850	796	782	782
query40	202	128	127	127
query41	48	50	49	49
query42	103	96	101	96
query43	575	552	539	539
query44	1086	721	741	721
query45	188	171	159	159
query46	1063	725	734	725
query47	1850	1761	1783	1761
query48	377	300	306	300
query49	777	387	431	387
query50	762	389	384	384
query51	6857	6800	6835	6800
query52	98	89	90	89
query53	352	281	286	281
query54	532	424	418	418
query55	74	80	79	79
query56	262	239	235	235
query57	1113	1053	1034	1034
query58	227	204	222	204
query59	3224	3226	3053	3053
query60	265	283	251	251
query61	90	88	86	86
query62	541	445	453	445
query63	309	288	283	283
query64	3386	1739	1734	1734
query65	3202	3086	3111	3086
query66	794	330	334	330
query67	15214	14853	14970	14853
query68	4506	536	546	536
query69	440	260	263	260
query70	1177	1163	1147	1147
query71	353	270	264	264
query72	7554	5297	4887	4887
query73	722	322	327	322
query74	5980	5625	5634	5625
query75	3265	2620	2637	2620
query76	2208	1012	962	962
query77	382	264	262	262
query78	10103	9735	9664	9664
query79	2408	513	503	503
query80	1093	439	487	439
query81	523	241	239	239
query82	712	91	95	91
query83	249	166	165	165
query84	246	89	83	83
query85	1381	259	257	257
query86	550	306	291	291
query87	3328	3139	3126	3126
query88	4021	2334	2342	2334
query89	494	378	375	375
query90	2058	189	191	189
query91	122	94	97	94
query92	60	49	50	49
query93	2474	519	499	499
query94	1186	189	183	183
query95	416	362	309	309
query96	602	261	265	261
query97	3192	3063	3017	3017
query98	250	207	216	207
query99	1147	868	854	854
Total cold run time: 254359 ms
Total hot run time: 170944 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 30.74 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 7664601bb40beb14c045aecb2675aa6e5e093135, data reload: false

query1	0.04	0.03	0.03
query2	0.07	0.04	0.04
query3	0.23	0.06	0.05
query4	1.67	0.07	0.07
query5	0.48	0.48	0.50
query6	1.13	0.73	0.73
query7	0.02	0.01	0.01
query8	0.04	0.04	0.05
query9	0.53	0.48	0.48
query10	0.53	0.55	0.55
query11	0.16	0.12	0.11
query12	0.14	0.12	0.12
query13	0.59	0.59	0.60
query14	0.75	0.80	0.76
query15	0.82	0.81	0.81
query16	0.36	0.37	0.36
query17	0.98	0.99	0.94
query18	0.20	0.28	0.24
query19	1.78	1.72	1.75
query20	0.01	0.01	0.01
query21	15.49	0.69	0.67
query22	4.77	6.60	2.18
query23	18.30	1.29	1.20
query24	1.41	0.36	0.23
query25	0.16	0.08	0.07
query26	0.26	0.16	0.17
query27	0.08	0.08	0.07
query28	13.32	1.01	0.99
query29	13.20	3.25	3.27
query30	0.25	0.05	0.05
query31	2.88	0.39	0.39
query32	3.28	0.48	0.46
query33	2.91	2.87	2.86
query34	17.12	4.41	4.43
query35	4.51	4.57	4.66
query36	0.64	0.46	0.46
query37	0.18	0.15	0.15
query38	0.14	0.14	0.15
query39	0.04	0.04	0.03
query40	0.16	0.15	0.15
query41	0.09	0.04	0.04
query42	0.05	0.04	0.05
query43	0.04	0.04	0.03
Total cold run time: 109.81 s
Total hot run time: 30.74 s

@eldenmoon
Copy link
Member Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 40265 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 6540d52115117fab1aa7b561ef0bdcb3669a7cac, data reload: false

------ Round 1 ----------------------------------
q1	17868	4770	4382	4382
q2	2616	200	202	200
q3	10859	1263	1217	1217
q4	10445	766	849	766
q5	7730	2711	2692	2692
q6	225	136	135	135
q7	968	628	610	610
q8	9259	2129	2125	2125
q9	9069	6489	6447	6447
q10	9033	3776	3679	3679
q11	431	241	245	241
q12	490	223	218	218
q13	17793	2953	3000	2953
q14	259	211	206	206
q15	513	476	471	471
q16	519	397	378	378
q17	972	743	718	718
q18	8175	7454	7553	7454
q19	7951	1519	1529	1519
q20	656	325	312	312
q21	4983	3263	3269	3263
q22	346	291	279	279
Total cold run time: 121160 ms
Total hot run time: 40265 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4381	4234	4219	4219
q2	366	264	261	261
q3	3019	2757	2806	2757
q4	1877	1640	1579	1579
q5	5306	5297	5309	5297
q6	212	124	123	123
q7	2151	1737	1774	1737
q8	3233	3345	3329	3329
q9	8336	8347	8373	8347
q10	3904	3671	3703	3671
q11	571	489	494	489
q12	771	631	618	618
q13	17354	2940	3035	2940
q14	297	255	261	255
q15	523	480	481	480
q16	483	406	420	406
q17	1784	1479	1471	1471
q18	7604	7673	7341	7341
q19	1695	1559	1530	1530
q20	2010	1816	1768	1768
q21	4846	4661	4780	4661
q22	562	463	496	463
Total cold run time: 71285 ms
Total hot run time: 53742 ms

@eldenmoon
Copy link
Member Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 40030 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 888307570f165801f1d5f60263f6020129e3d452, data reload: false

------ Round 1 ----------------------------------
q1	17597	4998	4299	4299
q2	2024	187	194	187
q3	10470	1229	1277	1229
q4	10144	844	794	794
q5	7503	2698	2678	2678
q6	212	131	134	131
q7	964	611	595	595
q8	9222	2058	2127	2058
q9	9016	6554	6531	6531
q10	9058	3664	3692	3664
q11	442	245	238	238
q12	434	223	224	223
q13	17764	3000	3016	3000
q14	265	220	237	220
q15	512	467	463	463
q16	504	385	386	385
q17	975	687	693	687
q18	8068	7519	7392	7392
q19	5400	1522	1515	1515
q20	686	316	299	299
q21	4900	3167	3847	3167
q22	346	275	295	275
Total cold run time: 116506 ms
Total hot run time: 40030 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4346	4285	4317	4285
q2	373	275	263	263
q3	2986	2803	2698	2698
q4	1876	1559	1607	1559
q5	5281	5301	5290	5290
q6	217	124	127	124
q7	2149	1768	1723	1723
q8	3195	3324	3322	3322
q9	8361	8390	8404	8390
q10	3902	3695	3677	3677
q11	600	497	472	472
q12	767	582	589	582
q13	17464	2991	3022	2991
q14	301	274	257	257
q15	508	503	484	484
q16	486	434	427	427
q17	1790	1514	1479	1479
q18	7662	7554	7386	7386
q19	1683	1578	1556	1556
q20	1980	1762	1817	1762
q21	4793	4818	4683	4683
q22	575	481	508	481
Total cold run time: 71295 ms
Total hot run time: 53891 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 173312 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 888307570f165801f1d5f60263f6020129e3d452, data reload: false

query1	916	390	377	377
query2	6462	2578	2396	2396
query3	6645	206	205	205
query4	19483	17250	17273	17250
query5	4128	417	426	417
query6	245	160	178	160
query7	4583	303	298	298
query8	245	194	196	194
query9	8479	2381	2352	2352
query10	447	290	269	269
query11	10784	10228	10160	10160
query12	146	87	88	87
query13	1642	390	379	379
query14	9847	7661	7592	7592
query15	251	180	169	169
query16	8176	270	275	270
query17	1823	545	533	533
query18	2125	286	286	286
query19	209	164	164	164
query20	95	89	89	89
query21	199	140	132	132
query22	4276	3915	4051	3915
query23	33824	33110	33213	33110
query24	12032	2927	2822	2822
query25	638	358	358	358
query26	1739	157	160	157
query27	3008	314	324	314
query28	7343	2020	2021	2020
query29	1009	621	620	620
query30	274	147	155	147
query31	972	738	763	738
query32	95	57	55	55
query33	767	268	263	263
query34	1016	496	474	474
query35	773	610	598	598
query36	1066	922	911	911
query37	262	68	67	67
query38	2940	2804	2803	2803
query39	851	801	802	801
query40	279	128	126	126
query41	47	44	42	42
query42	100	95	96	95
query43	611	553	543	543
query44	1272	747	749	747
query45	178	161	165	161
query46	1081	719	722	719
query47	1833	1769	1760	1760
query48	372	306	314	306
query49	1194	405	390	390
query50	777	389	399	389
query51	6818	6791	6794	6791
query52	106	88	97	88
query53	376	297	292	292
query54	996	444	427	427
query55	73	70	72	70
query56	258	243	249	243
query57	1150	1056	1012	1012
query58	230	209	218	209
query59	3438	3109	3304	3109
query60	284	267	273	267
query61	92	85	84	84
query62	665	459	454	454
query63	314	287	287	287
query64	9837	2202	1711	1711
query65	3222	3147	3145	3145
query66	1386	337	319	319
query67	15305	14852	14734	14734
query68	6035	535	532	532
query69	496	288	285	285
query70	1180	1054	1156	1054
query71	474	272	271	271
query72	7948	5792	5592	5592
query73	762	326	331	326
query74	6070	5563	5621	5563
query75	4015	2614	2640	2614
query76	3888	940	1003	940
query77	637	268	269	268
query78	10422	9811	9702	9702
query79	3397	512	511	511
query80	2124	459	443	443
query81	523	219	212	212
query82	1453	93	99	93
query83	358	176	181	176
query84	269	94	84	84
query85	1558	277	265	265
query86	477	327	316	316
query87	3310	3099	3156	3099
query88	4649	2454	2444	2444
query89	499	394	377	377
query90	2020	193	192	192
query91	127	99	98	98
query92	60	50	48	48
query93	4631	510	494	494
query94	1172	194	185	185
query95	423	315	309	309
query96	603	269	270	269
query97	3151	3025	3040	3025
query98	243	218	208	208
query99	1272	849	845	845
Total cold run time: 286355 ms
Total hot run time: 173312 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 30.78 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 888307570f165801f1d5f60263f6020129e3d452, data reload: false

query1	0.04	0.03	0.03
query2	0.08	0.04	0.05
query3	0.23	0.05	0.05
query4	1.67	0.07	0.08
query5	0.50	0.48	0.50
query6	1.13	0.73	0.71
query7	0.02	0.01	0.01
query8	0.05	0.04	0.05
query9	0.54	0.49	0.49
query10	0.55	0.54	0.53
query11	0.16	0.12	0.11
query12	0.14	0.12	0.13
query13	0.59	0.59	0.60
query14	0.76	0.78	0.78
query15	0.83	0.81	0.81
query16	0.36	0.34	0.37
query17	0.96	0.97	1.02
query18	0.21	0.25	0.23
query19	1.90	1.72	1.66
query20	0.01	0.02	0.01
query21	15.71	0.65	0.65
query22	4.16	6.59	2.28
query23	18.32	1.38	1.27
query24	1.97	0.22	0.22
query25	0.14	0.10	0.09
query26	0.26	0.17	0.16
query27	0.09	0.09	0.09
query28	13.24	1.01	1.00
query29	13.18	3.25	3.26
query30	0.25	0.05	0.06
query31	2.89	0.38	0.38
query32	3.29	0.47	0.46
query33	2.86	2.88	2.96
query34	17.05	4.44	4.40
query35	4.47	4.50	4.52
query36	0.65	0.46	0.46
query37	0.18	0.16	0.15
query38	0.16	0.15	0.15
query39	0.05	0.03	0.03
query40	0.16	0.13	0.14
query41	0.08	0.04	0.04
query42	0.06	0.04	0.05
query43	0.04	0.04	0.03
Total cold run time: 109.99 s
Total hot run time: 30.78 s

Copy link
Contributor

@morrySnow morrySnow left a comment

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

add test case and add description to explain why mtmv not support row store

@eldenmoon
Copy link
Member Author

#35860 close this pr

@eldenmoon eldenmoon closed this Jun 5, 2024
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

3 participants