Skip to content

Conversation

@924060929
Copy link
Contributor

Proposed changes

pick from master #31289

@doris-robot
Copy link

Thank you for your contribution to Apache Doris.
Don't know what should be done next? See How to process your PR

@924060929
Copy link
Contributor Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 49905 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 08f47c47c896f2c4d4a4aae19b5c4b62ad2e3c5f, data reload: false

------ Round 1 ----------------------------------
q1	18072	4503	4361	4361
q2	2428	169	145	145
q3	11314	1901	1978	1901
q4	10548	1294	1334	1294
q5	8692	3852	3998	3852
q6	230	122	126	122
q7	2050	1619	1645	1619
q8	9323	2742	2727	2727
q9	10878	10795	10368	10368
q10	8643	3515	3527	3515
q11	439	231	249	231
q12	473	308	307	307
q13	18402	4018	4030	4018
q14	354	329	336	329
q15	519	471	466	466
q16	694	598	588	588
q17	1133	977	960	960
q18	7346	6962	6812	6812
q19	1702	1553	1522	1522
q20	535	301	301	301
q21	4495	4157	4075	4075
q22	507	405	392	392
Total cold run time: 118777 ms
Total hot run time: 49905 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4342	4287	4295	4287
q2	323	223	223	223
q3	4183	4170	4161	4161
q4	2778	2743	2750	2743
q5	7333	7208	7195	7195
q6	233	119	117	117
q7	3256	2878	2830	2830
q8	4384	4513	4498	4498
q9	17224	17049	17073	17049
q10	4250	4262	4271	4262
q11	723	687	673	673
q12	1030	860	843	843
q13	6288	3733	3787	3733
q14	471	424	429	424
q15	497	460	461	460
q16	758	705	702	702
q17	3895	3889	3797	3797
q18	8740	8771	8844	8771
q19	1734	1699	1647	1647
q20	2388	2185	2129	2129
q21	8543	8604	8451	8451
q22	1027	955	971	955
Total cold run time: 84400 ms
Total hot run time: 79950 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 202432 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 08f47c47c896f2c4d4a4aae19b5c4b62ad2e3c5f, data reload: false

query1	951	394	380	380
query2	6515	1954	1963	1954
query3	6922	198	195	195
query4	20989	18162	18060	18060
query5	19704	6500	6508	6500
query6	305	217	224	217
query7	4160	306	306	306
query8	259	235	213	213
query9	3169	2707	2637	2637
query10	423	295	289	289
query11	11466	10771	10819	10771
query12	123	75	80	75
query13	5583	653	629	629
query14	18299	13242	13915	13242
query15	359	241	233	233
query16	6445	264	265	264
query17	1732	1452	877	877
query18	2308	403	407	403
query19	214	149	157	149
query20	70	77	75	75
query21	193	95	103	95
query22	5266	5105	5205	5105
query23	32516	31982	31751	31751
query24	6972	6496	6552	6496
query25	525	427	420	420
query26	526	167	159	159
query27	1892	297	300	297
query28	6130	2233	2185	2185
query29	2982	2701	2748	2701
query30	233	159	162	159
query31	897	769	717	717
query32	71	62	58	58
query33	401	253	244	244
query34	848	473	494	473
query35	1122	921	915	915
query36	1719	1728	1457	1457
query37	89	64	60	60
query38	3060	2931	2924	2924
query39	1356	1320	1303	1303
query40	195	95	97	95
query41	35	33	31	31
query42	88	82	79	79
query43	734	613	535	535
query44	1124	721	717	717
query45	242	226	224	224
query46	1244	978	1002	978
query47	1915	1669	1805	1669
query48	995	691	660	660
query49	617	372	359	359
query50	859	624	615	615
query51	4762	4683	4677	4677
query52	87	83	79	79
query53	454	312	317	312
query54	2640	2498	2490	2490
query55	87	81	88	81
query56	215	213	201	201
query57	1180	1085	1096	1085
query58	207	203	197	197
query59	3278	3233	3277	3233
query60	194	195	222	195
query61	82	81	82	81
query62	835	487	444	444
query63	469	349	332	332
query64	2527	1467	1431	1431
query65	3608	3603	3556	3556
query66	791	379	372	372
query67	16787	17081	15724	15724
query68	5885	646	654	646
query69	550	336	338	336
query70	1815	1714	1886	1714
query71	384	294	303	294
query72	6260	3496	3425	3425
query73	735	322	321	321
query74	6324	5849	5880	5849
query75	4621	3755	3673	3673
query76	3574	1154	1216	1154
query77	563	251	246	246
query78	12507	11586	11647	11586
query79	9103	651	667	651
query80	2383	398	404	398
query81	511	235	233	233
query82	1764	101	91	91
query83	184	135	131	131
query84	266	70	70	70
query85	1346	286	276	276
query86	429	402	384	384
query87	3265	3009	3009	3009
query88	5308	2328	2356	2328
query89	395	286	299	286
query90	1783	211	217	211
query91	149	116	115	115
query92	56	51	52	51
query93	5582	607	557	557
query94	891	207	205	205
query95	1113	1082	1047	1047
query96	647	325	329	325
query97	6448	6370	6478	6370
query98	189	176	175	175
query99	2922	971	835	835
Total cold run time: 310997 ms
Total hot run time: 202432 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 30.78 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 08f47c47c896f2c4d4a4aae19b5c4b62ad2e3c5f, data reload: false

query1	0.02	0.02	0.02
query2	0.07	0.02	0.03
query3	0.25	0.05	0.04
query4	1.79	0.07	0.07
query5	0.53	0.53	0.52
query6	1.24	0.64	0.60
query7	0.02	0.01	0.00
query8	0.03	0.03	0.02
query9	0.52	0.47	0.50
query10	0.54	0.53	0.54
query11	0.12	0.08	0.09
query12	0.12	0.09	0.09
query13	0.62	0.61	0.60
query14	0.79	0.79	0.79
query15	0.78	0.76	0.75
query16	0.39	0.39	0.37
query17	0.99	1.03	1.01
query18	0.24	0.24	0.25
query19	1.85	1.86	1.83
query20	0.02	0.00	0.00
query21	15.49	0.55	0.57
query22	2.35	2.48	1.48
query23	17.15	1.06	0.96
query24	5.46	1.08	1.13
query25	1.52	0.11	0.11
query26	0.24	0.14	0.14
query27	0.12	0.11	0.12
query28	7.49	0.76	0.75
query29	12.68	2.15	2.16
query30	0.59	0.54	0.52
query31	2.82	0.38	0.40
query32	3.37	0.50	0.50
query33	3.04	3.07	3.06
query34	15.24	4.81	4.82
query35	4.83	4.85	4.85
query36	1.05	1.03	1.02
query37	0.06	0.04	0.04
query38	0.04	0.02	0.02
query39	0.02	0.02	0.01
query40	0.16	0.15	0.15
query41	0.07	0.01	0.02
query42	0.02	0.02	0.02
query43	0.02	0.02	0.01
Total cold run time: 104.76 s
Total hot run time: 30.78 s

@doris-robot
Copy link

Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'

Load test result on commit 08f47c47c896f2c4d4a4aae19b5c4b62ad2e3c5f with default session variables
Stream load json:         20 seconds loaded 2358488459 Bytes, about 112 MB/s
Stream load orc:          59 seconds loaded 1101869774 Bytes, about 17 MB/s
Stream load parquet:      31 seconds loaded 861443392 Bytes, about 26 MB/s
Insert into select:       21.8 seconds inserted 10000000 Rows, about 458K ops/s

@924060929 924060929 force-pushed the branch-2.0-view_auth branch from 08f47c4 to 401db6c Compare February 22, 2024 14:20
@924060929
Copy link
Contributor Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 50326 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 401db6cf5e91da508f6880a3d557745e45fd5b87, data reload: false

------ Round 1 ----------------------------------
q1	19647	5583	4547	4547
q2	2872	153	142	142
q3	12161	1920	1954	1920
q4	10528	1231	1313	1231
q5	8421	3946	4005	3946
q6	229	124	125	124
q7	2000	1578	1599	1578
q8	9310	2748	2713	2713
q9	10752	10588	10657	10588
q10	8600	3526	3532	3526
q11	436	244	235	235
q12	467	304	299	299
q13	18372	3975	4041	3975
q14	350	320	333	320
q15	517	463	448	448
q16	709	592	598	592
q17	1131	960	963	960
q18	7278	6917	6894	6894
q19	1674	1540	1475	1475
q20	528	311	321	311
q21	4478	4109	4145	4109
q22	512	399	393	393
Total cold run time: 120972 ms
Total hot run time: 50326 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4327	4304	4297	4297
q2	319	217	224	217
q3	4155	4135	4162	4135
q4	2779	2750	2749	2749
q5	7321	7278	7230	7230
q6	233	121	117	117
q7	3264	2814	2794	2794
q8	4429	4491	4499	4491
q9	17039	16981	17160	16981
q10	4253	4309	4302	4302
q11	738	689	678	678
q12	1015	841	852	841
q13	6838	3745	3761	3745
q14	461	426	427	426
q15	495	460	465	460
q16	760	713	706	706
q17	3812	3804	3838	3804
q18	8857	8764	8879	8764
q19	1717	1701	1656	1656
q20	2369	2167	2112	2112
q21	8504	8453	8494	8453
q22	1072	964	938	938
Total cold run time: 84757 ms
Total hot run time: 79896 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 202646 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 401db6cf5e91da508f6880a3d557745e45fd5b87, data reload: false

query1	937	394	382	382
query2	6518	2162	2199	2162
query3	6921	201	202	201
query4	20212	18102	17941	17941
query5	19722	6585	6434	6434
query6	286	221	219	219
query7	4144	298	291	291
query8	265	274	236	236
query9	3130	2711	2627	2627
query10	396	296	294	294
query11	11290	10739	10757	10739
query12	117	75	70	70
query13	5571	641	619	619
query14	17496	13693	13817	13693
query15	380	239	240	239
query16	6489	263	266	263
query17	1712	1475	855	855
query18	2343	406	429	406
query19	214	147	144	144
query20	76	80	78	78
query21	183	98	89	89
query22	5303	5125	5118	5118
query23	32663	32042	31969	31969
query24	7087	6549	6476	6476
query25	524	422	395	395
query26	610	164	160	160
query27	2023	297	284	284
query28	6198	2225	2181	2181
query29	2887	2821	2689	2689
query30	238	161	165	161
query31	908	761	729	729
query32	67	58	63	58
query33	403	250	261	250
query34	834	460	478	460
query35	1118	905	907	905
query36	1515	1897	1443	1443
query37	86	58	61	58
query38	3098	2939	2973	2939
query39	1353	1311	1330	1311
query40	202	101	100	100
query41	37	32	31	31
query42	96	88	83	83
query43	622	567	637	567
query44	1103	712	718	712
query45	239	236	230	230
query46	1249	954	959	954
query47	1770	1797	1957	1797
query48	975	692	663	663
query49	615	370	367	367
query50	858	621	648	621
query51	4753	4660	4648	4648
query52	86	87	74	74
query53	447	331	315	315
query54	2644	2459	2477	2459
query55	88	80	79	79
query56	196	208	211	208
query57	1254	1128	1117	1117
query58	213	204	196	196
query59	3352	3254	3304	3254
query60	198	194	204	194
query61	83	81	82	81
query62	792	532	475	475
query63	469	343	340	340
query64	2281	1383	1271	1271
query65	3633	3579	3556	3556
query66	824	377	358	358
query67	15450	15492	16979	15492
query68	10812	653	661	653
query69	588	353	360	353
query70	2635	1846	1542	1542
query71	407	300	316	300
query72	6387	3485	3410	3410
query73	732	316	307	307
query74	6294	5808	5859	5808
query75	5504	3718	3673	3673
query76	6966	1166	1216	1166
query77	1177	248	249	248
query78	12662	11570	11936	11570
query79	6736	651	633	633
query80	1038	387	395	387
query81	459	228	234	228
query82	715	97	101	97
query83	162	132	131	131
query84	251	70	68	68
query85	841	270	271	270
query86	406	379	370	370
query87	3240	3051	3032	3032
query88	4336	2294	2298	2294
query89	363	282	281	281
query90	1904	205	207	205
query91	150	114	115	114
query92	58	54	48	48
query93	6020	597	578	578
query94	695	198	205	198
query95	1115	1061	1041	1041
query96	635	329	318	318
query97	6530	6428	6407	6407
query98	172	180	179	179
query99	3008	1028	927	927
Total cold run time: 312844 ms
Total hot run time: 202646 ms

@924060929
Copy link
Contributor Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 50020 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit f1bac80a19a1fdfff6f8c357c3cb00261b435ced, data reload: false

------ Round 1 ----------------------------------
q1	17542	4391	4479	4391
q2	2024	149	144	144
q3	10283	1945	1929	1929
q4	10091	1232	1321	1232
q5	8548	3948	3998	3948
q6	235	127	124	124
q7	2050	1604	1612	1604
q8	9299	2747	2738	2738
q9	10997	10483	10518	10483
q10	8647	3489	3516	3489
q11	416	237	244	237
q12	457	294	296	294
q13	18344	3963	4004	3963
q14	358	319	321	319
q15	498	457	444	444
q16	684	601	590	590
q17	1140	978	991	978
q18	7223	6740	6963	6740
q19	1669	1566	1528	1528
q20	516	316	305	305
q21	4510	4171	4152	4152
q22	514	388	408	388
Total cold run time: 116045 ms
Total hot run time: 50020 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4343	4313	4301	4301
q2	321	219	223	219
q3	4188	4165	4120	4120
q4	2896	2727	2749	2727
q5	7301	7217	7293	7217
q6	234	119	119	119
q7	3237	2861	2922	2861
q8	4367	4639	4516	4516
q9	17172	16983	17028	16983
q10	4221	4244	4272	4244
q11	775	707	680	680
q12	1024	872	879	872
q13	7278	3722	3721	3721
q14	462	419	425	419
q15	494	466	454	454
q16	763	696	699	696
q17	3814	3836	3847	3836
q18	8804	8722	8806	8722
q19	1707	1705	1678	1678
q20	2388	2120	2125	2120
q21	8510	8438	8508	8438
q22	1055	1007	949	949
Total cold run time: 85354 ms
Total hot run time: 79892 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 202762 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit f1bac80a19a1fdfff6f8c357c3cb00261b435ced, data reload: false

query1	913	395	384	384
query2	6519	2220	1947	1947
query3	6923	202	200	200
query4	20706	17956	17920	17920
query5	19704	6515	6500	6500
query6	287	215	221	215
query7	4150	294	298	294
query8	262	226	235	226
query9	3118	2716	2630	2630
query10	420	284	295	284
query11	11283	10694	10634	10634
query12	117	80	71	71
query13	5568	646	622	622
query14	18189	13545	13596	13545
query15	365	236	238	236
query16	6464	264	265	264
query17	1713	1472	871	871
query18	2329	422	418	418
query19	204	152	152	152
query20	80	79	77	77
query21	190	90	94	90
query22	5392	5235	5203	5203
query23	32322	32075	31827	31827
query24	6844	6531	6510	6510
query25	524	430	413	413
query26	525	169	157	157
query27	1867	295	299	295
query28	6045	2220	2175	2175
query29	3028	2892	2745	2745
query30	237	161	160	160
query31	914	733	723	723
query32	62	62	59	59
query33	382	266	240	240
query34	856	469	491	469
query35	1117	944	948	944
query36	1533	1564	1779	1564
query37	93	59	60	59
query38	3085	2922	2930	2922
query39	1360	1339	1316	1316
query40	205	94	87	87
query41	34	32	32	32
query42	87	90	86	86
query43	683	634	654	634
query44	1113	715	730	715
query45	243	234	226	226
query46	1249	963	998	963
query47	1870	1755	1705	1705
query48	972	692	682	682
query49	626	388	365	365
query50	875	632	606	606
query51	4737	4666	4609	4609
query52	81	75	76	75
query53	456	317	320	317
query54	2675	2455	2471	2455
query55	91	76	89	76
query56	210	211	220	211
query57	1181	1136	1210	1136
query58	212	200	185	185
query59	3273	3103	3201	3103
query60	213	183	214	183
query61	84	82	83	82
query62	845	463	506	463
query63	475	341	339	339
query64	2410	1465	1462	1462
query65	3659	3580	3572	3572
query66	755	359	378	359
query67	15992	16752	15673	15673
query68	8491	640	667	640
query69	551	365	354	354
query70	1827	1761	1740	1740
query71	408	300	309	300
query72	6419	3463	3426	3426
query73	720	325	321	321
query74	6358	5852	5869	5852
query75	4650	3698	3611	3611
query76	4748	1154	1234	1154
query77	649	250	261	250
query78	12708	11668	11911	11668
query79	7015	617	627	617
query80	956	394	393	393
query81	500	232	234	232
query82	1500	104	93	93
query83	175	136	127	127
query84	260	74	70	70
query85	851	280	279	279
query86	401	374	373	373
query87	3214	3037	2977	2977
query88	4941	2311	2333	2311
query89	389	285	312	285
query90	1919	209	198	198
query91	145	119	124	119
query92	54	49	49	49
query93	5170	571	564	564
query94	740	198	201	198
query95	1092	1072	1056	1056
query96	644	325	319	319
query97	6545	6404	6411	6404
query98	197	185	179	179
query99	3068	858	841	841
Total cold run time: 308301 ms
Total hot run time: 202762 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 30.88 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit f1bac80a19a1fdfff6f8c357c3cb00261b435ced, data reload: false

query1	0.03	0.02	0.02
query2	0.05	0.02	0.02
query3	0.24	0.04	0.04
query4	1.81	0.07	0.06
query5	0.52	0.52	0.52
query6	1.26	0.63	0.62
query7	0.01	0.01	0.00
query8	0.04	0.02	0.03
query9	0.54	0.49	0.49
query10	0.54	0.53	0.53
query11	0.11	0.08	0.09
query12	0.12	0.09	0.09
query13	0.62	0.62	0.61
query14	0.76	0.78	0.80
query15	0.77	0.75	0.76
query16	0.36	0.37	0.36
query17	1.00	1.01	1.02
query18	0.23	0.25	0.24
query19	1.92	1.87	1.85
query20	0.02	0.01	0.01
query21	15.48	0.55	0.56
query22	1.84	2.48	1.84
query23	17.07	0.99	0.94
query24	5.71	0.88	3.51
query25	1.54	0.12	0.11
query26	0.65	0.14	0.14
query27	0.10	0.11	0.10
query28	6.25	0.76	0.71
query29	12.70	2.15	2.19
query30	0.60	0.56	0.56
query31	2.81	0.37	0.39
query32	3.43	0.49	0.49
query33	3.08	3.07	3.11
query34	15.28	4.84	4.77
query35	4.87	4.88	4.85
query36	1.05	1.02	1.02
query37	0.06	0.04	0.04
query38	0.04	0.03	0.02
query39	0.02	0.01	0.01
query40	0.17	0.15	0.13
query41	0.06	0.02	0.01
query42	0.02	0.02	0.01
query43	0.02	0.02	0.01
Total cold run time: 103.8 s
Total hot run time: 30.88 s

@doris-robot
Copy link

Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'

Load test result on commit f1bac80a19a1fdfff6f8c357c3cb00261b435ced with default session variables
Stream load json:         20 seconds loaded 2358488459 Bytes, about 112 MB/s
Stream load orc:          58 seconds loaded 1101869774 Bytes, about 18 MB/s
Stream load parquet:      31 seconds loaded 861443392 Bytes, about 26 MB/s
Insert into select:       21.2 seconds inserted 10000000 Rows, about 471K ops/s

@924060929
Copy link
Contributor Author

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 49857 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 507444445f49c8ff6461fafc7db0f1536e9d0710, data reload: false

------ Round 1 ----------------------------------
q1	17878	4431	4340	4340
q2	2046	150	139	139
q3	10448	1928	1904	1904
q4	10336	1231	1310	1231
q5	8772	3955	3981	3955
q6	225	122	123	122
q7	2021	1599	1594	1594
q8	9262	2722	2720	2720
q9	10805	10511	10464	10464
q10	8669	3515	3505	3505
q11	425	248	234	234
q12	463	300	306	300
q13	18340	3951	4033	3951
q14	360	330	310	310
q15	506	450	450	450
q16	692	601	587	587
q17	1140	972	964	964
q18	7324	6810	6992	6810
q19	1676	1591	1479	1479
q20	496	295	293	293
q21	4489	4556	4102	4102
q22	502	404	403	403
Total cold run time: 116875 ms
Total hot run time: 49857 ms

----- Round 2, with runtime_filter_mode=off -----
q1	4294	4286	4319	4286
q2	316	222	228	222
q3	4186	4125	4100	4100
q4	2761	2747	2756	2747
q5	7280	7222	7257	7222
q6	240	120	119	119
q7	3264	2844	2847	2844
q8	4355	4446	4496	4446
q9	17134	16768	16886	16768
q10	4220	4287	4277	4277
q11	762	664	686	664
q12	1015	880	881	880
q13	6964	3727	3774	3727
q14	455	423	424	423
q15	505	463	461	461
q16	767	686	705	686
q17	3833	3887	3872	3872
q18	8849	8803	8719	8719
q19	1704	1709	1671	1671
q20	2394	2193	2123	2123
q21	8684	8491	8362	8362
q22	1015	970	913	913
Total cold run time: 84997 ms
Total hot run time: 79532 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 202592 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 507444445f49c8ff6461fafc7db0f1536e9d0710, data reload: false

query1	913	393	389	389
query2	6515	2173	2072	2072
query3	6920	201	195	195
query4	20364	18092	18075	18075
query5	19704	6556	6493	6493
query6	287	213	237	213
query7	4146	298	310	298
query8	270	245	228	228
query9	3122	2701	2628	2628
query10	422	305	321	305
query11	11401	10635	10656	10635
query12	125	70	72	70
query13	5587	643	622	622
query14	17749	13699	13346	13346
query15	371	249	227	227
query16	6466	267	259	259
query17	1731	1447	885	885
query18	2315	403	406	403
query19	199	147	153	147
query20	80	81	75	75
query21	190	93	95	93
query22	5186	5141	5063	5063
query23	32644	32194	32064	32064
query24	6969	6569	6521	6521
query25	528	445	421	421
query26	532	159	166	159
query27	1893	299	290	290
query28	6120	2209	2174	2174
query29	2868	2832	2787	2787
query30	240	161	158	158
query31	898	729	745	729
query32	68	60	61	60
query33	400	260	253	253
query34	852	472	476	472
query35	1106	895	886	886
query36	1686	1428	1416	1416
query37	86	63	60	60
query38	3102	2932	2917	2917
query39	1360	1334	1312	1312
query40	203	98	98	98
query41	41	38	34	34
query42	95	90	84	84
query43	630	686	508	508
query44	1148	720	714	714
query45	239	230	230	230
query46	1245	970	961	961
query47	1836	1816	1737	1737
query48	992	672	666	666
query49	613	377	370	370
query50	855	599	636	599
query51	4772	4668	4648	4648
query52	95	77	82	77
query53	444	320	334	320
query54	2664	2444	2496	2444
query55	79	80	81	80
query56	234	207	191	191
query57	1200	1175	1198	1175
query58	207	209	197	197
query59	3539	3437	3279	3279
query60	202	191	212	191
query61	83	85	82	82
query62	808	514	440	440
query63	481	334	341	334
query64	2362	1499	1461	1461
query65	3640	3999	3566	3566
query66	764	377	363	363
query67	15929	15508	16635	15508
query68	8589	655	681	655
query69	571	355	339	339
query70	1905	1805	1648	1648
query71	414	321	314	314
query72	6633	3442	3430	3430
query73	737	316	320	316
query74	6308	5819	5860	5819
query75	5101	3633	3646	3633
query76	5062	1123	1172	1123
query77	739	257	247	247
query78	12345	11750	11629	11629
query79	8556	640	641	640
query80	1421	391	391	391
query81	491	231	227	227
query82	1661	108	92	92
query83	166	131	138	131
query84	249	69	69	69
query85	840	272	281	272
query86	406	382	366	366
query87	3211	2987	3001	2987
query88	4760	2335	2292	2292
query89	409	287	273	273
query90	1947	203	215	203
query91	154	116	129	116
query92	56	51	53	51
query93	6562	604	586	586
query94	722	199	204	199
query95	1118	1070	1080	1070
query96	639	320	327	320
query97	6509	6311	6422	6311
query98	190	182	169	169
query99	3065	917	953	917
Total cold run time: 312351 ms
Total hot run time: 202592 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 30.74 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 507444445f49c8ff6461fafc7db0f1536e9d0710, data reload: false

query1	0.02	0.02	0.02
query2	0.05	0.03	0.02
query3	0.24	0.04	0.05
query4	1.83	0.06	0.07
query5	0.53	0.52	0.52
query6	1.32	0.63	0.63
query7	0.01	0.01	0.01
query8	0.03	0.02	0.02
query9	0.52	0.48	0.47
query10	0.54	0.55	0.53
query11	0.11	0.09	0.09
query12	0.11	0.09	0.09
query13	0.62	0.62	0.60
query14	0.82	0.78	0.79
query15	0.78	0.77	0.75
query16	0.36	0.40	0.37
query17	1.00	1.03	1.00
query18	0.21	0.27	0.25
query19	1.91	1.86	1.83
query20	0.01	0.01	0.01
query21	15.48	0.55	0.55
query22	2.05	2.79	1.27
query23	17.33	0.96	0.99
query24	5.84	1.33	2.28
query25	1.44	0.11	0.10
query26	0.29	0.14	0.14
query27	0.11	0.11	0.11
query28	6.69	0.71	0.71
query29	12.61	2.31	2.14
query30	0.60	0.54	0.54
query31	2.80	0.38	0.39
query32	3.40	0.50	0.50
query33	3.13	3.08	3.07
query34	15.24	4.79	4.80
query35	4.85	4.81	4.83
query36	1.06	1.00	1.03
query37	0.06	0.04	0.05
query38	0.04	0.02	0.02
query39	0.02	0.02	0.01
query40	0.16	0.14	0.14
query41	0.07	0.01	0.01
query42	0.02	0.02	0.02
query43	0.02	0.01	0.02
Total cold run time: 104.33 s
Total hot run time: 30.74 s

@doris-robot
Copy link

Load test result on machine: 'aliyun_ecs.c7a.8xlarge_32C64G'

Load test result on commit 507444445f49c8ff6461fafc7db0f1536e9d0710 with default session variables
Stream load json:         20 seconds loaded 2358488459 Bytes, about 112 MB/s
Stream load orc:          61 seconds loaded 1101869774 Bytes, about 17 MB/s
Stream load parquet:      32 seconds loaded 861443392 Bytes, about 25 MB/s
Insert into select:       21.4 seconds inserted 10000000 Rows, about 467K ops/s

@924060929 924060929 requested a review from morrySnow February 23, 2024 03:40
@xiaokang xiaokang merged commit 044634e into apache:branch-2.0 Feb 23, 2024
@924060929 924060929 deleted the branch-2.0-view_auth branch February 23, 2024 05:10
mongo360 pushed a commit to mongo360/doris that referenced this pull request Aug 16, 2024
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Projects

None yet

Development

Successfully merging this pull request may close these issues.

3 participants