Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

[test]remove #44869

Closed
wants to merge 22 commits into from
Closed

[test]remove #44869

wants to merge 22 commits into from

Conversation

koarz
Copy link
Contributor

@koarz koarz commented Dec 2, 2024

What problem does this PR solve?

Issue Number: close #xxx

Related PR: #xxx

Problem Summary:

Release note

None

Check List (For Author)

  • Test

    • Regression test
    • Unit Test
    • Manual test (add detailed scripts or steps below)
    • No need to test or manual test. Explain why:
      • This is a refactor/code format and no logic has been changed.
      • Previous test can cover this change.
      • No code files have been changed.
      • Other reason
  • Behavior changed:

    • No.
    • Yes.
  • Does this need documentation?

    • No.
    • Yes.

Check List (For Reviewer who merge this PR)

  • Confirm the release note
  • Confirm test cases
  • Confirm document
  • Add branch pick label

@doris-robot
Copy link

Thank you for your contribution to Apache Doris.
Don't know what should be done next? See How to process your PR.

Please clearly describe your PR:

  1. What problem was fixed (it's best to include specific error reporting information). How it was fixed.
  2. Which behaviors were modified. What was the previous behavior, what is it now, why was it modified, and what possible impacts might there be.
  3. What features were added. Why was this function added?
  4. Which code was refactored and why was this part of the code refactored?
  5. Which functions were optimized and what is the difference before and after the optimization?

@koarz
Copy link
Contributor Author

koarz commented Dec 2, 2024

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 40009 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit e10b31f0d7591878eafdd05d787533259030ab23, data reload: false

------ Round 1 ----------------------------------
q1	17560	7438	7358	7358
q2	2039	186	172	172
q3	10634	1073	1182	1073
q4	10546	688	666	666
q5	7598	2755	2682	2682
q6	239	148	146	146
q7	1012	625	609	609
q8	9250	1807	1950	1807
q9	6612	6451	6513	6451
q10	7032	2329	2350	2329
q11	456	275	264	264
q12	427	220	218	218
q13	17805	3033	3084	3033
q14	260	224	219	219
q15	583	547	520	520
q16	666	575	580	575
q17	971	517	623	517
q18	7245	6769	6734	6734
q19	1344	992	973	973
q20	461	185	179	179
q21	4374	3234	3161	3161
q22	376	323	323	323
Total cold run time: 107490 ms
Total hot run time: 40009 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7272	7284	7273	7273
q2	323	228	229	228
q3	2925	2855	2937	2855
q4	2089	1828	1902	1828
q5	5667	5675	5651	5651
q6	227	144	141	141
q7	2210	1834	1834	1834
q8	3369	3534	3505	3505
q9	8956	9019	8952	8952
q10	3576	3581	3543	3543
q11	601	510	498	498
q12	834	624	633	624
q13	12548	3224	3164	3164
q14	305	278	275	275
q15	583	535	519	519
q16	699	631	665	631
q17	1864	1637	1621	1621
q18	8212	7724	7709	7709
q19	1685	1637	1657	1637
q20	2119	1900	1874	1874
q21	5641	5572	5463	5463
q22	650	594	576	576
Total cold run time: 72355 ms
Total hot run time: 60401 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 196760 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit e10b31f0d7591878eafdd05d787533259030ab23, data reload: false

query1	1243	948	920	920
query2	6237	2080	2031	2031
query3	10993	4457	4312	4312
query4	67445	28635	23546	23546
query5	5017	472	461	461
query6	410	181	179	179
query7	5507	304	306	304
query8	320	243	235	235
query9	8691	2705	2688	2688
query10	412	241	244	241
query11	17186	15341	15923	15341
query12	156	104	105	104
query13	1433	428	413	413
query14	10733	6671	7363	6671
query15	207	186	187	186
query16	7033	467	459	459
query17	1071	552	549	549
query18	1971	328	298	298
query19	201	151	150	150
query20	114	112	112	112
query21	208	108	108	108
query22	4934	4815	4497	4497
query23	34987	34557	34528	34528
query24	5483	2493	2520	2493
query25	522	438	390	390
query26	636	147	144	144
query27	1842	279	280	279
query28	4728	2493	2478	2478
query29	669	418	428	418
query30	254	150	151	150
query31	998	837	830	830
query32	69	52	62	52
query33	421	292	283	283
query34	938	501	508	501
query35	896	775	763	763
query36	1088	931	966	931
query37	116	68	73	68
query38	4602	4280	4374	4280
query39	1521	1491	1469	1469
query40	207	118	100	100
query41	44	41	41	41
query42	108	99	96	96
query43	545	500	490	490
query44	1186	808	799	799
query45	186	168	170	168
query46	1198	722	744	722
query47	2093	1920	1928	1920
query48	417	330	317	317
query49	738	384	395	384
query50	836	383	394	383
query51	7317	7198	7137	7137
query52	96	86	93	86
query53	250	175	181	175
query54	499	386	392	386
query55	77	78	93	78
query56	257	236	229	229
query57	1272	1127	1137	1127
query58	219	201	202	201
query59	3234	2941	3128	2941
query60	273	259	232	232
query61	106	101	102	101
query62	796	666	676	666
query63	217	186	196	186
query64	1379	705	633	633
query65	3234	3240	3215	3215
query66	637	314	305	305
query67	16186	15774	15825	15774
query68	4026	572	543	543
query69	427	249	257	249
query70	1190	1132	1138	1132
query71	330	243	249	243
query72	6441	4138	4023	4023
query73	812	362	359	359
query74	10336	8972	8963	8963
query75	3383	2692	2668	2668
query76	1983	1071	1028	1028
query77	484	267	271	267
query78	10486	9534	9479	9479
query79	1102	587	588	587
query80	715	447	444	444
query81	490	230	231	230
query82	215	123	120	120
query83	172	141	148	141
query84	285	71	67	67
query85	848	299	374	299
query86	332	307	299	299
query87	4641	4609	4818	4609
query88	3641	2189	2156	2156
query89	410	310	286	286
query90	1979	182	181	181
query91	132	100	104	100
query92	58	49	62	49
query93	1131	533	537	533
query94	773	288	279	279
query95	332	246	239	239
query96	609	271	278	271
query97	2882	2684	2673	2673
query98	223	188	189	188
query99	1611	1354	1301	1301
Total cold run time: 317378 ms
Total hot run time: 196760 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 33.16 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit e10b31f0d7591878eafdd05d787533259030ab23, data reload: false

query1	0.03	0.03	0.05
query2	0.06	0.03	0.03
query3	0.23	0.07	0.07
query4	1.62	0.10	0.11
query5	0.44	0.39	0.41
query6	1.16	0.67	0.66
query7	0.02	0.01	0.01
query8	0.04	0.03	0.03
query9	0.58	0.53	0.50
query10	0.58	0.55	0.56
query11	0.14	0.11	0.11
query12	0.13	0.11	0.11
query13	0.60	0.59	0.61
query14	2.74	2.77	2.74
query15	0.91	0.83	0.82
query16	0.36	0.38	0.38
query17	1.02	1.04	1.00
query18	0.22	0.20	0.20
query19	1.89	1.77	1.98
query20	0.02	0.02	0.01
query21	15.65	0.61	0.60
query22	2.85	2.00	2.34
query23	17.03	0.85	0.87
query24	3.83	1.42	1.51
query25	0.32	0.22	0.11
query26	0.51	0.15	0.14
query27	0.06	0.04	0.03
query28	9.90	1.10	1.06
query29	12.55	3.25	3.21
query30	0.26	0.06	0.06
query31	3.20	0.39	0.38
query32	3.28	0.47	0.48
query33	3.01	3.04	3.08
query34	16.97	4.51	4.44
query35	4.56	4.45	4.52
query36	0.66	0.51	0.48
query37	0.09	0.06	0.07
query38	0.05	0.04	0.03
query39	0.04	0.03	0.02
query40	0.16	0.13	0.13
query41	0.07	0.03	0.03
query42	0.03	0.02	0.02
query43	0.03	0.03	0.03
Total cold run time: 107.9 s
Total hot run time: 33.16 s

@koarz
Copy link
Contributor Author

koarz commented Dec 3, 2024

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 39987 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 08b83eeb424fca606b29e146928caefdfe29e0b2, data reload: false

------ Round 1 ----------------------------------
q1	17645	8114	7279	7279
q2	2048	182	186	182
q3	10583	1068	1189	1068
q4	10576	766	811	766
q5	7598	2758	2729	2729
q6	240	147	144	144
q7	998	614	592	592
q8	9265	1853	1911	1853
q9	6707	6529	6488	6488
q10	7010	2305	2316	2305
q11	489	266	247	247
q12	434	222	214	214
q13	17789	3022	3013	3013
q14	238	219	218	218
q15	566	530	513	513
q16	663	591	583	583
q17	979	603	605	603
q18	7301	6661	6604	6604
q19	1332	928	876	876
q20	476	180	181	180
q21	4000	3356	3222	3222
q22	372	308	316	308
Total cold run time: 107309 ms
Total hot run time: 39987 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7235	7202	7231	7202
q2	327	230	247	230
q3	2892	2822	2951	2822
q4	2078	1823	1891	1823
q5	5657	5674	5683	5674
q6	230	147	149	147
q7	2248	1862	1863	1862
q8	3429	3546	3520	3520
q9	9036	9068	8985	8985
q10	3610	3570	3554	3554
q11	611	506	506	506
q12	815	611	629	611
q13	11340	3192	3172	3172
q14	317	279	279	279
q15	567	533	528	528
q16	706	660	627	627
q17	1870	1619	1590	1590
q18	8345	7709	7530	7530
q19	1714	1606	1475	1475
q20	2109	1872	1865	1865
q21	5642	5485	5335	5335
q22	665	574	553	553
Total cold run time: 71443 ms
Total hot run time: 59890 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 196880 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 08b83eeb424fca606b29e146928caefdfe29e0b2, data reload: false

query1	1229	928	928	928
query2	6235	2084	2061	2061
query3	10974	4456	4178	4178
query4	66491	29601	23796	23796
query5	4994	443	430	430
query6	414	191	178	178
query7	5530	304	301	301
query8	322	244	241	241
query9	8697	2694	2692	2692
query10	426	246	235	235
query11	17183	15289	16127	15289
query12	170	105	106	105
query13	1430	402	400	400
query14	9981	7557	7214	7214
query15	214	192	195	192
query16	7042	460	419	419
query17	1414	579	566	566
query18	1547	309	308	308
query19	201	164	145	145
query20	119	120	112	112
query21	218	103	102	102
query22	4641	4474	4539	4474
query23	34805	34300	34360	34300
query24	5473	2487	2512	2487
query25	515	406	406	406
query26	654	154	148	148
query27	1849	286	294	286
query28	4333	2481	2449	2449
query29	700	453	437	437
query30	231	196	144	144
query31	1002	843	835	835
query32	70	56	53	53
query33	419	296	282	282
query34	969	502	520	502
query35	890	756	753	753
query36	1059	953	950	950
query37	121	78	73	73
query38	4494	4297	4322	4297
query39	1507	1475	1471	1471
query40	210	98	99	98
query41	48	39	40	39
query42	110	98	93	93
query43	539	496	508	496
query44	1169	802	807	802
query45	182	172	165	165
query46	1157	725	719	719
query47	2045	1941	1926	1926
query48	415	326	307	307
query49	719	399	395	395
query50	848	379	403	379
query51	7344	7259	7174	7174
query52	100	85	86	85
query53	250	184	176	176
query54	502	400	397	397
query55	74	72	75	72
query56	246	239	235	235
query57	1279	1128	1096	1096
query58	211	202	241	202
query59	3159	3118	2953	2953
query60	266	247	239	239
query61	106	100	107	100
query62	752	658	668	658
query63	210	185	190	185
query64	1326	633	650	633
query65	3271	3222	3202	3202
query66	709	294	299	294
query67	16010	15646	15813	15646
query68	3969	565	549	549
query69	437	247	249	247
query70	1165	1126	1125	1125
query71	348	241	236	236
query72	6452	4042	3976	3976
query73	753	368	354	354
query74	10288	9041	8994	8994
query75	3387	2672	2657	2657
query76	1926	1093	1069	1069
query77	457	370	268	268
query78	10424	9452	9362	9362
query79	1464	588	579	579
query80	844	425	426	425
query81	478	235	231	231
query82	1296	126	122	122
query83	198	154	137	137
query84	278	68	71	68
query85	875	330	285	285
query86	342	289	289	289
query87	4859	4588	4633	4588
query88	3510	2203	2181	2181
query89	438	290	285	285
query90	2011	186	183	183
query91	135	104	107	104
query92	60	50	51	50
query93	1991	535	543	535
query94	765	289	298	289
query95	341	249	240	240
query96	612	277	272	272
query97	2945	2670	2700	2670
query98	216	198	198	198
query99	1605	1322	1307	1307
Total cold run time: 316689 ms
Total hot run time: 196880 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 32.54 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 08b83eeb424fca606b29e146928caefdfe29e0b2, data reload: false

query1	0.04	0.03	0.04
query2	0.07	0.03	0.03
query3	0.23	0.06	0.07
query4	1.63	0.10	0.11
query5	0.42	0.40	0.40
query6	1.14	0.66	0.65
query7	0.01	0.02	0.01
query8	0.04	0.03	0.03
query9	0.59	0.52	0.52
query10	0.54	0.56	0.56
query11	0.15	0.11	0.10
query12	0.14	0.12	0.11
query13	0.62	0.60	0.58
query14	2.74	2.89	2.73
query15	0.91	0.83	0.84
query16	0.39	0.39	0.40
query17	1.07	1.09	1.05
query18	0.22	0.21	0.21
query19	1.95	1.89	2.01
query20	0.02	0.01	0.01
query21	15.37	0.61	0.56
query22	2.68	2.46	1.68
query23	17.02	0.84	0.81
query24	2.83	1.52	1.00
query25	0.25	0.14	0.08
query26	0.55	0.13	0.14
query27	0.05	0.05	0.05
query28	10.92	1.09	1.08
query29	12.55	3.28	3.30
query30	0.25	0.06	0.06
query31	2.88	0.38	0.39
query32	3.25	0.47	0.47
query33	2.97	3.02	3.02
query34	17.06	4.48	4.41
query35	4.56	4.56	4.47
query36	0.65	0.48	0.48
query37	0.09	0.06	0.06
query38	0.04	0.03	0.04
query39	0.03	0.02	0.02
query40	0.16	0.13	0.12
query41	0.07	0.02	0.02
query42	0.03	0.02	0.02
query43	0.03	0.03	0.02
Total cold run time: 107.21 s
Total hot run time: 32.54 s

@koarz
Copy link
Contributor Author

koarz commented Dec 5, 2024

run buildall

@koarz
Copy link
Contributor Author

koarz commented Dec 5, 2024

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 39980 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 98e4db97e3666897d6a64770e860817918bbeec0, data reload: false

------ Round 1 ----------------------------------
q1	17751	8178	7265	7265
q2	2046	189	180	180
q3	10557	1119	1243	1119
q4	10324	778	681	681
q5	7620	2728	2651	2651
q6	240	150	149	149
q7	1012	632	607	607
q8	9267	1858	1945	1858
q9	6754	6549	6582	6549
q10	7051	2299	2342	2299
q11	464	266	266	266
q12	471	220	217	217
q13	17793	3043	3017	3017
q14	241	209	210	209
q15	576	524	519	519
q16	667	579	586	579
q17	995	682	577	577
q18	7348	6849	6665	6665
q19	1343	961	898	898
q20	463	192	178	178
q21	4196	3287	3184	3184
q22	381	324	313	313
Total cold run time: 107560 ms
Total hot run time: 39980 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7273	7204	7233	7204
q2	330	233	245	233
q3	2918	2931	2892	2892
q4	2095	1794	1885	1794
q5	5665	5680	5640	5640
q6	227	142	147	142
q7	2294	1842	1785	1785
q8	3437	3547	3516	3516
q9	8979	9103	9013	9013
q10	3569	3597	3553	3553
q11	605	506	502	502
q12	838	611	625	611
q13	12203	3329	3226	3226
q14	311	277	272	272
q15	578	532	524	524
q16	686	646	625	625
q17	1880	1631	1620	1620
q18	8514	7865	7965	7865
q19	1704	1509	1579	1509
q20	2102	1907	1936	1907
q21	5622	5793	5528	5528
q22	633	569	591	569
Total cold run time: 72463 ms
Total hot run time: 60530 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 197932 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 98e4db97e3666897d6a64770e860817918bbeec0, data reload: false

query1	1503	963	933	933
query2	6261	2109	2067	2067
query3	11114	4574	4544	4544
query4	33378	23537	24091	23537
query5	4120	491	457	457
query6	263	180	184	180
query7	4116	323	309	309
query8	308	226	227	226
query9	9537	2720	2717	2717
query10	470	240	237	237
query11	17999	15303	15211	15211
query12	148	104	103	103
query13	1555	422	407	407
query14	9316	7433	7702	7433
query15	305	198	196	196
query16	8070	498	517	498
query17	1784	629	614	614
query18	2156	342	314	314
query19	374	179	168	168
query20	122	120	115	115
query21	219	111	108	108
query22	4942	4481	4375	4375
query23	35258	34391	35230	34391
query24	10787	2619	2590	2590
query25	533	387	397	387
query26	713	167	154	154
query27	2308	292	286	286
query28	7685	2504	2501	2501
query29	657	404	415	404
query30	234	155	149	149
query31	1033	826	846	826
query32	104	55	55	55
query33	776	300	311	300
query34	1055	513	534	513
query35	897	749	764	749
query36	1095	965	977	965
query37	123	79	69	69
query38	4522	4412	4502	4412
query39	1518	1500	1456	1456
query40	205	104	104	104
query41	48	45	45	45
query42	107	98	98	98
query43	529	500	509	500
query44	1236	825	807	807
query45	192	167	172	167
query46	1207	747	729	729
query47	2086	1948	1954	1948
query48	413	322	320	320
query49	1032	398	387	387
query50	847	391	394	391
query51	7446	7233	7276	7233
query52	108	94	95	94
query53	250	183	186	183
query54	1268	420	412	412
query55	78	81	78	78
query56	261	250	233	233
query57	1270	1134	1068	1068
query58	223	212	204	204
query59	3256	3158	3002	3002
query60	281	251	240	240
query61	105	106	109	106
query62	872	653	668	653
query63	209	185	184	184
query64	3813	672	658	658
query65	3331	3254	3225	3225
query66	1069	314	325	314
query67	16130	15678	15718	15678
query68	4512	565	571	565
query69	436	253	246	246
query70	1166	1146	1006	1006
query71	368	255	260	255
query72	6045	4081	3955	3955
query73	768	360	368	360
query74	10172	9059	9017	9017
query75	3444	2655	2667	2655
query76	2706	1135	1058	1058
query77	381	293	282	282
query78	10574	9472	9444	9444
query79	1403	621	602	602
query80	945	446	431	431
query81	585	227	236	227
query82	1021	119	115	115
query83	248	140	139	139
query84	235	67	68	67
query85	1412	291	293	291
query86	383	306	286	286
query87	4724	4515	4548	4515
query88	3275	2240	2273	2240
query89	417	290	288	288
query90	1909	186	179	179
query91	133	102	101	101
query92	60	50	52	50
query93	1437	541	540	540
query94	890	296	312	296
query95	354	255	253	253
query96	637	277	284	277
query97	2828	2686	2696	2686
query98	220	208	195	195
query99	1567	1314	1294	1294
Total cold run time: 300485 ms
Total hot run time: 197932 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 32.65 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 98e4db97e3666897d6a64770e860817918bbeec0, data reload: false

query1	0.03	0.03	0.03
query2	0.06	0.04	0.03
query3	0.23	0.07	0.07
query4	1.62	0.10	0.10
query5	0.42	0.42	0.41
query6	1.16	0.65	0.65
query7	0.02	0.02	0.02
query8	0.04	0.03	0.03
query9	0.59	0.52	0.53
query10	0.56	0.56	0.56
query11	0.14	0.11	0.10
query12	0.15	0.12	0.11
query13	0.61	0.62	0.60
query14	2.74	2.72	2.82
query15	0.92	0.84	0.83
query16	0.40	0.41	0.38
query17	1.05	1.04	1.05
query18	0.22	0.22	0.20
query19	1.96	1.78	2.03
query20	0.01	0.01	0.02
query21	15.36	0.61	0.58
query22	2.60	2.50	1.67
query23	16.75	1.01	0.88
query24	2.85	0.98	1.79
query25	0.21	0.23	0.15
query26	0.49	0.14	0.14
query27	0.04	0.04	0.04
query28	10.33	1.10	1.08
query29	12.58	3.24	3.26
query30	0.25	0.06	0.06
query31	2.85	0.38	0.37
query32	3.27	0.47	0.46
query33	2.97	3.03	3.09
query34	16.88	4.52	4.51
query35	4.52	4.49	4.52
query36	0.64	0.47	0.50
query37	0.10	0.06	0.06
query38	0.05	0.04	0.03
query39	0.04	0.03	0.02
query40	0.17	0.13	0.13
query41	0.08	0.03	0.02
query42	0.03	0.02	0.02
query43	0.03	0.03	0.03
Total cold run time: 106.02 s
Total hot run time: 32.65 s

@koarz
Copy link
Contributor Author

koarz commented Dec 6, 2024

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 40430 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit fdd637c9439d6ef4565acd2ae2a4560f8ee69019, data reload: false

------ Round 1 ----------------------------------
q1	17864	7411	7280	7280
q2	2099	179	168	168
q3	10544	1158	1167	1158
q4	10238	771	675	675
q5	7608	2751	2694	2694
q6	237	152	149	149
q7	1007	624	618	618
q8	9244	1946	1963	1946
q9	6785	6621	6590	6590
q10	7048	2306	2337	2306
q11	484	276	268	268
q12	425	219	220	219
q13	17767	3075	3085	3075
q14	245	211	215	211
q15	576	527	530	527
q16	666	594	585	585
q17	1008	554	691	554
q18	7490	6691	6750	6691
q19	1334	1004	933	933
q20	468	185	184	184
q21	4117	3354	3280	3280
q22	390	319	325	319
Total cold run time: 107644 ms
Total hot run time: 40430 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7244	7229	7208	7208
q2	323	223	228	223
q3	2922	2813	2838	2813
q4	1989	1720	1700	1700
q5	5363	5437	5447	5437
q6	220	139	139	139
q7	2113	1712	1718	1712
q8	3249	3389	3455	3389
q9	8724	8698	8752	8698
q10	3535	3478	3509	3478
q11	605	487	505	487
q12	774	551	632	551
q13	13147	3029	3031	3029
q14	293	256	261	256
q15	574	523	512	512
q16	689	642	619	619
q17	1813	1561	1578	1561
q18	7877	7495	7323	7323
q19	1654	1543	1417	1417
q20	2057	1833	1868	1833
q21	5443	5249	5292	5249
q22	680	557	567	557
Total cold run time: 71288 ms
Total hot run time: 58191 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 191658 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit fdd637c9439d6ef4565acd2ae2a4560f8ee69019, data reload: false

query1	1212	391	395	391
query2	6531	2132	2037	2037
query3	6705	223	215	215
query4	34190	23454	23665	23454
query5	4358	475	467	467
query6	299	203	181	181
query7	4636	323	322	322
query8	309	246	235	235
query9	9754	2738	2738	2738
query10	473	256	280	256
query11	18186	15358	15451	15358
query12	163	111	102	102
query13	1686	395	390	390
query14	11243	6677	7404	6677
query15	289	170	183	170
query16	8042	462	414	414
query17	1669	572	539	539
query18	2137	288	296	288
query19	356	152	145	145
query20	120	120	111	111
query21	206	103	99	99
query22	4645	4368	4376	4368
query23	35149	34356	34219	34219
query24	10425	2438	2432	2432
query25	638	381	385	381
query26	1385	185	154	154
query27	2836	288	288	288
query28	8174	2432	2456	2432
query29	890	412	411	411
query30	291	156	149	149
query31	1059	807	845	807
query32	97	60	59	59
query33	778	299	306	299
query34	945	513	523	513
query35	904	751	747	747
query36	1115	968	981	968
query37	148	76	73	73
query38	4545	4297	4322	4297
query39	1488	1424	1435	1424
query40	277	131	100	100
query41	49	43	45	43
query42	110	101	108	101
query43	547	491	499	491
query44	1223	818	817	817
query45	187	169	166	166
query46	1210	743	725	725
query47	1922	1823	1822	1822
query48	413	304	311	304
query49	1139	403	406	403
query50	807	386	395	386
query51	7276	7166	7159	7159
query52	100	95	88	88
query53	262	182	207	182
query54	1228	412	404	404
query55	80	79	81	79
query56	272	252	240	240
query57	1233	1121	1108	1108
query58	215	202	239	202
query59	3063	2950	2860	2860
query60	264	235	256	235
query61	110	107	112	107
query62	919	669	664	664
query63	217	189	186	186
query64	5284	744	728	728
query65	3328	3249	3258	3249
query66	1460	334	330	330
query67	16201	15707	15674	15674
query68	4867	555	556	555
query69	446	263	262	262
query70	1269	1145	1170	1145
query71	353	263	319	263
query72	6408	4174	3998	3998
query73	773	363	370	363
query74	10591	9123	9030	9030
query75	3450	2680	2658	2658
query76	2929	1028	1044	1028
query77	382	281	354	281
query78	10519	9516	9382	9382
query79	1928	625	620	620
query80	1133	444	427	427
query81	529	237	227	227
query82	906	117	124	117
query83	246	159	198	159
query84	238	74	71	71
query85	1247	312	300	300
query86	429	311	305	305
query87	4832	4630	4645	4630
query88	3341	2233	2198	2198
query89	405	298	313	298
query90	2056	195	190	190
query91	138	104	107	104
query92	66	53	56	53
query93	1573	542	547	542
query94	894	306	284	284
query95	366	255	254	254
query96	625	282	283	282
query97	2843	2648	2706	2648
query98	224	199	200	199
query99	1570	1322	1332	1322
Total cold run time: 305048 ms
Total hot run time: 191658 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 32.51 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit fdd637c9439d6ef4565acd2ae2a4560f8ee69019, data reload: false

query1	0.03	0.04	0.03
query2	0.07	0.04	0.04
query3	0.23	0.07	0.07
query4	1.62	0.10	0.10
query5	0.41	0.43	0.41
query6	1.18	0.65	0.65
query7	0.02	0.02	0.02
query8	0.04	0.04	0.04
query9	0.59	0.52	0.50
query10	0.56	0.56	0.59
query11	0.15	0.10	0.10
query12	0.13	0.11	0.11
query13	0.62	0.62	0.59
query14	2.83	2.73	2.74
query15	0.89	0.84	0.84
query16	0.39	0.40	0.38
query17	0.98	1.09	1.03
query18	0.23	0.21	0.21
query19	1.90	1.86	2.04
query20	0.01	0.01	0.01
query21	15.38	0.60	0.59
query22	2.57	2.46	2.11
query23	16.97	0.99	0.87
query24	3.34	1.39	0.38
query25	0.10	0.09	0.07
query26	0.67	0.15	0.14
query27	0.06	0.05	0.06
query28	10.85	1.11	1.07
query29	12.59	3.24	3.25
query30	0.25	0.06	0.06
query31	2.84	0.40	0.38
query32	3.27	0.47	0.47
query33	3.03	3.00	2.99
query34	17.09	4.50	4.50
query35	4.58	4.55	4.54
query36	0.69	0.48	0.49
query37	0.08	0.06	0.05
query38	0.05	0.03	0.03
query39	0.03	0.02	0.03
query40	0.16	0.13	0.12
query41	0.08	0.03	0.02
query42	0.03	0.02	0.02
query43	0.04	0.03	0.03
Total cold run time: 107.63 s
Total hot run time: 32.51 s

@koarz
Copy link
Contributor Author

koarz commented Dec 6, 2024

run buildall

@koarz
Copy link
Contributor Author

koarz commented Dec 6, 2024

run beut

@koarz
Copy link
Contributor Author

koarz commented Dec 6, 2024

run buildall

@koarz
Copy link
Contributor Author

koarz commented Dec 7, 2024

run cloudut

@koarz
Copy link
Contributor Author

koarz commented Dec 7, 2024

run buildall

@koarz
Copy link
Contributor Author

koarz commented Dec 7, 2024

run cloudut

@doris-robot
Copy link

TPC-H: Total hot run time: 40377 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 23a4d8c7a7da2be0dc9409a91a6f0a191445862a, data reload: false

------ Round 1 ----------------------------------
q1	17615	7484	7324	7324
q2	2039	186	171	171
q3	10585	1091	1231	1091
q4	10576	766	697	697
q5	7632	2751	2671	2671
q6	241	147	148	147
q7	993	622	606	606
q8	9248	1930	1956	1930
q9	6744	6563	6557	6557
q10	6958	2328	2344	2328
q11	463	270	266	266
q12	416	222	219	219
q13	17784	3059	3056	3056
q14	253	219	225	219
q15	583	544	527	527
q16	661	569	597	569
q17	1010	611	548	548
q18	7276	6749	6757	6749
q19	1348	1037	975	975
q20	456	180	189	180
q21	4199	3304	3233	3233
q22	367	325	314	314
Total cold run time: 107447 ms
Total hot run time: 40377 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7291	7301	7213	7213
q2	328	234	242	234
q3	2916	2879	2958	2879
q4	2090	1835	1864	1835
q5	5679	5669	5719	5669
q6	226	140	141	140
q7	2271	1887	1802	1802
q8	3432	3595	3562	3562
q9	8989	8995	9124	8995
q10	3654	3585	3572	3572
q11	614	514	505	505
q12	804	629	609	609
q13	11215	3270	3214	3214
q14	307	277	272	272
q15	584	519	517	517
q16	692	645	641	641
q17	1878	1625	1604	1604
q18	8416	7748	7722	7722
q19	1753	1680	1639	1639
q20	2121	1898	1866	1866
q21	5806	5703	5634	5634
q22	651	600	549	549
Total cold run time: 71717 ms
Total hot run time: 60673 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 192799 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 23a4d8c7a7da2be0dc9409a91a6f0a191445862a, data reload: false

============================================
query1	1264	976	955	955
query2	6216	2062	2070	2062
query3	11126	4544	4516	4516
query4	33451	23534	23533	23533
query5	3473	467	447	447
query6	281	191	189	189
query7	4000	316	311	311
query8	300	245	234	234
query9	9639	2636	2630	2630
query10	458	253	252	252
query11	17938	15131	15328	15131
query12	162	102	101	101
query13	1543	409	402	402
query14	9692	6592	7527	6592
query15	249	178	198	178
query16	8011	480	453	453
query17	1529	598	579	579
query18	2138	333	307	307
query19	342	156	150	150
query20	123	112	111	111
query21	211	112	106	106
query22	4953	4423	4387	4387
query23	35156	35066	34440	34440
query24	10427	2537	2486	2486
query25	569	384	400	384
query26	1021	159	156	156
query27	2289	292	289	289
query28	7570	2499	2451	2451
query29	691	415	414	414
query30	234	151	163	151
query31	1045	845	838	838
query32	93	54	53	53
query33	770	315	341	315
query34	1071	521	511	511
query35	894	784	776	776
query36	1113	974	971	971
query37	124	85	73	73
query38	4570	4299	4353	4299
query39	1535	1477	1458	1458
query40	208	99	99	99
query41	45	41	42	41
query42	111	99	96	96
query43	544	493	477	477
query44	1383	844	825	825
query45	192	172	184	172
query46	1219	712	729	712
query47	1998	1922	1949	1922
query48	415	321	310	310
query49	941	399	404	399
query50	832	399	388	388
query51	7438	7274	7333	7274
query52	106	91	88	88
query53	254	181	179	179
query54	1312	423	435	423
query55	86	92	83	83
query56	266	243	244	243
query57	1263	1200	1171	1171
query58	223	214	216	214
query59	3153	2987	3057	2987
query60	266	250	250	250
query61	129	106	106	106
query62	861	661	681	661
query63	212	195	182	182
query64	4039	718	668	668
query65	3263	3213	3182	3182
query66	831	307	319	307
query67	15979	15734	15587	15587
query68	4465	572	565	565
query69	423	249	256	249
query70	1174	1156	1105	1105
query71	333	244	254	244
query72	query73	628	343	343	343
query74	10285	9102	8923	8923
query75	3393	2649	2670	2649
query76	2753	1187	1196	1187
query77	370	268	268	268
query78	10161	9504	9539	9504
query79	1098	648	587	587
query80	788	425	457	425
query81	512	231	234	231
query82	1538	120	119	119
query83	172	151	143	143
query84	236	71	70	70
query85	1123	310	313	310
query86	326	305	310	305
query87	4708	4548	4686	4548
query88	3505	2179	2126	2126
query89	415	285	292	285
query90	2090	188	189	188
query91	156	101	105	101
query92	58	51	52	51
query93	1069	540	544	540
query94	841	294	279	279
query95	359	253	249	249
query96	625	273	282	273
query97	2879	2674	2695	2674
query98	223	203	201	201
query99	1670	1324	1320	1320
Total cold run time: 292216 ms
Total hot run time: 192799 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 33.13 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 23a4d8c7a7da2be0dc9409a91a6f0a191445862a, data reload: false

query1	0.03	0.03	0.03
query2	0.07	0.04	0.03
query3	0.23	0.08	0.07
query4	1.61	0.10	0.11
query5	0.44	0.40	0.41
query6	1.15	0.66	0.64
query7	0.02	0.02	0.01
query8	0.04	0.04	0.03
query9	0.58	0.51	0.51
query10	0.56	0.56	0.58
query11	0.14	0.10	0.10
query12	0.15	0.12	0.12
query13	0.62	0.61	0.60
query14	2.70	2.84	2.72
query15	0.90	0.82	0.83
query16	0.38	0.37	0.37
query17	1.02	1.08	1.08
query18	0.23	0.21	0.20
query19	1.90	1.75	1.94
query20	0.02	0.01	0.01
query21	15.37	0.60	0.57
query22	2.63	1.80	1.74
query23	17.48	0.92	0.76
query24	2.42	1.34	1.51
query25	0.21	0.25	0.23
query26	0.34	0.14	0.14
query27	0.03	0.05	0.04
query28	10.48	1.10	1.09
query29	12.56	3.31	3.33
query30	0.25	0.06	0.06
query31	2.86	0.37	0.38
query32	3.29	0.47	0.48
query33	2.95	3.14	3.04
query34	16.99	4.53	4.51
query35	4.60	4.55	4.54
query36	0.65	0.47	0.52
query37	0.09	0.06	0.06
query38	0.05	0.03	0.04
query39	0.03	0.02	0.03
query40	0.17	0.13	0.12
query41	0.08	0.02	0.02
query42	0.04	0.03	0.02
query43	0.04	0.03	0.03
Total cold run time: 106.4 s
Total hot run time: 33.13 s

@koarz
Copy link
Contributor Author

koarz commented Dec 7, 2024

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 39913 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit a37b25b5cb27a23996d5a8748c3f770bd0087cf7, data reload: false

------ Round 1 ----------------------------------
q1	17573	7534	7310	7310
q2	2043	180	176	176
q3	10564	1132	1138	1132
q4	10217	745	705	705
q5	7584	2717	2612	2612
q6	234	152	150	150
q7	1003	625	597	597
q8	9252	1841	1896	1841
q9	6690	6428	6464	6428
q10	6964	2342	2303	2303
q11	449	255	262	255
q12	419	228	225	225
q13	17753	3051	3020	3020
q14	247	218	215	215
q15	584	526	531	526
q16	635	589	604	589
q17	969	524	537	524
q18	7367	6654	6566	6566
q19	1342	1023	1032	1023
q20	475	185	181	181
q21	4294	3219	3312	3219
q22	383	320	316	316
Total cold run time: 107041 ms
Total hot run time: 39913 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7248	7238	7264	7238
q2	325	237	234	234
q3	2923	2797	3103	2797
q4	2122	1850	1797	1797
q5	5537	5698	5637	5637
q6	223	136	142	136
q7	2202	1822	1794	1794
q8	3397	3550	3428	3428
q9	9046	9010	8975	8975
q10	3577	3580	3572	3572
q11	610	518	514	514
q12	811	633	636	633
q13	11426	3244	3169	3169
q14	318	274	284	274
q15	569	522	531	522
q16	666	639	623	623
q17	1772	1611	1569	1569
q18	7765	7563	7505	7505
q19	1682	1414	1500	1414
q20	2046	1935	1782	1782
q21	5559	5359	5316	5316
q22	648	580	556	556
Total cold run time: 70472 ms
Total hot run time: 59485 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 189655 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit a37b25b5cb27a23996d5a8748c3f770bd0087cf7, data reload: false

query1	962	387	366	366
query2	6506	2041	2049	2041
query3	6708	229	212	212
query4	34176	23543	23463	23463
query5	4422	476	457	457
query6	293	189	185	185
query7	4625	298	313	298
query8	297	240	254	240
query9	9496	2623	2628	2623
query10	479	251	269	251
query11	18193	15253	15201	15201
query12	156	115	111	111
query13	1646	422	396	396
query14	9643	6520	6639	6520
query15	253	169	183	169
query16	7974	430	457	430
query17	1618	553	533	533
query18	2100	293	289	289
query19	269	150	151	150
query20	121	116	112	112
query21	207	101	99	99
query22	4337	4212	4146	4146
query23	34865	33843	34109	33843
query24	11270	2555	2552	2552
query25	646	382	391	382
query26	1696	153	152	152
query27	2931	290	278	278
query28	8233	2414	2449	2414
query29	985	402	409	402
query30	294	153	152	152
query31	1035	830	826	826
query32	97	55	58	55
query33	768	303	292	292
query34	951	510	516	510
query35	892	752	746	746
query36	1090	957	970	957
query37	125	71	76	71
query38	4310	4215	4225	4215
query39	1472	1448	1619	1448
query40	281	99	100	99
query41	46	42	45	42
query42	110	95	100	95
query43	533	482	484	482
query44	1269	825	803	803
query45	192	166	168	166
query46	1161	693	711	693
query47	1962	1878	1862	1862
query48	404	314	315	314
query49	1225	400	404	400
query50	793	390	379	379
query51	7252	6998	7143	6998
query52	106	94	85	85
query53	255	188	179	179
query54	1175	405	413	405
query55	82	79	75	75
query56	261	231	233	231
query57	1262	1110	1129	1110
query58	221	205	215	205
query59	3135	2987	2998	2987
query60	288	272	273	272
query61	132	127	127	127
query62	889	680	680	680
query63	209	197	185	185
query64	5266	744	626	626
query65	3277	3168	3205	3168
query66	1441	310	299	299
query67	15991	15788	15574	15574
query68	4797	572	572	572
query69	434	255	257	255
query70	1126	1116	1105	1105
query71	333	262	246	246
query72	6410	3781	4033	3781
query73	764	355	355	355
query74	10414	9188	9014	9014
query75	3317	2626	2659	2626
query76	2907	1144	1060	1060
query77	378	277	295	277
query78	10549	9476	9377	9377
query79	1154	603	597	597
query80	975	425	433	425
query81	518	226	229	226
query82	1304	119	122	119
query83	230	156	144	144
query84	240	73	70	70
query85	1189	289	291	289
query86	325	305	306	305
query87	4695	4640	4439	4439
query88	3547	2170	2118	2118
query89	406	307	294	294
query90	2047	191	189	189
query91	138	106	106	106
query92	61	52	53	52
query93	1076	538	555	538
query94	789	301	256	256
query95	357	255	250	250
query96	617	294	277	277
query97	2889	2727	2665	2665
query98	231	193	204	193
query99	1589	1353	1307	1307
Total cold run time: 301165 ms
Total hot run time: 189655 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 33.1 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit a37b25b5cb27a23996d5a8748c3f770bd0087cf7, data reload: false

query1	0.04	0.03	0.03
query2	0.07	0.03	0.03
query3	0.23	0.08	0.08
query4	1.60	0.10	0.10
query5	0.42	0.40	0.40
query6	1.15	0.65	0.66
query7	0.02	0.02	0.01
query8	0.04	0.03	0.03
query9	0.58	0.51	0.51
query10	0.56	0.54	0.54
query11	0.15	0.11	0.10
query12	0.15	0.12	0.11
query13	0.60	0.60	0.60
query14	2.74	2.86	2.72
query15	0.91	0.81	0.84
query16	0.38	0.39	0.39
query17	1.04	1.04	1.07
query18	0.23	0.21	0.21
query19	1.96	1.89	1.98
query20	0.02	0.01	0.01
query21	15.35	0.58	0.58
query22	3.04	2.07	1.83
query23	16.95	1.01	0.78
query24	2.89	1.28	1.39
query25	0.24	0.20	0.14
query26	0.35	0.13	0.15
query27	0.05	0.05	0.04
query28	10.38	1.10	1.08
query29	12.54	3.29	3.29
query30	0.25	0.07	0.07
query31	2.87	0.39	0.39
query32	3.26	0.47	0.47
query33	3.00	3.04	3.03
query34	16.81	4.56	4.45
query35	4.64	4.55	4.50
query36	0.65	0.47	0.49
query37	0.08	0.06	0.05
query38	0.06	0.04	0.04
query39	0.03	0.02	0.02
query40	0.16	0.14	0.13
query41	0.08	0.02	0.02
query42	0.03	0.02	0.02
query43	0.04	0.04	0.03
Total cold run time: 106.64 s
Total hot run time: 33.1 s

@koarz
Copy link
Contributor Author

koarz commented Dec 8, 2024

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 39833 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit 3dfc80da51f7345b70b01756183a4b753cc2337b, data reload: false

------ Round 1 ----------------------------------
q1	17598	7480	7296	7296
q2	2059	174	165	165
q3	10598	1070	1194	1070
q4	10575	765	726	726
q5	7610	2664	2750	2664
q6	241	149	146	146
q7	990	632	618	618
q8	9223	1806	1915	1806
q9	6725	6474	6507	6474
q10	6980	2301	2318	2301
q11	467	259	258	258
q12	418	229	223	223
q13	17774	3005	2994	2994
q14	254	217	212	212
q15	570	524	503	503
q16	643	577	560	560
q17	967	544	548	544
q18	7296	6646	6551	6551
q19	1323	936	945	936
q20	478	175	173	173
q21	3955	3309	3410	3309
q22	371	306	304	304
Total cold run time: 107115 ms
Total hot run time: 39833 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7179	7205	7215	7205
q2	324	226	225	225
q3	2811	2748	2905	2748
q4	2072	1809	1817	1809
q5	5690	5633	5626	5626
q6	228	138	142	138
q7	2255	1828	1795	1795
q8	3382	3582	3473	3473
q9	9000	9109	9032	9032
q10	3590	3507	3508	3507
q11	587	508	505	505
q12	812	614	616	614
q13	10813	3237	3167	3167
q14	308	280	285	280
q15	584	529	532	529
q16	667	633	655	633
q17	1852	1636	1622	1622
q18	8203	7792	7702	7702
q19	1699	1572	1630	1572
q20	2113	1874	1866	1866
q21	5580	5473	5421	5421
q22	640	587	539	539
Total cold run time: 70389 ms
Total hot run time: 60008 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 196096 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit 3dfc80da51f7345b70b01756183a4b753cc2337b, data reload: false

query1	1228	957	958	957
query2	6228	2074	1995	1995
query3	10979	4485	4397	4397
query4	67154	28499	23648	23648
query5	5010	474	458	458
query6	403	200	204	200
query7	5565	299	295	295
query8	327	231	250	231
query9	8924	2605	2577	2577
query10	449	242	238	238
query11	17454	15108	16110	15108
query12	152	111	110	110
query13	1523	428	412	412
query14	10005	6625	7795	6625
query15	209	189	196	189
query16	6695	457	482	457
query17	1081	581	600	581
query18	1028	363	304	304
query19	203	151	147	147
query20	115	109	111	109
query21	211	100	102	100
query22	4847	4534	4535	4534
query23	34761	34341	34800	34341
query24	5527	2434	2394	2394
query25	496	378	368	368
query26	649	148	162	148
query27	1974	294	297	294
query28	4458	2455	2427	2427
query29	652	440	414	414
query30	220	164	149	149
query31	1010	806	864	806
query32	69	54	58	54
query33	422	288	286	286
query34	944	532	517	517
query35	886	793	759	759
query36	1096	967	958	958
query37	120	76	74	74
query38	4538	4411	4346	4346
query39	1518	1487	1484	1484
query40	207	102	98	98
query41	45	42	42	42
query42	112	99	96	96
query43	542	504	498	498
query44	1189	824	839	824
query45	182	168	169	168
query46	1157	733	715	715
query47	2057	1960	1941	1941
query48	415	316	331	316
query49	715	404	392	392
query50	842	396	393	393
query51	7361	7116	7125	7116
query52	100	85	87	85
query53	257	178	174	174
query54	498	405	395	395
query55	79	73	76	73
query56	258	212	230	212
query57	1258	1105	1120	1105
query58	227	218	214	214
query59	3220	3246	3131	3131
query60	285	249	251	249
query61	132	131	131	131
query62	793	668	681	668
query63	211	195	193	193
query64	1503	670	644	644
query65	3291	3185	3202	3185
query66	701	294	306	294
query67	16028	15477	15715	15477
query68	4077	560	561	560
query69	409	261	244	244
query70	1188	1110	1131	1110
query71	355	246	250	246
query72	6707	4098	4015	4015
query73	753	351	349	349
query74	10207	8922	9034	8922
query75	3384	2667	2667	2667
query76	1846	1082	1075	1075
query77	529	270	271	270
query78	10594	9478	9463	9463
query79	2049	617	598	598
query80	1306	409	425	409
query81	518	236	224	224
query82	619	116	119	116
query83	172	143	136	136
query84	276	65	67	65
query85	994	309	295	295
query86	387	296	292	292
query87	4716	4471	4598	4471
query88	3747	2153	2124	2124
query89	419	289	295	289
query90	2036	179	182	179
query91	137	102	106	102
query92	67	51	48	48
query93	2560	549	550	549
query94	888	299	285	285
query95	349	239	239	239
query96	635	276	277	276
query97	2890	2655	2667	2655
query98	215	189	197	189
query99	1605	1326	1314	1314
Total cold run time: 319429 ms
Total hot run time: 196096 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 33.22 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit 3dfc80da51f7345b70b01756183a4b753cc2337b, data reload: false

query1	0.03	0.03	0.03
query2	0.07	0.03	0.03
query3	0.23	0.07	0.08
query4	1.61	0.10	0.11
query5	0.41	0.41	0.42
query6	1.16	0.66	0.68
query7	0.02	0.01	0.02
query8	0.04	0.04	0.03
query9	0.57	0.51	0.51
query10	0.54	0.54	0.57
query11	0.13	0.10	0.10
query12	0.13	0.11	0.12
query13	0.60	0.61	0.60
query14	2.72	2.74	2.84
query15	0.91	0.83	0.82
query16	0.40	0.40	0.39
query17	1.00	1.09	1.04
query18	0.21	0.21	0.22
query19	1.93	1.84	2.00
query20	0.01	0.01	0.01
query21	15.36	0.59	0.61
query22	2.66	2.09	2.36
query23	17.03	0.89	0.81
query24	2.99	1.59	1.20
query25	0.23	0.13	0.19
query26	0.48	0.14	0.14
query27	0.06	0.04	0.04
query28	10.35	1.12	1.08
query29	12.58	3.22	3.27
query30	0.24	0.06	0.07
query31	2.85	0.40	0.39
query32	3.24	0.46	0.47
query33	2.99	3.02	3.21
query34	17.14	4.44	4.44
query35	4.51	4.49	4.48
query36	0.68	0.49	0.50
query37	0.09	0.06	0.06
query38	0.04	0.04	0.04
query39	0.04	0.03	0.03
query40	0.18	0.13	0.14
query41	0.08	0.03	0.02
query42	0.04	0.02	0.02
query43	0.04	0.03	0.03
Total cold run time: 106.62 s
Total hot run time: 33.22 s

@koarz
Copy link
Contributor Author

koarz commented Dec 8, 2024

run buildall

@doris-robot
Copy link

TPC-H: Total hot run time: 39766 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpch-tools
Tpch sf100 test result on commit f1c0c0b004a64729d8bd1fde2f267b72b8862cab, data reload: false

------ Round 1 ----------------------------------
q1	17589	7977	7273	7273
q2	2042	176	165	165
q3	10612	1065	1130	1065
q4	10563	796	692	692
q5	7599	2742	2675	2675
q6	244	144	145	144
q7	983	636	620	620
q8	9247	1879	1921	1879
q9	6722	6488	6433	6433
q10	7007	2284	2327	2284
q11	465	268	260	260
q12	425	226	221	221
q13	17788	3036	3032	3032
q14	251	214	207	207
q15	567	527	519	519
q16	656	575	561	561
q17	1003	525	578	525
q18	7214	6723	6614	6614
q19	1345	975	941	941
q20	457	182	175	175
q21	4062	3173	3258	3173
q22	378	322	308	308
Total cold run time: 107219 ms
Total hot run time: 39766 ms

----- Round 2, with runtime_filter_mode=off -----
q1	7226	7206	7214	7206
q2	320	226	229	226
q3	2886	2790	2911	2790
q4	2087	1803	1841	1803
q5	5731	5647	5633	5633
q6	223	139	137	137
q7	2232	1778	1798	1778
q8	3361	3544	3446	3446
q9	8951	9221	9049	9049
q10	3598	3557	3545	3545
q11	605	497	519	497
q12	811	635	650	635
q13	11140	3311	3240	3240
q14	323	273	287	273
q15	594	527	515	515
q16	687	649	621	621
q17	1845	1621	1615	1615
q18	8181	7945	7659	7659
q19	1702	1572	1560	1560
q20	2098	1908	1870	1870
q21	5599	5599	5426	5426
q22	640	589	539	539
Total cold run time: 70840 ms
Total hot run time: 60063 ms

@doris-robot
Copy link

TPC-DS: Total hot run time: 196819 ms
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/tpcds-tools
TPC-DS sf100 test result on commit f1c0c0b004a64729d8bd1fde2f267b72b8862cab, data reload: false

query1	1240	928	927	927
query2	6246	1994	2042	1994
query3	10973	4364	4436	4364
query4	66750	28957	23580	23580
query5	4914	465	453	453
query6	422	200	174	174
query7	5556	316	299	299
query8	324	243	236	236
query9	8641	2635	2593	2593
query10	453	243	234	234
query11	17468	15210	15916	15210
query12	160	103	99	99
query13	1459	420	415	415
query14	10485	7547	7001	7001
query15	208	195	186	186
query16	7160	436	491	436
query17	1058	625	609	609
query18	2069	313	302	302
query19	198	166	164	164
query20	123	120	125	120
query21	200	111	107	107
query22	4859	4623	4693	4623
query23	34971	34772	34601	34601
query24	5746	2570	2513	2513
query25	484	388	401	388
query26	650	149	153	149
query27	1967	285	285	285
query28	4627	2493	2457	2457
query29	663	415	445	415
query30	215	158	147	147
query31	1009	834	830	830
query32	74	52	53	52
query33	425	299	293	293
query34	927	515	559	515
query35	870	765	763	763
query36	1103	940	966	940
query37	122	72	70	70
query38	4543	4334	4354	4334
query39	1562	1485	1469	1469
query40	199	100	96	96
query41	45	43	44	43
query42	110	101	99	99
query43	534	492	487	487
query44	1180	820	831	820
query45	186	167	170	167
query46	1163	741	731	731
query47	2068	1942	1954	1942
query48	410	305	326	305
query49	723	400	407	400
query50	833	405	384	384
query51	7431	7185	7128	7128
query52	94	83	87	83
query53	263	177	176	176
query54	500	399	398	398
query55	76	71	104	71
query56	258	238	254	238
query57	1272	1131	1124	1124
query58	212	201	200	200
query59	3096	2926	2803	2803
query60	265	238	245	238
query61	117	108	109	108
query62	764	651	654	651
query63	209	193	179	179
query64	1405	691	665	665
query65	3241	3205	3208	3205
query66	708	304	300	300
query67	16050	15580	15815	15580
query68	3957	588	554	554
query69	441	250	256	250
query70	1166	1111	1130	1111
query71	352	260	242	242
query72	6373	4142	3985	3985
query73	774	349	351	349
query74	10260	8983	9103	8983
query75	3359	2661	2673	2661
query76	1940	1078	1031	1031
query77	490	273	281	273
query78	10351	9540	9456	9456
query79	1550	610	614	610
query80	872	427	432	427
query81	481	231	232	231
query82	1266	118	118	118
query83	194	141	140	140
query84	277	102	63	63
query85	878	292	288	288
query86	323	300	274	274
query87	4687	4509	4587	4509
query88	3621	2145	2113	2113
query89	429	293	298	293
query90	2045	186	182	182
query91	137	101	102	101
query92	71	49	49	49
query93	1939	549	549	549
query94	778	288	291	288
query95	347	244	242	242
query96	624	280	270	270
query97	2886	2721	2698	2698
query98	213	195	192	192
query99	1595	1324	1319	1319
Total cold run time: 319012 ms
Total hot run time: 196819 ms

@doris-robot
Copy link

ClickBench: Total hot run time: 33.09 s
machine: 'aliyun_ecs.c7a.8xlarge_32C64G'
scripts: https://github.com/apache/doris/tree/master/tools/clickbench-tools
ClickBench test result on commit f1c0c0b004a64729d8bd1fde2f267b72b8862cab, data reload: false

query1	0.03	0.03	0.06
query2	0.06	0.03	0.03
query3	0.24	0.07	0.07
query4	1.63	0.11	0.11
query5	0.43	0.41	0.40
query6	1.13	0.66	0.65
query7	0.02	0.01	0.01
query8	0.04	0.03	0.03
query9	0.57	0.51	0.51
query10	0.56	0.55	0.57
query11	0.14	0.11	0.11
query12	0.14	0.11	0.11
query13	0.62	0.62	0.59
query14	2.71	2.83	2.82
query15	0.91	0.83	0.83
query16	0.37	0.38	0.38
query17	1.00	1.01	1.07
query18	0.22	0.21	0.20
query19	1.86	1.82	1.99
query20	0.02	0.01	0.01
query21	15.36	0.58	0.60
query22	2.95	2.22	2.06
query23	17.02	0.96	0.88
query24	3.24	1.12	2.48
query25	0.28	0.22	0.11
query26	0.56	0.14	0.14
query27	0.05	0.04	0.04
query28	9.31	1.12	1.08
query29	12.55	3.24	3.19
query30	0.25	0.07	0.06
query31	2.86	0.37	0.38
query32	3.27	0.47	0.47
query33	3.00	3.04	3.06
query34	17.10	4.44	4.53
query35	4.51	4.47	4.47
query36	0.68	0.47	0.50
query37	0.08	0.06	0.06
query38	0.04	0.04	0.03
query39	0.04	0.02	0.02
query40	0.18	0.12	0.12
query41	0.08	0.02	0.03
query42	0.03	0.02	0.02
query43	0.04	0.03	0.03
Total cold run time: 106.18 s
Total hot run time: 33.09 s

@koarz
Copy link
Contributor Author

koarz commented Dec 8, 2024

run beut

@koarz
Copy link
Contributor Author

koarz commented Dec 8, 2024

run beut

@koarz
Copy link
Contributor Author

koarz commented Dec 8, 2024

run beut

@doris-robot
Copy link

TeamCity be ut coverage result:
Function Coverage: 39.00% (10175/26092)
Line Coverage: 29.63% (84312/284532)
Region Coverage: 28.70% (43281/150786)
Branch Coverage: 25.20% (21908/86932)
Coverage Report: http://coverage.selectdb-in.cc/coverage/ccad421c5072729e13a277000d4e9236994c607b_ccad421c5072729e13a277000d4e9236994c607b/report/index.html

@koarz koarz closed this Dec 8, 2024
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

Successfully merging this pull request may close these issues.

2 participants