d4dad1dbcb87be4173668ecd083d0e802b050279
[ghc.git] / testsuite / tests / perf / haddock / all.T
1 # We do not add peak_megabytes_allocated and max_bytes_used to these tests, as
2 # they are somewhat unreliable, and it is harder to re-run these numbers to
3 # detect outliers, as described in Note [residency]. See #9556.
4
5 test('haddock.base',
6      [unless(in_tree_compiler(), skip)
7      ,stats_num_field('bytes allocated',
8           [(wordsize(64), 7946284944,  5)
9             # 2012-08-14: 5920822352 (amd64/Linux)
10             # 2012-09-20: 5829972376 (amd64/Linux)
11             # 2012-10-08: 5902601224 (amd64/Linux)
12             # 2013-01-17: 6064874536 (x86_64/Linux)
13             # 2013-02-10: 6282746976 (x86_64/Linux)
14             # 2013-09-17: 6634886456 (x86_64/Linux)
15             # 2013-09-18: 6294339840 (x86_64/Linux)
16             # 2013-11-21: 6756213256 (x86_64/Linux)
17             # 2014-01-12: 7128342344 (x86_64/Linux)
18             # 2014-06-12: 7498123680 (x86_64/Linux)
19             # 2014-08-05: 7992757384 (x86_64/Linux - bugfix for #314, Haddock now parses more URLs)
20             # 2014-08-08: 7946284944 (x86_64/Linux - Haddock updates to attoparsec-0.12.1.0)
21           ,(platform('i386-unknown-mingw32'), 3746792812, 5)
22             # 2013-02-10:                     3358693084 (x86/Windows)
23             # 2013-11-13:                     3097751052 (x86/Windows, 64bit machine)
24             # 2014-04-04:                     3548581572 (x86/Windows, 64bit machine)
25             # 2014-08-05: XXX TODO UPDATE ME XXX
26             # 2014-09-03: Windows laptop, no known reason
27           ,(wordsize(32), 3799130400, 1)])
28             # 2012-08-14: 3046487920 (x86/OSX)
29             # 2012-10-30: 2955470952 (x86/Windows)
30             # 2013-02-10: 3146596848 (x86/OSX)
31             # 2014-02-22: 3554624600 (x86/Linux - new haddock)
32             # 2014-06-29: 3799130400 (x86/Linux)
33             # 2014-08-05: XXX TODO UPDATE ME XXX
34       ],
35      stats,
36      ['../../../../libraries/base/dist-install/doc/html/base/base.haddock.t'])
37
38 test('haddock.Cabal',
39      [unless(in_tree_compiler(), skip)
40      ,stats_num_field('bytes allocated',
41           [(wordsize(64), 4267311856, 5)
42             # 2012-08-14: 3255435248 (amd64/Linux)
43             # 2012-08-29: 3324606664 (amd64/Linux, new codegen)
44             # 2012-10-08: 3373401360 (amd64/Linux)
45             # 2013-03-13: 3626604824 (amd64/Linux) Cabal updated
46             # 2013-03-28: 3517301864 (amd64/Linux) fixed #7796
47             # 2013-04-26: 3658801800 (amd64/Linux) Cabal updated
48             # 2013-08-26: 3808466816 (amd64/Linux) Cabal updated
49             # 2013-11-21: 3908586784 (amd64/Linux) Cabal updated
50             # 2013-12-12: 3828567272 (amd64/Linux)
51             # 2014-01-12: 3979151552 (amd64/Linux) new parser
52             # 2014-06-29: 4200993768 (amd64/Linux)
53             # 2014-08-05: 4493770224 (x86_64/Linux - bugfix for #314, Haddock now parses more URLs)
54             # 2014-08-29: 4267311856 (x86_64/Linux - w/w for INLINABLE things)
55
56           ,(platform('i386-unknown-mingw32'), 2052220292, 5)
57             # 2012-10-30:                     1733638168 (x86/Windows)
58             # 2013-02-10:                     1906532680 (x86/Windows)
59             # 2014-01-28:                     1966911336 (x86/Windows)
60             # 2014-04-24:                     2052220292 (x86/Windows)
61             # 2014-08-05: XXX TODO UPDATE ME XXX
62
63           ,(wordsize(32), 2127198484, 1)])
64             # 2012-08-14: 1648610180 (x86/OSX)
65             # 2014-01-22: 1986290624 (x86/Linux)
66             # 2014-06-29: 2127198484 (x86/Linux)
67             # 2014-08-05: XXX TODO UPDATE ME XXX
68       ],
69      stats,
70      ['../../../../libraries/Cabal/Cabal/dist-install/doc/html/Cabal/Cabal.haddock.t'])
71
72 test('haddock.compiler',
73      [unless(in_tree_compiler(), skip)
74      ,stats_num_field('bytes allocated',
75           [(wordsize(64), 29809571376, 10)
76             # 2012-08-14: 26070600504 (amd64/Linux)
77             # 2012-08-29: 26353100288 (amd64/Linux, new CG)
78             # 2012-09-18: 26882813032 (amd64/Linux)
79             # 2012-11-12: 25990254632 (amd64/Linux)
80             # 2014-07-17: 29809571376 (amd64/Linux) general round of updates
81             # 2012-11-27: 28708374824 (amd64/Linux)
82           ,(platform('i386-unknown-mingw32'), 14328363592, 10)
83             # 2012-10-30:                     13773051312 (x86/Windows)
84             # 2013-02-10:                     14925262356 (x86/Windows)
85             # 2013-11-13:                     14328363592 (x86/Windows, 64bit machine)
86           ,(wordsize(32), 15110426000, 1)])
87             # 2012-08-14: 13471797488 (x86/OSX)
88             # 2014-01-22: 14581475024 (x86/Linux - new haddock)
89             # 2014-06-29: 15110426000 (x86/Linux)
90       ],
91      stats,
92      ['../../../../compiler/stage2/doc/html/ghc/ghc.haddock.t'])