July 24, 2008 10:37

spi-b626

9in x 6in

fm

CONTENTS

Preface

1. Introduction

1.1
1.2
1.3

1.4
1.5
1.6

History . . . . . . . . . . . . . . . . . . . . . . . . .
The Lay-Out . . . . . . . . . . . . . . . . . . . . . .
Concepts and Denitions . . . . . . . . . . . . . . .
1.3.1 The problem: What is downscaling and why
downscaling . . . . . . . . . . . . . . . . . .
1.3.1.1 What is downscaling? . . . . . . .
1.3.1.2 Why downscaling? . . . . . . . . .
1.3.2 Notations . . . . . . . . . . . . . . . . . . .
1.3.3 Denitions . . . . . . . . . . . . . . . . . . .
1.3.4 Anomalies in ESD . . . . . . . . . . . . . . .
Further Reading . . . . . . . . . . . . . . . . . . . .
Examples . . . . . . . . . . . . . . . . . . . . . . . .
Exercises . . . . . . . . . . . . . . . . . . . . . . . .

. . .
. . .
. . .
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

2. Downscaling Strategies
2.1
2.2

2.3
2.4

3
3
8
10
12
18
19
19
20
22

Dierent Approaches . . . . . . . . . . . . . . . . . . . .
2.1.1 Dynamical downscaling . . . . . . . . . . . . . . .
Philosophy Behind ESD . . . . . . . . . . . . . . . . . .
2.2.1 Considerations . . . . . . . . . . . . . . . . . . . .
2.2.2 A physics-inspired view . . . . . . . . . . . . . . .
2.2.3 A purely statistical view . . . . . . . . . . . . . .
What is Skillful Scale? . . . . . . . . . . . . . . . . . .
Further Reading . . . . . . . . . . . . . . . . . . . . . . .
2.4.1 Dynamical versus empiricalstatistical downscaling

EMPIRICAL-STATISTICAL DOWNSCALING
World Scientific Publishing Co. Pte. Ltd.
http://www.worldscibooks.com/environsci/6908.html

1
3
3

vii

22
22
24
26
32
34
34
39
39

July 24, 2008 10:37

viii

spi-b626

9in x 6in

fm

EmpiricalStatistical Downscaling

2.5

2.6

Examples . . . . . . . . . . .
2.5.1 Geostrophic balance
2.5.2 Basic preprocessing .
Exercises . . . . . . . . . . .

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

3. Predictors and Preprocessing

3.1
3.2

3.3
3.4

3.5

Choosing Predictors . . . . . . . . . . . . . . . .
Circulation Indices . . . . . . . . . . . . . . . .
3.2.1 Stationarity . . . . . . . . . . . . . . . .
3.2.2 The North Atlantic Oscillation (NAO) .
3.2.3 Autocorrelation and degrees of freedom .
3.2.4 Empirical orthogonal functions . . . . .
3.2.5 Varieties of EOF analysis . . . . . . . . .
3.2.5.1 Rotated EOFs . . . . . . . . .
3.2.6 Complex and frequency-domain EOFs .
3.2.6.1 Complex EOFs . . . . . . . . .
3.2.6.2 Frequency-domain EOFs . . . .
3.2.6.3 Extended EOFs . . . . . . . . .
3.2.6.4 Mixed-eld and common EOFs
3.2.7 EOF in ESD . . . . . . . . . . . . . . . .
Further Reading . . . . . . . . . . . . . . . . . .
Examples . . . . . . . . . . . . . . . . . . . . . .
3.4.1 Basic EOF analysis . . . . . . . . . . . .
3.4.2 Mixed-eld EOFs . . . . . . . . . . . . .
3.4.3 Extended EOFs . . . . . . . . . . . . . .
Exercises . . . . . . . . . . . . . . . . . . . . . .

45
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.

4. Linear Techniques
4.1
4.2
4.3
4.4

4.5
4.6

Introduction . . . . . . . . . . . . . . . . . . . . . . .
Linear Multivariate Methods . . . . . . . . . . . . . .
Regression . . . . . . . . . . . . . . . . . . . . . . . .
4.3.1 Multivariate regression models . . . . . . . . .
Canonical Correlation Analysis . . . . . . . . . . . .
4.4.1 Classical CCA . . . . . . . . . . . . . . . . . .
4.4.1.1 Linear relationships from the model
based on CCA . . . . . . . . . . . .
Singular Vectors . . . . . . . . . . . . . . . . . . . . .
Further Reading . . . . . . . . . . . . . . . . . . . . .

EMPIRICAL-STATISTICAL DOWNSCALING
World Scientific Publishing Co. Pte. Ltd.
http://www.worldscibooks.com/environsci/6908.html

41
41
41
44

45
46
48
49
49
50
57
57
58
58
59
59
59
60
61
62
62
62
63
64
67

.
.
.
.
.
.

.
.
.
.
.
.

67
69
70
71
73
73

. .
. .
. .

75
76
78

July 24, 2008 10:37

spi-b626

9in x 6in

fm

Contents

4.7
4.8

ix

Examples . . . . . . . . . . . . . . . . . . . . . . . . . . .
4.7.1 CCA . . . . . . . . . . . . . . . . . . . . . . . . .
Exercises . . . . . . . . . . . . . . . . . . . . . . . . . . .

5. Nonlinear Techniques
5.1
5.2
5.3
5.4
5.5
5.6

5.7

Introduction . . . . . . . . . . .
The Analog Model . . . . . . .
5.2.1 Caveats . . . . . . . . .
Classication Methods . . . . .
5.3.1 Cluster analysis . . . . .
Neural Nets . . . . . . . . . . .
Further Reading . . . . . . . . .
Examples . . . . . . . . . . . . .
5.6.1 Analog model (Fig. 5.8)
5.6.2 Clustering . . . . . . . .
Exercises . . . . . . . . . . . . .

85
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.

6. Predictions and Diagnostics

6.1
6.2
6.3

6.4
6.5

6.6
6.7
6.8

Common Notations and Denitions . . . . . . . . . . .

Predictions . . . . . . . . . . . . . . . . . . . . . . . . .
Trends . . . . . . . . . . . . . . . . . . . . . . . . . . .
6.3.1 Test for trends . . . . . . . . . . . . . . . . . . .
6.3.1.1 Trend-testing based on Spearman
rank coecient . . . . . . . . . . . . .
6.3.1.2 MannKendall rank correlation
statistics . . . . . . . . . . . . . . . . .
6.3.1.3 Trend testing based on students t-test
Diagnostics . . . . . . . . . . . . . . . . . . . . . . . . .
Statistical Inference . . . . . . . . . . . . . . . . . . . .
6.5.1 Condence intervals for rejection . . . . . . . .
6.5.2 Students t-test . . . . . . . . . . . . . . . . . .
6.5.3 F -statistics . . . . . . . . . . . . . . . . . . . .
Quality Control . . . . . . . . . . . . . . . . . . . . . .
Model Skill . . . . . . . . . . . . . . . . . . . . . . . . .
Evaluation Techniques . . . . . . . . . . . . . . . . . .
6.8.1 Anomalous correlation . . . . . . . . . . . . . .
6.8.2 The R2 score . . . . . . . . . . . . . . . . . . .
6.8.3 Root-mean-square-error . . . . . . . . . . . . .

EMPIRICAL-STATISTICAL DOWNSCALING
World Scientific Publishing Co. Pte. Ltd.
http://www.worldscibooks.com/environsci/6908.html

78
80
84

85
85
86
90
91
93
93
96
96
97
97
98

.
.
.
.

98
99
100
101

101

.
.
.
.
.
.
.
.
.
.
.
.
.

101
102
102
103
103
104
104
105
108
108
109
109
110

July 24, 2008 10:37

spi-b626

9in x 6in

fm

EmpiricalStatistical Downscaling

6.8.4 Representative statistical distributions . . . .

6.9 Cross-Validation . . . . . . . . . . . . . . . . . . . . .
6.10 Further Reading . . . . . . . . . . . . . . . . . . . . .
6.11 Examples (Fig. 6.7) . . . . . . . . . . . . . . . . . . .
6.11.1 Illustration of cross-validation . . . . . . . . .
6.11.2 Using ESD to validate cyclone counts . . . . .
6.11.3 ESD to reconstruct historical climate records
6.11.4 The objDS-function . . . . . . . . . . . . . . .
6.11.5 Prediction pattern . . . . . . . . . . . . . . .
6.11.6 Simple trend-t . . . . . . . . . . . . . . . . .
6.11.7 Scatter plot and correlation . . . . . . . . . .
6.12 Exercises . . . . . . . . . . . . . . . . . . . . . . . . .

.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.

7. Shortcomings and Limitations

7.1
7.2

7.3
7.4

Level of Variability . . . . . . . . . . . .
Model Stationarity . . . . . . . . . . . .
7.2.1 Perfect model simulation . . . .
7.2.2 Historical simulation . . . . . .
7.2.3 Minimizing risk of nonstationarity
7.2.4 Consistency . . . . . . . . . . . .
7.2.5 Take-home messages . . . . . . .
Examples . . . . . . . . . . . . . . . . . .
Exercises . . . . . . . . . . . . . . . . . .

122
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.

8. Reducing Uncertainties
8.1
8.2
8.3
8.4
8.5
8.6
8.7
8.8
8.9

Cascading Uncertainties . . . . . . . . . .
De-Trending in the Calibration . . . . . .
Using Dierent Predictands . . . . . . . .
Optimal Number of Predictors . . . . . . .
Trends versus Time Slices . . . . . . . . .
Domain Choices . . . . . . . . . . . . . . .
Spatial Coherence . . . . . . . . . . . . . .
Projection of EOFs . . . . . . . . . . . . .
The Common EOF Frame . . . . . . . . .
8.9.1 Adjustment and bias corrections . .
8.10 Further Reading . . . . . . . . . . . . . . .
8.11 The Example Illustrating Huths Paradox
8.12 Exercises . . . . . . . . . . . . . . . . . . .
EMPIRICAL-STATISTICAL DOWNSCALING
World Scientific Publishing Co. Pte. Ltd.
http://www.worldscibooks.com/environsci/6908.html

111
111
113
113
113
114
116
116
118
120
120
120

124
125
126
126
127
128
130
131
133
134

.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.

134
136
138
138
139
141
142
144
144
146
146
148
148

July 24, 2008 10:37

spi-b626

9in x 6in

fm

Contents

xi

9. Downscaling Extremes and PDFs

9.1
9.2
9.3

9.4
9.5

9.6

9.7
9.8

9.9

149

Outliers and Extremes . . . . . . . . . . . . . . . .

Robustness and Resistance . . . . . . . . . . . . . .
9.2.1 Estimators . . . . . . . . . . . . . . . . . . .
Probability Density Functions . . . . . . . . . . . .
9.3.1 What is probability distribution and why
use it? . . . . . . . . . . . . . . . . . . . . .
9.3.2 Normal/Gaussian distribution . . . . . . . .
9.3.3 The exponential distribution . . . . . . . . .
9.3.4 Gamma distribution . . . . . . . . . . . . .
Extreme Values . . . . . . . . . . . . . . . . . . . .
9.4.1 iid-test . . . . . . . . . . . . . . . . . . . . .
Downscaling Extreme Indices . . . . . . . . . . . .
9.5.1 Generalized linear models . . . . . . . . . .
9.5.1.1 Maximum likelihood estimation . .
Downscaling PDFs . . . . . . . . . . . . . . . . . .
9.6.1 Downscaling PDFs for temperature . . . . .
9.6.2 Downscaling PDFs for daily precipitation .
Further Reading . . . . . . . . . . . . . . . . . . . .
Examples . . . . . . . . . . . . . . . . . . . . . . . .
9.8.1 iid-test . . . . . . . . . . . . . . . . . . . . .
9.8.2 Downscaling PDFs for normal distribution .
9.8.3 Downscaling PDFs exponential distribution
Exercises . . . . . . . . . . . . . . . . . . . . . . . .

.
.
.
.

.
.
.
.

.
.
.
.

149
150
151
151

.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.

.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.

151
152
153
154
156
158
160
160
161
162
163
163
168
169
169
169
170
172

10. Weather Generator

173

10.1
10.2
10.3
10.4

Weather Generator . . . . . . . . . . .
Richardson Type WG for Precipitation
Downscaling Based on WG . . . . . . .
Examples . . . . . . . . . . . . . . . . .
10.4.1 Coin-ipping . . . . . . . . . . .
10.5 Exercises . . . . . . . . . . . . . . . . .

.
.
.
.
.
.

.
.
.
.
.
.

.
.
.
.
.
.

.
.
.
.
.
.

.
.
.
.
.
.

.
.
.
.
.
.

.
.
.
.
.
.

.
.
.
.
.
.

.
.
.
.
.
.

.
.
.
.
.
.

11. Implementing ESD

11.1 Numerical Tools . . . . . . .
11.1.1 R . . . . . . . . . . .
11.1.1.1 clim.pact .
11.1.1.2 Rclim . . .
EMPIRICAL-STATISTICAL DOWNSCALING
World Scientific Publishing Co. Pte. Ltd.
http://www.worldscibooks.com/environsci/6908.html

174
175
176
177
177
177
179

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

.
.
.
.

179
179
179
181

July 24, 2008 10:37

xii

spi-b626

9in x 6in

fm

EmpiricalStatistical Downscaling

11.1.2 SDSM . . . . . .
11.1.3 ClimateExplorer .
11.1.4 ENSEMBLE-S2D
11.2 Gridding the Results . .
11.2.1 Kriging . . . . . .
11.2.2 Residual kriging .
11.2.3 GIS-packages . .

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

.
.
.
.
.
.
.

181
181
181
182
182
182
186

Acknowledgments

188

Appendix
References

189
201

Index

213

EMPIRICAL-STATISTICAL DOWNSCALING
World Scientific Publishing Co. Pte. Ltd.
http://www.worldscibooks.com/environsci/6908.html