Abstract:Expectile regression is a useful alternative to conditional mean and quantile regression for characterizing a conditional response distribution, especially when the distribution is asymmetric or when its tails are of interest. In this article, we propose a class of scalar‐on‐function linear expectile regression models where the functional slope parameter is assumed to reside in a reproducing kernel Hilbert space (RKHS). Our approach addresses numerous drawbacks to existing estimators based on functional principal components analysis (FPCA), which make implicit assumptions about RKHS eigenstructure. We show that our proposed estimator can achieve an optimal rate of convergence by establishing asymptotic minimax lower and upper bounds on the prediction error. Under this framework, we propose a flexible implementation based on the alternating direction method of multipliers algorithm. Simulation studies and an analysis of real‐world neuroimaging data validate our methodology and theoretical findings and, furthermore, suggest its superiority over FPCA‐based approaches in numerous settings. La régression expectile constitue une alternative à la régression quantile ou moyenne conditionnelle fort utile pour caractériser la distribution conditionnelle d'une variable réponse et plus particulièrement lorsque celle‐ci est asymétrique ou ses queues sont d'intérêt particulier. Les auteurs de cet article proposent une classe de modèles de régression linéaire scalaire sur fonction où le paramètre de pente fonctionnelle est supposé appartenir à un espace de Hilbert à noyau auto‐reproduisant (RKHS). L'approche proposée remédie aux nombreux inconvénients des estimateurs usuels basés sur l'analyse en composantes principales fonctionnelles (FPCA) et qui font des hypothèses implicites sur la structure de valeurs propres de l'espace RKHS. Ce travail montre que l'estimateur proposé peut atteindre un taux de convergence optimal en établissant des limites inférieures et supérieures asymptotiques minimax sur l'erreur de prédiction. Une implémentation flexible basée sur l'algorithme des directions alternées est également proposée. Enfin, les auteurs présentent les résultats d'études de simulation et une analyse de données en neuroimagerie, ce qui permet de valider leur méthodologie et résultats théoriques et qui fait ressortir la supériorité de l'approche proposée comparativement aux approches basées sur la FPCA et ce dans de nombreux contextes.

Learning Rates for Kernel-Based Expectile Regression

Variable Selection in Expectile Regression

Expectile regression for analyzing heteroscedasticity in high dimension

Flexible Expectile Regression in Reproducing Kernel Hilbert Space

Optimal Rates for Regularized Conditional Mean Embedding Learning

Optimal learning rates for Kernel Conjugate Gradient regression

Learning Rates of Least-Square Regularized Regression with Polynomial Kernels

Inference for High-Dimensional Linear Expectile Regression with De-Biasing Method

Reproducing kernel‐based functional linear expectile regression

Statistical Learning of Value-at-Risk and Expected Shortfall

Learning Rates for Classification with Gaussian Kernels

Fast convergence of the Expectation Maximization algorithm under a logarithmic Sobolev inequality

Expectiles for subordinated Gaussian processes with applications

Estimating the Mean of a Non-Linear Function of Conditional Expectation

Extreme expectile estimation for short-tailed data

Optimal Learning Rates for Distribution Regression

Full length article: Approximation by multivariate Bernstein-Durrmeyer operators and learning rates of least-squares regularized regression with multivariate polynomial kernels

Learning Rates of Empirical Risk Minimization Regression with Beta-Mixing Inputs

Sublinear expectation linear regression

Optimal Rate of Kernel Regression in Large Dimensions

Enhanced Feature Learning via Regularisation: Integrating Neural Networks and Kernel Methods