Fitting a sparse GLM with glm4

Angus Hughes

2026-04-10

Getting started

To demonstrate the glm4 package, let’s generate a large hypothetical dataset. This data has 3,000 levels of a factor and a binary outcome \(y\). Each level has somewhere between 1 to over 1000 observations of the outcome and an average success probability.

We are interested in fitting a logistic regression that includes all 3,000 factor levels as fixed effects. The model matrix has 918,664 rows and 3,001 columns — one per factor level plus an intercept.

This matrix is extremely sparse: each row contains exactly one 1 (for its factor level) and 3,000 zeros. In practice, on many machines calling stats::glm() here will either throw a cannot allocate vector of size ... error due to RAM constraints or crash the R session entirely.

glm4() with sparse = TRUE stores and operates on only the non-zero elements of the model matrix, making model fitting possible.

library(glm4)

run_time <- system.time(
    fit <- glm4(y ~ level, data = df, family = binomial(), sparse = TRUE)
)

run_time
#>    user  system elapsed 
#>   3.852   0.201   4.085

This took 4.1 seconds to fit.

We can briefly inspect the output:

# Only print a subset of the output, restoring existing max.print after
old_options <- options(max.print = 20)
print(fit)
#> 
#> Call:  glm4(formula = y ~ level, data = df, family = binomial(), sparse = TRUE)
#> 
#> Coefficients:
#> (Intercept)       level2       level3       level4       level5       level6  
#>   -0.994351     0.716720     1.757630     0.682572    -1.925669    -0.028275  
#>      level7       level8       level9      level10      level11      level12  
#>    1.863014     0.597470     1.282033     1.672683    -0.673356     0.876158  
#>     level13      level14      level15      level16      level17      level18  
#>    0.498268    -0.797408    -0.458244    -0.281942    -0.256689     1.048418  
#>     level19      level20  
#>   -0.023457    -1.174702  
#>  [ reached 'max' / getOption("max.print") -- omitted 2980 entries ]
#> 
#> Degrees of Freedom: 918663 Total (i.e. Null);  915664 Residual
#> Null Deviance:       1239000 
#> Residual Deviance: 1123000   AIC: 1129000
options(old_options)

For a saturated factor model, the model-implied probability for each level equals the observed proportion exactly. We can verify this: the inverse-logit of the level-specific linear predictor should match the raw sample mean.

# Model-implied probability for level 2
plogis(sum(coef(fit)[1:2]))
#> [1] 0.4310345

# Should equal the observed proportion
with(df, mean(y[level == 2]))
#> [1] 0.4310345

How it works

glm4() is a wrapper for MatrixModels::glm4(), which fits GLMs using iteratively reweighted least squares (IRLS) with support for both dense and sparse matrix arithmetic via the Matrix package (distributed with every R installation).

The raw output of MatrixModels::glm4() is an S4 object of class "glpModel" with four slots:

The glm4 package unpacks this S4 object and assembles a familiar S3 list that closely mirrors the structure of a stats::glm object. The original "glpModel" S4 fit is preserved in fit$glm4_fit and remains accessible for users who need lower-level access.

class(fit$glm4_fit)
#> [1] "glpModel"
#> attr(,"package")
#> [1] "MatrixModels"

Inspecting the output

MatrixModels provides no print, summary, or inference methods. The glm4 package fills this gap. The summary method provides coefficients, standard errors, and test statistics that mirror a standard R GLM as closely as possible:

summary(fit)
#> 
#> Call:
#> glm4(formula = y ~ level, data = df, family = binomial(), sparse = TRUE)
#> 
#> Coefficients:
#>              Estimate Std. Error z value Pr(>|z|)    
#> (Intercept) -0.994351   0.116465  -8.538  < 2e-16 ***
#> level2       0.716720   0.220716   3.247 0.001165 ** 
#> level3       1.757630   0.161540  10.880  < 2e-16 ***
#> level4       0.682572   0.236244   2.889 0.003861 ** 
#> level5      -1.925669   0.239745  -8.032 9.58e-16 ***
#> level6      -0.028275   0.216162  -0.131 0.895930    
#> level7       1.863014   0.147706  12.613  < 2e-16 ***
#> level8       0.597470   0.187097   3.193 0.001406 ** 
#> level9       1.282033   0.203327   6.305 2.88e-10 ***
#> level10      1.672683   0.189031   8.849  < 2e-16 ***
#> level11     -0.673356   0.182689  -3.686 0.000228 ***
#> level12      0.876158   0.143292   6.114 9.69e-10 ***
#> level13      0.498268   0.163232   3.053 0.002269 ** 
#> level14     -0.797408   0.168882  -4.722 2.34e-06 ***
#> level15     -0.458244   0.182939  -2.505 0.012248 *  
#> level16     -0.281942   0.163974  -1.719 0.085537 .  
#> level17     -0.256689   0.170471  -1.506 0.132129    
#> level18      1.048418   0.348929   3.005 0.002659 ** 
#> level19     -0.023457   0.179480  -0.131 0.896017    
#> level20     -1.174702   0.390960  -3.005 0.002659 ** 
#> level21      0.822501   0.205784   3.997 6.42e-05 ***
#> level22     -0.805707   0.268008  -3.006 0.002645 ** 
#> level23      0.322258   0.212216   1.519 0.128879    
#> level24      0.982923   0.158092   6.217 5.05e-10 ***
#> level25      0.297809   0.154132   1.932 0.053338 .  
#> level26      0.316952   0.246347   1.287 0.198231    
#> level27      0.459428   0.228561   2.010 0.044421 *  
#> level28      0.909452   0.160334   5.672 1.41e-08 ***
#> level29      0.139936   0.193191   0.724 0.468858    
#> level30      2.226495   0.244325   9.113  < 2e-16 ***
#> level31     -0.253107   0.247466  -1.023 0.306405    
#> level32      0.946342   0.213500   4.433 9.31e-06 ***
#> level33     -0.775668   0.226532  -3.424 0.000617 ***
#> level34      0.301204   0.203327   1.481 0.138505    
#> level35     -0.192230   0.242019  -0.794 0.427035    
#> level36     -0.452568   0.181288  -2.496 0.012546 *  
#> level37      1.611125   0.190280   8.467  < 2e-16 ***
#> level38     -1.968493   0.274640  -7.168 7.64e-13 ***
#> level39      1.016824   0.189839   5.356 8.50e-08 ***
#> level40      1.702282   0.141123  12.062  < 2e-16 ***
#> level41      0.072018   0.186386   0.386 0.699205    
#> level42      0.038840   0.244372   0.159 0.873718    
#> level43      0.677682   0.217848   3.111 0.001866 ** 
#> level44      0.814178   0.146424   5.560 2.69e-08 ***
#> level45     -0.575280   0.207438  -2.773 0.005550 ** 
#> level46      1.068459   0.164470   6.496 8.23e-11 ***
#> level47      0.210727   0.156844   1.344 0.179096    
#> level48      1.610537   0.180489   8.923  < 2e-16 ***
#> level49      0.821882   0.187696   4.379 1.19e-05 ***
#> level50      0.957310   0.160978   5.947 2.73e-09 ***
#> level51      1.006047   0.146156   6.883 5.84e-12 ***
#> level52     -0.373925   0.189649  -1.972 0.048647 *  
#> level53      0.259240   0.155343   1.669 0.095153 .  
#> level54     -0.329029   0.170311  -1.932 0.053368 .  
#> level55     -0.591477   0.183422  -3.225 0.001261 ** 
#> level56      0.096410   0.166674   0.578 0.562972    
#> level57      1.385218   0.294031   4.711 2.46e-06 ***
#> level58      0.832147   0.158748   5.242 1.59e-07 ***
#> level59      0.902784   0.199406   4.527 5.97e-06 ***
#> level60      0.965778   0.205283   4.705 2.54e-06 ***
#> level61      0.692349   0.157206   4.404 1.06e-05 ***
#> level62      1.195655   0.141058   8.476  < 2e-16 ***
#> level63     -0.546094   0.197133  -2.770 0.005603 ** 
#> level64      3.296936   0.181279  18.187  < 2e-16 ***
#> level65      1.092207   0.177156   6.165 7.04e-10 ***
#> level66     -0.050873   0.161134  -0.316 0.752215    
#> level67      2.444207   0.170284  14.354  < 2e-16 ***
#> level68      0.998709   0.149260   6.691 2.22e-11 ***
#> level69      1.435723   0.155451   9.236  < 2e-16 ***
#> level70      1.176673   0.368492   3.193 0.001407 ** 
#> level71      1.127883   0.208149   5.419 6.01e-08 ***
#> level72     -0.486832   0.157888  -3.083 0.002046 ** 
#> level73      0.441250   0.177380   2.488 0.012861 *  
#> level74     -0.280885   0.167637  -1.676 0.093826 .  
#> level75     -2.017910   0.602736  -3.348 0.000814 ***
#> level76      1.734330   0.183844   9.434  < 2e-16 ***
#> level77      1.649138   0.172926   9.537  < 2e-16 ***
#> level78      1.389005   0.259925   5.344 9.10e-08 ***
#> level79      1.010100   0.212278   4.758 1.95e-06 ***
#> level80     -0.304932   0.393673  -0.775 0.438587    
#> level81      0.734840   0.147530   4.981 6.33e-07 ***
#> level82     -0.271315   0.360713  -0.752 0.451953    
#> level83     -0.281942   0.221571  -1.272 0.203207    
#> level84      0.616589   0.202962   3.038 0.002382 ** 
#> level85      0.325695   0.194827   1.672 0.094580 .  
#> level86      1.011643   0.158405   6.386 1.70e-10 ***
#> level87      1.247547   0.153622   8.121 4.63e-16 ***
#> level88      0.269952   0.192690   1.401 0.161224    
#> level89      1.136814   0.149994   7.579 3.48e-14 ***
#> level90      0.652065   0.158738   4.108 3.99e-05 ***
#> level91     -0.470586   0.189598  -2.482 0.013064 *  
#> level92      0.450736   0.239731   1.880 0.060084 .  
#> level93      1.761110   0.184132   9.564  < 2e-16 ***
#> level94      0.545550   0.158181   3.449 0.000563 ***
#> level95      0.543216   0.169889   3.197 0.001386 ** 
#> level96      0.789012   0.164027   4.810 1.51e-06 ***
#> level97     -1.586947   0.300663  -5.278 1.30e-07 ***
#> level98      0.679641   0.193035   3.521 0.000430 ***
#> level99      1.129730   0.138226   8.173 3.01e-16 ***
#> level100     1.308324   0.166580   7.854 4.03e-15 ***
#> level101     0.819998   0.239528   3.423 0.000618 ***
#> level102     0.847298   0.178919   4.736 2.18e-06 ***
#> level103     0.267978   0.183340   1.462 0.143837    
#> level104    -0.113607   0.179721  -0.632 0.527303    
#> level105     1.920470   0.148936  12.895  < 2e-16 ***
#> level106     0.871119   0.170315   5.115 3.14e-07 ***
#> level107     1.099712   0.209100   5.259 1.45e-07 ***
#> level108     0.285031   0.172572   1.652 0.098603 .  
#> level109     0.654025   0.244585   2.674 0.007495 ** 
#> level110    -0.357784   0.179862  -1.989 0.046678 *  
#> level111    -0.221698   0.160249  -1.383 0.166525    
#> level112     0.788015   0.226598   3.478 0.000506 ***
#> level113     1.171423   0.152268   7.693 1.44e-14 ***
#> level114    -0.077721   0.152157  -0.511 0.609493    
#> level115     0.449887   0.185352   2.427 0.015216 *  
#> level116    -1.121904   0.203902  -5.502 3.75e-08 ***
#> level117    -0.134114   0.271522  -0.494 0.621353    
#> level118     0.702830   0.201104   3.495 0.000474 ***
#> level119     0.383836   0.155582   2.467 0.013621 *  
#> level120     1.160772   0.145477   7.979 1.47e-15 ***
#> level121     1.163911   0.183325   6.349 2.17e-10 ***
#> level122     1.171900   0.155122   7.555 4.20e-14 ***
#> level123    -0.415110   0.229014  -1.813 0.069894 .  
#> level124    -0.331925   0.160780  -2.064 0.038973 *  
#> level125    -1.077922   0.213852  -5.041 4.64e-07 ***
#> level126     0.380131   0.165298   2.300 0.021467 *  
#> level127     0.779576   0.179956   4.332 1.48e-05 ***
#> level128     2.484442   0.300247   8.275  < 2e-16 ***
#> level129     0.288245   0.162946   1.769 0.076901 .  
#> level130     1.907739   0.184040  10.366  < 2e-16 ***
#> level131     1.046798   0.168984   6.195 5.84e-10 ***
#> level132     1.733168   0.165451  10.475  < 2e-16 ***
#> level133     0.600186   0.179933   3.336 0.000851 ***
#> level134     1.083299   0.189289   5.723 1.05e-08 ***
#> level135     1.144924   0.191877   5.967 2.42e-09 ***
#> level136     1.402927   0.170649   8.221  < 2e-16 ***
#> level137     0.700734   0.165583   4.232 2.32e-05 ***
#> level138     0.885457   0.148179   5.976 2.29e-09 ***
#> level139     2.001748   0.185921  10.767  < 2e-16 ***
#> level140     2.151972   0.145927  14.747  < 2e-16 ***
#> level141     1.191304   0.161100   7.395 1.42e-13 ***
#> level142    -0.187643   0.157881  -1.189 0.234633    
#> level143    -0.719018   0.204121  -3.523 0.000427 ***
#> level144     0.753189   0.260147   2.895 0.003789 ** 
#> level145     0.383442   0.184024   2.084 0.037191 *  
#> level146     1.299733   0.154604   8.407  < 2e-16 ***
#> level147     0.055071   0.172445   0.319 0.749458    
#> level148     1.089661   0.227477   4.790 1.67e-06 ***
#> level149     1.608718   0.192126   8.373  < 2e-16 ***
#> level150    -0.050194   0.221673  -0.226 0.820866    
#> level151    -0.540979   0.238685  -2.266 0.023421 *  
#> level152    -0.220671   0.171967  -1.283 0.199415    
#> level153    -0.001982   0.265735  -0.007 0.994049    
#> level154     2.514177   0.181409  13.859  < 2e-16 ***
#> level155    -0.590653   0.185308  -3.187 0.001436 ** 
#> level156     1.092149   0.163170   6.693 2.18e-11 ***
#> level157    -0.145646   0.179313  -0.812 0.416650    
#> level158    -2.183702   0.600655  -3.636 0.000277 ***
#> level159    -0.047103   0.213955  -0.220 0.825753    
#> level160     1.059384   0.145672   7.272 3.53e-13 ***
#> level161    -2.322428   0.401998  -5.777 7.59e-09 ***
#> level162     0.444077   0.151308   2.935 0.003336 ** 
#> level163    -0.226323   0.164912  -1.372 0.169942    
#> level164     0.588886   0.230752   2.552 0.010710 *  
#> level165     0.497371   0.153676   3.236 0.001210 ** 
#> level166     0.218833   0.168274   1.300 0.193445    
#> level167     1.313202   0.145277   9.039  < 2e-16 ***
#> level168     1.847040   0.145855  12.664  < 2e-16 ***
#> level169     1.363711   0.177638   7.677 1.63e-14 ***
#> level170     1.557821   0.236592   6.584 4.57e-11 ***
#> level171    -0.458318   0.147068  -3.116 0.001831 ** 
#> level172    -0.122712   0.144840  -0.847 0.396872    
#> level173     0.372156   0.186053   2.000 0.045471 *  
#> level174     0.854589   0.211479   4.041 5.32e-05 ***
#> level175    -0.164886   0.202320  -0.815 0.415086    
#> level176     1.580078   0.167266   9.447  < 2e-16 ***
#> level177     0.389090   0.144901   2.685 0.007248 ** 
#> level178     1.761001   0.195926   8.988  < 2e-16 ***
#> level179     0.091231   0.163394   0.558 0.576606    
#> level180     1.757204   0.146306  12.010  < 2e-16 ***
#> level181     1.329858   0.158593   8.385  < 2e-16 ***
#> level182     0.798477   0.155627   5.131 2.89e-07 ***
#> level183     2.081094   0.159369  13.058  < 2e-16 ***
#> level184     0.100533   0.189553   0.530 0.595856    
#> level185     0.909794   0.157644   5.771 7.87e-09 ***
#> level186    -0.325922   0.166260  -1.960 0.049959 *  
#> level187     1.092469   0.182261   5.994 2.05e-09 ***
#> level188    -0.469079   0.191830  -2.445 0.014474 *  
#> level189     0.927099   0.174326   5.318 1.05e-07 ***
#> level190     1.096134   0.218060   5.027 4.99e-07 ***
#> level191     0.519206   0.174022   2.984 0.002849 ** 
#> level192     0.940699   0.170002   5.533 3.14e-08 ***
#> level193    -0.432765   0.341903  -1.266 0.205601    
#> level194     2.155680   0.162211  13.289  < 2e-16 ***
#> level195    -0.184304   0.196753  -0.937 0.348900    
#> level196    -0.448033   0.329650  -1.359 0.174109    
#> level197     1.694824   0.188598   8.986  < 2e-16 ***
#> level198    -0.540222   0.183005  -2.952 0.003158 ** 
#> level199     0.901978   0.170239   5.298 1.17e-07 ***
#> level200     0.133212   0.175823   0.758 0.448661    
#> level201    -0.470783   0.152255  -3.092 0.001988 ** 
#> level202     0.165659   0.170328   0.973 0.330758    
#> level203     0.553484   0.189138   2.926 0.003430 ** 
#> level204     0.314107   0.162604   1.932 0.053392 .  
#> level205     1.772056   0.187154   9.468  < 2e-16 ***
#> level206     0.210820   0.230080   0.916 0.359514    
#> level207     1.600487   0.237683   6.734 1.65e-11 ***
#> level208     0.922031   0.194144   4.749 2.04e-06 ***
#> level209     1.053192   0.144649   7.281 3.31e-13 ***
#> level210     0.776938   0.198353   3.917 8.97e-05 ***
#> level211     2.165989   0.153255  14.133  < 2e-16 ***
#> level212     0.274393   0.172408   1.592 0.111490    
#> level213     1.530845   0.171499   8.926  < 2e-16 ***
#> level214    -0.035268   0.533847  -0.066 0.947327    
#> level215     1.931121   0.193810   9.964  < 2e-16 ***
#> level216     1.697449   0.208483   8.142 3.89e-16 ***
#> level217     1.179274   0.205368   5.742 9.34e-09 ***
#> level218     1.390325   0.142609   9.749  < 2e-16 ***
#> level219     0.187195   0.140327   1.334 0.182207    
#> level220     1.322855   0.139772   9.464  < 2e-16 ***
#> level221     1.607881   0.171152   9.394  < 2e-16 ***
#> level222     1.683392   0.160860  10.465  < 2e-16 ***
#> level223     0.687548   0.142358   4.830 1.37e-06 ***
#> level224     1.998554   0.160852  12.425  < 2e-16 ***
#> level225     0.388215   0.142626   2.722 0.006491 ** 
#> level226    -0.346033   0.172454  -2.007 0.044800 *  
#> level227    -0.763507   0.207061  -3.687 0.000227 ***
#> level228     0.535485   0.184992   2.895 0.003796 ** 
#> level229     0.132128   0.225812   0.585 0.558464    
#> level230     0.285700   0.192045   1.488 0.136838    
#> level231     0.168780   0.162140   1.041 0.297900    
#> level232     0.884652   0.202593   4.367 1.26e-05 ***
#> level233     0.678231   0.189025   3.588 0.000333 ***
#> level234     0.537593   0.315482   1.704 0.088374 .  
#> level235     0.524348   0.201612   2.601 0.009301 ** 
#> level236     1.447672   0.193948   7.464 8.38e-14 ***
#> level237     0.506365   0.163031   3.106 0.001897 ** 
#> level238     0.319896   0.179441   1.783 0.074629 .  
#> level239     0.361829   0.162578   2.226 0.026043 *  
#> level240     1.165309   0.170826   6.822 9.00e-12 ***
#> level241     1.798456   0.168328  10.684  < 2e-16 ***
#> level242     0.779240   0.150320   5.184 2.17e-07 ***
#> level243     0.978002   0.156409   6.253 4.03e-10 ***
#> level244     0.816670   0.154178   5.297 1.18e-07 ***
#> level245     1.112134   0.178119   6.244 4.27e-10 ***
#> level246    -0.491473   0.205141  -2.396 0.016585 *  
#> level247     0.638847   0.153331   4.166 3.09e-05 ***
#> level248    -0.003769   0.155477  -0.024 0.980658    
#> level249     0.842244   0.163835   5.141 2.74e-07 ***
#> level250     0.565897   0.152203   3.718 0.000201 ***
#> level251     0.328112   0.164192   1.998 0.045680 *  
#> level252     1.471870   0.165929   8.871  < 2e-16 ***
#> level253     1.228289   0.165683   7.413 1.23e-13 ***
#> level254     0.648400   0.190608   3.402 0.000670 ***
#> level255     1.119514   0.165853   6.750 1.48e-11 ***
#> level256     1.611991   0.203838   7.908 2.61e-15 ***
#> level257     1.191711   0.216035   5.516 3.46e-08 ***
#> level258     1.189412   0.151366   7.858 3.91e-15 ***
#> level259     1.844966   0.156931  11.757  < 2e-16 ***
#> level260     1.838071   0.177314  10.366  < 2e-16 ***
#> level261     0.130386   0.165832   0.786 0.431717    
#> level262     1.054976   0.164452   6.415 1.41e-10 ***
#> level263    -0.089335   0.208099  -0.429 0.667710    
#> level264     0.220122   0.153088   1.438 0.150468    
#> level265    -0.340074   0.143064  -2.377 0.017450 *  
#> level266     0.908991   0.180433   5.038 4.71e-07 ***
#> level267    -0.995585   0.170691  -5.833 5.45e-09 ***
#> level268    -0.855440   0.188147  -4.547 5.45e-06 ***
#> level269     1.061793   0.150210   7.069 1.56e-12 ***
#> level270     1.478860   0.185879   7.956 1.78e-15 ***
#> level271     0.682915   0.216516   3.154 0.001610 ** 
#> level272     0.573430   0.170425   3.365 0.000766 ***
#> level273     0.994351   0.178174   5.581 2.39e-08 ***
#> level274     0.575641   0.188863   3.048 0.002304 ** 
#> level275     0.209637   0.183065   1.145 0.252146    
#> level276     1.262361   0.145617   8.669  < 2e-16 ***
#> level277     1.065810   0.291691   3.654 0.000258 ***
#> level278    -0.054177   0.158763  -0.341 0.732921    
#> level279     0.942793   0.154532   6.101 1.05e-09 ***
#> level280    -0.145504   0.165702  -0.878 0.379887    
#> level281    -0.620785   0.218672  -2.839 0.004527 ** 
#> level282     0.223553   0.150495   1.485 0.137424    
#> level283     0.283077   0.178177   1.589 0.112120    
#> level284     1.951885   0.178248  10.950  < 2e-16 ***
#> level285     0.183421   0.242287   0.757 0.449025    
#> level286     0.674044   0.176566   3.818 0.000135 ***
#> level287     0.169416   0.134227   1.262 0.206891    
#> level288     1.114152   0.148801   7.488 7.02e-14 ***
#> level289     0.009623   0.166948   0.058 0.954033    
#> level290     1.060601   0.142105   7.464 8.42e-14 ***
#> level291    -0.263162   0.187003  -1.407 0.159349    
#> level292     1.135019   0.152634   7.436 1.04e-13 ***
#> level293     1.217495   0.152113   8.004 1.21e-15 ***
#> level294     0.310866   0.206164   1.508 0.131590    
#> level295     0.628674   0.150244   4.184 2.86e-05 ***
#> level296     0.376167   0.175109   2.148 0.031699 *  
#> level297    -1.674559   0.214401  -7.810 5.70e-15 ***
#> level298     0.909512   0.153483   5.926 3.11e-09 ***
#> level299     0.826872   0.154148   5.364 8.13e-08 ***
#> level300     0.408835   0.155417   2.631 0.008524 ** 
#> level301     0.023402   0.170456   0.137 0.890801    
#> level302     0.840201   0.568408   1.478 0.139364    
#> level303     1.194446   0.158349   7.543 4.59e-14 ***
#> level304     0.685346   0.145048   4.725 2.30e-06 ***
#> level305    -0.621960   0.185014  -3.362 0.000775 ***
#> level306     0.504329   0.146523   3.442 0.000577 ***
#> level307    -0.504155   0.210120  -2.399 0.016424 *  
#> level308     0.430416   0.247201   1.741 0.081656 .  
#> level309     0.532316   0.198588   2.681 0.007351 ** 
#> level310     1.094122   0.140748   7.774 7.63e-15 ***
#> level311     1.397307   0.161579   8.648  < 2e-16 ***
#> level312     0.569084   0.173493   3.280 0.001038 ** 
#> level313     1.286488   0.170761   7.534 4.93e-14 ***
#> level314     0.609295   0.148496   4.103 4.08e-05 ***
#> level315     2.267317   0.209858  10.804  < 2e-16 ***
#> level316     0.455355   0.196714   2.315 0.020623 *  
#> level317    -1.245176   0.273928  -4.546 5.48e-06 ***
#> level318     0.033609   0.155043   0.217 0.828387    
#> level319     0.763736   0.138457   5.516 3.47e-08 ***
#> level320     1.120463   0.153882   7.281 3.31e-13 ***
#> level321    -0.621190   0.160613  -3.868 0.000110 ***
#> level322     1.087133   0.163822   6.636 3.22e-11 ***
#> level323     0.799646   0.174935   4.571 4.85e-06 ***
#> level324     0.337954   0.146262   2.311 0.020854 *  
#> level325     0.347724   0.287799   1.208 0.226963    
#> level326    -0.766637   0.176974  -4.332 1.48e-05 ***
#> level327     0.043981   0.179031   0.246 0.805943    
#> level328     0.426830   0.187955   2.271 0.023152 *  
#> level329     0.395695   0.197399   2.005 0.045012 *  
#> level330    -0.186499   0.225627  -0.827 0.408473    
#> level331     2.008703   0.184959  10.860  < 2e-16 ***
#> level332     0.486471   0.192664   2.525 0.011571 *  
#> level333     0.233900   0.179275   1.305 0.191993    
#> level334    -0.077232   0.201031  -0.384 0.700844    
#> level335     2.621282   0.220808  11.871  < 2e-16 ***
#> level336    -0.398174   0.211601  -1.882 0.059875 .  
#> level337    -0.168800   0.193462  -0.873 0.382925    
#> level338     0.256752   0.168807   1.521 0.128265    
#> level339    -0.240006   0.165222  -1.453 0.146326    
#> level340     1.010612   0.147291   6.861 6.82e-12 ***
#> level341     1.557336   0.161004   9.673  < 2e-16 ***
#> level342     0.862642   0.150578   5.729 1.01e-08 ***
#> level343     1.228829   0.151141   8.130 4.28e-16 ***
#> level344    -0.071605   0.172515  -0.415 0.678095    
#> level345     1.253460   0.196260   6.387 1.69e-10 ***
#> level346     0.731307   0.170928   4.278 1.88e-05 ***
#> level347     0.404582   0.165659   2.442 0.014596 *  
#> level348     1.896990   0.159609  11.885  < 2e-16 ***
#> level349     0.649511   0.337719   1.923 0.054451 .  
#> level350    -0.819881   0.257732  -3.181 0.001467 ** 
#> level351    -0.920468   0.184534  -4.988 6.10e-07 ***
#> level352    -0.437753   0.198425  -2.206 0.027374 *  
#> level353     0.883339   0.145725   6.062 1.35e-09 ***
#> level354    -0.774935   0.198932  -3.895 9.80e-05 ***
#> level355     0.579795   0.157918   3.671 0.000241 ***
#> level356     0.365743   0.168249   2.174 0.029718 *  
#> level357     0.450500   0.158432   2.844 0.004462 ** 
#> level358     0.013522   0.227505   0.059 0.952605    
#> level359     2.445785   0.193130  12.664  < 2e-16 ***
#> level360    -0.081788   0.162279  -0.504 0.614264    
#> level361    -0.340242   0.152829  -2.226 0.025995 *  
#> level362     0.731987   0.319414   2.292 0.021926 *  
#> level363     0.877781   0.142957   6.140 8.24e-10 ***
#> level364    -0.527118   0.213605  -2.468 0.013597 *  
#> level365     0.709615   0.184874   3.838 0.000124 ***
#> level366    -0.495987   0.187244  -2.649 0.008076 ** 
#> level367    -0.339101   0.179293  -1.891 0.058581 .  
#> level368     1.317843   0.159792   8.247  < 2e-16 ***
#> level369     1.013960   0.182137   5.567 2.59e-08 ***
#> level370    -0.322100   0.183555  -1.755 0.079296 .  
#> level371     0.090182   0.174615   0.516 0.605531    
#> level372     1.884562   0.165922  11.358  < 2e-16 ***
#> level373     1.399816   0.158049   8.857  < 2e-16 ***
#> level374     0.520833   0.158089   3.295 0.000986 ***
#> level375     0.925358   0.202936   4.560 5.12e-06 ***
#> level376     0.578836   0.196763   2.942 0.003263 ** 
#> level377     0.659144   0.169537   3.888 0.000101 ***
#> level378     1.608571   0.165298   9.731  < 2e-16 ***
#> level379     2.603789   0.260978   9.977  < 2e-16 ***
#> level380     0.142139   0.250505   0.567 0.570434    
#> level381     0.940478   0.144050   6.529 6.63e-11 ***
#> level382     0.424382   0.154699   2.743 0.006083 ** 
#> level383    -0.214609   0.280160  -0.766 0.443662    
#> level384     1.181814   0.180056   6.564 5.25e-11 ***
#> level385     1.432606   0.147614   9.705  < 2e-16 ***
#> level386     1.289468   0.198999   6.480 9.19e-11 ***
#> level387     1.591894   0.150607  10.570  < 2e-16 ***
#> level388     0.676943   0.153282   4.416 1.00e-05 ***
#> level389     0.796114   0.152635   5.216 1.83e-07 ***
#> level390     1.233243   0.151729   8.128 4.37e-16 ***
#> level391     0.712179   0.141384   5.037 4.72e-07 ***
#> level392    -0.011171   0.243089  -0.046 0.963348    
#> level393     0.411746   0.223174   1.845 0.065045 .  
#> level394     0.706669   0.311283   2.270 0.023197 *  
#> level395     0.143147   0.181963   0.787 0.431468    
#> level396     0.622788   0.174530   3.568 0.000359 ***
#> level397     1.190096   0.250626   4.748 2.05e-06 ***
#> level398     0.596791   0.163490   3.650 0.000262 ***
#> level399     0.477483   0.172305   2.771 0.005586 ** 
#> level400     1.087442   0.192016   5.663 1.49e-08 ***
#> level401     0.066469   0.140788   0.472 0.636842    
#> level402     0.919690   0.168850   5.447 5.13e-08 ***
#> level403    -0.089446   0.152985  -0.585 0.558770    
#> level404     1.067111   0.160316   6.656 2.81e-11 ***
#> level405     0.126263   0.235205   0.537 0.591392    
#> level406     0.153568   0.214698   0.715 0.474439    
#> level407     1.150431   0.161558   7.121 1.07e-12 ***
#> level408     0.980746   0.164833   5.950 2.68e-09 ***
#> level409     1.335795   0.182911   7.303 2.81e-13 ***
#> level410    -1.557997   0.196549  -7.927 2.25e-15 ***
#> level411     1.053192   0.139468   7.551 4.30e-14 ***
#> level412    -0.029360   0.166063  -0.177 0.859667    
#> level413     2.004298   0.161140  12.438  < 2e-16 ***
#> level414     0.580656   0.165206   3.515 0.000440 ***
#> level415     0.364959   0.150270   2.429 0.015154 *  
#> level416    -0.630753   0.212276  -2.971 0.002965 ** 
#> level417    -1.545675   0.187460  -8.245  < 2e-16 ***
#> level418     0.690669   0.203955   3.386 0.000708 ***
#> level419     1.155993   0.172623   6.697 2.13e-11 ***
#> level420     0.140337   0.164359   0.854 0.393191    
#> level421     0.090639   0.188462   0.481 0.630558    
#> level422     1.153253   0.154463   7.466 8.25e-14 ***
#> level423     0.483526   0.180587   2.678 0.007417 ** 
#> level424     1.148502   0.175385   6.548 5.81e-11 ***
#> level425     0.283505   0.155614   1.822 0.068478 .  
#> level426    -0.391943   0.270348  -1.450 0.147121    
#> level427    -0.287874   0.168576  -1.708 0.087695 .  
#> level428     0.455968   0.158773   2.872 0.004081 ** 
#> level429     0.375895   0.158812   2.367 0.017937 *  
#> level430     0.959260   0.166143   5.774 7.75e-09 ***
#> level431     1.170750   0.144227   8.117 4.76e-16 ***
#> level432     0.301204   0.319060   0.944 0.345151    
#> level433     1.245666   0.181934   6.847 7.55e-12 ***
#> level434     1.701216   0.147694  11.518  < 2e-16 ***
#> level435     0.387500   0.160405   2.416 0.015703 *  
#> level436    -0.227875   0.218247  -1.044 0.296432    
#> level437     1.725965   0.152462  11.321  < 2e-16 ***
#> level438     0.879421   0.160276   5.487 4.09e-08 ***
#> level439     0.373367   0.181728   2.055 0.039924 *  
#> level440     1.461374   0.145983  10.011  < 2e-16 ***
#> level441    -0.051935   0.171642  -0.303 0.762211    
#> level442     0.138685   0.312070   0.444 0.656750    
#> level443    -0.610313   0.205325  -2.972 0.002955 ** 
#> level444     1.687498   0.146069  11.553  < 2e-16 ***
#> level445     1.234302   0.169426   7.285 3.21e-13 ***
#> level446     0.169868   0.196978   0.862 0.388482    
#> level447     0.013522   0.151386   0.089 0.928826    
#> level448     0.229306   0.137450   1.668 0.095257 .  
#> level449     0.361102   0.159471   2.264 0.023551 *  
#> level450     0.724061   0.160386   4.514 6.35e-06 ***
#> level451     0.779240   0.139948   5.568 2.58e-08 ***
#> level452     1.273223   0.154391   8.247  < 2e-16 ***
#> level453    -0.338833   0.239035  -1.418 0.156335    
#> level454    -0.986650   0.329229  -2.997 0.002728 ** 
#> level455     1.306442   0.153731   8.498  < 2e-16 ***
#> level456     0.174720   0.172483   1.013 0.311075    
#> level457     0.285819   0.158533   1.803 0.071404 .  
#> level458    -0.434014   0.181478  -2.392 0.016777 *  
#> level459     1.541991   0.173219   8.902  < 2e-16 ***
#> level460     1.799202   0.163462  11.007  < 2e-16 ***
#> level461     1.529337   0.143138  10.684  < 2e-16 ***
#> level462    -0.143290   0.182412  -0.786 0.432141    
#> level463     0.193215   0.197438   0.979 0.327772    
#> level464    -0.015227   0.169481  -0.090 0.928409    
#> level465     1.226683   0.202839   6.048 1.47e-09 ***
#> level466     0.530617   0.172781   3.071 0.002133 ** 
#> level467    -1.637538   0.259155  -6.319 2.64e-10 ***
#> level468     0.162478   0.175072   0.928 0.353374    
#> level469    -1.397465   0.223486  -6.253 4.03e-10 ***
#> level470     0.062793   0.200924   0.313 0.754644    
#> level471     0.932793   0.145820   6.397 1.59e-10 ***
#> level472     0.840201   0.161074   5.216 1.83e-07 ***
#> level473     0.391355   0.177052   2.210 0.027078 *  
#> level474    -0.258412   0.251027  -1.029 0.303283    
#> level475    -1.342264   0.236100  -5.685 1.31e-08 ***
#> level476     1.002448   0.172507   5.811 6.21e-09 ***
#> level477     1.066672   0.194144   5.494 3.92e-08 ***
#> level478    -0.019103   0.203420  -0.094 0.925180    
#> level479     0.144019   0.153904   0.936 0.349393    
#> level480     1.112134   0.217472   5.114 3.16e-07 ***
#> level481    -0.525474   0.267581  -1.964 0.049554 *  
#> level482     0.190539   0.210629   0.905 0.365667    
#> level483    -0.588941   0.229008  -2.572 0.010120 *  
#> level484     0.722930   0.180315   4.009 6.09e-05 ***
#> level485     0.731987   0.207488   3.528 0.000419 ***
#> level486     1.086725   0.170239   6.384 1.73e-10 ***
#> level487     0.635406   0.228395   2.782 0.005402 ** 
#> level488     0.167673   0.156116   1.074 0.282811    
#> level489    -1.737964   0.263856  -6.587 4.49e-11 ***
#> level490     1.380948   0.146327   9.437  < 2e-16 ***
#> level491     0.149288   0.189474   0.788 0.430751    
#> level492    -0.036438   0.189223  -0.193 0.847297    
#> level493     0.323183   0.188319   1.716 0.086136 .  
#> level494     0.664537   0.135133   4.918 8.76e-07 ***
#> level495     0.600447   0.158467   3.789 0.000151 ***
#> level496     1.613390   0.167976   9.605  < 2e-16 ***
#> level497    -0.189419   0.187970  -1.008 0.313595    
#> level498     0.490825   0.206724   2.374 0.017582 *  
#> level499     1.286058   0.166291   7.734 1.04e-14 ***
#> level500     1.682858   0.165754  10.153  < 2e-16 ***
#> level501     0.948542   0.210034   4.516 6.30e-06 ***
#> level502     0.637676   0.307435   2.074 0.038062 *  
#> level503     0.127251   0.166630   0.764 0.445063    
#> level504    -0.867789   0.193994  -4.473 7.70e-06 ***
#> level505     1.418609   0.164357   8.631  < 2e-16 ***
#> level506    -0.123679   0.302685  -0.409 0.682829    
#> level507     0.594965   0.209621   2.838 0.004536 ** 
#> level508    -1.085090   0.259105  -4.188 2.82e-05 ***
#> level509     0.301204   0.168136   1.791 0.073225 .  
#> level510     1.113896   0.145098   7.677 1.63e-14 ***
#> level511     0.586710   0.156358   3.752 0.000175 ***
#> level512     0.486757   0.198499   2.452 0.014199 *  
#> level513     0.064815   0.211088   0.307 0.758803    
#> level514     0.588886   0.197019   2.989 0.002799 ** 
#> level515     0.256752   0.217165   1.182 0.237091    
#> level516     0.335106   0.338694   0.989 0.322464    
#> level517    -0.881638   0.185826  -4.744 2.09e-06 ***
#> level518     1.536926   0.148544  10.347  < 2e-16 ***
#> level519     0.965152   0.167826   5.751 8.88e-09 ***
#> level520    -0.122410   0.167780  -0.730 0.465642    
#> level521     1.378551   0.138379   9.962  < 2e-16 ***
#> level522     0.361829   0.242076   1.495 0.134995    
#> level523     0.530046   0.224893   2.357 0.018429 *  
#> level524     2.210747   0.214409  10.311  < 2e-16 ***
#> level525    -0.244843   0.194670  -1.258 0.208488    
#> level526     0.272631   0.187347   1.455 0.145610    
#> level527    -0.273337   0.157496  -1.736 0.082649 .  
#> level528     0.326706   0.156359   2.089 0.036667 *  
#> level529     1.073279   0.151193   7.099 1.26e-12 ***
#> level530     1.482235   0.173788   8.529  < 2e-16 ***
#> level531    -0.232878   0.227149  -1.025 0.305257    
#> level532     0.080963   0.184040   0.440 0.659993    
#> level533     1.144445   0.145248   7.879 3.29e-15 ***
#> level534     1.050793   0.161596   6.503 7.89e-11 ***
#> level535     0.640420   0.158811   4.033 5.52e-05 ***
#> level536    -0.344402   0.177750  -1.938 0.052676 .  
#> level537     0.284675   0.196029   1.452 0.146444    
#> level538     0.642131   0.161802   3.969 7.23e-05 ***
#> level539     0.892160   0.160023   5.575 2.47e-08 ***
#> level540     0.559033   0.149572   3.738 0.000186 ***
#> level541     0.524348   0.175126   2.994 0.002752 ** 
#> level542     1.287207   0.144254   8.923  < 2e-16 ***
#> level543     1.046995   0.176409   5.935 2.94e-09 ***
#> level544    -0.338334   0.165685  -2.042 0.041149 *  
#> level545     0.167673   0.233742   0.717 0.473164    
#> level546    -2.259891   0.342673  -6.595 4.26e-11 ***
#> level547    -0.624795   0.206846  -3.021 0.002523 ** 
#> level548     1.296868   0.151706   8.549  < 2e-16 ***
#> level549     1.807163   0.195018   9.267  < 2e-16 ***
#> level550     1.014252   0.153347   6.614 3.74e-11 ***
#> level551     1.244762   0.167401   7.436 1.04e-13 ***
#> level552    -0.056470   0.201388  -0.280 0.779166    
#> level553     2.825331   0.244896  11.537  < 2e-16 ***
#> level554     2.696571   0.173160  15.573  < 2e-16 ***
#> level555     1.833791   0.182153  10.067  < 2e-16 ***
#> level556     0.622302   0.159564   3.900 9.62e-05 ***
#> level557    -0.379967   0.208321  -1.824 0.068160 .  
#> level558     0.518928   0.192525   2.695 0.007031 ** 
#> level559     0.751681   0.161651   4.650 3.32e-06 ***
#> level560     2.083111   0.229949   9.059  < 2e-16 ***
#> level561     0.556096   0.154422   3.601 0.000317 ***
#> level562     0.829272   0.246869   3.359 0.000782 ***
#> level563    -1.115862   0.263865  -4.229 2.35e-05 ***
#> level564    -0.425095   0.165884  -2.563 0.010389 *  
#> level565     0.633808   0.163467   3.877 0.000106 ***
#> level566     0.667955   0.209203   3.193 0.001409 ** 
#> level567     1.028771   0.145652   7.063 1.63e-12 ***
#> level568     2.353353   0.181387  12.974  < 2e-16 ***
#> level569     1.763484   0.300975   5.859 4.65e-09 ***
#> level570     1.347285   0.143627   9.380  < 2e-16 ***
#> level571     1.568715   0.161457   9.716  < 2e-16 ***
#> level572     0.006965   0.292922   0.024 0.981031    
#> level573     1.941587   0.153222  12.672  < 2e-16 ***
#> level574     1.798164   0.210629   8.537  < 2e-16 ***
#> level575     1.050441   0.225780   4.652 3.28e-06 ***
#> level576    -0.493726   0.268208  -1.841 0.065647 .  
#> level577     0.908174   0.180937   5.019 5.19e-07 ***
#> level578     0.987572   0.164692   5.996 2.02e-09 ***
#> level579    -0.183439   0.168108  -1.091 0.275185    
#> level580     0.538334   0.178094   3.023 0.002505 ** 
#> level581     1.838975   0.164091  11.207  < 2e-16 ***
#> level582     1.532084   0.193817   7.905 2.68e-15 ***
#> level583     1.035509   0.147641   7.014 2.32e-12 ***
#> level584     0.736522   0.256326   2.873 0.004061 ** 
#> level585    -0.112129   0.140964  -0.795 0.426354    
#> level586     0.490694   0.180729   2.715 0.006626 ** 
#> level587     0.853273   0.151659   5.626 1.84e-08 ***
#> level588     1.440308   0.164680   8.746  < 2e-16 ***
#> level589     0.485633   0.174412   2.784 0.005363 ** 
#> level590     0.199421   0.146765   1.359 0.174215    
#> level591     0.272961   0.145959   1.870 0.061467 .  
#> level592     2.274310   0.157401  14.449  < 2e-16 ***
#> level593     0.692956   0.136461   5.078 3.81e-07 ***
#> level594     0.498451   0.182835   2.726 0.006406 ** 
#> level595     0.489651   0.160642   3.048 0.002303 ** 
#> level596    -0.085030   0.180843  -0.470 0.638222    
#> level597    -0.273082   0.168210  -1.623 0.104491    
#> level598     0.814225   0.160117   5.085 3.67e-07 ***
#> level599     0.490215   0.177162   2.767 0.005657 ** 
#> level600     1.225125   0.145594   8.415  < 2e-16 ***
#> level601     1.389005   0.177660   7.818 5.35e-15 ***
#> level602     0.611359   0.189706   3.223 0.001270 ** 
#> level603     1.597347   0.258679   6.175 6.62e-10 ***
#> level604     0.686385   0.204953   3.349 0.000811 ***
#> level605     0.914309   0.177117   5.162 2.44e-07 ***
#> level606     0.966377   0.165990   5.822 5.82e-09 ***
#> level607    -1.460342   0.228792  -6.383 1.74e-10 ***
#> level608     0.345007   0.187916   1.836 0.066363 .  
#> level609     1.169800   0.196868   5.942 2.81e-09 ***
#> level610    -0.182104   0.151359  -1.203 0.228928    
#> level611     0.313180   0.159739   1.961 0.049929 *  
#> level612     0.330474   0.206630   1.599 0.109741    
#> level613     0.099651   0.165048   0.604 0.545997    
#> level614     1.243048   0.185750   6.692 2.20e-11 ***
#> level615     1.536267   0.203253   7.558 4.08e-14 ***
#> level616     2.542702   0.189788  13.398  < 2e-16 ***
#> level617     1.258738   0.158724   7.930 2.19e-15 ***
#> level618     0.596004   0.221645   2.689 0.007167 ** 
#> level619     0.442110   0.150226   2.943 0.003251 ** 
#> level620     0.465092   0.160879   2.891 0.003841 ** 
#> level621     0.853579   0.187864   4.544 5.53e-06 ***
#> level622     0.659267   0.173831   3.793 0.000149 ***
#> level623    -1.277535   0.198035  -6.451 1.11e-10 ***
#> level624     0.977544   0.148216   6.595 4.24e-11 ***
#> level625     0.029270   0.154007   0.190 0.849263    
#> level626     1.305407   0.158969   8.212  < 2e-16 ***
#> level627     1.112134   0.362794   3.065 0.002173 ** 
#> level628    -0.666216   0.181859  -3.663 0.000249 ***
#> level629    -0.296318   0.146913  -2.017 0.043699 *  
#> level630     0.438921   0.150890   2.909 0.003627 ** 
#> level631     0.523135   0.171270   3.054 0.002255 ** 
#> level632     0.770039   0.155193   4.962 6.98e-07 ***
#> level633     1.955762   0.258324   7.571 3.70e-14 ***
#> level634    -1.198031   0.194243  -6.168 6.93e-10 ***
#> level635     0.611359   0.263865   2.317 0.020507 *  
#> level636     0.120109   0.185485   0.648 0.517284    
#> level637     0.427498   0.200321   2.134 0.032838 *  
#> level638    -1.222874   0.252921  -4.835 1.33e-06 ***
#> level639     1.608718   0.245480   6.553 5.63e-11 ***
#> level640     1.586402   0.208406   7.612 2.70e-14 ***
#> level641     0.652602   0.212698   3.068 0.002153 ** 
#> level642     0.217822   0.277565   0.785 0.432593    
#> level643     1.021750   0.142880   7.151 8.61e-13 ***
#> level644     0.473054   0.235595   2.008 0.044652 *  
#> level645     0.244692   0.218652   1.119 0.263101    
#> level646     0.444752   0.178615   2.490 0.012774 *  
#> level647    -0.033643   0.210764  -0.160 0.873175    
#> level648     0.183421   0.169146   1.084 0.278189    
#> level649     0.458047   0.254342   1.801 0.071718 .  
#> level650     1.402212   0.159822   8.774  < 2e-16 ***
#> level651     0.767393   0.158144   4.852 1.22e-06 ***
#> level652     0.406565   0.229026   1.775 0.075866 .  
#> level653    -0.024887   0.173090  -0.144 0.885671    
#> level654    -1.161630   0.197289  -5.888 3.91e-09 ***
#> level655     0.863446   0.163377   5.285 1.26e-07 ***
#> level656    -0.460936   0.268876  -1.714 0.086472 .  
#> level657    -0.542645   0.167937  -3.231 0.001233 ** 
#> level658     0.483526   0.249096   1.941 0.052244 .  
#> level659     1.769563   0.181059   9.773  < 2e-16 ***
#> level660    -0.485629   0.239600  -2.027 0.042680 *  
#> level661     0.183421   0.440590   0.416 0.677185    
#> level662    -0.033643   0.210764  -0.160 0.873175    
#> level663     0.059566   0.179257   0.332 0.739667    
#> level664     0.104831   0.200459   0.523 0.601007    
#> level665     2.262040   0.217456  10.402  < 2e-16 ***
#> level666     1.324593   0.225673   5.870 4.37e-09 ***
#> level667     0.704268   0.174280   4.041 5.32e-05 ***
#> level668     1.005651   0.190167   5.288 1.23e-07 ***
#> level669     1.622960   0.162301  10.000  < 2e-16 ***
#> level670     1.351026   0.153893   8.779  < 2e-16 ***
#> level671     0.106269   0.151365   0.702 0.482633    
#> level672     0.732255   0.140461   5.213 1.86e-07 ***
#> level673     0.914309   0.200682   4.556 5.21e-06 ***
#> level674     1.046537   0.175975   5.947 2.73e-09 ***
#> level675     1.399816   0.235012   5.956 2.58e-09 ***
#> level676     0.532445   0.155179   3.431 0.000601 ***
#> level677    -0.049773   0.154293  -0.323 0.747009    
#> level678     1.300577   0.151158   8.604  < 2e-16 ***
#> level679     0.405344   0.175073   2.315 0.020597 *  
#> level680     0.838272   0.161558   5.189 2.12e-07 ***
#> level681     1.175490   0.163013   7.211 5.55e-13 ***
#> level682     0.871749   0.233525   3.733 0.000189 ***
#> level683    -0.431588   0.178335  -2.420 0.015517 *  
#> level684     0.693246   0.192555   3.600 0.000318 ***
#> level685     0.656238   0.182359   3.599 0.000320 ***
#> level686     1.696387   0.149887  11.318  < 2e-16 ***
#> level687     1.904437   0.167400  11.377  < 2e-16 ***
#> level688     0.473054   0.159835   2.960 0.003080 ** 
#> level689     1.959432   0.187460  10.453  < 2e-16 ***
#> level690     1.227283   0.207230   5.922 3.17e-09 ***
#> level691     1.584844   0.226865   6.986 2.83e-12 ***
#> level692     0.634977   0.158233   4.013 6.00e-05 ***
#> level693    -0.491034   0.340243  -1.443 0.148968    
#> level694     1.524980   0.190402   8.009 1.15e-15 ***
#> level695    -0.468226   0.208816  -2.242 0.024942 *  
#> level696     0.766869   0.152734   5.021 5.14e-07 ***
#> level697     0.613754   0.176874   3.470 0.000520 ***
#> level698     1.590335   0.167109   9.517  < 2e-16 ***
#> level699     0.540096   0.164889   3.276 0.001055 ** 
#> level700     1.484077   0.149751   9.910  < 2e-16 ***
#> level701     0.978726   0.170851   5.729 1.01e-08 ***
#> level702    -0.199571   0.199059  -1.003 0.316068    
#> level703     0.718645   0.203679   3.528 0.000418 ***
#> level704     1.066672   0.172190   6.195 5.84e-10 ***
#> level705     0.541030   0.193948   2.790 0.005278 ** 
#> level706     0.835746   0.206209   4.053 5.06e-05 ***
#> level707     0.752211   0.194975   3.858 0.000114 ***
#> level708     0.145502   0.170542   0.853 0.393565    
#> level709     0.703955   0.141057   4.991 6.02e-07 ***
#> level710     1.841649   0.364159   5.057 4.25e-07 ***
#> level711     0.559559   0.168146   3.328 0.000875 ***
#> level712     1.108465   0.154792   7.161 8.01e-13 ***
#> level713     0.301204   0.252119   1.195 0.232208    
#> level714    -0.331318   0.168682  -1.964 0.049512 *  
#> level715     1.210574   0.211410   5.726 1.03e-08 ***
#> level716     1.582138   0.229026   6.908 4.91e-12 ***
#> level717     0.972510   0.140730   6.910 4.83e-12 ***
#> level718     0.756393   0.200634   3.770 0.000163 ***
#> level719     0.798859   0.154657   5.165 2.40e-07 ***
#> level720    -1.202873   0.280933  -4.282 1.85e-05 ***
#> level721     0.685346   0.208479   3.287 0.001011 ** 
#> level722    -0.091358   0.198213  -0.461 0.644865    
#> level723     0.476853   0.142274   3.352 0.000803 ***
#> level724    -0.849080   0.257318  -3.300 0.000968 ***
#> level725     0.668474   0.166367   4.018 5.87e-05 ***
#> level726     0.881611   0.146136   6.033 1.61e-09 ***
#> level727     0.434735   0.154604   2.812 0.004924 ** 
#> level728     1.304506   0.167000   7.811 5.66e-15 ***
#> level729     1.008671   0.152023   6.635 3.25e-11 ***
#> level730     0.690669   0.263878   2.617 0.008861 ** 
#> level731     0.032940   0.186631   0.176 0.859902    
#> level732     0.301204   0.196377   1.534 0.125078    
#> level733    -1.601582   0.249817  -6.411 1.45e-10 ***
#> level734     0.666318   0.183857   3.624 0.000290 ***
#> level735     1.085126   0.149067   7.279 3.35e-13 ***
#> level736    -0.379967   0.208321  -1.824 0.068160 .  
#> level737    -0.098291   0.193414  -0.508 0.611322    
#> level738     0.646045   0.204928   3.153 0.001619 ** 
#> level739    -0.005821   0.237294  -0.025 0.980429    
#> level740     1.219513   0.178128   6.846 7.58e-12 ***
#> level741     0.226543   0.157839   1.435 0.151208    
#> level742    -0.206226   0.188720  -1.093 0.274498    
#> level743     0.041693   0.254729   0.164 0.869986    
#> level744     2.474833   0.169466  14.604  < 2e-16 ***
#> level745     0.564194   0.184916   3.051 0.002280 ** 
#> level746     1.297538   0.223119   5.815 6.05e-09 ***
#> level747     0.049890   0.251331   0.199 0.842652    
#> level748     2.099478   0.199162  10.542  < 2e-16 ***
#> level749     0.163674   0.178805   0.915 0.359992    
#> level750     0.271450   0.153404   1.770 0.076809 .  
#> level751    -0.622750   0.244252  -2.550 0.010784 *  
#> level752     0.802274   0.187183   4.286 1.82e-05 ***
#> level753    -0.847419   0.320441  -2.645 0.008180 ** 
#> level754    -1.134524   0.209300  -5.421 5.94e-08 ***
#> level755    -1.334551   0.294490  -4.532 5.85e-06 ***
#> level756     0.494954   0.178393   2.775 0.005528 ** 
#> level757     1.323830   0.235580   5.619 1.92e-08 ***
#> level758     0.716148   0.216143   3.313 0.000922 ***
#> level759     0.590205   0.141969   4.157 3.22e-05 ***
#> level760    -1.854427   0.289986  -6.395 1.61e-10 ***
#> level761     1.566546   0.182661   8.576  < 2e-16 ***
#> level762     0.402300   0.168815   2.383 0.017168 *  
#> level763    -1.528296   0.234759  -6.510 7.51e-11 ***
#> level764     0.727723   0.172961   4.207 2.58e-05 ***
#> level765    -0.655438   0.220512  -2.972 0.002955 ** 
#> level766     0.668929   0.156856   4.265 2.00e-05 ***
#> level767     0.160918   0.175635   0.916 0.359558    
#> level768     1.187255   0.181588   6.538 6.23e-11 ***
#> level769     0.984962   0.151505   6.501 7.97e-11 ***
#> level770     1.387012   0.162334   8.544  < 2e-16 ***
#> level771    -0.317095   0.194875  -1.627 0.103700    
#> level772     0.620492   0.189925   3.267 0.001087 ** 
#> level773     0.430309   0.152672   2.819 0.004825 ** 
#> level774     0.652602   0.171471   3.806 0.000141 ***
#> level775     1.475802   0.186687   7.905 2.67e-15 ***
#> level776    -0.211159   0.183185  -1.153 0.249031    
#> level777     0.556551   0.191675   2.904 0.003689 ** 
#> level778    -0.340650   0.222832  -1.529 0.126332    
#> level779     0.241485   0.190250   1.269 0.204333    
#> level780     0.574071   0.195687   2.934 0.003350 ** 
#> level781     0.743037   0.517235   1.437 0.150844    
#> level782     1.315020   0.186034   7.069 1.56e-12 ***
#> level783     0.754678   0.140600   5.368 7.98e-08 ***
#> level784     1.449087   0.173422   8.356  < 2e-16 ***
#> level785     0.613887   0.170741   3.595 0.000324 ***
#> level786     2.373266   0.224462  10.573  < 2e-16 ***
#> level787    -0.146821   0.266329  -0.551 0.581445    
#> level788     0.270641   0.154289   1.754 0.079409 .  
#> level789     1.525796   0.156812   9.730  < 2e-16 ***
#> level790    -0.321491   0.148968  -2.158 0.030918 *  
#> level791     1.371161   0.205283   6.679 2.40e-11 ***
#> level792     1.828577   0.187868   9.733  < 2e-16 ***
#> level793     0.018535   0.178669   0.104 0.917378    
#> level794     0.598738   0.195374   3.065 0.002180 ** 
#> level795    -0.535837   0.267380  -2.004 0.045067 *  
#> level796     0.036096   0.195628   0.185 0.853610    
#> level797     1.006233   0.146578   6.865 6.66e-12 ***
#> level798    -0.258412   0.306466  -0.843 0.399117    
#> level799     0.338662   0.157270   2.153 0.031289 *  
#> level800    -0.530669   0.206288  -2.572 0.010098 *  
#> level801    -0.258412   0.171007  -1.511 0.130759    
#> level802     0.812030   0.233034   3.485 0.000493 ***
#> level803     0.150742   0.144693   1.042 0.297500    
#> level804     0.171151   0.200531   0.853 0.393388    
#> level805     1.276361   0.146635   8.704  < 2e-16 ***
#> level806     0.363508   0.154424   2.354 0.018575 *  
#> level807     0.247816   0.151900   1.631 0.102798    
#> level808     0.232211   0.180587   1.286 0.198488    
#> level809     0.901261   0.245309   3.674 0.000239 ***
#> level810    -1.335141   0.216372  -6.171 6.80e-10 ***
#> level811     0.911464   0.159432   5.717 1.08e-08 ***
#> level812    -0.290847   0.215168  -1.352 0.176465    
#> level813     0.005740   0.205303   0.028 0.977696    
#> level814     1.644939   0.236293   6.961 3.37e-12 ***
#> level815    -0.033945   0.161662  -0.210 0.833689    
#> level816    -0.230612   0.163194  -1.413 0.157623    
#> level817    -0.996011   0.198486  -5.018 5.22e-07 ***
#> level818    -0.569624   0.180995  -3.147 0.001649 ** 
#> level819     0.342589   0.233828   1.465 0.142884    
#> level820     2.038155   0.164576  12.384  < 2e-16 ***
#> level821     1.483015   0.188854   7.853 4.07e-15 ***
#> level822     1.004504   0.184036   5.458 4.81e-08 ***
#> level823     1.740924   0.177594   9.803  < 2e-16 ***
#> level824     0.867196   0.213163   4.068 4.74e-05 ***
#> level825     0.350260   0.172595   2.029 0.042419 *  
#> level826     1.104050   0.150745   7.324 2.41e-13 ***
#> level827     0.534819   0.152564   3.506 0.000456 ***
#> level828     0.120822   0.173339   0.697 0.485783    
#> level829    -0.023036   0.152382  -0.151 0.879842    
#> level830     0.176641   0.207319   0.852 0.394199    
#> level831    -0.008951   0.371223  -0.024 0.980763    
#> level832     1.919453   0.161004  11.922  < 2e-16 ***
#> level833     0.949400   0.189861   5.000 5.72e-07 ***
#> level834    -0.181222   0.256729  -0.706 0.480257    
#> level835     0.734068   0.193634   3.791 0.000150 ***
#> level836     0.480170   0.164294   2.923 0.003471 ** 
#> level837     0.842667   0.172024   4.899 9.65e-07 ***
#> level838     1.521706   0.144658  10.519  < 2e-16 ***
#> level839     0.597697   0.188604   3.169 0.001529 ** 
#> level840    -0.235939   0.167098  -1.412 0.157957    
#> level841     1.295827   0.213965   6.056 1.39e-09 ***
#> level842    -0.559737   0.245266  -2.282 0.022480 *  
#> level843    -0.372525   0.248655  -1.498 0.134092    
#> level844     0.121695   0.171740   0.709 0.478572    
#> level845    -0.421502   0.196006  -2.150 0.031519 *  
#> level846     0.628626   0.188574   3.334 0.000857 ***
#> level847     0.960062   0.190861   5.030 4.90e-07 ***
#> level848    -0.432217   0.174792  -2.473 0.013408 *  
#> level849     0.534819   0.150427   3.555 0.000377 ***
#> level850    -0.522324   0.147473  -3.542 0.000397 ***
#> level851    -0.100332   0.171072  -0.586 0.557548    
#> level852     0.643946   0.169652   3.796 0.000147 ***
#> level853     1.184525   0.160958   7.359 1.85e-13 ***
#> level854     1.662497   0.179552   9.259  < 2e-16 ***
#> level855     1.745359   0.137396  12.703  < 2e-16 ***
#> level856     1.299012   0.159574   8.141 3.94e-16 ***
#> level857    -0.357575   0.218138  -1.639 0.101168    
#> level858     1.228829   0.151141   8.130 4.28e-16 ***
#> level859     0.315190   0.185729   1.697 0.089688 .  
#> level860     0.181941   0.181148   1.004 0.315197    
#> level861     1.350397   0.155752   8.670  < 2e-16 ***
#> level862     0.153230   0.140474   1.091 0.275359    
#> level863     0.289370   0.221671   1.305 0.191757    
#> level864     0.846845   0.160937   5.262 1.43e-07 ***
#> level865    -1.385195   0.350461  -3.952 7.73e-05 ***
#> level866    -1.332926   0.286638  -4.650 3.32e-06 ***
#> level867     0.295842   0.147017   2.012 0.044189 *  
#> level868     1.346792   0.193777   6.950 3.65e-12 ***
#> level869    -0.173994   0.188181  -0.925 0.355167    
#> level870     0.687621   0.189258   3.633 0.000280 ***
#> level871     0.096410   0.158731   0.607 0.543600    
#> level872     0.893547   0.167299   5.341 9.24e-08 ***
#> level873     1.577150   0.191892   8.219  < 2e-16 ***
#> level874     0.537363   0.157567   3.410 0.000649 ***
#> level875     1.569157   0.143321  10.949  < 2e-16 ***
#> level876     0.286918   0.155898   1.840 0.065707 .  
#> level877     1.376062   0.193039   7.128 1.02e-12 ***
#> level878     1.570135   0.155077  10.125  < 2e-16 ***
#> level879     1.597347   0.200597   7.963 1.68e-15 ***
#> level880    -0.379967   0.208321  -1.824 0.068160 .  
#> level881    -0.062414   0.156875  -0.398 0.690735    
#> level882    -0.429683   0.180700  -2.378 0.017412 *  
#> level883    -0.144773   0.154264  -0.938 0.348000    
#> level884     0.637676   0.219677   2.903 0.003698 ** 
#> level885     2.380646   0.412085   5.777 7.60e-09 ***
#> level886     0.517230   0.151077   3.424 0.000618 ***
#> level887     0.237393   0.157963   1.503 0.132881    
#> level888     2.318403   0.188129  12.323  < 2e-16 ***
#> level889     0.661969   0.152894   4.330 1.49e-05 ***
#> level890    -0.075031   0.173629  -0.432 0.665642    
#> level891     0.049890   0.230752   0.216 0.828828    
#> level892     0.114840   0.152939   0.751 0.452721    
#> level893     1.044952   0.142526   7.332 2.27e-13 ***
#> level894    -0.642299   0.234005  -2.745 0.006055 ** 
#> level895     0.264390   0.179131   1.476 0.139956    
#> level896    -0.038012   0.154907  -0.245 0.806159    
#> level897     0.573848   0.179973   3.189 0.001430 ** 
#> level898     0.414715   0.143832   2.883 0.003935 ** 
#> level899     1.545528   0.170346   9.073  < 2e-16 ***
#> level900     1.172834   0.155302   7.552 4.29e-14 ***
#> level901    -0.101911   0.151523  -0.673 0.501216    
#> level902     1.040871   0.170518   6.104 1.03e-09 ***
#> level903    -1.332926   0.243507  -5.474 4.40e-08 ***
#> level904     0.754678   0.179381   4.207 2.59e-05 ***
#> level905     0.883126   0.179276   4.926 8.39e-07 ***
#> level906    -1.357024   0.323781  -4.191 2.78e-05 ***
#> level907     1.041979   0.159610   6.528 6.65e-11 ***
#> level908     0.990278   0.147345   6.721 1.81e-11 ***
#> level909     0.134150   0.167148   0.803 0.422217    
#> level910     1.033137   0.156998   6.581 4.69e-11 ***
#> level911    -0.437753   0.228641  -1.915 0.055545 .  
#> level912     1.233581   0.248732   4.959 7.07e-07 ***
#> level913    -0.349895   0.144845  -2.416 0.015707 *  
#> level914     0.338742   0.146831   2.307 0.021054 *  
#> level915     1.601344   0.144401  11.090  < 2e-16 ***
#> level916     0.517875   0.186052   2.783 0.005378 ** 
#> level917    -0.191967   0.214936  -0.893 0.371786    
#> level918     1.748123   0.444283   3.935 8.33e-05 ***
#> level919     0.693865   0.150118   4.622 3.80e-06 ***
#> level920     0.964046   0.209461   4.603 4.17e-06 ***
#> level921    -0.565607   0.235145  -2.405 0.016157 *  
#> level922     2.031595   0.172303  11.791  < 2e-16 ***
#> level923    -0.969113   0.151620  -6.392 1.64e-10 ***
#> level924    -0.391943   0.150406  -2.606 0.009163 ** 
#> level925    -0.462147   0.189692  -2.436 0.014838 *  
#> level926     0.352497   0.169786   2.076 0.037882 *  
#> level927     0.207385   0.193443   1.072 0.283686    
#> level928     0.565019   0.193625   2.918 0.003522 ** 
#> level929     0.161442   0.193590   0.834 0.404315    
#> level930     1.514886   0.229013   6.615 3.72e-11 ***
#> level931     0.984962   0.179844   5.477 4.33e-08 ***
#> level932     1.441365   0.208264   6.921 4.49e-12 ***
#> level933     0.457152   0.142805   3.201 0.001368 ** 
#> level934     1.121311   0.147570   7.598 3.00e-14 ***
#> level935     0.061531   0.267627   0.230 0.818158    
#> level936     0.665169   0.206660   3.219 0.001288 ** 
#> level937     1.596064   0.145182  10.994  < 2e-16 ***
#> level938     2.730021   0.186952  14.603  < 2e-16 ***
#> level939     1.497455   0.274374   5.458 4.82e-08 ***
#> level940    -0.622467   0.240736  -2.586 0.009719 ** 
#> level941     1.370002   0.141517   9.681  < 2e-16 ***
#> level942     1.128523   0.152238   7.413 1.24e-13 ***
#> level943     1.038803   0.207866   4.997 5.81e-07 ***
#> level944     0.503728   0.150070   3.357 0.000789 ***
#> level945     1.767130   0.146221  12.085  < 2e-16 ***
#> level946     0.407888   0.179140   2.277 0.022791 *  
#> level947     1.483899   0.166470   8.914  < 2e-16 ***
#> level948     0.616285   0.190622   3.233 0.001225 ** 
#> level949     1.188507   0.214772   5.534 3.13e-08 ***
#> level950     0.596668   0.152592   3.910 9.22e-05 ***
#> level951     0.973942   0.184321   5.284 1.26e-07 ***
#> level952     1.494405   0.152074   9.827  < 2e-16 ***
#> level953     1.114496   0.164151   6.789 1.13e-11 ***
#> level954     0.657879   0.146138   4.502 6.74e-06 ***
#> level955     0.617874   0.248482   2.487 0.012897 *  
#> level956     0.608689   0.195627   3.111 0.001862 ** 
#> level957     0.820688   0.155377   5.282 1.28e-07 ***
#> level958     0.104674   0.166776   0.628 0.530245    
#> level959     1.196996   0.163486   7.322 2.45e-13 ***
#> level960    -0.983510   0.198585  -4.953 7.32e-07 ***
#> level961     1.133188   0.230996   4.906 9.31e-07 ***
#> level962     0.018637   0.204119   0.091 0.927250    
#> level963     1.214211   0.207642   5.848 4.99e-09 ***
#> level964    -0.504562   0.147193  -3.428 0.000608 ***
#> level965     0.268414   0.156702   1.713 0.086732 .  
#> level966     0.588886   0.230752   2.552 0.010710 *  
#> level967     1.135051   0.164342   6.907 4.96e-12 ***
#> level968    -0.502609   0.163044  -3.083 0.002052 ** 
#> level969     0.020123   0.194243   0.104 0.917490    
#> level970    -0.158328   0.211878  -0.747 0.454906    
#> level971     1.611614   0.159392  10.111  < 2e-16 ***
#> level972     1.085996   0.139588   7.780 7.25e-15 ***
#> level973     0.673444   0.146070   4.610 4.02e-06 ***
#> level974    -0.647126   0.203284  -3.183 0.001456 ** 
#> level975    -1.099521   0.199211  -5.519 3.40e-08 ***
#> level976     0.889778   0.168909   5.268 1.38e-07 ***
#> level977     2.433289   0.216798  11.224  < 2e-16 ***
#> level978     1.597642   0.194258   8.224  < 2e-16 ***
#> level979     1.638153   0.157678  10.389  < 2e-16 ***
#> level980     0.873399   0.201266   4.340 1.43e-05 ***
#> level981     1.567354   0.168277   9.314  < 2e-16 ***
#> level982     0.329375   0.174326   1.889 0.058835 .  
#> level983     1.156870   0.170617   6.781 1.20e-11 ***
#> level984     1.289468   0.163041   7.909 2.60e-15 ***
#> level985    -0.462011   0.182900  -2.526 0.011536 *  
#> level986     1.304506   0.167000   7.811 5.66e-15 ***
#> level987     2.236396   0.181107  12.348  < 2e-16 ***
#> level988     0.278037   0.191892   1.449 0.147359    
#> level989     0.475863   0.154243   3.085 0.002035 ** 
#> level990    -1.065672   0.316688  -3.365 0.000765 ***
#> level991     2.537215   0.184760  13.732  < 2e-16 ***
#> level992     1.161405   0.193752   5.994 2.04e-09 ***
#> level993     0.636800   0.168733   3.774 0.000161 ***
#> level994     1.197752   0.164978   7.260 3.87e-13 ***
#> level995     0.983540   0.156125   6.300 2.98e-10 ***
#> level996     0.380911   0.161231   2.363 0.018151 *  
#> level997     1.813610   0.170458  10.640  < 2e-16 ***
#> level998    -0.924091   0.182584  -5.061 4.17e-07 ***
#> level999    -0.423491   0.213111  -1.987 0.046901 *  
#> level1000    1.335278   0.177167   7.537 4.81e-14 ***
#> level1001   -0.898593   0.213368  -4.211 2.54e-05 ***
#> level1002    1.482704   0.168834   8.782  < 2e-16 ***
#> level1003    1.219791   0.185020   6.593 4.32e-11 ***
#> level1004    0.949900   0.240895   3.943 8.04e-05 ***
#> level1005   -0.253235   0.170506  -1.485 0.137493    
#> level1006    1.067555   0.160547   6.649 2.94e-11 ***
#> level1007   -1.266640   0.233371  -5.428 5.71e-08 ***
#> level1008    0.367453   0.163332   2.250 0.024466 *  
#> level1009   -0.529144   0.167011  -3.168 0.001533 ** 
#> level1010    0.123998   0.206202   0.601 0.547613    
#> level1011    1.266010   0.154109   8.215  < 2e-16 ***
#> level1012   -0.934267   0.243676  -3.834 0.000126 ***
#> level1013    0.503364   0.167204   3.010 0.002608 ** 
#> level1014    0.049073   0.184348   0.266 0.790087    
#> level1015    1.748123   0.210241   8.315  < 2e-16 ***
#> level1016    0.078061   0.170645   0.457 0.647351    
#> level1017    0.800195   0.280517   2.853 0.004337 ** 
#> level1018    0.162685   0.147533   1.103 0.270154    
#> level1019   -0.085080   0.143199  -0.594 0.552419    
#> level1020    0.820445   0.154420   5.313 1.08e-07 ***
#> level1021    1.452659   0.180402   8.052 8.12e-16 ***
#> level1022    0.306319   0.169989   1.802 0.071546 .  
#> level1023   -0.677729   0.159883  -4.239 2.25e-05 ***
#> level1024   -0.226323   0.164912  -1.372 0.169942    
#> level1025    0.380193   0.181856   2.091 0.036562 *  
#> level1026    1.289076   0.140460   9.177  < 2e-16 ***
#> level1027    0.351466   0.208521   1.686 0.091889 .  
#> level1028    1.160672   0.176500   6.576 4.83e-11 ***
#> level1029   -0.165670   0.163398  -1.014 0.310628    
#> level1030    0.566641   0.153945   3.681 0.000232 ***
#> level1031    0.513379   0.159569   3.217 0.001294 ** 
#> level1032    0.598738   0.195374   3.065 0.002180 ** 
#> level1033   -1.085090   0.282384  -3.843 0.000122 ***
#> level1034    1.464355   0.280293   5.224 1.75e-07 ***
#> level1035    1.033572   0.157394   6.567 5.14e-11 ***
#> level1036    1.272181   0.158273   8.038 9.14e-16 ***
#> level1037   -1.115862   0.289205  -3.858 0.000114 ***
#> level1038    1.944040   0.163241  11.909  < 2e-16 ***
#> level1039   -0.465274   0.200882  -2.316 0.020550 *  
#> level1040    0.062187   0.203563   0.305 0.759991    
#> level1041   -0.491642   0.230481  -2.133 0.032915 *  
#> level1042    0.338367   0.141715   2.388 0.016956 *  
#> level1043    0.329061   0.173789   1.893 0.058298 .  
#> level1044    1.076589   0.165184   6.518 7.15e-11 ***
#> level1045    0.050593   0.176489   0.287 0.774369    
#> level1046   -0.245632   0.167005  -1.471 0.141343    
#> level1047    0.386726   0.197195   1.961 0.049864 *  
#> level1048   -1.335141   0.251880  -5.301 1.15e-07 ***
#> level1049    1.455305   0.168092   8.658  < 2e-16 ***
#> level1050    0.683720   0.140546   4.865 1.15e-06 ***
#> level1051    0.016575   0.217091   0.076 0.939139    
#> level1052   -2.463538   0.377493  -6.526 6.75e-11 ***
#> level1053   -0.104261   0.250892  -0.416 0.677731    
#> level1054    0.131749   0.147119   0.896 0.370504    
#> level1055    0.464696   0.141878   3.275 0.001055 ** 
#> level1056    1.717896   0.178599   9.619  < 2e-16 ***
#> level1057    0.510925   0.156485   3.265 0.001095 ** 
#> level1058    0.354948   0.176994   2.005 0.044918 *  
#> level1059    0.024155   0.155473   0.155 0.876532    
#> level1060    1.077043   0.147792   7.288 3.16e-13 ***
#> level1061    1.226875   0.151489   8.099 5.55e-16 ***
#> level1062    0.092112   0.156399   0.589 0.555890    
#> level1063    1.659553   0.159645  10.395  < 2e-16 ***
#> level1064    0.568267   0.175452   3.239 0.001200 ** 
#> level1065    0.383217   0.160348   2.390 0.016853 *  
#> level1066    0.188726   0.165358   1.141 0.253736    
#> level1067   -0.876302   0.175466  -4.994 5.91e-07 ***
#> level1068    0.499274   0.196756   2.538 0.011164 *  
#> level1069   -1.001065   0.168851  -5.929 3.05e-09 ***
#> level1070    0.468258   0.176200   2.658 0.007871 ** 
#> level1071    0.368645   0.173918   2.120 0.034036 *  
#> level1072   -0.514161   0.249827  -2.058 0.039584 *  
#> level1073    1.606153   0.194071   8.276  < 2e-16 ***
#> level1074    0.872990   0.209711   4.163 3.14e-05 ***
#> level1075   -0.169956   0.194584  -0.873 0.382426    
#> level1076   -0.079260   0.251514  -0.315 0.752663    
#> level1077    0.451394   0.137629   3.280 0.001039 ** 
#> level1078   -0.297327   0.221304  -1.344 0.179102    
#> level1079    0.377938   0.149376   2.530 0.011403 *  
#> level1080    0.769810   0.161690   4.761 1.93e-06 ***
#> level1081    0.203224   0.186913   1.087 0.276921    
#> level1082    0.425257   0.163139   2.607 0.009142 ** 
#> level1083    0.805675   0.153471   5.250 1.52e-07 ***
#> level1084    0.528988   0.183471   2.883 0.003936 ** 
#> level1085   -0.647876   0.196035  -3.305 0.000950 ***
#> level1086    1.482704   0.270792   5.475 4.36e-08 ***
#> level1087    0.928102   0.149679   6.201 5.62e-10 ***
#> level1088    0.989897   0.149909   6.603 4.02e-11 ***
#> level1089   -1.320656   0.388471  -3.400 0.000675 ***
#> level1090   -0.018149   0.164506  -0.110 0.912151    
#> level1091    0.799394   0.136128   5.872 4.30e-09 ***
#> level1092   -0.584517   0.162893  -3.588 0.000333 ***
#> level1093   -0.116531   0.173132  -0.673 0.500899    
#> level1094    0.994351   0.144258   6.893 5.47e-12 ***
#> level1095    1.376062   0.193039   7.128 1.02e-12 ***
#> level1096    0.964792   0.182408   5.289 1.23e-07 ***
#> level1097    0.551146   0.155208   3.551 0.000384 ***
#> level1098    0.904271   0.146314   6.180 6.40e-10 ***
#> level1099    1.885324   0.176613  10.675  < 2e-16 ***
#> level1100   -0.447206   0.179721  -2.488 0.012834 *  
#> level1101    0.925789   0.161368   5.737 9.63e-09 ***
#> level1102    2.341080   0.187855  12.462  < 2e-16 ***
#> level1103   -0.104261   0.229738  -0.454 0.649955    
#> level1104    0.488357   0.141426   3.453 0.000554 ***
#> level1105    0.657879   0.155815   4.222 2.42e-05 ***
#> level1106    0.488803   0.166213   2.941 0.003274 ** 
#> level1107    0.103027   0.181330   0.568 0.569916    
#> level1108    0.848639   0.223877   3.791 0.000150 ***
#> level1109    0.803101   0.147486   5.445 5.17e-08 ***
#> level1110   -0.020491   0.160402  -0.128 0.898348    
#> level1111    0.006965   0.222898   0.031 0.975074    
#> level1112    0.142599   0.189356   0.753 0.451405    
#> level1113    0.499903   0.147432   3.391 0.000697 ***
#> level1114   -0.068058   0.177498  -0.383 0.701402    
#> level1115   -0.254226   0.145223  -1.751 0.080017 .  
#> level1116    0.789398   0.146124   5.402 6.58e-08 ***
#> level1117   -0.238320   0.172952  -1.378 0.168217    
#> level1118    1.412317   0.170907   8.264  < 2e-16 ***
#> level1119    0.950549   0.206821   4.596 4.31e-06 ***
#> level1120    0.820907   0.165859   4.949 7.44e-07 ***
#> level1121    0.142980   0.184248   0.776 0.437737    
#> level1122    0.935511   0.207367   4.511 6.44e-06 ***
#> level1123   -0.559607   0.181088  -3.090 0.002000 ** 
#> level1124    0.344689   0.172505   1.998 0.045701 *  
#> level1125    0.360628   0.148236   2.433 0.014983 *  
#> level1126    0.493211   0.141468   3.486 0.000490 ***
#> level1127    0.311957   0.147018   2.122 0.033846 *  
#> level1128    1.700571   0.163294  10.414  < 2e-16 ***
#> level1129    1.356381   0.157950   8.587  < 2e-16 ***
#> level1130    0.945561   0.333441   2.836 0.004572 ** 
#> level1131    0.044349   0.142012   0.312 0.754818    
#> level1132   -0.428757   0.185059  -2.317 0.020511 *  
#> level1133    0.312315   0.147926   2.111 0.034747 *  
#> level1134    0.433095   0.150299   2.882 0.003957 ** 
#> level1135    0.427498   0.200321   2.134 0.032838 *  
#> level1136    1.882668   0.194673   9.671  < 2e-16 ***
#> level1137    1.483719   0.150251   9.875  < 2e-16 ***
#> level1138   -0.632580   0.220808  -2.865 0.004172 ** 
#> level1139    1.058890   0.377797   2.803 0.005066 ** 
#> level1140    0.379456   0.138153   2.747 0.006021 ** 
#> level1141   -0.314712   0.148814  -2.115 0.034447 *  
#> level1142   -0.776355   0.294453  -2.637 0.008374 ** 
#> level1143    1.940495   0.235864   8.227  < 2e-16 ***
#> level1144    0.853624   0.147883   5.772 7.82e-09 ***
#> level1145    0.164003   0.236212   0.694 0.487492    
#> level1146    1.064147   0.191959   5.544 2.96e-08 ***
#> level1147    1.297538   0.223119   5.815 6.05e-09 ***
#> level1148    0.888991   0.236191   3.764 0.000167 ***
#> level1149    1.111151   0.174033   6.385 1.72e-10 ***
#> level1150    0.856064   0.146599   5.839 5.24e-09 ***
#> level1151    0.084140   0.166523   0.505 0.613368    
#> level1152    1.199541   0.141497   8.478  < 2e-16 ***
#> level1153    1.009736   0.170146   5.935 2.95e-09 ***
#> level1154    1.418744   0.155242   9.139  < 2e-16 ***
#> level1155    1.536676   0.212584   7.229 4.88e-13 ***
#> level1156   -0.408719   0.151431  -2.699 0.006954 ** 
#> level1157   -0.481555   0.300582  -1.602 0.109139    
#> level1158    0.894979   0.204946   4.367 1.26e-05 ***
#> level1159    0.201121   0.300008   0.670 0.502614    
#> level1160   -0.683573   0.169075  -4.043 5.28e-05 ***
#> level1161    0.176041   0.248200   0.709 0.478156    
#> level1162    0.890811   0.175646   5.072 3.94e-07 ***
#> level1163    0.263052   0.173271   1.518 0.128974    
#> level1164   -0.572827   0.185479  -3.088 0.002013 ** 
#> level1165    0.688970   0.195898   3.517 0.000436 ***
#> level1166    0.379166   0.181165   2.093 0.036355 *  
#> level1167    0.984199   0.184036   5.348 8.90e-08 ***
#> level1168   -0.419342   0.244152  -1.718 0.085879 .  
#> level1169   -2.319834   0.342345  -6.776 1.23e-11 ***
#> level1170    0.290678   0.146536   1.984 0.047294 *  
#> level1171    0.549384   0.177751   3.091 0.001996 ** 
#> level1172    0.657879   0.170729   3.853 0.000117 ***
#> level1173   -0.185811   0.197980  -0.939 0.347969    
#> level1174    1.340097   0.225139   5.952 2.64e-09 ***
#> level1175    1.289306   0.162167   7.950 1.86e-15 ***
#> level1176    1.023130   0.167199   6.119 9.40e-10 ***
#> level1177    0.839158   0.164661   5.096 3.46e-07 ***
#> level1178    0.090381   0.205515   0.440 0.660098    
#> level1179    1.027688   0.216579   4.745 2.08e-06 ***
#> level1180    0.840201   0.170412   4.930 8.21e-07 ***
#> level1181    1.119514   0.171027   6.546 5.92e-11 ***
#> level1182    1.317938   0.147289   8.948  < 2e-16 ***
#> level1183    2.049853   0.175007  11.713  < 2e-16 ***
#> level1184    0.481586   0.170548   2.824 0.004747 ** 
#> level1185    0.208998   0.173519   1.204 0.228410    
#> level1186   -0.043918   0.178500  -0.246 0.805652    
#> level1187    0.203012   0.158422   1.281 0.200032    
#> level1188    0.036818   0.178248   0.207 0.836359    
#> level1189    2.651135   0.222817  11.898  < 2e-16 ***
#> level1190    1.182193   0.142521   8.295  < 2e-16 ***
#> level1191   -0.066040   0.174336  -0.379 0.704831    
#> level1192   -0.061151   0.175007  -0.349 0.726775    
#> level1193   -0.584315   0.178439  -3.275 0.001058 ** 
#> level1194    0.849770   0.185177   4.589 4.45e-06 ***
#> level1195    0.719914   0.244703   2.942 0.003261 ** 
#> level1196   -0.736930   0.173615  -4.245 2.19e-05 ***
#> level1197    0.639148   0.161467   3.958 7.55e-05 ***
#> level1198    1.819268   0.183906   9.892  < 2e-16 ***
#> level1199   -0.855677   0.191595  -4.466 7.97e-06 ***
#> level1200    1.526568   0.187120   8.158 3.40e-16 ***
#> level1201    2.166575   0.202111  10.720  < 2e-16 ***
#> level1202    1.198567   0.166571   7.196 6.22e-13 ***
#> level1203    1.827260   0.292067   6.256 3.94e-10 ***
#> level1204    0.222561   0.200373   1.111 0.266682    
#> level1205    0.714766   0.204666   3.492 0.000479 ***
#> level1206    0.338944   0.179777   1.885 0.059382 .  
#> level1207   -0.223806   0.154428  -1.449 0.147265    
#> level1208    1.054976   0.367270   2.872 0.004073 ** 
#> level1209    0.329508   0.143553   2.295 0.021712 *  
#> level1210    0.706669   0.172533   4.096 4.21e-05 ***
#> level1211   -1.718814   0.309175  -5.559 2.71e-08 ***
#> level1212    0.294378   0.184568   1.595 0.110722    
#> level1213    1.078434   0.174357   6.185 6.20e-10 ***
#> level1214   -0.310974   0.204476  -1.521 0.128301    
#> level1215    0.089895   0.310156   0.290 0.771941    
#> level1216    0.915570   0.212389   4.311 1.63e-05 ***
#> level1217    0.579540   0.158926   3.647 0.000266 ***
#> level1218    1.162687   0.210512   5.523 3.33e-08 ***
#> level1219    1.342658   0.246880   5.439 5.37e-08 ***
#> level1220   -0.178369   0.338078  -0.528 0.597779    
#> level1221    0.746216   0.144327   5.170 2.34e-07 ***
#> level1222    0.753189   0.419406   1.796 0.072519 .  
#> level1223    0.490215   0.177162   2.767 0.005657 ** 
#> level1224   -1.445577   0.209196  -6.910 4.84e-12 ***
#> level1225   -1.029401   0.226501  -4.545 5.50e-06 ***
#> level1226    0.067066   0.143448   0.468 0.640121    
#> level1227    1.251396   0.210092   5.956 2.58e-09 ***
#> level1228    0.740692   0.161464   4.587 4.49e-06 ***
#> level1229   -1.570598   0.439376  -3.575 0.000351 ***
#> level1230    0.823203   0.160775   5.120 3.05e-07 ***
#> level1231    0.774110   0.163170   4.744 2.09e-06 ***
#> level1232    0.272356   0.144263   1.888 0.059037 .  
#> level1233    1.631259   0.159715  10.214  < 2e-16 ***
#> level1234    0.166924   0.148895   1.121 0.262251    
#> level1235    1.184314   0.145631   8.132 4.21e-16 ***
#> level1236    1.773827   0.193588   9.163  < 2e-16 ***
#> level1237    1.548852   0.166195   9.319  < 2e-16 ***
#> level1238    1.781612   0.180859   9.851  < 2e-16 ***
#> level1239    0.231166   0.138974   1.663 0.096237 .  
#> level1240    0.417036   0.152718   2.731 0.006319 ** 
#> level1241   -0.311055   0.175330  -1.774 0.076044 .  
#> level1242   -0.156221   0.149467  -1.045 0.295937    
#> level1243    0.515861   0.224445   2.298 0.021540 *  
#> level1244    1.402523   0.164619   8.520  < 2e-16 ***
#> level1245    0.518350   0.149110   3.476 0.000508 ***
#> level1246    2.057517   0.183423  11.217  < 2e-16 ***
#> level1247   -0.227640   0.229773  -0.991 0.321824    
#> level1248    0.666178   0.166676   3.997 6.42e-05 ***
#> level1249    0.185033   0.185764   0.996 0.319220    
#> level1250   -2.170596   0.280540  -7.737 1.02e-14 ***
#> level1251    1.095156   0.205947   5.318 1.05e-07 ***
#> level1252    1.655524   0.155458  10.649  < 2e-16 ***
#> level1253    0.381247   0.269924   1.412 0.157825    
#> level1254    0.651944   0.166777   3.909 9.26e-05 ***
#> level1255    1.490788   0.191168   7.798 6.27e-15 ***
#> level1256   -1.398481   0.272389  -5.134 2.83e-07 ***
#> level1257    0.038431   0.144666   0.266 0.790507    
#> level1258    1.220768   0.168216   7.257 3.95e-13 ***
#> level1259    0.805451   0.177937   4.527 5.99e-06 ***
#> level1260   -0.220093   0.190568  -1.155 0.248119    
#> level1261   -0.547550   0.195803  -2.796 0.005167 ** 
#> level1262    1.555380   0.170630   9.115  < 2e-16 ***
#> level1263    1.768326   0.144979  12.197  < 2e-16 ***
#> level1264   -0.358999   0.192008  -1.870 0.061525 .  
#> level1265    2.045248   0.167559  12.206  < 2e-16 ***
#> level1266    0.679541   0.149042   4.559 5.13e-06 ***
#> level1267   -0.076352   0.160882  -0.475 0.635082    
#> level1268   -1.885868   0.331021  -5.697 1.22e-08 ***
#> level1269    0.465826   0.166600   2.796 0.005173 ** 
#> level1270    0.951001   0.161102   5.903 3.57e-09 ***
#> level1271   -0.446010   0.243666  -1.830 0.067187 .  
#> level1272    1.242631   0.172473   7.205 5.81e-13 ***
#> level1273    0.371627   0.140392   2.647 0.008119 ** 
#> level1274    0.908584   0.205397   4.424 9.71e-06 ***
#> level1275    0.335106   0.157489   2.128 0.033353 *  
#> level1276    0.685804   0.185639   3.694 0.000220 ***
#> level1277   -0.731159   0.209216  -3.495 0.000474 ***
#> level1278    1.547577   0.153611  10.075  < 2e-16 ***
#> level1279    0.369258   0.232302   1.590 0.111935    
#> level1280    0.555550   0.165840   3.350 0.000808 ***
#> level1281    0.192882   0.160751   1.200 0.230186    
#> level1282    0.956251   0.180606   5.295 1.19e-07 ***
#> level1283    0.844069   0.174141   4.847 1.25e-06 ***
#> level1284    0.932793   0.170186   5.481 4.23e-08 ***
#> level1285   -1.218622   0.257665  -4.729 2.25e-06 ***
#> level1286    0.746789   0.183226   4.076 4.59e-05 ***
#> level1287    1.509335   0.157028   9.612  < 2e-16 ***
#> level1288    0.391355   0.258679   1.513 0.130305    
#> level1289   -0.594360   0.210809  -2.819 0.004811 ** 
#> level1290    0.843725   0.150756   5.597 2.19e-08 ***
#> level1291    0.384586   0.274414   1.401 0.161071    
#> level1292    0.671883   0.169776   3.957 7.57e-05 ***
#> level1293    1.652813   0.219217   7.540 4.71e-14 ***
#> level1294    2.197353   0.161828  13.578  < 2e-16 ***
#> level1295    1.189660   0.222038   5.358 8.42e-08 ***
#> level1296    0.515100   0.156540   3.291 0.001000 ***
#> level1297    0.256309   0.169252   1.514 0.129933    
#> level1298    0.513379   0.159569   3.217 0.001294 ** 
#> level1299    0.504579   0.157365   3.206 0.001344 ** 
#> level1300   -1.178776   0.182903  -6.445 1.16e-10 ***
#> level1301   -0.213960   0.166374  -1.286 0.198437    
#> level1302    0.685804   0.154961   4.426 9.61e-06 ***
#> level1303    0.313474   0.160653   1.951 0.051027 .  
#> level1304   -0.168073   0.145589  -1.154 0.248323    
#> level1305    2.092964   0.222711   9.398  < 2e-16 ***
#> level1306    1.778933   0.211067   8.428  < 2e-16 ***
#> level1307    0.249148   0.157546   1.581 0.113780    
#> level1308    0.364262   0.174906   2.083 0.037287 *  
#> level1309    0.057380   0.185303   0.310 0.756822    
#> level1310    0.935511   0.269144   3.476 0.000509 ***
#> level1311    0.381247   0.363530   1.049 0.294299    
#> level1312    1.780932   0.169021  10.537  < 2e-16 ***
#> level1313    0.301204   0.166080   1.814 0.069739 .  
#> level1314   -0.391943   0.256217  -1.530 0.126084    
#> level1315    0.680905   0.151903   4.482 7.38e-06 ***
#> level1316    0.912673   0.184408   4.949 7.45e-07 ***
#> level1317    0.294895   0.180310   1.635 0.101946    
#> level1318    0.848844   0.157469   5.391 7.02e-08 ***
#> level1319    1.380473   0.181303   7.614 2.65e-14 ***
#> level1320   -0.281519   0.191890  -1.467 0.142353    
#> level1321    0.035501   0.271494   0.131 0.895964    
#> level1322    0.914309   0.231577   3.948 7.87e-05 ***
#> level1323    0.260382   0.369996   0.704 0.481593    
#> level1324    0.496629   0.151915   3.269 0.001079 ** 
#> level1325    1.733779   0.170632  10.161  < 2e-16 ***
#> level1326    1.621053   0.188370   8.606  < 2e-16 ***
#> level1327   -1.452815   0.366457  -3.964 7.36e-05 ***
#> level1328    1.754190   0.174455  10.055  < 2e-16 ***
#> level1329    1.027799   0.164151   6.261 3.82e-10 ***
#> level1330    0.862355   0.158352   5.446 5.16e-08 ***
#> level1331    1.751577   0.187527   9.340  < 2e-16 ***
#> level1332   -0.120009   0.186133  -0.645 0.519088    
#> level1333    0.107048   0.170522   0.628 0.530158    
#> level1334    0.405607   0.164224   2.470 0.013517 *  
#> level1335   -0.201899   0.157146  -1.285 0.198867    
#> level1336    0.271761   0.139579   1.947 0.051534 .  
#> level1337   -0.089402   0.159397  -0.561 0.574884    
#> level1338    2.247114   0.810198   2.774 0.005545 ** 
#> level1339    0.006405   0.182123   0.035 0.971947    
#> level1340    0.147053   0.159589   0.921 0.356816    
#> level1341    0.843120   0.226971   3.715 0.000203 ***
#> level1342    0.764777   0.167448   4.567 4.94e-06 ***
#> level1343   -0.320287   0.201382  -1.590 0.111735    
#> level1344   -0.365275   0.215955  -1.691 0.090753 .  
#> level1345    1.063107   0.142986   7.435 1.05e-13 ***
#> level1346    0.736522   0.199082   3.700 0.000216 ***
#> level1347    1.786403   0.167180  10.685  < 2e-16 ***
#> level1348    1.297538   0.177969   7.291 3.08e-13 ***
#> level1349   -0.627015   0.193692  -3.237 0.001207 ** 
#> level1350    0.179314   0.177128   1.012 0.311373    
#> level1351   -0.189272   0.151528  -1.249 0.211634    
#> level1352   -0.550167   0.219620  -2.505 0.012242 *  
#> level1353   -0.155885   0.149275  -1.044 0.296354    
#> level1354    2.229605   0.160085  13.928  < 2e-16 ***
#> level1355   -0.744621   0.161467  -4.612 4.00e-06 ***
#> level1356   -0.124262   0.231879  -0.536 0.592035    
#> level1357    0.411205   0.187629   2.192 0.028410 *  
#> level1358    0.904200   0.177816   5.085 3.68e-07 ***
#> level1359    0.817895   0.214041   3.821 0.000133 ***
#> level1360    1.337128   0.134226   9.962  < 2e-16 ***
#> level1361   -0.156221   0.199733  -0.782 0.434127    
#> level1362    1.341547   0.213928   6.271 3.59e-10 ***
#> level1363   -0.024630   0.153770  -0.160 0.872745    
#> level1364    1.084208   0.147458   7.353 1.94e-13 ***
#> level1365    0.816103   0.189640   4.303 1.68e-05 ***
#> level1366    1.190288   0.146464   8.127 4.41e-16 ***
#> level1367    0.795223   0.170244   4.671 3.00e-06 ***
#> level1368   -1.440958   0.220560  -6.533 6.44e-11 ***
#> level1369    2.180932   0.189917  11.484  < 2e-16 ***
#> level1370    1.058373   0.171990   6.154 7.57e-10 ***
#> level1371    0.453220   0.232659   1.948 0.051415 .  
#> level1372    0.493576   0.183411   2.691 0.007122 ** 
#> level1373    2.652579   0.402956   6.583 4.62e-11 ***
#> level1374   -0.502400   0.149991  -3.350 0.000809 ***
#> level1375    0.628892   0.196148   3.206 0.001345 ** 
#> level1376    0.642647   0.166260   3.865 0.000111 ***
#> level1377    1.219690   0.153116   7.966 1.64e-15 ***
#> level1378    0.713100   0.145132   4.913 8.95e-07 ***
#> level1379   -0.755908   0.205406  -3.680 0.000233 ***
#> level1380    0.775298   0.224423   3.455 0.000551 ***
#> level1381    0.782177   0.173228   4.515 6.32e-06 ***
#> level1382    0.738418   0.195462   3.778 0.000158 ***
#> level1383    1.005912   0.158509   6.346 2.21e-10 ***
#> level1384    0.301204   0.228091   1.321 0.186654    
#> level1385    1.245666   0.171572   7.260 3.86e-13 ***
#> level1386    0.457139   0.148447   3.079 0.002074 ** 
#> level1387   -0.006497   0.153687  -0.042 0.966281    
#> level1388    1.248132   0.163458   7.636 2.24e-14 ***
#> level1389    1.429669   0.225825   6.331 2.44e-10 ***
#> level1390    1.482054   0.244293   6.067 1.31e-09 ***
#> level1391    0.862000   0.176812   4.875 1.09e-06 ***
#> level1392    0.415148   0.159896   2.596 0.009421 ** 
#> level1393   -0.443705   0.170386  -2.604 0.009211 ** 
#> level1394    1.929137   0.179257  10.762  < 2e-16 ***
#> level1395    0.330025   0.175430   1.881 0.059940 .  
#> level1396    0.716257   0.164250   4.361 1.30e-05 ***
#> level1397    2.677897   0.209683  12.771  < 2e-16 ***
#> level1398    0.750374   0.192435   3.899 9.64e-05 ***
#> level1399    1.934359   0.165742  11.671  < 2e-16 ***
#> level1400    0.013522   0.299921   0.045 0.964039    
#> level1401    1.464355   0.307919   4.756 1.98e-06 ***
#> level1402    0.912434   0.192341   4.744 2.10e-06 ***
#> level1403    2.003275   0.153616  13.041  < 2e-16 ***
#> level1404    0.342026   0.272759   1.254 0.209860    
#> level1405    0.713889   0.161843   4.411 1.03e-05 ***
#> level1406    1.216133   0.140322   8.667  < 2e-16 ***
#> level1407    1.067022   0.152519   6.996 2.63e-12 ***
#> level1408    0.322710   0.213799   1.509 0.131195    
#> level1409    1.387394   0.154608   8.974  < 2e-16 ***
#> level1410    0.607755   0.146327   4.153 3.28e-05 ***
#> level1411    0.306624   0.147264   2.082 0.037330 *  
#> level1412   -0.278614   0.173745  -1.604 0.108806    
#> level1413    0.690970   0.156735   4.409 1.04e-05 ***
#> level1414    0.284302   0.174683   1.628 0.103624    
#> level1415    1.195022   0.178688   6.688 2.27e-11 ***
#> level1416    1.582138   0.154707  10.227  < 2e-16 ***
#> level1417   -0.509726   0.368492  -1.383 0.166580    
#> level1418    0.918228   0.156363   5.872 4.29e-09 ***
#> level1419    0.122003   0.163756   0.745 0.456255    
#> level1420    0.285139   0.140016   2.036 0.041703 *  
#> level1421   -0.556246   0.219536  -2.534 0.011285 *  
#> level1422    0.339565   0.137878   2.463 0.013786 *  
#> level1423   -0.469235   0.239881  -1.956 0.050451 .  
#> level1424    0.458242   0.138016   3.320 0.000900 ***
#> level1425   -0.034057   0.191243  -0.178 0.858659    
#> level1426   -0.567600   0.176341  -3.219 0.001287 ** 
#> level1427    0.711310   0.156167   4.555 5.24e-06 ***
#> level1428    0.648075   0.269141   2.408 0.016043 *  
#> level1429    0.603485   0.194578   3.102 0.001925 ** 
#> level1430    0.260382   0.176587   1.475 0.140341    
#> level1431   -0.627509   0.297338  -2.110 0.034822 *  
#> level1432    1.031393   0.179134   5.758 8.53e-09 ***
#> level1433    0.153568   0.172712   0.889 0.373920    
#> level1434   -0.122326   0.154706  -0.791 0.429120    
#> level1435    0.997491   0.140867   7.081 1.43e-12 ***
#> level1436    1.347173   0.188132   7.161 8.02e-13 ***
#> level1437    1.495127   0.142323  10.505  < 2e-16 ***
#> level1438    1.756018   0.154814  11.343  < 2e-16 ***
#> level1439    1.381798   0.145116   9.522  < 2e-16 ***
#> level1440   -0.674941   0.157068  -4.297 1.73e-05 ***
#> level1441    0.657879   0.190843   3.447 0.000566 ***
#> level1442    0.040395   0.166000   0.243 0.807739    
#> level1443    0.867012   0.191779   4.521 6.16e-06 ***
#> level1444   -0.229424   0.238120  -0.963 0.335307    
#> level1445    0.397219   0.188150   2.111 0.034757 *  
#> level1446    0.431824   0.213542   2.022 0.043156 *  
#> level1447    1.359811   0.196148   6.933 4.13e-12 ***
#> level1448    1.393624   0.170395   8.179 2.87e-16 ***
#> level1449   -0.587688   0.214818  -2.736 0.006224 ** 
#> level1450    0.698085   0.159965   4.364 1.28e-05 ***
#> level1451   -0.126734   0.209042  -0.606 0.544342    
#> level1452   -0.065582   0.156560  -0.419 0.675293    
#> level1453    0.706669   0.206714   3.419 0.000629 ***
#> level1454    0.253802   0.167040   1.519 0.128660    
#> level1455    0.792612   0.143843   5.510 3.58e-08 ***
#> level1456    0.784056   0.181171   4.328 1.51e-05 ***
#> level1457    0.044852   0.177697   0.252 0.800727    
#> level1458   -0.100631   0.167541  -0.601 0.548082    
#> level1459    0.480790   0.188307   2.553 0.010673 *  
#> level1460    0.600651   0.168087   3.573 0.000352 ***
#> level1461    0.508274   0.139806   3.636 0.000277 ***
#> level1462    0.114221   0.163664   0.698 0.485241    
#> level1463    0.782293   0.166756   4.691 2.72e-06 ***
#> level1464    0.561930   0.201484   2.789 0.005288 ** 
#> level1465    0.690970   0.156735   4.409 1.04e-05 ***
#> level1466    0.016185   0.152718   0.106 0.915598    
#> level1467    0.369523   0.152382   2.425 0.015309 *  
#> level1468   -0.725996   0.149762  -4.848 1.25e-06 ***
#> level1469    0.455355   0.155997   2.919 0.003512 ** 
#> level1470   -0.549195   0.176501  -3.112 0.001861 ** 
#> level1471    1.806939   0.156006  11.582  < 2e-16 ***
#> level1472    0.960218   0.164984   5.820 5.88e-09 ***
#> level1473    1.169068   0.174036   6.717 1.85e-11 ***
#> level1474    1.108465   0.154792   7.161 8.01e-13 ***
#> level1475   -0.029650   0.200535  -0.148 0.882457    
#> level1476    0.228445   0.202987   1.125 0.260414    
#> level1477    0.985219   0.150654   6.540 6.17e-11 ***
#> level1478    0.794256   0.158349   5.016 5.28e-07 ***
#> level1479    0.792869   0.147234   5.385 7.24e-08 ***
#> level1480    1.138058   0.174725   6.513 7.35e-11 ***
#> level1481   -0.289894   0.180615  -1.605 0.108485    
#> level1482    0.963815   0.169808   5.676 1.38e-08 ***
#> level1483    1.340097   0.225139   5.952 2.64e-09 ***
#> level1484   -0.216739   0.210869  -1.028 0.304026    
#> level1485    1.354354   0.204594   6.620 3.60e-11 ***
#> level1486   -0.313982   0.374955  -0.837 0.402376    
#> level1487    2.321647   0.199805  11.620  < 2e-16 ***
#> level1488    0.118883   0.180147   0.660 0.509305    
#> level1489   -0.729690   0.235898  -3.093 0.001980 ** 
#> level1490   -0.354672   0.210436  -1.685 0.091909 .  
#> level1491    0.346055   0.200704   1.724 0.084671 .  
#> level1492   -0.039722   0.204462  -0.194 0.845958    
#> level1493    1.043831   0.166454   6.271 3.59e-10 ***
#> level1494    0.352497   0.188065   1.874 0.060884 .  
#> level1495    0.959865   0.148954   6.444 1.16e-10 ***
#> level1496   -0.504663   0.203390  -2.481 0.013092 *  
#> level1497    1.451421   0.169785   8.549  < 2e-16 ***
#> level1498    0.483526   0.180587   2.678 0.007417 ** 
#> level1499   -0.059809   0.207072  -0.289 0.772709    
#> level1500   -0.615087   0.156758  -3.924 8.72e-05 ***
#> level1501    2.188274   0.214802  10.187  < 2e-16 ***
#> level1502    0.658550   0.147019   4.479 7.49e-06 ***
#> level1503    0.480673   0.190779   2.520 0.011751 *  
#> level1504    1.308009   0.178277   7.337 2.19e-13 ***
#> level1505   -0.076090   0.189592  -0.401 0.688172    
#> level1506    1.614295   0.177926   9.073  < 2e-16 ***
#> level1507    0.518617   0.179447   2.890 0.003851 ** 
#> level1508    1.129578   0.148464   7.608 2.77e-14 ***
#> level1509    0.058435   0.161575   0.362 0.717610    
#> level1510    2.085529   0.207964  10.028  < 2e-16 ***
#> level1511    1.000375   0.139958   7.148 8.82e-13 ***
#> level1512    1.546420   0.203000   7.618 2.58e-14 ***
#> level1513    0.951135   0.140498   6.770 1.29e-11 ***
#> level1514    0.423141   0.146792   2.883 0.003944 ** 
#> level1515   -0.126608   0.189837  -0.667 0.504815    
#> level1516   -1.020552   0.393993  -2.590 0.009590 ** 
#> level1517    1.721400   0.197835   8.701  < 2e-16 ***
#> level1518    1.357091   0.141463   9.593  < 2e-16 ***
#> level1519    1.054976   0.367270   2.872 0.004073 ** 
#> level1520    1.992880   0.194936  10.223  < 2e-16 ***
#> level1521    0.471830   0.211660   2.229 0.025801 *  
#> level1522   -0.596738   0.202289  -2.950 0.003179 ** 
#> level1523    2.097783   0.181286  11.572  < 2e-16 ***
#> level1524    0.600447   0.181136   3.315 0.000917 ***
#> level1525    1.095156   0.167299   6.546 5.91e-11 ***
#> level1526    0.007165   0.166043   0.043 0.965582    
#> level1527    1.101597   0.222219   4.957 7.15e-07 ***
#> level1528    0.694247   0.206340   3.365 0.000767 ***
#> level1529   -0.369470   0.203637  -1.814 0.069623 .  
#> level1530   -1.625033   0.333310  -4.875 1.09e-06 ***
#> level1531    1.270057   0.203679   6.236 4.50e-10 ***
#> level1532    0.986383   0.171757   5.743 9.31e-09 ***
#> level1533    0.906059   0.135925   6.666 2.63e-11 ***
#> level1534   -0.209622   0.149691  -1.400 0.161406    
#> level1535   -0.422715   0.189077  -2.236 0.025373 *  
#> level1536    0.833083   0.244623   3.406 0.000660 ***
#> level1537    0.556729   0.172328   3.231 0.001235 ** 
#> level1538    0.358363   0.194526   1.842 0.065441 .  
#> level1539   -0.299322   0.182121  -1.644 0.100273    
#> level1540    0.149585   0.161913   0.924 0.355559    
#> level1541   -0.191272   0.270014  -0.708 0.478709    
#> level1542    0.204354   0.195462   1.045 0.295795    
#> level1543    0.760034   0.153709   4.945 7.63e-07 ***
#> level1544   -0.433790   0.155435  -2.791 0.005258 ** 
#> level1545   -0.859284   0.160838  -5.343 9.17e-08 ***
#> level1546    0.852177   0.198749   4.288 1.81e-05 ***
#> level1547   -0.728415   0.207433  -3.512 0.000445 ***
#> level1548    1.640978   0.389990   4.208 2.58e-05 ***
#> level1549    0.849169   0.135722   6.257 3.93e-10 ***
#> level1550    1.757025   0.159045  11.047  < 2e-16 ***
#> level1551   -0.508066   0.178358  -2.849 0.004392 ** 
#> level1552    0.327872   0.305324   1.074 0.282889    
#> level1553    0.324194   0.175333   1.849 0.064455 .  
#> level1554    0.501875   0.194871   2.575 0.010012 *  
#> level1555    1.059491   0.140613   7.535 4.89e-14 ***
#> level1556    0.943296   0.151165   6.240 4.37e-10 ***
#> level1557   -0.059141   0.182751  -0.324 0.746232    
#> level1558    0.520567   0.173073   3.008 0.002632 ** 
#> level1559    1.751012   0.160021  10.942  < 2e-16 ***
#> level1560    0.878134   0.142197   6.175 6.60e-10 ***
#> level1561    2.498429   0.239196  10.445  < 2e-16 ***
#> level1562   -0.860830   0.234233  -3.675 0.000238 ***
#> level1563   -0.646177   0.276405  -2.338 0.019398 *  
#> level1564    1.536153   0.177019   8.678  < 2e-16 ***
#> level1565    1.030283   0.193711   5.319 1.05e-07 ***
#> level1566    0.974614   0.141928   6.867 6.56e-12 ***
#> level1567   -0.057741   0.184409  -0.313 0.754194    
#> level1568    1.358827   0.154182   8.813  < 2e-16 ***
#> level1569    0.878091   0.198640   4.421 9.85e-06 ***
#> level1570    0.430416   0.247201   1.741 0.081656 .  
#> level1571   -0.407447   0.229143  -1.778 0.075381 .  
#> level1572    0.446570   0.179252   2.491 0.012728 *  
#> level1573    2.122234   0.163310  12.995  < 2e-16 ***
#> level1574    0.742613   0.142647   5.206 1.93e-07 ***
#> level1575    1.113135   0.174851   6.366 1.94e-10 ***
#> level1576    1.217495   0.163705   7.437 1.03e-13 ***
#> level1577    0.054107   0.155236   0.349 0.727429    
#> level1578   -0.256453   0.176590  -1.452 0.146433    
#> level1579    0.913006   0.141700   6.443 1.17e-10 ***
#> level1580    0.023001   0.198934   0.116 0.907954    
#> level1581   -1.978034   0.232366  -8.513  < 2e-16 ***
#> level1582   -0.742276   0.164568  -4.510 6.47e-06 ***
#> level1583    1.437088   0.185344   7.754 8.93e-15 ***
#> level1584    1.356566   0.164394   8.252  < 2e-16 ***
#> level1585    0.619658   0.408623   1.516 0.129405    
#> level1586   -0.094109   0.164519  -0.572 0.567305    
#> level1587   -0.077075   0.170280  -0.453 0.650811    
#> level1588    1.442964   0.149109   9.677  < 2e-16 ***
#> level1589    0.957984   0.178190   5.376 7.61e-08 ***
#> level1590    1.539578   0.230341   6.684 2.33e-11 ***
#> level1591   -0.036740   0.165981  -0.221 0.824820    
#> level1592   -0.254322   0.224348  -1.134 0.256961    
#> level1593   -0.111808   0.209309  -0.534 0.593218    
#> level1594   -0.425681   0.194708  -2.186 0.028797 *  
#> level1595    1.237477   0.173010   7.153 8.51e-13 ***
#> level1596    0.943708   0.197222   4.785 1.71e-06 ***
#> level1597    0.872461   0.176125   4.954 7.28e-07 ***
#> level1598    1.119514   0.158026   7.084 1.40e-12 ***
#> level1599   -0.459216   0.162120  -2.833 0.004618 ** 
#> level1600    0.157310   0.218364   0.720 0.471277    
#> level1601    0.542366   0.198842   2.728 0.006379 ** 
#> level1602    0.197544   0.143550   1.376 0.168780    
#> level1603    1.205660   0.163919   7.355 1.91e-13 ***
#> level1604    0.608509   0.145248   4.189 2.80e-05 ***
#> level1605    1.365527   0.180421   7.569 3.77e-14 ***
#> level1606   -0.027300   0.298529  -0.091 0.927136    
#> level1607    0.771208   0.297597   2.591 0.009557 ** 
#> level1608    0.342026   0.183961   1.859 0.062995 .  
#> level1609    1.295827   0.155894   8.312  < 2e-16 ***
#> level1610    0.626626   0.156923   3.993 6.52e-05 ***
#> level1611    2.417460   0.211159  11.449  < 2e-16 ***
#> level1612    0.909794   0.264580   3.439 0.000585 ***
#> level1613    1.516738   0.179133   8.467  < 2e-16 ***
#> level1614    1.934595   0.155236  12.462  < 2e-16 ***
#> level1615    0.724432   0.195962   3.697 0.000218 ***
#> level1616   -0.071317   0.179548  -0.397 0.691219    
#> level1617   -0.308173   0.242872  -1.269 0.204488    
#> level1618   -0.663877   0.225314  -2.946 0.003214 ** 
#> level1619    2.559337   0.257164   9.952  < 2e-16 ***
#> level1620   -0.933540   0.247571  -3.771 0.000163 ***
#> level1621    0.565268   0.140693   4.018 5.88e-05 ***
#> level1622   -0.182593   0.206484  -0.884 0.376536    
#> level1623    0.143093   0.163633   0.874 0.381860    
#> level1624    0.747635   0.147429   5.071 3.95e-07 ***
#> level1625   -0.672498   0.201453  -3.338 0.000843 ***
#> level1626    0.171848   0.165142   1.041 0.298058    
#> level1627   -0.079260   0.195989  -0.404 0.685912    
#> level1628    1.325857   0.153277   8.650  < 2e-16 ***
#> level1629   -0.497304   0.201956  -2.462 0.013800 *  
#> level1630    0.614419   0.143664   4.277 1.90e-05 ***
#> level1631    1.705848   0.202912   8.407  < 2e-16 ***
#> level1632    1.676070   0.218599   7.667 1.76e-14 ***
#> level1633    0.418987   0.238677   1.755 0.079181 .  
#> level1634   -0.846498   0.188218  -4.497 6.88e-06 ***
#> level1635    0.774110   0.199210   3.886 0.000102 ***
#> level1636    0.459011   0.158546   2.895 0.003790 ** 
#> level1637   -0.598738   0.214675  -2.789 0.005287 ** 
#> level1638    0.479452   0.214866   2.231 0.025654 *  
#> level1639    0.940074   0.146019   6.438 1.21e-10 ***
#> level1640    0.532716   0.187885   2.835 0.004578 ** 
#> level1641   -1.500312   0.186521  -8.044 8.72e-16 ***
#> level1642    0.626626   0.154953   4.044 5.26e-05 ***
#> level1643    0.402557   0.179663   2.241 0.025051 *  
#> level1644    0.172112   0.157792   1.091 0.275382    
#> level1645    1.237148   0.164881   7.503 6.22e-14 ***
#> level1646    0.255219   0.175917   1.451 0.146837    
#> level1647    0.034044   0.175638   0.194 0.846310    
#> level1648    1.415565   0.199634   7.091 1.33e-12 ***
#> level1649    1.305290   0.154132   8.469  < 2e-16 ***
#> level1650   -0.222044   0.259954  -0.854 0.393014    
#> level1651    0.598738   0.195374   3.065 0.002180 ** 
#> level1652    0.417464   0.227273   1.837 0.066233 .  
#> level1653    1.130061   0.156378   7.226 4.96e-13 ***
#> level1654    0.868874   0.136368   6.372 1.87e-10 ***
#> level1655   -2.183702   0.267272  -8.170 3.08e-16 ***
#> level1656   -0.230824   0.210634  -1.096 0.273143    
#> level1657    2.786111   0.216558  12.865  < 2e-16 ***
#> level1658   -1.424306   0.311988  -4.565 4.99e-06 ***
#> level1659   -1.942162   0.257326  -7.547 4.44e-14 ***
#> level1660   -0.409235   0.167478  -2.444 0.014545 *  
#> level1661    0.215026   0.206732   1.040 0.298284    
#> level1662    0.653844   0.147094   4.445 8.79e-06 ***
#> level1663   -0.060826   0.150372  -0.404 0.685845    
#> level1664    1.760524   0.240731   7.313 2.61e-13 ***
#> level1665    0.511500   0.179305   2.853 0.004335 ** 
#> level1666    1.328459   0.166570   7.975 1.52e-15 ***
#> level1667    1.491332   0.136346  10.938  < 2e-16 ***
#> level1668    0.027202   0.208729   0.130 0.896311    
#> level1669    1.687498   0.304157   5.548 2.89e-08 ***
#> level1670   -0.265529   0.213673  -1.243 0.213983    
#> level1671    2.688947   0.281645   9.547  < 2e-16 ***
#> level1672    0.147053   0.171572   0.857 0.391393    
#> level1673    0.008534   0.165213   0.052 0.958802    
#> level1674   -0.218671   0.163303  -1.339 0.180555    
#> level1675    0.912113   0.178493   5.110 3.22e-07 ***
#> level1676   -0.150781   0.179987  -0.838 0.402180    
#> level1677   -1.407378   0.170071  -8.275  < 2e-16 ***
#> level1678    1.047697   0.142251   7.365 1.77e-13 ***
#> level1679    0.868157   0.156737   5.539 3.04e-08 ***
#> level1680    0.308926   0.145864   2.118 0.034183 *  
#> level1681    0.655826   0.160893   4.076 4.58e-05 ***
#> level1682    1.291984   0.191829   6.735 1.64e-11 ***
#> level1683    1.364921   0.143248   9.528  < 2e-16 ***
#> level1684    0.786246   0.164582   4.777 1.78e-06 ***
#> level1685    1.008809   0.152325   6.623 3.53e-11 ***
#> level1686    1.519271   0.154377   9.841  < 2e-16 ***
#> level1687    1.278506   0.147622   8.661  < 2e-16 ***
#> level1688    0.695858   0.180272   3.860 0.000113 ***
#> level1689   -0.228670   0.173661  -1.317 0.187919    
#> level1690   -0.203891   0.179332  -1.137 0.255561    
#> level1691    1.563044   0.173857   8.990  < 2e-16 ***
#> level1692    1.057924   0.145080   7.292 3.05e-13 ***
#> level1693   -0.489923   0.292781  -1.673 0.094260 .  
#> level1694    2.258043   0.335002   6.740 1.58e-11 ***
#> level1695    0.858219   0.229301   3.743 0.000182 ***
#> level1696    1.002383   0.172129   5.823 5.77e-09 ***
#> level1697   -0.092066   0.194630  -0.473 0.636192    
#> level1698    0.926633   0.160891   5.759 8.44e-09 ***
#> level1699    0.406565   0.219390   1.853 0.063859 .  
#> level1700    0.494108   0.204319   2.418 0.015592 *  
#> level1701    0.309435   0.195504   1.583 0.113478    
#> level1702    0.325897   0.224620   1.451 0.146814    
#> level1703    0.548395   0.164680   3.330 0.000868 ***
#> level1704    1.651131   0.150342  10.982  < 2e-16 ***
#> level1705    1.231352   0.185381   6.642 3.09e-11 ***
#> level1706    0.845606   0.149486   5.657 1.54e-08 ***
#> level1707   -0.024218   0.220146  -0.110 0.912401    
#> level1708    1.176673   0.294784   3.992 6.56e-05 ***
#> level1709    1.687498   0.262906   6.419 1.37e-10 ***
#> level1710    0.747292   0.157824   4.735 2.19e-06 ***
#> level1711    0.977544   0.133289   7.334 2.23e-13 ***
#> level1712    0.759951   0.217617   3.492 0.000479 ***
#> level1713   -0.615087   0.248121  -2.479 0.013176 *  
#> level1714    0.366801   0.194709   1.884 0.059586 .  
#> level1715    0.216408   0.162722   1.330 0.183545    
#> level1716    0.688586   0.161986   4.251 2.13e-05 ***
#> level1717    1.891594   0.149724  12.634  < 2e-16 ***
#> level1718    1.048096   0.159728   6.562 5.32e-11 ***
#> level1719   -0.457082   0.171428  -2.666 0.007669 ** 
#> level1720    0.894721   0.178069   5.025 5.05e-07 ***
#> level1721    0.013522   0.227505   0.059 0.952605    
#> level1722    0.982375   0.193693   5.072 3.94e-07 ***
#> level1723    0.900164   0.192732   4.671 3.00e-06 ***
#> level1724    2.053298   0.189766  10.820  < 2e-16 ***
#> level1725   -0.171400   0.261185  -0.656 0.511669    
#> level1726    0.413913   0.140033   2.956 0.003118 ** 
#> level1727    0.232840   0.165539   1.407 0.159559    
#> level1728    1.507658   0.153273   9.836  < 2e-16 ***
#> level1729    0.851931   0.180604   4.717 2.39e-06 ***
#> level1730    0.919450   0.187041   4.916 8.84e-07 ***
#> level1731    2.143736   0.184769  11.602  < 2e-16 ***
#> level1732    1.280376   0.158624   8.072 6.93e-16 ***
#> level1733    2.003351   0.162972  12.293  < 2e-16 ***
#> level1734    0.078061   0.268137   0.291 0.770958    
#> level1735    0.663787   0.176863   3.753 0.000175 ***
#> level1736   -0.626136   0.216417  -2.893 0.003813 ** 
#> level1737    0.478885   0.225186   2.127 0.033452 *  
#> level1738    0.921856   0.167558   5.502 3.76e-08 ***
#> level1739    1.342922   0.145646   9.220  < 2e-16 ***
#> level1740    0.902332   0.191314   4.716 2.40e-06 ***
#> level1741    1.365415   0.160656   8.499  < 2e-16 ***
#> level1742    0.178602   0.276176   0.647 0.517829    
#> level1743   -0.761690   0.274384  -2.776 0.005503 ** 
#> level1744    0.247960   0.191302   1.296 0.194917    
#> level1745    0.577052   0.144808   3.985 6.75e-05 ***
#> level1746    0.255948   0.165070   1.551 0.121012    
#> level1747    0.567533   0.159540   3.557 0.000375 ***
#> level1748    0.410766   0.152847   2.687 0.007200 ** 
#> level1749    0.656837   0.161467   4.068 4.74e-05 ***
#> level1750    0.479514   0.146943   3.263 0.001101 ** 
#> level1751    1.773676   0.206732   8.580  < 2e-16 ***
#> level1752   -0.061701   0.193991  -0.318 0.750436    
#> level1753    1.268788   0.210811   6.019 1.76e-09 ***
#> level1754    1.199512   0.177565   6.755 1.43e-11 ***
#> level1755    0.727288   0.222704   3.266 0.001092 ** 
#> level1756    0.507999   0.176946   2.871 0.004093 ** 
#> level1757    1.337296   0.170606   7.838 4.56e-15 ***
#> level1758    1.016469   0.141010   7.208 5.66e-13 ***
#> level1759    0.293299   0.159491   1.839 0.065921 .  
#> level1760   -0.739649   0.159906  -4.626 3.74e-06 ***
#> level1761    0.651128   0.144680   4.500 6.78e-06 ***
#> level1762    1.546917   0.198473   7.794 6.49e-15 ***
#> level1763    1.780676   0.157909  11.277  < 2e-16 ***
#> level1764    0.156682   0.149332   1.049 0.294079    
#> level1765   -0.252357   0.178037  -1.417 0.156353    
#> level1766    1.337550   0.164392   8.136 4.07e-16 ***
#> level1767    0.045271   0.181188   0.250 0.802700    
#> level1768    1.909968   0.135199  14.127  < 2e-16 ***
#> level1769    0.129812   0.161005   0.806 0.420094    
#> level1770    1.027141   0.156512   6.563 5.28e-11 ***
#> level1771   -0.181378   0.173576  -1.045 0.296045    
#> level1772    0.881586   0.133523   6.603 4.04e-11 ***
#> level1773   -0.466844   0.165083  -2.828 0.004685 ** 
#> level1774    0.178846   0.134696   1.328 0.184253    
#> level1775    0.619658   0.156594   3.957 7.59e-05 ***
#> level1776   -0.692048   0.230370  -3.004 0.002664 ** 
#> level1777    2.119632   0.222178   9.540  < 2e-16 ***
#> level1778    0.479961   0.151905   3.160 0.001580 ** 
#> level1779    0.892569   0.174806   5.106 3.29e-07 ***
#> level1780    0.205894   0.332466   0.619 0.535723    
#> level1781   -0.334785   0.156120  -2.144 0.032000 *  
#> level1782    0.021619   0.240868   0.090 0.928481    
#> level1783    0.107766   0.148910   0.724 0.469251    
#> level1784   -0.892718   0.493829  -1.808 0.070646 .  
#> level1785    0.674093   0.138849   4.855 1.20e-06 ***
#> level1786    0.021619   0.240868   0.090 0.928481    
#> level1787   -0.151514   0.186604  -0.812 0.416819    
#> level1788    1.024204   0.168798   6.068 1.30e-09 ***
#> level1789    0.732872   0.184141   3.980 6.89e-05 ***
#> level1790    1.182715   0.142170   8.319  < 2e-16 ***
#> level1791    0.158103   0.262092   0.603 0.546352    
#> level1792    1.006621   0.195204   5.157 2.51e-07 ***
#> level1793    0.746515   0.146672   5.090 3.59e-07 ***
#> level1794    1.910642   0.176250  10.841  < 2e-16 ***
#> level1795    0.814225   0.194193   4.193 2.75e-05 ***
#> level1796    0.098263   0.289780   0.339 0.734537    
#> level1797    1.220389   0.163067   7.484 7.21e-14 ***
#> level1798    0.181713   0.157065   1.157 0.247300    
#> level1799   -0.802371   0.175968  -4.560 5.12e-06 ***
#> level1800    1.304506   0.182376   7.153 8.50e-13 ***
#> level1801    0.733625   0.226349   3.241 0.001191 ** 
#> level1802    1.806403   0.167778  10.767  < 2e-16 ***
#> level1803    1.043622   0.182429   5.721 1.06e-08 ***
#> level1804    0.389840   0.165441   2.356 0.018454 *  
#> level1805   -0.473621   0.199355  -2.376 0.017513 *  
#> level1806    0.330072   0.160867   2.052 0.040186 *  
#> level1807    0.994351   0.249689   3.982 6.82e-05 ***
#> level1808   -0.381893   0.173966  -2.195 0.028149 *  
#> level1809    2.397740   0.237742  10.085  < 2e-16 ***
#> level1810    1.802809   0.172121  10.474  < 2e-16 ***
#> level1811    0.144019   0.209598   0.687 0.492009    
#> level1812    1.290444   0.159204   8.106 5.25e-16 ***
#> level1813   -0.165819   0.185505  -0.894 0.371387    
#> level1814   -0.639779   0.251716  -2.542 0.011032 *  
#> level1815    1.734540   0.142616  12.162  < 2e-16 ***
#> level1816    0.133252   0.138202   0.964 0.334952    
#> level1817   -0.258412   0.181782  -1.422 0.155157    
#> level1818    0.269116   0.147073   1.830 0.067278 .  
#> level1819    0.291052   0.209936   1.386 0.165630    
#> level1820   -0.789626   0.201807  -3.913 9.12e-05 ***
#> level1821    1.046537   0.158638   6.597 4.20e-11 ***
#> level1822    0.533006   0.264170   2.018 0.043627 *  
#> level1823    0.787337   0.178028   4.423 9.75e-06 ***
#> level1824    0.475789   0.170450   2.791 0.005248 ** 
#> level1825    0.169208   0.149623   1.131 0.258101    
#> level1826    0.240579   0.273566   0.879 0.379174    
#> level1827    0.230108   0.170271   1.351 0.176560    
#> level1828   -0.352926   0.162544  -2.171 0.029911 *  
#> level1829    1.116954   0.233525   4.783 1.73e-06 ***
#> level1830   -0.378992   0.150928  -2.511 0.012036 *  
#> level1831   -0.758568   0.174141  -4.356 1.32e-05 ***
#> level1832    0.830048   0.163608   5.073 3.91e-07 ***
#> level1833    0.546584   0.169530   3.224 0.001264 ** 
#> level1834    1.223193   0.154349   7.925 2.28e-15 ***
#> level1835   -0.973635   0.177123  -5.497 3.86e-08 ***
#> level1836    1.927736   0.159920  12.054  < 2e-16 ***
#> level1837   -0.959129   0.160345  -5.982 2.21e-09 ***
#> level1838    1.099712   0.163580   6.723 1.78e-11 ***
#> level1839    0.123523   0.182392   0.677 0.498254    
#> level1840   -0.831415   0.188339  -4.414 1.01e-05 ***
#> level1841    1.315935   0.270272   4.869 1.12e-06 ***
#> level1842    1.339621   0.149560   8.957  < 2e-16 ***
#> level1843    0.868311   0.143474   6.052 1.43e-09 ***
#> level1844    0.142798   0.186705   0.765 0.444371    
#> level1845   -0.226479   0.162831  -1.391 0.164261    
#> level1846    0.337572   0.170467   1.980 0.047673 *  
#> level1847    0.836914   0.148692   5.629 1.82e-08 ***
#> level1848   -0.505086   0.197607  -2.556 0.010588 *  
#> level1849    0.598642   0.172652   3.467 0.000526 ***
#> level1850    0.602492   0.138656   4.345 1.39e-05 ***
#> level1851    1.226604   0.159001   7.714 1.22e-14 ***
#> level1852    0.994351   0.336993   2.951 0.003171 ** 
#> level1853    0.092659   0.154115   0.601 0.547684    
#> level1854    1.594143   0.142473  11.189  < 2e-16 ***
#> level1855    1.192421   0.175785   6.783 1.17e-11 ***
#> level1856   -0.483751   0.212257  -2.279 0.022662 *  
#> level1857   -0.574265   0.232038  -2.475 0.013328 *  
#> level1858    1.618137   0.171459   9.437  < 2e-16 ***
#> level1859   -0.048998   0.239135  -0.205 0.837652    
#> level1860    0.517427   0.177684   2.912 0.003591 ** 
#> level1861    0.318011   0.196736   1.616 0.106001    
#> level1862    1.432606   0.184739   7.755 8.85e-15 ***
#> level1863    2.565323   0.190666  13.455  < 2e-16 ***
#> level1864    1.106356   0.166114   6.660 2.73e-11 ***
#> level1865   -0.073489   0.273210  -0.269 0.787941    
#> level1866   -0.240837   0.212241  -1.135 0.256489    
#> level1867   -0.263216   0.167317  -1.573 0.115682    
#> level1868   -0.123908   0.171347  -0.723 0.469593    
#> level1869    2.268316   0.213441  10.627  < 2e-16 ***
#> level1870    1.229191   0.257355   4.776 1.79e-06 ***
#> level1871    0.933264   0.169839   5.495 3.91e-08 ***
#> level1872    1.791583   0.144793  12.373  < 2e-16 ***
#> level1873    0.839554   0.148205   5.665 1.47e-08 ***
#> level1874   -0.119076   0.182733  -0.652 0.514633    
#> level1875   -0.363233   0.146531  -2.479 0.013180 *  
#> level1876   -0.989780   0.342013  -2.894 0.003804 ** 
#> level1877   -0.815266   0.212169  -3.843 0.000122 ***
#> level1878    0.447808   0.396364   1.130 0.258566    
#> level1879    0.961828   0.172709   5.569 2.56e-08 ***
#> level1880    0.253136   0.157321   1.609 0.107607    
#> level1881    0.237559   0.148187   1.603 0.108911    
#> level1882    1.064147   0.191959   5.544 2.96e-08 ***
#> level1883    1.063686   0.153222   6.942 3.86e-12 ***
#> level1884    1.927021   0.162322  11.872  < 2e-16 ***
#> level1885    0.648203   0.150011   4.321 1.55e-05 ***
#> level1886    0.663577   0.152733   4.345 1.39e-05 ***
#> level1887   -0.286583   0.191824  -1.494 0.135178    
#> level1888   -1.038173   0.226416  -4.585 4.53e-06 ***
#> level1889   -1.304144   0.189793  -6.871 6.36e-12 ***
#> level1890    0.986319   0.172129   5.730 1.00e-08 ***
#> level1891    0.535894   0.173838   3.083 0.002051 ** 
#> level1892    0.650580   0.188349   3.454 0.000552 ***
#> level1893    0.143737   0.138187   1.040 0.298265    
#> level1894    0.115305   0.169650   0.680 0.496717    
#> level1895    1.058890   0.279548   3.788 0.000152 ***
#> level1896    0.606128   0.187297   3.236 0.001211 ** 
#> level1897   -0.731930   0.173651  -4.215 2.50e-05 ***
#> level1898    0.149886   0.166494   0.900 0.367987    
#> level1899    0.885152   0.294123   3.009 0.002617 ** 
#> level1900    0.301204   0.196377   1.534 0.125078    
#> level1901   -0.442715   0.175366  -2.525 0.011586 *  
#> level1902    0.020224   0.155175   0.130 0.896306    
#> level1903    1.667296   0.183576   9.082  < 2e-16 ***
#> level1904    0.826123   0.143550   5.755 8.67e-09 ***
#> level1905    1.106680   0.142076   7.789 6.73e-15 ***
#> level1906    1.737929   0.197489   8.800  < 2e-16 ***
#> level1907    0.771208   0.189905   4.061 4.89e-05 ***
#> level1908   -0.197043   0.201808  -0.976 0.328872    
#> level1909    0.504024   0.146128   3.449 0.000562 ***
#> level1910    0.978091   0.172700   5.664 1.48e-08 ***
#> level1911    0.120109   0.185485   0.648 0.517284    
#> level1912    0.867789   0.168800   5.141 2.73e-07 ***
#> level1913   -0.588941   0.181671  -3.242 0.001188 ** 
#> level1914    0.994351   0.283250   3.511 0.000447 ***
#> level1915    0.072670   0.161732   0.449 0.653200    
#> level1916    0.472162   0.243073   1.942 0.052080 .  
#> level1917    1.453884   0.285563   5.091 3.56e-07 ***
#> level1918    0.471830   0.154842   3.047 0.002310 ** 
#> level1919    0.182964   0.139669   1.310 0.190201    
#> level1920   -0.927461   0.277938  -3.337 0.000847 ***
#> level1921    0.720222   0.164634   4.375 1.22e-05 ***
#> level1922    1.790014   0.147682  12.121  < 2e-16 ***
#> level1923    1.558881   0.201517   7.736 1.03e-14 ***
#> level1924   -1.024249   0.212207  -4.827 1.39e-06 ***
#> level1925   -0.429683   0.330160  -1.301 0.193108    
#> level1926   -1.691226   0.214320  -7.891 2.99e-15 ***
#> level1927    0.339819   0.191284   1.777 0.075648 .  
#> level1928   -0.250702   0.165568  -1.514 0.129977    
#> level1929    0.755940   0.286930   2.635 0.008424 ** 
#> level1930   -0.556751   0.183750  -3.030 0.002446 ** 
#> level1931    0.563568   0.374816   1.504 0.132688    
#> level1932   -0.007634   0.177631  -0.043 0.965719    
#> level1933    0.843667   0.141423   5.966 2.44e-09 ***
#> level1934   -0.112995   0.220398  -0.513 0.608172    
#> level1935    0.262202   0.174333   1.504 0.132575    
#> level1936    1.670107   0.256107   6.521 6.98e-11 ***
#> level1937    0.396083   0.164085   2.414 0.015783 *  
#> level1938   -0.006281   0.261285  -0.024 0.980823    
#> level1939   -0.851475   0.207975  -4.094 4.24e-05 ***
#> level1940    1.107231   0.139706   7.925 2.27e-15 ***
#> level1941   -0.801673   0.208471  -3.845 0.000120 ***
#> level1942    1.658511   0.167301   9.913  < 2e-16 ***
#> level1943    0.850531   0.142395   5.973 2.33e-09 ***
#> level1944    1.600052   0.144774  11.052  < 2e-16 ***
#> level1945    2.301508   0.202942  11.341  < 2e-16 ***
#> level1946    0.702331   0.169568   4.142 3.44e-05 ***
#> level1947    0.469827   0.261639   1.796 0.072541 .  
#> level1948    0.994351   0.235012   4.231 2.33e-05 ***
#> level1949    0.872461   0.220173   3.963 7.41e-05 ***
#> level1950    0.958633   0.222013   4.318 1.58e-05 ***
#> level1951    0.936429   0.149934   6.246 4.22e-10 ***
#> level1952    0.355271   0.149995   2.369 0.017857 *  
#> level1953    1.233581   0.248732   4.959 7.07e-07 ***
#> level1954    1.663631   0.166820   9.973  < 2e-16 ***
#> level1955   -0.154271   0.197211  -0.782 0.434059    
#> level1956   -0.109299   0.183686  -0.595 0.551823    
#> level1957   -0.334439   0.168653  -1.983 0.047368 *  
#> level1958    1.766835   0.164242  10.757  < 2e-16 ***
#> level1959    1.109733   0.164829   6.733 1.67e-11 ***
#> level1960   -0.167062   0.160380  -1.042 0.297569    
#> level1961    0.791756   0.145813   5.430 5.64e-08 ***
#> level1962    2.092964   0.676763   3.093 0.001984 ** 
#> level1963    1.526110   0.169791   8.988  < 2e-16 ***
#> level1964    0.726635   0.147560   4.924 8.46e-07 ***
#> level1965    0.756551   0.159895   4.732 2.23e-06 ***
#> level1966    1.043141   0.181901   5.735 9.77e-09 ***
#> level1967    0.899041   0.213031   4.220 2.44e-05 ***
#> level1968    0.340425   0.146147   2.329 0.019841 *  
#> level1969    1.864249   0.151736  12.286  < 2e-16 ***
#> level1970    0.167673   0.233742   0.717 0.473164    
#> level1971    0.463173   0.144859   3.197 0.001387 ** 
#> level1972   -0.190203   0.153653  -1.238 0.215762    
#> level1973   -0.020879   0.260877  -0.080 0.936209    
#> level1974    0.171670   0.210206   0.817 0.414113    
#> level1975   -0.241207   0.152302  -1.584 0.113252    
#> level1976    0.510925   0.188178   2.715 0.006625 ** 
#> level1977    1.540607   0.148973  10.342  < 2e-16 ***
#> level1978    1.687498   0.165689  10.185  < 2e-16 ***
#> level1979    0.896159   0.169395   5.290 1.22e-07 ***
#> level1980    0.146022   0.136820   1.067 0.285854    
#> level1981    0.932898   0.142816   6.532 6.48e-11 ***
#> level1982    1.425459   0.155810   9.149  < 2e-16 ***
#> level1983   -0.835436   0.164492  -5.079 3.80e-07 ***
#> level1984   -0.376676   0.227067  -1.659 0.097141 .  
#> level1985    0.868058   0.177916   4.879 1.07e-06 ***
#> level1986    0.142009   0.161824   0.878 0.380187    
#> level1987   -1.778237   0.253297  -7.020 2.21e-12 ***
#> level1988    0.804308   0.236750   3.397 0.000681 ***
#> level1989   -1.015410   0.206498  -4.917 8.78e-07 ***
#> level1990    0.771208   0.242000   3.187 0.001439 ** 
#> level1991   -0.104261   0.220571  -0.473 0.636437    
#> level1992    0.694835   0.143085   4.856 1.20e-06 ***
#> level1993    1.134498   0.173510   6.539 6.21e-11 ***
#> level1994    1.413961   0.143689   9.840  < 2e-16 ***
#> level1995    1.067111   0.160316   6.656 2.81e-11 ***
#> level1996   -0.743920   0.295047  -2.521 0.011690 *  
#> level1997    0.406565   0.342444   1.187 0.235131    
#> level1998    0.504803   0.148502   3.399 0.000676 ***
#> level1999    1.622960   0.176035   9.220  < 2e-16 ***
#> level2000    1.332464   0.182359   7.307 2.74e-13 ***
#> level2001   -0.275409   0.197944  -1.391 0.164120    
#> level2002    0.298215   0.150124   1.986 0.046982 *  
#> level2003    1.784997   0.176286  10.126  < 2e-16 ***
#> level2004    0.056082   0.188807   0.297 0.766443    
#> level2005    0.743037   0.160180   4.639 3.51e-06 ***
#> level2006    0.421005   0.252990   1.664 0.096089 .  
#> level2007   -0.042084   0.144118  -0.292 0.770279    
#> level2008    1.351026   0.219677   6.150 7.75e-10 ***
#> level2009    0.345007   0.187916   1.836 0.066363 .  
#> level2010    1.090889   0.162652   6.707 1.99e-11 ***
#> level2011    0.509843   0.185879   2.743 0.006090 ** 
#> level2012    0.610209   0.186663   3.269 0.001079 ** 
#> level2013    1.279912   0.168547   7.594 3.11e-14 ***
#> level2014    0.727547   0.167802   4.336 1.45e-05 ***
#> level2015    0.753189   0.172620   4.363 1.28e-05 ***
#> level2016   -0.230912   0.173031  -1.335 0.182035    
#> level2017    0.579633   0.142055   4.080 4.50e-05 ***
#> level2018    1.107147   0.166413   6.653 2.87e-11 ***
#> level2019   -0.095211   0.222894  -0.427 0.669264    
#> level2020    1.431878   0.161050   8.891  < 2e-16 ***
#> level2021    0.529681   0.143154   3.700 0.000216 ***
#> level2022    1.078612   0.186156   5.794 6.87e-09 ***
#> level2023    1.291183   0.162424   7.949 1.87e-15 ***
#> level2024    1.547737   0.218639   7.079 1.45e-12 ***
#> level2025    1.703848   0.173085   9.844  < 2e-16 ***
#> level2026    0.228883   0.178544   1.282 0.199862    
#> level2027    1.177451   0.148755   7.915 2.46e-15 ***
#> level2028    1.016330   0.156698   6.486 8.82e-11 ***
#> level2029    0.341209   0.208269   1.638 0.101357    
#> level2030    0.124748   0.196114   0.636 0.524713    
#> level2031    0.754330   0.151879   4.967 6.81e-07 ***
#> level2032   -1.320656   0.243610  -5.421 5.92e-08 ***
#> level2033   -0.174353   0.162917  -1.070 0.284530    
#> level2034   -0.197549   0.175915  -1.123 0.261445    
#> level2035   -0.203352   0.308110  -0.660 0.509256    
#> level2036    0.188726   0.191126   0.987 0.323426    
#> level2037    0.244692   0.175175   1.397 0.162462    
#> level2038    0.035501   0.208893   0.170 0.865051    
#> level2039    1.835918   0.266093   6.900 5.22e-12 ***
#> level2040    0.256136   0.155068   1.652 0.098582 .  
#> level2041    0.609720   0.149089   4.090 4.32e-05 ***
#> level2042    0.483526   0.178759   2.705 0.006832 ** 
#> level2043    2.361228   0.331806   7.116 1.11e-12 ***
#> level2044    0.690496   0.161734   4.269 1.96e-05 ***
#> level2045    0.391060   0.194258   2.013 0.044104 *  
#> level2046   -0.133010   0.173530  -0.766 0.443379    
#> level2047    0.614204   0.186040   3.301 0.000962 ***
#> level2048    0.333639   0.172328   1.936 0.052858 .  
#> level2049    1.089661   0.330180   3.300 0.000966 ***
#> level2050    1.519776   0.192264   7.905 2.69e-15 ***
#> level2051   -0.321326   0.191374  -1.679 0.093143 .  
#> level2052    0.703955   0.151868   4.635 3.56e-06 ***
#> level2053    0.978351   0.213462   4.583 4.58e-06 ***
#> level2054    0.703154   0.195384   3.599 0.000320 ***
#> level2055    1.473572   0.159870   9.217  < 2e-16 ***
#> level2056   -1.181032   0.210942  -5.599 2.16e-08 ***
#> level2057    0.488803   0.186168   2.626 0.008650 ** 
#> level2058   -0.615087   0.218746  -2.812 0.004925 ** 
#> level2059    1.019669   0.197192   5.171 2.33e-07 ***
#> level2060    1.316639   0.194557   6.767 1.31e-11 ***
#> level2061    0.067589   0.295007   0.229 0.818783    
#> level2062    0.767511   0.147931   5.188 2.12e-07 ***
#> level2063    0.617874   0.194045   3.184 0.001452 ** 
#> level2064    0.944754   0.215968   4.375 1.22e-05 ***
#> level2065    0.150381   0.216379   0.695 0.487061    
#> level2066   -0.808458   0.302026  -2.677 0.007433 ** 
#> level2067    1.498756   0.162465   9.225  < 2e-16 ***
#> level2068    1.829149   0.275518   6.639 3.16e-11 ***
#> level2069   -0.335820   0.149895  -2.240 0.025067 *  
#> level2070    1.290617   0.183317   7.040 1.92e-12 ***
#> level2071    1.621540   0.214952   7.544 4.57e-14 ***
#> level2072    0.201121   0.180760   1.113 0.265864    
#> level2073    1.650497   0.141615  11.655  < 2e-16 ***
#> level2074    1.437354   0.201206   7.144 9.08e-13 ***
#> level2075    2.430407   0.197044  12.334  < 2e-16 ***
#> level2076   -1.475288   0.334911  -4.405 1.06e-05 ***
#> level2077    1.731950   0.201101   8.612  < 2e-16 ***
#> level2078   -0.115690   0.191016  -0.606 0.544745    
#> level2079   -0.077694   0.169252  -0.459 0.646202    
#> level2080    0.696817   0.175550   3.969 7.21e-05 ***
#> level2081    0.176452   0.153764   1.148 0.251154    
#> level2082    1.300518   0.149004   8.728  < 2e-16 ***
#> level2083    0.989532   0.152324   6.496 8.24e-11 ***
#> level2084   -0.243260   0.217976  -1.116 0.264424    
#> level2085    0.714574   0.143099   4.994 5.93e-07 ***
#> level2086   -0.436967   0.214870  -2.034 0.041989 *  
#> level2087    1.130392   0.151575   7.458 8.81e-14 ***
#> level2088    0.474476   0.194228   2.443 0.014571 *  
#> level2089    1.737260   0.209000   8.312  < 2e-16 ***
#> level2090    0.470280   0.176788   2.660 0.007811 ** 
#> level2091    0.808634   0.161296   5.013 5.35e-07 ***
#> level2092    0.521834   0.156395   3.337 0.000848 ***
#> level2093   -0.126240   0.156891  -0.805 0.421030    
#> level2094   -0.140410   0.147212  -0.954 0.340189    
#> level2095    0.615203   0.156531   3.930 8.49e-05 ***
#> level2096    0.728648   0.227969   3.196 0.001392 ** 
#> level2097    0.806753   0.206385   3.909 9.27e-05 ***
#> level2098    0.318596   0.175802   1.812 0.069948 .  
#> level2099    1.050970   0.180131   5.834 5.40e-09 ***
#> level2100    1.218919   0.133555   9.127  < 2e-16 ***
#> level2101   -0.331318   0.296669  -1.117 0.264082    
#> level2102   -0.108581   0.175674  -0.618 0.536522    
#> level2103    0.374229   0.187681   1.994 0.046156 *  
#> level2104    1.132937   0.141009   8.035 9.40e-16 ***
#> level2105    0.549665   0.215371   2.552 0.010705 *  
#> level2106    0.456001   0.160751   2.837 0.004558 ** 
#> level2107    0.469539   0.189689   2.475 0.013312 *  
#> level2108    0.239169   0.159133   1.503 0.132853    
#> level2109    2.826933   0.194244  14.554  < 2e-16 ***
#> level2110    0.086669   0.153586   0.564 0.572549    
#> level2111    0.098680   0.167137   0.590 0.554914    
#> level2112    0.734840   0.188238   3.904 9.47e-05 ***
#> level2113    0.082565   0.146422   0.564 0.572832    
#> level2114    1.076029   0.233342   4.611 4.00e-06 ***
#> level2115    0.094590   0.191374   0.494 0.621118    
#> level2116   -1.013631   0.229513  -4.416 1.00e-05 ***
#> level2117    0.405273   0.177886   2.278 0.022710 *  
#> level2118   -0.650805   0.177875  -3.659 0.000253 ***
#> level2119    0.422157   0.182661   2.311 0.020825 *  
#> level2120    1.469342   0.162908   9.019  < 2e-16 ***
#> level2121   -1.357024   0.243308  -5.577 2.44e-08 ***
#> level2122    0.681977   0.181122   3.765 0.000166 ***
#> level2123    0.594751   0.167983   3.541 0.000399 ***
#> level2124    0.183421   0.169146   1.084 0.278189    
#> level2125    1.561205   0.200321   7.794 6.52e-15 ***
#> level2126    1.345212   0.195604   6.877 6.10e-12 ***
#> level2127   -0.740250   0.199268  -3.715 0.000203 ***
#> level2128    1.145392   0.183792   6.232 4.60e-10 ***
#> level2129    0.807228   0.142014   5.684 1.31e-08 ***
#> level2130    0.406565   0.275293   1.477 0.139718    
#> level2131    1.099712   0.172636   6.370 1.89e-10 ***
#> level2132    1.050310   0.143396   7.325 2.40e-13 ***
#> level2133    0.829848   0.160638   5.166 2.39e-07 ***
#> level2134    0.816896   0.177208   4.610 4.03e-06 ***
#> level2135   -0.759668   0.238770  -3.182 0.001465 ** 
#> level2136    1.570316   0.169070   9.288  < 2e-16 ***
#> level2137   -0.640166   0.180369  -3.549 0.000386 ***
#> level2138    0.936082   0.228980   4.088 4.35e-05 ***
#> level2139    1.393507   0.146443   9.516  < 2e-16 ***
#> level2140    1.470197   0.197225   7.454 9.03e-14 ***
#> level2141   -0.489582   0.212177  -2.307 0.021031 *  
#> level2142    1.014503   0.136390   7.438 1.02e-13 ***
#> level2143   -0.596738   0.350702  -1.702 0.088839 .  
#> level2144   -0.056633   0.171047  -0.331 0.740571    
#> level2145    0.048008   0.192593   0.249 0.803150    
#> level2146    0.316197   0.150125   2.106 0.035185 *  
#> level2147    0.455355   0.355892   1.279 0.200730    
#> level2148   -1.860681   0.240060  -7.751 9.12e-15 ***
#> level2149    0.838102   0.164943   5.081 3.75e-07 ***
#> level2150    1.555646   0.178998   8.691  < 2e-16 ***
#> level2151    0.789557   0.202636   3.896 9.76e-05 ***
#> level2152    1.693296   0.175989   9.622  < 2e-16 ***
#> level2153    1.315594   0.139471   9.433  < 2e-16 ***
#> level2154    1.265226   0.163160   7.755 8.87e-15 ***
#> level2155    1.627395   0.197687   8.232  < 2e-16 ***
#> level2156    0.983988   0.185175   5.314 1.07e-07 ***
#> level2157    0.785950   0.188839   4.162 3.15e-05 ***
#> level2158    0.163755   0.143179   1.144 0.252743    
#> level2159   -0.419342   0.202957  -2.066 0.038813 *  
#> level2160    0.709250   0.177835   3.988 6.66e-05 ***
#> level2161    0.509959   0.192316   2.652 0.008009 ** 
#> level2162    2.699099   0.555894   4.855 1.20e-06 ***
#> level2163    0.581506   0.224704   2.588 0.009657 ** 
#> level2164    0.166415   0.152342   1.092 0.274665    
#> level2165    1.422545   0.205040   6.938 3.98e-12 ***
#> level2166    0.665048   0.175380   3.792 0.000149 ***
#> level2167    0.682674   0.153174   4.457 8.32e-06 ***
#> level2168   -0.922571   0.266302  -3.464 0.000531 ***
#> level2169    0.955637   0.162702   5.874 4.27e-09 ***
#> level2170    1.519507   0.173121   8.777  < 2e-16 ***
#> level2171    0.244046   0.167325   1.459 0.144698    
#> level2172   -0.123455   0.170277  -0.725 0.468435    
#> level2173    0.449385   0.151737   2.962 0.003061 ** 
#> level2174    1.717804   0.190817   9.002  < 2e-16 ***
#> level2175    2.578471   0.196649  13.112  < 2e-16 ***
#> level2176   -1.224852   0.224768  -5.449 5.05e-08 ***
#> level2177    0.223553   0.150495   1.485 0.137424    
#> level2178   -0.583611   0.174801  -3.339 0.000842 ***
#> level2179    0.469341   0.161850   2.900 0.003733 ** 
#> level2180   -0.426345   0.195946  -2.176 0.029568 *  
#> level2181    1.050863   0.190213   5.525 3.30e-08 ***
#> level2182   -0.176832   0.186261  -0.949 0.342429    
#> level2183    0.643247   0.164582   3.908 9.29e-05 ***
#> level2184   -0.945828   0.243539  -3.884 0.000103 ***
#> level2185    0.812030   0.157083   5.169 2.35e-07 ***
#> level2186    0.628107   0.141693   4.433 9.30e-06 ***
#> level2187    0.000099   0.224924   0.000 0.999649    
#> level2188    1.107338   0.150407   7.362 1.81e-13 ***
#> level2189    0.845316   0.216346   3.907 9.34e-05 ***
#> level2190    0.116282   0.240418   0.484 0.628624    
#> level2191    1.481366   0.212650   6.966 3.26e-12 ***
#> level2192    1.126469   0.155448   7.247 4.27e-13 ***
#> level2193    1.707620   0.160244  10.656  < 2e-16 ***
#> level2194    0.082723   0.214862   0.385 0.700235    
#> level2195    0.767765   0.145982   5.259 1.45e-07 ***
#> level2196    1.299012   0.193297   6.720 1.81e-11 ***
#> level2197    0.504499   0.169642   2.974 0.002940 ** 
#> level2198    0.423806   0.194021   2.184 0.028938 *  
#> level2199    1.787846   0.172338  10.374  < 2e-16 ***
#> level2200   -0.505887   0.236091  -2.143 0.032132 *  
#> level2201    1.327496   0.163925   8.098 5.58e-16 ***
#> level2202   -0.700781   0.211449  -3.314 0.000919 ***
#> level2203    0.945561   0.194856   4.853 1.22e-06 ***
#> level2204    0.507056   0.151491   3.347 0.000817 ***
#> level2205    0.120822   0.215705   0.560 0.575392    
#> level2206   -0.730397   0.215156  -3.395 0.000687 ***
#> level2207   -0.345026   0.186004  -1.855 0.063605 .  
#> level2208    0.349656   0.184851   1.892 0.058549 .  
#> level2209   -0.464702   0.191880  -2.422 0.015442 *  
#> level2210   -0.304932   0.181239  -1.682 0.092476 .  
#> level2211    0.270807   0.178599   1.516 0.129448    
#> level2212    0.380871   0.165684   2.299 0.021517 *  
#> level2213    0.715972   0.187764   3.813 0.000137 ***
#> level2214   -0.581889   0.195427  -2.978 0.002906 ** 
#> level2215    1.021259   0.177495   5.754 8.73e-09 ***
#> level2216    1.402480   0.163961   8.554  < 2e-16 ***
#> level2217   -0.583834   0.326129  -1.790 0.073423 .  
#> level2218    0.117726   0.182300   0.646 0.518421    
#> level2219    0.281861   0.158770   1.775 0.075852 .  
#> level2220    1.254382   0.155877   8.047 8.47e-16 ***
#> level2221    1.896590   0.156399  12.127  < 2e-16 ***
#> level2222    1.448607   0.233317   6.209 5.34e-10 ***
#> level2223    0.942392   0.198886   4.738 2.15e-06 ***
#> level2224    0.745996   0.151765   4.915 8.86e-07 ***
#> level2225    1.172189   0.160914   7.285 3.23e-13 ***
#> level2226   -0.976948   0.190655  -5.124 2.99e-07 ***
#> level2227    1.361350   0.146796   9.274  < 2e-16 ***
#> level2228    1.145392   0.183792   6.232 4.60e-10 ***
#> level2229    0.425847   0.195035   2.183 0.029003 *  
#> level2230    1.197580   0.197845   6.053 1.42e-09 ***
#> level2231    0.404694   0.149323   2.710 0.006724 ** 
#> level2232    0.749229   0.182677   4.101 4.11e-05 ***
#> level2233   -1.419938   0.335564  -4.231 2.32e-05 ***
#> level2234    0.273502   0.173967   1.572 0.115916    
#> level2235    1.107428   0.163999   6.753 1.45e-11 ***
#> level2236   -0.035268   0.201759  -0.175 0.861234    
#> level2237    0.494699   0.208131   2.377 0.017460 *  
#> level2238    1.095354   0.150870   7.260 3.86e-13 ***
#> level2239    0.337050   0.155743   2.164 0.030453 *  
#> level2240   -1.620608   0.438664  -3.694 0.000220 ***
#> level2241   -0.135514   0.171216  -0.791 0.428666    
#> level2242    1.214211   0.207642   5.848 4.99e-09 ***
#> level2243    0.301204   0.205937   1.463 0.143576    
#> level2244   -1.479382   0.194059  -7.623 2.47e-14 ***
#> level2245    2.050404   0.169942  12.065  < 2e-16 ***
#> level2246    1.217495   0.172149   7.072 1.52e-12 ***
#> level2247    0.803296   0.193885   4.143 3.43e-05 ***
#> level2248    0.588886   0.184090   3.199 0.001380 ** 
#> level2249   -0.314385   0.180338  -1.743 0.081279 .  
#> level2250    0.580518   0.165900   3.499 0.000467 ***
#> level2251    0.752799   0.152710   4.930 8.24e-07 ***
#> level2252    0.436379   0.177868   2.453 0.014152 *  
#> level2253    1.399816   0.471060   2.972 0.002962 ** 
#> level2254    0.877817   0.186547   4.706 2.53e-06 ***
#> level2255   -0.012304   0.155399  -0.079 0.936890    
#> level2256    0.159030   0.231063   0.688 0.491293    
#> level2257    0.103166   0.158803   0.650 0.515917    
#> level2258    0.187649   0.178527   1.051 0.293214    
#> level2259   -0.131660   0.262191  -0.502 0.615560    
#> level2260    1.269364   0.161934   7.839 4.55e-15 ***
#> level2261    0.683296   0.158969   4.298 1.72e-05 ***
#> level2262    0.855515   0.153339   5.579 2.42e-08 ***
#> level2263   -3.135647   0.293427 -10.686  < 2e-16 ***
#> level2264    1.318503   0.153005   8.617  < 2e-16 ***
#> level2265   -0.602703   0.179064  -3.366 0.000763 ***
#> level2266   -1.109783   0.487806  -2.275 0.022903 *  
#> level2267   -1.308234   1.055255  -1.240 0.215075    
#> level2268    0.745890   0.158032   4.720 2.36e-06 ***
#> level2269    0.561235   0.170207   3.297 0.000976 ***
#> level2270    1.266285   0.171159   7.398 1.38e-13 ***
#> level2271    0.018637   0.204119   0.091 0.927250    
#> level2272    0.500501   0.146750   3.411 0.000648 ***
#> level2273    0.585992   0.167451   3.499 0.000466 ***
#> level2274    1.505177   0.437426   3.441 0.000580 ***
#> level2275    1.627280   0.182887   8.898  < 2e-16 ***
#> level2276    0.761546   0.149213   5.104 3.33e-07 ***
#> level2277    0.738418   0.295785   2.496 0.012544 *  
#> level2278    0.738218   0.156789   4.708 2.50e-06 ***
#> level2279    0.806299   0.161786   4.984 6.24e-07 ***
#> level2280    1.183593   0.227242   5.209 1.90e-07 ***
#> level2281   -0.007097   0.299212  -0.024 0.981076    
#> level2282   -0.557928   0.189747  -2.940 0.003278 ** 
#> level2283    0.840201   0.210989   3.982 6.83e-05 ***
#> level2284    1.305982   0.135508   9.638  < 2e-16 ***
#> level2285    1.354354   0.264864   5.113 3.16e-07 ***
#> level2286   -0.019554   0.143114  -0.137 0.891320    
#> level2287    0.108520   0.221073   0.491 0.623513    
#> level2288    0.560957   0.156004   3.596 0.000323 ***
#> level2289   -0.085827   0.178644  -0.480 0.630917    
#> level2290    0.294732   0.181666   1.622 0.104722    
#> level2291    2.325586   0.242306   9.598  < 2e-16 ***
#> level2292    1.168015   0.171555   6.808 9.87e-12 ***
#> level2293    0.769012   0.182551   4.213 2.52e-05 ***
#> level2294    1.337550   0.164392   8.136 4.07e-16 ***
#> level2295    0.283077   0.178177   1.589 0.112120    
#> level2296   -1.094660   0.316245  -3.461 0.000537 ***
#> level2297    0.712712   0.186288   3.826 0.000130 ***
#> level2298    0.571082   0.153211   3.727 0.000193 ***
#> level2299    0.044159   0.139789   0.316 0.752081    
#> level2300    1.440935   0.160346   8.986  < 2e-16 ***
#> level2301    0.470280   0.176788   2.660 0.007811 ** 
#> level2302    1.238548   0.151822   8.158 3.41e-16 ***
#> level2303    1.110423   0.206512   5.377 7.57e-08 ***
#> level2304    0.361423   0.182887   1.976 0.048131 *  
#> level2305    0.734274   0.176348   4.164 3.13e-05 ***
#> level2306    1.122526   0.172133   6.521 6.97e-11 ***
#> level2307    0.266519   0.139210   1.915 0.055556 .  
#> level2308    0.581459   0.137379   4.233 2.31e-05 ***
#> level2309    1.291984   0.191829   6.735 1.64e-11 ***
#> level2310    0.289643   0.219805   1.318 0.187594    
#> level2311    0.694247   0.187945   3.694 0.000221 ***
#> level2312    0.737306   0.210092   3.509 0.000449 ***
#> level2313    0.916390   0.198941   4.606 4.10e-06 ***
#> level2314    0.069762   0.167669   0.416 0.677360    
#> level2315    1.916033   0.226592   8.456  < 2e-16 ***
#> level2316    0.196579   0.186795   1.052 0.292626    
#> level2317    1.974044   0.161455  12.227  < 2e-16 ***
#> level2318   -0.175720   0.172456  -1.019 0.308238    
#> level2319    0.208954   0.160620   1.301 0.193284    
#> level2320   -0.528311   0.171417  -3.082 0.002056 ** 
#> level2321   -0.203352   0.232912  -0.873 0.382617    
#> level2322    1.958814   0.177487  11.036  < 2e-16 ***
#> level2323    0.232211   0.220192   1.055 0.291616    
#> level2324   -0.113740   0.227089  -0.501 0.616470    
#> level2325    0.130579   0.147746   0.884 0.376802    
#> level2326    2.248755   0.168336  13.359  < 2e-16 ***
#> level2327   -0.045925   0.164613  -0.279 0.780253    
#> level2328    1.430957   0.159938   8.947  < 2e-16 ***
#> level2329   -0.834587   0.257522  -3.241 0.001192 ** 
#> level2330   -0.062464   0.192887  -0.324 0.746062    
#> level2331    0.927660   0.173923   5.334 9.62e-08 ***
#> level2332    0.378165   0.147350   2.566 0.010275 *  
#> level2333    1.047972   0.147707   7.095 1.29e-12 ***
#> level2334    0.374792   0.154781   2.421 0.015459 *  
#> level2335   -0.292313   0.188593  -1.550 0.121149    
#> level2336    0.351215   0.179358   1.958 0.050210 .  
#> level2337    0.675898   0.193788   3.488 0.000487 ***
#> level2338   -0.965073   0.260566  -3.704 0.000212 ***
#> level2339    0.032450   0.191311   0.170 0.865310    
#> level2340    0.728648   0.156643   4.652 3.29e-06 ***
#> level2341    0.841275   0.165935   5.070 3.98e-07 ***
#> level2342    0.386104   0.222437   1.736 0.082601 .  
#> level2343    0.842159   0.148498   5.671 1.42e-08 ***
#> level2344    2.092964   0.185465  11.285  < 2e-16 ***
#> level2345    0.266488   0.147049   1.812 0.069950 .  
#> level2346    0.455355   0.157713   2.887 0.003887 ** 
#> level2347    0.627989   0.168963   3.717 0.000202 ***
#> level2348    1.647493   0.168730   9.764  < 2e-16 ***
#> level2349    1.132502   0.287853   3.934 8.34e-05 ***
#> level2350    0.430037   0.175508   2.450 0.014276 *  
#> level2351    1.831205   0.199047   9.200  < 2e-16 ***
#> level2352    0.239212   0.175090   1.366 0.171867    
#> level2353    0.339304   0.166626   2.036 0.041718 *  
#> level2354   -0.097292   0.203446  -0.478 0.632492    
#> level2355    0.925358   0.191259   4.838 1.31e-06 ***
#> level2356    0.628057   0.140921   4.457 8.32e-06 ***
#> level2357    0.576077   0.150749   3.821 0.000133 ***
#> level2358    0.174910   0.178981   0.977 0.328442    
#> level2359    2.210747   0.259954   8.504  < 2e-16 ***
#> level2360    1.334121   0.153165   8.710  < 2e-16 ***
#> level2361    0.899942   0.180205   4.994 5.91e-07 ***
#> level2362   -0.004178   0.249872  -0.017 0.986661    
#> level2363    1.227445   0.189644   6.472 9.65e-11 ***
#> level2364    1.301699   0.147219   8.842  < 2e-16 ***
#> level2365    0.972845   0.167041   5.824 5.75e-09 ***
#> level2366    0.350568   0.143390   2.445 0.014491 *  
#> level2367    0.446138   0.196498   2.270 0.023180 *  
#> level2368    0.137165   0.161089   0.851 0.394501    
#> level2369    1.502471   0.187637   8.007 1.17e-15 ***
#> level2370   -0.159220   0.189369  -0.841 0.400465    
#> level2371    1.284506   0.149058   8.618  < 2e-16 ***
#> level2372    1.053440   0.174518   6.036 1.58e-09 ***
#> level2373    0.746876   0.149453   4.997 5.81e-07 ***
#> level2374    0.301204   0.240170   1.254 0.209795    
#> level2375    1.022522   0.143554   7.123 1.06e-12 ***
#> level2376    0.779240   0.292954   2.660 0.007815 ** 
#> level2377    0.109809   0.188787   0.582 0.560798    
#> level2378    1.279088   0.154503   8.279  < 2e-16 ***
#> level2379    0.703428   0.190420   3.694 0.000221 ***
#> level2380    0.407972   0.182386   2.237 0.025295 *  
#> level2381    0.852997   0.135847   6.279 3.41e-10 ***
#> level2382    1.261414   0.150241   8.396  < 2e-16 ***
#> level2383    1.107680   0.226762   4.885 1.04e-06 ***
#> level2384    1.340444   0.162487   8.250  < 2e-16 ***
#> level2385    0.263866   0.172247   1.532 0.125546    
#> level2386    0.396012   0.146122   2.710 0.006725 ** 
#> level2387   -0.077011   0.187664  -0.410 0.681536    
#> level2388   -0.494282   0.186270  -2.654 0.007964 ** 
#> level2389    1.638227   0.168018   9.750  < 2e-16 ***
#> level2390    2.794208   0.204906  13.637  < 2e-16 ***
#> level2391    0.566907   0.351723   1.612 0.107005    
#> level2392    0.742009   0.173256   4.283 1.85e-05 ***
#> level2393    1.179755   0.217870   5.415 6.13e-08 ***
#> level2394    1.110183   0.173633   6.394 1.62e-10 ***
#> level2395    0.877226   0.157303   5.577 2.45e-08 ***
#> level2396    0.289462   0.159151   1.819 0.068944 .  
#> level2397    2.000325   0.148304  13.488  < 2e-16 ***
#> level2398   -0.380686   0.179619  -2.119 0.034056 *  
#> level2399    1.760524   0.240731   7.313 2.61e-13 ***
#> level2400    1.364570   0.156658   8.710  < 2e-16 ***
#> level2401   -0.868466   0.201072  -4.319 1.57e-05 ***
#> level2402    0.175627   0.184010   0.954 0.339860    
#> level2403   -0.430945   0.166313  -2.591 0.009565 ** 
#> level2404   -0.109711   0.188128  -0.583 0.559779    
#> level2405   -0.293503   0.163873  -1.791 0.073286 .  
#> level2406    1.760025   0.162877  10.806  < 2e-16 ***
#> level2407    0.863665   0.140213   6.160 7.29e-10 ***
#> level2408    0.405408   0.172514   2.350 0.018773 *  
#> level2409    0.332295   0.170386   1.950 0.051146 .  
#> level2410    1.681229   0.179870   9.347  < 2e-16 ***
#> level2411    0.496949   0.159612   3.113 0.001849 ** 
#> level2412   -0.030153   0.249196  -0.121 0.903690    
#> level2413    1.052620   0.162850   6.464 1.02e-10 ***
#> level2414    0.007587   0.188027   0.040 0.967812    
#> level2415    0.164345   0.152111   1.080 0.279951    
#> level2416    0.763641   0.157855   4.838 1.31e-06 ***
#> level2417    0.291635   0.205715   1.418 0.156289    
#> level2418   -0.925242   0.343229  -2.696 0.007024 ** 
#> level2419    1.212075   0.194800   6.222 4.90e-10 ***
#> level2420    0.730856   0.162993   4.484 7.33e-06 ***
#> level2421    1.354007   0.161972   8.359  < 2e-16 ***
#> level2422    0.291319   0.153184   1.902 0.057202 .  
#> level2423    0.185893   0.213746   0.870 0.384468    
#> level2424    0.843778   0.139202   6.062 1.35e-09 ***
#> level2425    0.460834   0.162998   2.827 0.004695 ** 
#> level2426    1.483198   0.220537   6.725 1.75e-11 ***
#> level2427    0.483526   0.191709   2.522 0.011663 *  
#> level2428    0.361222   0.168604   2.142 0.032159 *  
#> level2429    2.161956   0.327437   6.603 4.04e-11 ***
#> level2430   -0.156629   0.236698  -0.662 0.508148    
#> level2431    1.004661   0.154511   6.502 7.91e-11 ***
#> level2432    0.101715   0.178522   0.570 0.568841    
#> level2433    0.932793   0.154370   6.043 1.52e-09 ***
#> level2434    1.556878   0.213542   7.291 3.08e-13 ***
#> level2435    1.465229   0.157873   9.281  < 2e-16 ***
#> level2436   -0.014721   0.151790  -0.097 0.922739    
#> level2437   -0.122953   0.196481  -0.626 0.531462    
#> level2438    0.241781   0.169044   1.430 0.152635    
#> level2439    0.195844   0.232038   0.844 0.398662    
#> level2440    0.173371   0.281102   0.617 0.537398    
#> level2441    0.746515   0.203431   3.670 0.000243 ***
#> level2442    0.983540   0.156125   6.300 2.98e-10 ***
#> level2443    1.372037   0.158455   8.659  < 2e-16 ***
#> level2444    0.418386   0.169070   2.475 0.013337 *  
#> level2445    0.587308   0.146485   4.009 6.09e-05 ***
#> level2446    0.140431   0.216150   0.650 0.515891    
#> level2447    1.079190   0.153483   7.031 2.05e-12 ***
#> level2448    0.680102   0.163934   4.149 3.34e-05 ***
#> level2449    2.117744   0.166773  12.698  < 2e-16 ***
#> level2450   -0.415474   0.269835  -1.540 0.123626    
#> level2451    1.378763   0.199568   6.909 4.89e-12 ***
#> level2452   -0.241661   0.169027  -1.430 0.152799    
#> level2453    1.679776   0.191574   8.768  < 2e-16 ***
#> level2454   -0.104261   0.175094  -0.595 0.551538    
#> level2455   -0.135884   0.171765  -0.791 0.428883    
#> level2456   -0.298417   0.209546  -1.424 0.154414    
#> level2457    0.590482   0.146777   4.023 5.75e-05 ***
#> level2458    2.057624   0.203940  10.089  < 2e-16 ***
#> level2459    0.335690   0.198205   1.694 0.090331 .  
#> level2460    0.328160   0.172240   1.905 0.056748 .  
#> level2461   -0.505498   0.170432  -2.966 0.003017 ** 
#> level2462    0.414829   0.158495   2.617 0.008863 ** 
#> level2463   -0.187376   0.163192  -1.148 0.250888    
#> level2464    0.480477   0.160511   2.993 0.002759 ** 
#> level2465    2.462435   0.203781  12.084  < 2e-16 ***
#> level2466    1.204072   0.209151   5.757 8.56e-09 ***
#> level2467    0.679725   0.167637   4.055 5.02e-05 ***
#> level2468    0.812030   0.194958   4.165 3.11e-05 ***
#> level2469    1.852748   0.189239   9.791  < 2e-16 ***
#> level2470   -1.228191   0.237049  -5.181 2.20e-07 ***
#> level2471    0.314449   0.230680   1.363 0.172838    
#> level2472    0.419920   0.192075   2.186 0.028799 *  
#> level2473    1.050546   0.157508   6.670 2.56e-11 ***
#> level2474    1.351026   0.209574   6.447 1.14e-10 ***
#> level2475   -1.074619   0.179822  -5.976 2.29e-09 ***
#> level2476   -1.085090   0.189905  -5.714 1.10e-08 ***
#> level2477   -0.527489   0.229922  -2.294 0.021779 *  
#> level2478    0.226114   0.164297   1.376 0.168745    
#> level2479    0.051467   0.153031   0.336 0.736632    
#> level2480    0.581506   0.224704   2.588 0.009657 ** 
#> level2481    0.826360   0.189917   4.351 1.35e-05 ***
#> level2482   -0.417049   0.186133  -2.241 0.025052 *  
#> level2483    0.684196   0.176274   3.881 0.000104 ***
#> level2484    1.318344   0.138221   9.538  < 2e-16 ***
#> level2485    0.893470   0.155567   5.743 9.28e-09 ***
#> level2486    0.827068   0.138110   5.988 2.12e-09 ***
#> level2487    1.130017   0.171970   6.571 5.00e-11 ***
#> level2488   -0.497835   0.199061  -2.501 0.012387 *  
#> level2489    1.208278   0.147834   8.173 3.00e-16 ***
#> level2490   -0.823841   0.143117  -5.756 8.59e-09 ***
#> level2491    0.765165   0.201900   3.790 0.000151 ***
#> level2492    0.771208   0.175703   4.389 1.14e-05 ***
#> level2493   -0.259854   0.162932  -1.595 0.110744    
#> level2494    0.366509   0.134057   2.734 0.006257 ** 
#> level2495    0.885871   0.182555   4.853 1.22e-06 ***
#> level2496   -2.362750   0.272831  -8.660  < 2e-16 ***
#> level2497   -0.132531   0.166736  -0.795 0.426697    
#> level2498    2.203030   0.160670  13.712  < 2e-16 ***
#> level2499   -0.232878   0.180500  -1.290 0.196986    
#> level2500    1.831393   0.218364   8.387  < 2e-16 ***
#> level2501    0.552519   0.199101   2.775 0.005519 ** 
#> level2502    0.301204   0.154395   1.951 0.051074 .  
#> level2503    0.424078   0.152799   2.775 0.005513 ** 
#> level2504    1.025767   0.185773   5.522 3.36e-08 ***
#> level2505   -0.843928   0.423259  -1.994 0.046165 *  
#> level2506    0.560715   0.171057   3.278 0.001046 ** 
#> level2507    0.496513   0.255793   1.941 0.052249 .  
#> level2508    0.078061   0.229026   0.341 0.733226    
#> level2509    3.094412   0.327264   9.455  < 2e-16 ***
#> level2510    1.576273   0.144991  10.871  < 2e-16 ***
#> level2511   -1.007565   0.178526  -5.644 1.66e-08 ***
#> level2512    0.756393   0.200634   3.770 0.000163 ***
#> level2513    1.667090   0.169763   9.820  < 2e-16 ***
#> level2514    0.462959   0.154513   2.996 0.002733 ** 
#> level2515    0.588886   0.235012   2.506 0.012219 *  
#> level2516    0.933443   0.151461   6.163 7.14e-10 ***
#> level2517    1.002481   0.147290   6.806 1.00e-11 ***
#> level2518    0.838191   0.163188   5.136 2.80e-07 ***
#> level2519    0.366390   0.168683   2.172 0.029851 *  
#> level2520    1.013769   0.181613   5.582 2.38e-08 ***
#> level2521    1.024204   0.182945   5.598 2.16e-08 ***
#> level2522    0.856730   0.210341   4.073 4.64e-05 ***
#> level2523   -0.277792   0.149441  -1.859 0.063045 .  
#> level2524    0.866269   0.158870   5.453 4.96e-08 ***
#> level2525    0.637676   0.201366   3.167 0.001541 ** 
#> level2526    2.124462   0.155396  13.671  < 2e-16 ***
#> level2527    0.724612   0.144717   5.007 5.53e-07 ***
#> level2528    0.941983   0.155056   6.075 1.24e-09 ***
#> level2529    0.806535   0.169345   4.763 1.91e-06 ***
#> level2530    1.301657   0.155389   8.377  < 2e-16 ***
#> level2531    0.868020   0.133105   6.521 6.97e-11 ***
#> level2532    0.432780   0.187284   2.311 0.020842 *  
#> level2533   -0.192814   0.223196  -0.864 0.387654    
#> level2534   -0.183476   0.166217  -1.104 0.269663    
#> level2535    0.286389   0.157172   1.822 0.068435 .  
#> level2536    0.476769   0.201530   2.366 0.017994 *  
#> level2537    0.045271   0.173427   0.261 0.794065    
#> level2538    1.251262   0.177419   7.053 1.76e-12 ***
#> level2539   -1.496490   0.301512  -4.963 6.93e-07 ***
#> level2540    0.255948   0.202317   1.265 0.205842    
#> level2541    0.722978   0.154695   4.674 2.96e-06 ***
#> level2542    1.084774   0.140001   7.748 9.31e-15 ***
#> level2543    0.851851   0.174314   4.887 1.02e-06 ***
#> level2544    0.403744   0.163504   2.469 0.013537 *  
#> level2545   -0.104261   0.222711  -0.468 0.639680    
#> level2546   -0.115131   0.188050  -0.612 0.540383    
#> level2547    0.352497   0.180674   1.951 0.051055 .  
#> level2548    1.848080   0.150874  12.249  < 2e-16 ***
#> level2549   -1.109783   0.168889  -6.571 4.99e-11 ***
#> level2550    0.393986   0.182117   2.163 0.030513 *  
#> level2551    0.657879   0.145544   4.520 6.18e-06 ***
#> level2552   -0.954728   0.197359  -4.838 1.31e-06 ***
#> level2553    0.686867   0.191576   3.585 0.000337 ***
#> level2554    0.425257   0.163139   2.607 0.009142 ** 
#> level2555    0.367895   0.251124   1.465 0.142923    
#> level2556    0.186135   0.220961   0.842 0.399571    
#> level2557   -0.167852   0.182907  -0.918 0.358780    
#> level2558    0.505999   0.137830   3.671 0.000241 ***
#> level2559    0.029270   0.238157   0.123 0.902183    
#> level2560    0.325448   0.150398   2.164 0.030471 *  
#> level2561    1.399816   0.216558   6.464 1.02e-10 ***
#> level2562   -0.620627   0.216487  -2.867 0.004146 ** 
#> level2563    0.129354   0.182485   0.709 0.478420    
#> level2564    0.029270   0.266653   0.110 0.912592    
#> level2565    0.413533   0.152678   2.709 0.006758 ** 
#> level2566    2.792755   0.245329  11.384  < 2e-16 ***
#> level2567   -0.128954   0.216088  -0.597 0.550665    
#> level2568    1.553967   0.171109   9.082  < 2e-16 ***
#> level2569    0.107583   0.162481   0.662 0.507891    
#> level2570   -0.087019   0.218862  -0.398 0.690926    
#> level2571    0.999265   0.152945   6.534 6.42e-11 ***
#> level2572   -0.498165   0.236217  -2.109 0.034951 *  
#> level2573    0.143301   0.226088   0.634 0.526192    
#> level2574   -0.335590   0.175744  -1.910 0.056192 .  
#> level2575    0.955131   0.171045   5.584 2.35e-08 ***
#> level2576   -0.409962   0.190290  -2.154 0.031208 *  
#> level2577    0.168715   0.193726   0.871 0.383813    
#> level2578    0.076193   0.163221   0.467 0.640636    
#> level2579    0.242832   0.146989   1.652 0.098526 .  
#> level2580    1.676916   0.146584  11.440  < 2e-16 ***
#> level2581    0.115703   0.150263   0.770 0.441298    
#> level2582    1.567642   0.135181  11.597  < 2e-16 ***
#> level2583    0.674542   0.141440   4.769 1.85e-06 ***
#> level2584    0.104831   0.200459   0.523 0.601007    
#> level2585   -0.183304   0.174788  -1.049 0.294307    
#> level2586   -0.013045   0.185921  -0.070 0.944063    
#> level2587    1.630340   0.264970   6.153 7.61e-10 ***
#> level2588   -0.391943   0.169729  -2.309 0.020931 *  
#> level2589    0.071068   0.160687   0.442 0.658291    
#> level2590    0.585230   0.178472   3.279 0.001041 ** 
#> level2591    0.558695   0.151752   3.682 0.000232 ***
#> level2592    0.754297   0.165570   4.556 5.22e-06 ***
#> level2593    1.421575   0.148160   9.595  < 2e-16 ***
#> level2594   -0.170074   0.200852  -0.847 0.397127    
#> level2595   -0.098497   0.191274  -0.515 0.606585    
#> level2596    0.438535   0.165800   2.645 0.008170 ** 
#> level2597   -0.523240   0.161261  -3.245 0.001176 ** 
#> level2598    0.766342   0.188329   4.069 4.72e-05 ***
#> level2599    0.664807   0.141263   4.706 2.52e-06 ***
#> level2600    0.321823   0.170225   1.891 0.058680 .  
#> level2601    1.375719   0.183300   7.505 6.13e-14 ***
#> level2602    1.009619   0.169800   5.946 2.75e-09 ***
#> level2603    1.501946   0.162736   9.229  < 2e-16 ***
#> level2604    0.327872   0.171743   1.909 0.056251 .  
#> level2605    0.158103   0.156811   1.008 0.313338    
#> level2606    0.016103   0.166581   0.097 0.922992    
#> level2607    0.869789   0.181044   4.804 1.55e-06 ***
#> level2608   -1.660454   0.270233  -6.145 8.02e-10 ***
#> level2609    1.307701   0.165566   7.898 2.83e-15 ***
#> level2610   -0.813937   0.267882  -3.038 0.002378 ** 
#> level2611   -0.174879   0.213378  -0.820 0.412459    
#> level2612    0.908174   0.180937   5.019 5.19e-07 ***
#> level2613    0.550024   0.158244   3.476 0.000509 ***
#> level2614    0.678760   0.156334   4.342 1.41e-05 ***
#> level2615    1.030719   0.167673   6.147 7.89e-10 ***
#> level2616    0.906244   0.196901   4.603 4.17e-06 ***
#> level2617    1.079813   0.143856   7.506 6.09e-14 ***
#> level2618    0.543766   0.196857   2.762 0.005741 ** 
#> level2619    1.581163   0.164967   9.585  < 2e-16 ***
#> level2620    1.880966   0.147721  12.733  < 2e-16 ***
#> level2621   -0.093623   0.186506  -0.502 0.615681    
#> level2622   -0.232094   0.207263  -1.120 0.262796    
#> level2623    0.238991   0.153282   1.559 0.118959    
#> level2624    0.889839   0.172256   5.166 2.39e-07 ***
#> level2625    2.418964   0.228764  10.574  < 2e-16 ***
#> level2626    2.003618   0.220342   9.093  < 2e-16 ***
#> level2627    0.512513   0.228209   2.246 0.024716 *  
#> level2628    1.834729   0.153091  11.985  < 2e-16 ***
#> level2629    0.216647   0.315301   0.687 0.492013    
#> level2630   -0.045072   0.151326  -0.298 0.765819    
#> level2631    0.721707   0.163427   4.416 1.01e-05 ***
#> level2632    2.032339   0.231068   8.795  < 2e-16 ***
#> level2633    0.177267   0.183270   0.967 0.333421    
#> level2634    0.722930   0.151785   4.763 1.91e-06 ***
#> level2635    0.281401   0.153293   1.836 0.066400 .  
#> level2636    0.680694   0.178277   3.818 0.000134 ***
#> level2637    0.514353   0.167384   3.073 0.002120 ** 
#> level2638   -0.607831   0.167450  -3.630 0.000283 ***
#> level2639    0.958633   0.222013   4.318 1.58e-05 ***
#> level2640   -0.386493   0.201910  -1.914 0.055596 .  
#> level2641    0.114397   0.139408   0.821 0.411877    
#> level2642    0.218966   0.235145   0.931 0.351753    
#> level2643    1.128410   0.146538   7.700 1.36e-14 ***
#> level2644    1.887295   0.201665   9.359  < 2e-16 ***
#> level2645    0.579130   0.194881   2.972 0.002961 ** 
#> level2646   -1.000349   0.265267  -3.771 0.000163 ***
#> level2647    0.113605   0.157448   0.722 0.470576    
#> level2648    1.326485   0.198960   6.667 2.61e-11 ***
#> level2649    0.646045   0.221592   2.915 0.003552 ** 
#> level2650   -0.192230   0.242019  -0.794 0.427035    
#> level2651    1.775097   0.154376  11.499  < 2e-16 ***
#> level2652    0.861592   0.158563   5.434 5.52e-08 ***
#> level2653    0.393986   0.182117   2.163 0.030513 *  
#> level2654    2.850649   0.359429   7.931 2.17e-15 ***
#> level2655    1.326205   0.156988   8.448  < 2e-16 ***
#> level2656    0.257719   0.215463   1.196 0.231652    
#> level2657    0.700112   0.191117   3.663 0.000249 ***
#> level2658    2.380646   0.201836  11.795  < 2e-16 ***
#> level2659    2.307057   0.175254  13.164  < 2e-16 ***
#> level2660    0.698243   0.137584   5.075 3.87e-07 ***
#> level2661    0.440966   0.286430   1.540 0.123677    
#> level2662    0.378913   0.167213   2.266 0.023449 *  
#> level2663    0.933463   0.149224   6.255 3.96e-10 ***
#> level2664    0.215907   0.183172   1.179 0.238514    
#> level2665    0.998458   0.132932   7.511 5.86e-14 ***
#> level2666    1.152254   0.147293   7.823 5.16e-15 ***
#> level2667    0.489020   0.188486   2.594 0.009474 ** 
#> level2668    0.850312   0.199609   4.260 2.05e-05 ***
#> level2669    0.607140   0.163031   3.724 0.000196 ***
#> level2670    0.905595   0.138916   6.519 7.08e-11 ***
#> level2671   -0.233094   0.172415  -1.352 0.176397    
#> level2672    1.114369   0.161950   6.881 5.95e-12 ***
#> level2673    0.390435   0.226468   1.724 0.084704 .  
#> level2674    0.687826   0.180093   3.819 0.000134 ***
#> level2675    0.557423   0.190032   2.933 0.003354 ** 
#> level2676    1.444421   0.148939   9.698  < 2e-16 ***
#> level2677    1.287255   0.150685   8.543  < 2e-16 ***
#> level2678    2.028103   0.182240  11.129  < 2e-16 ***
#> level2679   -0.174220   0.180447  -0.965 0.334301    
#> level2680    0.837289   0.161804   5.175 2.28e-07 ***
#> level2681    0.174790   0.154212   1.133 0.257028    
#> level2682   -0.707460   0.227386  -3.111 0.001863 ** 
#> level2683    0.227461   0.168841   1.347 0.177921    
#> level2684    0.382173   0.218711   1.747 0.080570 .  
#> level2685    0.724801   0.138115   5.248 1.54e-07 ***
#> level2686    1.023827   0.148280   6.905 5.03e-12 ***
#> level2687   -0.029711   0.158999  -0.187 0.851769    
#> level2688    1.025362   0.170504   6.014 1.81e-09 ***
#> level2689    0.053963   0.217895   0.248 0.804400    
#> level2690    0.701003   0.230739   3.038 0.002381 ** 
#> level2691    0.475396   0.156254   3.042 0.002347 ** 
#> level2692    1.207925   0.315665   3.827 0.000130 ***
#> level2693    1.138540   0.145531   7.823 5.14e-15 ***
#> level2694    0.364383   0.170888   2.132 0.032983 *  
#> level2695    0.475312   0.173229   2.744 0.006073 ** 
#> level2696    1.356331   0.177791   7.629 2.37e-14 ***
#> level2697   -0.655293   0.169846  -3.858 0.000114 ***
#> level2698   -0.640346   0.165709  -3.864 0.000111 ***
#> level2699    0.411205   0.280154   1.468 0.142164    
#> level2700    0.265659   0.152701   1.740 0.081905 .  
#> level2701   -0.300865   0.157916  -1.905 0.056752 .  
#> level2702    1.687498   0.199699   8.450  < 2e-16 ***
#> level2703   -0.286583   0.169106  -1.695 0.090133 .  
#> level2704    0.262202   0.174333   1.504 0.132575    
#> level2705    0.034575   0.227991   0.152 0.879461    
#> level2706   -0.138550   0.170109  -0.814 0.415372    
#> level2707    1.712888   0.148539  11.532  < 2e-16 ***
#> level2708    0.688970   0.274944   2.506 0.012216 *  
#> level2709   -0.076090   0.263660  -0.289 0.772893    
#> level2710   -0.584315   0.223868  -2.610 0.009052 ** 
#> level2711    0.885506   0.132133   6.702 2.06e-11 ***
#> level2712    0.151908   0.194454   0.781 0.434684    
#> level2713    0.293541   0.158345   1.854 0.063766 .  
#> level2714   -0.381248   0.200542  -1.901 0.057290 .  
#> level2715    0.041451   0.159080   0.261 0.794428    
#> level2716   -0.365741   0.238529  -1.533 0.125198    
#> level2717    1.304506   0.149393   8.732  < 2e-16 ***
#> level2718    1.722241   0.168947  10.194  < 2e-16 ***
#> level2719    0.968149   0.176165   5.496 3.89e-08 ***
#> level2720    1.290617   0.208868   6.179 6.45e-10 ***
#> level2721    0.483526   0.258645   1.869 0.061559 .  
#> level2722    1.173692   0.173076   6.781 1.19e-11 ***
#> level2723   -0.067893   0.248242  -0.273 0.784471    
#> level2724    0.801979   0.262425   3.056 0.002243 ** 
#> level2725   -0.058591   0.160024  -0.366 0.714262    
#> level2726   -0.263009   0.185149  -1.421 0.155454    
#> level2727   -0.215931   0.173193  -1.247 0.212484    
#> level2728    1.411444   0.135701  10.401  < 2e-16 ***
#> level2729    1.227966   0.159221   7.712 1.24e-14 ***
#> level2730    0.596321   0.137371   4.341 1.42e-05 ***
#> level2731   -0.272142   0.234335  -1.161 0.245505    
#> level2732    0.315760   0.149254   2.116 0.034380 *  
#> level2733    1.661426   0.157132  10.573  < 2e-16 ***
#> level2734    2.415132   0.188003  12.846  < 2e-16 ***
#> level2735   -0.365741   0.238529  -1.533 0.125198    
#> level2736    0.585717   0.171514   3.415 0.000638 ***
#> level2737    0.649511   0.183472   3.540 0.000400 ***
#> level2738    2.409084   0.247732   9.725  < 2e-16 ***
#> level2739    0.079521   0.154231   0.516 0.606134    
#> level2740    0.193573   0.163513   1.184 0.236476    
#> level2741    0.235821   0.230758   1.022 0.306808    
#> level2742    0.808948   0.174687   4.631 3.64e-06 ***
#> level2743    0.580981   0.182600   3.182 0.001464 ** 
#> level2744   -0.199571   0.280563  -0.711 0.476883    
#> level2745    1.543249   0.192640   8.011 1.14e-15 ***
#> level2746    1.405450   0.166303   8.451  < 2e-16 ***
#> level2747    1.609537   0.170204   9.457  < 2e-16 ***
#> level2748    1.379026   0.185238   7.445 9.72e-14 ***
#> level2749    0.186663   0.166138   1.124 0.261208    
#> level2750    0.731987   0.161868   4.522 6.12e-06 ***
#> level2751    0.715180   0.208167   3.436 0.000591 ***
#> level2752    0.771208   0.297597   2.591 0.009557 ** 
#> level2753   -0.107461   0.162402  -0.662 0.508164    
#> level2754    0.253413   0.154565   1.640 0.101104    
#> level2755   -0.113923   0.162720  -0.700 0.483855    
#> level2756    0.901758   0.143863   6.268 3.65e-10 ***
#> level2757    0.785001   0.161149   4.871 1.11e-06 ***
#> level2758   -0.408610   0.155027  -2.636 0.008396 ** 
#> level2759    2.038713   0.164162  12.419  < 2e-16 ***
#> level2760    1.005846   0.158299   6.354 2.10e-10 ***
#> level2761    1.759994   0.156778  11.226  < 2e-16 ***
#> level2762    1.382117   0.319233   4.329 1.49e-05 ***
#> level2763    1.354114   0.176260   7.682 1.56e-14 ***
#> level2764    0.058258   0.219927   0.265 0.791089    
#> level2765    0.083292   0.160487   0.519 0.603766    
#> level2766    0.520567   0.147510   3.529 0.000417 ***
#> level2767    0.933956   0.145320   6.427 1.30e-10 ***
#> level2768    0.984199   0.184036   5.348 8.90e-08 ***
#> level2769    0.899041   0.175839   5.113 3.17e-07 ***
#> level2770    1.467501   0.164933   8.898  < 2e-16 ***
#> level2771    0.519612   0.184652   2.814 0.004893 ** 
#> level2772    0.008945   0.161750   0.055 0.955897    
#> level2773   -0.145083   0.178598  -0.812 0.416595    
#> level2774    1.496443   0.149292  10.024  < 2e-16 ***
#> level2775    1.351026   0.219677   6.150 7.75e-10 ***
#> level2776   -0.140070   0.184971  -0.757 0.448895    
#> level2777    0.188726   0.165358   1.141 0.253736    
#> level2778    1.654010   0.150493  10.991  < 2e-16 ***
#> level2779    1.361283   0.176114   7.730 1.08e-14 ***
#> level2780   -0.543174   0.195852  -2.773 0.005548 ** 
#> level2781    0.600777   0.159502   3.767 0.000165 ***
#> level2782   -1.352251   0.261436  -5.172 2.31e-07 ***
#> level2783    0.334652   0.183097   1.828 0.067590 .  
#> level2784    0.969659   0.250907   3.865 0.000111 ***
#> level2785    0.603745   0.168528   3.582 0.000340 ***
#> level2786    0.712003   0.161257   4.415 1.01e-05 ***
#> level2787    0.463723   0.415196   1.117 0.264046    
#> level2788    1.479859   0.157423   9.401  < 2e-16 ***
#> level2789    0.061183   0.168483   0.363 0.716501    
#> level2790   -0.200653   0.191902  -1.046 0.295747    
#> level2791   -0.271315   0.360713  -0.752 0.451953    
#> level2792    0.358363   0.170331   2.104 0.035385 *  
#> level2793    1.269580   0.176022   7.213 5.49e-13 ***
#> level2794   -0.069292   0.165626  -0.418 0.675679    
#> level2795    1.143697   0.161418   7.085 1.39e-12 ***
#> level2796   -0.742146   0.180372  -4.115 3.88e-05 ***
#> level2797    0.486347   0.157618   3.086 0.002031 ** 
#> level2798    0.476990   0.149284   3.195 0.001397 ** 
#> level2799    0.249244   0.182281   1.367 0.171512    
#> level2800    1.201214   0.157562   7.624 2.46e-14 ***
#> level2801    0.623372   0.166993   3.733 0.000189 ***
#> level2802   -0.162829   0.161499  -1.008 0.313339    
#> level2803    0.948366   0.158317   5.990 2.09e-09 ***
#> level2804    1.595125   0.163020   9.785  < 2e-16 ***
#> level2805    0.375928   0.140425   2.677 0.007427 ** 
#> level2806    0.202623   0.163262   1.241 0.214573    
#> level2807    0.817838   0.143740   5.690 1.27e-08 ***
#> level2808    0.540684   0.209397   2.582 0.009820 ** 
#> level2809    0.899041   0.159674   5.630 1.80e-08 ***
#> level2810    0.047139   0.158220   0.298 0.765756    
#> level2811    0.842625   0.155139   5.431 5.59e-08 ***
#> level2812   -0.159611   0.213651  -0.747 0.455024    
#> level2813    0.709839   0.157019   4.521 6.16e-06 ***
#> level2814   -0.366625   0.171082  -2.143 0.032115 *  
#> level2815    1.027034   0.141780   7.244 4.36e-13 ***
#> level2816   -1.241789   0.230424  -5.389 7.08e-08 ***
#> level2817    1.118735   0.161352   6.934 4.11e-12 ***
#> level2818    0.827297   0.146820   5.635 1.75e-08 ***
#> level2819   -0.951559   0.208900  -4.555 5.24e-06 ***
#> level2820    0.983052   0.190167   5.169 2.35e-07 ***
#> level2821    1.417471   0.161857   8.758  < 2e-16 ***
#> level2822    0.427956   0.179515   2.384 0.017127 *  
#> level2823    0.074988   0.187306   0.400 0.688897    
#> level2824    0.348525   0.141309   2.466 0.013648 *  
#> level2825    0.588886   0.325817   1.807 0.070698 .  
#> level2826    1.322039   0.158961   8.317  < 2e-16 ***
#> level2827   -0.142413   0.156752  -0.909 0.363601    
#> level2828    1.399816   0.226810   6.172 6.75e-10 ***
#> level2829    1.164250   0.190595   6.109 1.01e-09 ***
#> level2830    1.026874   0.172709   5.946 2.75e-09 ***
#> level2831    1.223193   0.254682   4.803 1.56e-06 ***
#> level2832    1.086522   0.163554   6.643 3.07e-11 ***
#> level2833   -0.430477   0.176879  -2.434 0.014944 *  
#> level2834    0.091484   0.245786   0.372 0.709738    
#> level2835    1.153416   0.213334   5.407 6.42e-08 ***
#> level2836   -0.048998   0.188082  -0.261 0.794466    
#> level2837    1.054249   0.159846   6.595 4.24e-11 ***
#> level2838    0.512167   0.141092   3.630 0.000283 ***
#> level2839    2.185585   0.173402  12.604  < 2e-16 ***
#> level2840    0.105895   0.203067   0.521 0.602033    
#> level2841   -0.182733   0.200653  -0.911 0.362458    
#> level2842    0.461827   0.154284   2.993 0.002759 ** 
#> level2843    0.436808   0.157987   2.765 0.005695 ** 
#> level2844    0.169186   0.158626   1.067 0.286164    
#> level2845   -0.097704   0.199376  -0.490 0.624101    
#> level2846    0.337244   0.164319   2.052 0.040133 *  
#> level2847    0.192991   0.185094   1.043 0.297106    
#> level2848    0.342831   0.141750   2.419 0.015582 *  
#> level2849    0.437080   0.162652   2.687 0.007205 ** 
#> level2850    1.238548   0.161900   7.650 2.01e-14 ***
#> level2851    0.874550   0.218803   3.997 6.42e-05 ***
#> level2852    1.609537   0.228205   7.053 1.75e-12 ***
#> level2853    0.259628   0.165900   1.565 0.117591    
#> level2854    0.671578   0.202315   3.319 0.000902 ***
#> level2855   -0.347491   0.261545  -1.329 0.183977    
#> level2856    2.072923   0.171806  12.065  < 2e-16 ***
#> level2857   -0.225816   0.199991  -1.129 0.258841    
#> level2858    0.376428   0.189392   1.988 0.046860 *  
#> level2859    0.301204   0.259105   1.162 0.245041    
#> level2860    1.339192   0.252605   5.302 1.15e-07 ***
#> level2861   -0.057065   0.167092  -0.342 0.732712    
#> level2862    0.955967   0.148647   6.431 1.27e-10 ***
#> level2863    0.338944   0.179777   1.885 0.059382 .  
#> level2864   -0.279148   0.175010  -1.595 0.110705    
#> level2865    0.782793   0.151779   5.157 2.50e-07 ***
#> level2866    0.192570   0.159490   1.207 0.227274    
#> level2867    0.312054   0.156188   1.998 0.045723 *  
#> level2868   -0.065040   0.175582  -0.370 0.711064    
#> level2869    0.491248   0.184761   2.659 0.007841 ** 
#> level2870    0.142381   0.158925   0.896 0.370308    
#> level2871    0.613628   0.136017   4.511 6.44e-06 ***
#> level2872    0.772938   0.136950   5.644 1.66e-08 ***
#> level2873    1.673818   0.147491  11.349  < 2e-16 ***
#> level2874   -0.322950   0.236275  -1.367 0.171675    
#> level2875    0.662994   0.184434   3.595 0.000325 ***
#> level2876   -0.177464   0.173620  -1.022 0.306712    
#> level2877    1.964709   0.145687  13.486  < 2e-16 ***
#> level2878   -0.427926   0.155768  -2.747 0.006011 ** 
#> level2879    0.724875   0.178178   4.068 4.74e-05 ***
#> level2880    0.888991   0.176512   5.036 4.74e-07 ***
#> level2881    0.357800   0.144500   2.476 0.013282 *  
#> level2882   -0.337045   0.156104  -2.159 0.030842 *  
#> level2883    1.435085   0.197103   7.281 3.32e-13 ***
#> level2884    0.297180   0.160139   1.856 0.063488 .  
#> level2885    0.756680   0.239134   3.164 0.001555 ** 
#> level2886    1.670306   0.175237   9.532  < 2e-16 ***
#> level2887    0.846354   0.158082   5.354 8.61e-08 ***
#> level2888    0.971878   0.189839   5.119 3.06e-07 ***
#> level2889   -0.040545   0.252505  -0.161 0.872431    
#> level2890    0.903907   0.134939   6.699 2.10e-11 ***
#> level2891   -0.638343   0.176475  -3.617 0.000298 ***
#> level2892    0.054344   0.263038   0.207 0.836321    
#> level2893    1.556470   0.202751   7.677 1.63e-14 ***
#> level2894    0.994351   0.215293   4.619 3.86e-06 ***
#> level2895    1.857753   0.155996  11.909  < 2e-16 ***
#> level2896    0.354550   0.182758   1.940 0.052379 .  
#> level2897    1.843604   0.141716  13.009  < 2e-16 ***
#> level2898    0.315125   0.143209   2.200 0.027774 *  
#> level2899    1.139533   0.181631   6.274 3.52e-10 ***
#> level2900    0.884979   0.151966   5.824 5.76e-09 ***
#> level2901    0.994351   0.164004   6.063 1.34e-09 ***
#> level2902    0.205894   0.185319   1.111 0.266558    
#> level2903   -1.570598   0.250030  -6.282 3.35e-10 ***
#> level2904   -0.303594   0.179683  -1.690 0.091103 .  
#> level2905   -0.400832   0.241097  -1.663 0.096406 .  
#> level2906    0.341050   0.159504   2.138 0.032501 *  
#> level2907    1.448607   0.184392   7.856 3.96e-15 ***
#> level2908    3.172884   0.200172  15.851  < 2e-16 ***
#> level2909    1.476604   0.190641   7.745 9.52e-15 ***
#> level2910    0.508843   0.253071   2.011 0.044360 *  
#> level2911    0.082325   0.153314   0.537 0.591289    
#> level2912    0.748679   0.190061   3.939 8.18e-05 ***
#> level2913    1.910642   0.268137   7.126 1.04e-12 ***
#> level2914    0.192005   0.179253   1.071 0.284107    
#> level2915    1.027141   0.156512   6.563 5.28e-11 ***
#> level2916    0.656659   0.167954   3.910 9.24e-05 ***
#> level2917    0.533176   0.162181   3.288 0.001011 ** 
#> level2918   -0.376195   0.229675  -1.638 0.101433    
#> level2919    1.342658   0.156522   8.578  < 2e-16 ***
#> level2920    0.198550   0.152871   1.299 0.194010    
#> level2921    0.025693   0.168518   0.152 0.878823    
#> level2922   -1.457979   0.203501  -7.164 7.81e-13 ***
#> level2923    1.163101   0.164706   7.062 1.65e-12 ***
#> level2924   -1.311799   0.229863  -5.707 1.15e-08 ***
#> level2925   -0.015892   0.184185  -0.086 0.931242    
#> level2926    1.064237   0.136912   7.773 7.66e-15 ***
#> level2927   -0.126608   0.189837  -0.667 0.504815    
#> level2928   -0.017250   0.180287  -0.096 0.923776    
#> level2929    1.981738   0.194020  10.214  < 2e-16 ***
#> level2930    0.453881   0.166037   2.734 0.006264 ** 
#> level2931    0.920243   0.179187   5.136 2.81e-07 ***
#> level2932    0.494954   0.178393   2.775 0.005528 ** 
#> level2933    2.475956   0.210347  11.771  < 2e-16 ***
#> level2934    1.062671   0.181931   5.841 5.19e-09 ***
#> level2935    0.619658   0.174956   3.542 0.000397 ***
#> level2936   -1.092714   0.191060  -5.719 1.07e-08 ***
#> level2937   -0.034417   0.172407  -0.200 0.841770    
#> level2938    0.767824   0.209825   3.659 0.000253 ***
#> level2939    2.662774   0.169142  15.743  < 2e-16 ***
#> level2940    1.136667   0.156679   7.255 4.02e-13 ***
#> level2941    0.620385   0.182186   3.405 0.000661 ***
#> level2942    0.626626   0.164302   3.814 0.000137 ***
#> level2943    0.130859   0.232774   0.562 0.573999    
#> level2944    1.103551   0.178326   6.188 6.08e-10 ***
#> level2945    1.208761   0.229885   5.258 1.46e-07 ***
#> level2946    0.562474   0.160008   3.515 0.000439 ***
#> level2947    2.336013   0.183266  12.747  < 2e-16 ***
#> level2948    0.632167   0.151443   4.174 2.99e-05 ***
#> level2949    1.565484   0.155363  10.076  < 2e-16 ***
#> level2950    0.005223   0.209883   0.025 0.980146    
#> level2951    0.032075   0.184087   0.174 0.861676    
#> level2952    1.338680   0.155070   8.633  < 2e-16 ***
#> level2953   -0.155033   0.184769  -0.839 0.401432    
#> level2954    0.436240   0.173535   2.514 0.011942 *  
#> level2955   -0.414084   0.179274  -2.310 0.020900 *  
#> level2956    0.156682   0.149332   1.049 0.294079    
#> level2957    0.712939   0.239650   2.975 0.002931 ** 
#> level2958    1.150512   0.199240   5.774 7.72e-09 ***
#> level2959   -0.555573   0.164419  -3.379 0.000727 ***
#> level2960    0.471103   0.216201   2.179 0.029332 *  
#> level2961    0.399644   0.249109   1.604 0.108649    
#> level2962   -0.643762   0.187828  -3.427 0.000609 ***
#> level2963    0.285700   0.245354   1.164 0.244246    
#> level2964    0.372948   0.159338   2.341 0.019252 *  
#> level2965   -0.179162   0.239179  -0.749 0.453814    
#> level2966    1.474664   0.148157   9.953  < 2e-16 ***
#> level2967   -0.408472   0.234721  -1.740 0.081816 .  
#> level2968   -0.892718   0.244181  -3.656 0.000256 ***
#> level2969    0.103027   0.181330   0.568 0.569916    
#> level2970    1.322855   0.155503   8.507  < 2e-16 ***
#> level2971    0.837166   0.230266   3.636 0.000277 ***
#> level2972    1.825785   0.160401  11.383  < 2e-16 ***
#> level2973    0.970254   0.152328   6.369 1.90e-10 ***
#> level2974    0.859315   0.157643   5.451 5.01e-08 ***
#> level2975    0.228883   0.294652   0.777 0.437281    
#> level2976    0.134527   0.165883   0.811 0.417380    
#> level2977    0.758523   0.180570   4.201 2.66e-05 ***
#> level2978    0.034141   0.166356   0.205 0.837392    
#> level2979   -2.455633   0.521056  -4.713 2.44e-06 ***
#> level2980    0.144283   0.165596   0.871 0.383593    
#> level2981    0.951054   0.149084   6.379 1.78e-10 ***
#> level2982    0.978222   0.172320   5.677 1.37e-08 ***
#> level2983   -0.129857   0.168182  -0.772 0.440044    
#> level2984    1.096134   0.164798   6.651 2.90e-11 ***
#> level2985    0.262490   0.229212   1.145 0.252133    
#> level2986    0.581506   0.224704   2.588 0.009657 ** 
#> level2987    1.738792   0.228866   7.597 3.02e-14 ***
#> level2988    0.187545   0.200866   0.934 0.350467    
#> level2989    0.194493   0.163161   1.192 0.233249    
#> level2990    0.524348   0.191777   2.734 0.006254 ** 
#> level2991    1.219020   0.165212   7.379 1.60e-13 ***
#> level2992    1.057664   0.161972   6.530 6.58e-11 ***
#> level2993   -0.375136   0.174032  -2.156 0.031118 *  
#> level2994   -0.070359   0.174282  -0.404 0.686426    
#> level2995    0.464013   0.146249   3.173 0.001510 ** 
#> level2996   -0.203352   0.172736  -1.177 0.239098    
#> level2997   -0.294488   0.223628  -1.317 0.187884    
#> level2998    0.643576   0.166987   3.854 0.000116 ***
#> level2999    1.193885   0.145408   8.211  < 2e-16 ***
#> level3000    0.573711   0.169595   3.383 0.000717 ***
#> ---
#> Signif. codes:  0 '***' 0.001 '**' 0.01 '*' 0.05 '.' 0.1 ' ' 1
#> 
#> (Dispersion parameter for binomial family taken to be 1)
#> 
#>     Null deviance: 1239372  on 918663  degrees of freedom
#> Residual deviance: 1123131  on 915664  degrees of freedom
#> AIC: 1129131
#> 
#> Number of Fisher Scoring iterations: 5

We can inspect the log-likelihood of the model like so:

logLik(fit)
#> 'log Lik.' -561565.5 (df=3000)

We can generate confidence intervals for each parameter estimate like so:

confint(fit)[1:20,]
#>                  2.5 %      97.5 %
#> (Intercept) -1.2226176 -0.76608494
#> level2       0.2841243  1.14931476
#> level3       1.4410183  2.07424222
#> level4       0.2195413  1.14560202
#> level5      -2.3955615 -1.45577684
#> level6      -0.4519456  0.39539534
#> level7       1.5735161  2.15251180
#> level8       0.2307670  0.96417282
#> level9       0.8835202  1.68054648
#> level10      1.3021902  2.04317651
#> level11     -1.0314196 -0.31529145
#> level12      0.5953103  1.15700632
#> level13      0.1783398  0.81819608
#> level14     -1.1284116 -0.46640481
#> level15     -0.8167977 -0.09969067
#> level16     -0.6033263  0.03944193
#> level17     -0.5908066  0.07742856
#> level18      0.3645311  1.73230588
#> level19     -0.3752316  0.32831762
#> level20     -1.9409699 -0.40843494

The variance-covariance matrix is returned as a sparse Matrix object, which is memory-efficient for large models:

vcov(fit)[1:5, 1:5]
#> 5 x 5 sparse Matrix of class "dsCMatrix"
#>             (Intercept)      level2      level3      level4      level5
#> (Intercept)  0.01356399 -0.01356399 -0.01356399 -0.01356399 -0.01356399
#> level2      -0.01356399  0.04871551  0.01356399  0.01356399  0.01356399
#> level3      -0.01356399  0.01356399  0.02609507  0.01356399  0.01356399
#> level4      -0.01356399  0.01356399  0.01356399  0.05581138  0.01356399
#> level5      -0.01356399  0.01356399  0.01356399  0.01356399  0.05747785

Analysis of deviance with anova

Sequential deviance: single model

Out of the box, MatrixModelsprovides no model comparison functionality. This is implemented in glm4.

For a single model with multiple predictors, anova() adds terms one at a time and reports the reduction in residual deviance at each step (consistent with anova.glm). To illustrate, we add a simulated continuous covariate x to the data and refit:

set.seed(6006)

# Add covariate and fit
df$x <- rnorm(nrow(df))
fit_x <- glm4(y ~ x + level, data = df, family = binomial(), sparse = TRUE)

# glm4 anova method
anova(fit_x)
#> Analysis of Deviance Table (glm4)
#> 
#> Model: binomial, link: logit
#> 
#> Response: y
#> 
#> Terms added sequentially (first to last)
#> 
#> 
#>         Df Deviance Resid. Df Resid. Dev Pr(>Chi)    
#> NULL                   918663    1239372             
#> x        1        0    918662    1239372   0.8489    
#> level 2999   116241    915663    1123131   <2e-16 ***
#> ---
#> Signif. codes:  0 '***' 0.001 '**' 0.01 '*' 0.05 '.' 0.1 ' ' 1

The test statistic is chosen automatically from the family, matching stats::anova.glm behaviour: "F" for families with an estimated dispersion (Gaussian, Gamma, …) and "Chisq" for families with a fixed dispersion (binomial, Poisson). For binomial models this means a likelihood-ratio \(\chi^2\) test. We can also request it explicitly:

anova(fit_x, test = "Chisq")
#> Analysis of Deviance Table (glm4)
#> 
#> Model: binomial, link: logit
#> 
#> Response: y
#> 
#> Terms added sequentially (first to last)
#> 
#> 
#>         Df Deviance Resid. Df Resid. Dev Pr(>Chi)    
#> NULL                   918663    1239372             
#> x        1        0    918662    1239372   0.8489    
#> level 2999   116241    915663    1123131   <2e-16 ***
#> ---
#> Signif. codes:  0 '***' 0.001 '**' 0.01 '*' 0.05 '.' 0.1 ' ' 1

The small deviance reduction for x (and non-significant \(p\)-value) is consistent with x being pure noise.

Model comparison: multiple models

Passing two or more glm4 objects to anova() produces a model comparison table, equivalent to a likelihood-ratio test between nested models:

anova(fit, fit_x, test = "Chisq")
#> Analysis of Deviance Table (glm4)
#> 
#> Model 1 : y ~ level
#> Model 2 : y ~ x + level
#>   Resid. Df Resid. Dev Df Deviance Pr(>Chi)
#> 1    915664    1123131                     
#> 2    915663    1123131  1 0.070821   0.7901

The output format and behaviour match stats::anova.glm, so results can be interpreted and handled identically to those from a standard glm workflow.

Code to generate the example data

set.seed(6006)

n_levels <- 3000

n_obs_lambda    <- rgamma(n_levels, 3.1) * 100
n_obs_per_level <- rpois(n_levels, n_obs_lambda) + 1
prob_per_level  <- rbeta(n_levels, 3.1, 4.4)

d <- vector(mode = "list", length = n_levels)
for (l in seq_along(n_obs_per_level)) {
    d[[l]] <- data.frame(
        y     = rbinom(n_obs_per_level[l], 1, prob_per_level[l]),
        level = l)
}

df       <- do.call("rbind", d)
df$level <- as.factor(df$level)