home *** CD-ROM | disk | FTP | other *** search
/ NetNews Usenet Archive 1992 #16 / NN_1992_16.iso / spool / bit / listserv / statl / 1190 < prev    next >
Encoding:
Internet Message Format  |  1992-07-22  |  1.9 KB

  1. Path: sparky!uunet!usc!wupost!gumby!yale!yale.edu!jvnc.net!netnews.upenn.edu!netnews.cc.lehigh.edu!ns1.cc.lehigh.edu!den0
  2. From: den0@ns1.cc.lehigh.edu (DEAN E. NELSON)
  3. Newsgroups: bit.listserv.stat-l
  4. Subject: Re: Bonferroni adjustments for annual results...
  5. Message-ID: <1992Jul22.204729.150339@ns1.cc.lehigh.edu>
  6. Date: 22 Jul 92 20:47:29 GMT
  7. Organization: Lehigh University
  8. Lines: 33
  9.  
  10. In article <STAT-L%92071910460529@VM1.MCGILL.CA>, ECOOCH@PENNSAS.UPENN.EDU (Evan
  11.  Cooch) writes:
  12. >
  13. >  So, I end up with a large table, one row for each year, with the SS, F and P
  14. >values noted. Say I have 30 years. In your opinion, do the individual year
  15. >significances need to be adjusted for the number of years presented?
  16. >
  17. >I have my opinion on this (and I won't tip my hand yet). One approach is to
  18. >ignore the issue and present both within year probabilities, and the
  19. >Bonferroni significances of same. Obviously, this begs the issue of whter you
  20. >need to adjust in the first palce or not.
  21.  
  22. The Bonferroni adjustment comes from an inequality, and thus ensures an
  23. overall error rate will be below some specified alpha, but it could be a lot
  24. lower, and hence it is notoriously conservative (unless you are doing safety
  25. studies, in which case it is liberal).
  26.  
  27. A confounding factor in your case is whether the relation of X and Y from years
  28. near each other are correlated, which I believe makes the Bonferroni even
  29. more conservative.
  30.  
  31. We once did some simulations comparing the bonferroni with other real and
  32. heuristic methods and found it to be highly conservative under the range
  33. of alternatives (in the specific experimental design we were looking at)
  34. we tried.
  35.  
  36. So, even if philosophically you buy the multiple comparisions argument,
  37. experience would seem to point you to another form of adjustment.
  38.  
  39. -- 
  40. Dean E. Nelson  den0@lehigh.edu  (Internet)
  41. (215)-758-4988  (That is d-e-n-zero, not the letter O)
  42.  
  43.