home *** CD-ROM | disk | FTP | other *** search
/ NetNews Usenet Archive 1992 #23 / NN_1992_23.iso / spool / bit / listserv / statl / 1750 < prev    next >
Encoding:
Internet Message Format  |  1992-10-15  |  2.0 KB
  1. Path: sparky!uunet!stanford.edu!lll-winken!elroy.jpl.nasa.gov!sdd.hp.com!swrinde!news.dell.com!paladin.american.edu!auvm!MATH.UNB.CA!ROLF
  2. From: rolf@MATH.UNB.CA ((Rolf Turner))
  3. Newsgroups: bit.listserv.stat-l
  4. Subject: Re: Data snooping.
  5. Message-ID: <9210142133.AA24073@halmos.math.UNB.CA>
  6. Date: 14 Oct 92 21:33:21 GMT
  7. Sender: "STATISTICAL CONSULTING" <STAT-L@MCGILL1.BITNET>
  8. Lines: 36
  9. Comments: Gated by NETNEWS@AUVM.AMERICAN.EDU
  10.  
  11. I have the impression that quite a bit of the recent discussion on
  12. data snooping has been off-base and mis-represents what the phrase
  13. ``data snooping'' actually means.
  14.  
  15. Exploratory data analysis --- looking for patterns and making
  16. discoveries --- is not data snooping.  Data snooping consists in
  17. formulating and formally testing hypotheses based upon one's
  18. exploration of the data rather than upon a priori conjectures.  As
  19. such it renders probability statements associated with the results of
  20. such hypothesis tests essentially meaningless.
  21.  
  22. Someone in the discussion has suggested reporting the p-values of
  23. such post facto hypothesis tests as a form of descriptive
  24. statistics.  There is clearly no intrinsic harm in so doing, as long
  25. as these p-values are clearly distinguished as being ``descriptive''
  26. rather than having a genuinely probabilistic meaning.  However, the
  27. general devotion to p-values and 0.05 significance levels being what
  28. it is, it seems to me that such a practice runs a serious risk of
  29. being misinterpreted.  (The warning that these p-values are not
  30. ***really*** p-values will be treated as ``fine print'' and ignored.)
  31.  
  32.  
  33.                     cheers,
  34.  
  35.                         Rolf
  36.  
  37. Rolf Turner
  38. Dep't. of Maths and Stats
  39. U.N.B., Fredericton, N.B. Canada E3B 5A3
  40. rolf@math.unb.ca
  41.  
  42. ----------------------------------------------------------------------
  43. |                                                                    |
  44. |          Nice day, isn't it?                                       |
  45. |                                                                    |
  46. ----------------------------------------------------------------------
  47.