home *** CD-ROM | disk | FTP | other *** search
/ Explore the World of Soft…e: Engineering & Science / Explore_the_World_of_Software_Engineering_and_Science_HRS_Software_1998.iso / programs / statistc / sims35.exe / INSTALL._D2 / STATITEM.SCR < prev    next >
Text File  |  1995-07-11  |  14KB  |  378 lines

  1. ON ESC GOTO FINISH;
  2.  
  3. SET COLOR BLACK ON CYAN;
  4. IF $MONO SET COLOR BLACK ON LIGHTGRAY;
  5. CLS;
  6.  
  7. BOX
  8. SIMSTAT v3.5 currently provides several tools
  9. useful for scale development and testing such as
  10. inter-rater agreement analysis, scale reliability
  11. and sensitivity (ROC curves) analysis.
  12.  
  13. STATITEM v1.0 add the capability to perform
  14. conventional item analysis for multiple-choice
  15. item questionnaires.
  16. ENDBOX;
  17.  
  18. BOX
  19. Lets look at some statistics
  20. provided by this module.
  21. ENDBOX;
  22.  
  23. ECHO
  24. ITEM ANALYSIS
  25.  
  26.                                             Point-Bis  Alpha if    25 pct
  27.            Value    Freq  Percent  Biserial    Correl    Delete    Hi-Low
  28.  
  29.   V1         1.0     259      65%       .43       .34      .674       62%
  30.   V2         4.0     317      79%       .34       .24      .686       40%
  31.   V3         2.0     274      69%       .63       .48      .653       72%
  32.   V4         3.0     378      95%       .86       .42      .673       22%
  33.   V5         1.0     364      91%       .47       .27      .683       24%
  34.   V6         4.0     389      97%       .12       .05      .697        4%
  35.   V7         2.0     280      70%       .51       .38      .668       60%
  36.   V8         2.0     374      94%      -.03      -.02      .704        9%
  37.   V9         4.0     340      85%       .31       .21      .689       28%
  38.   V10        2.0     340      85%       .50       .33      .676       36%
  39.   V11        1.0     226      57%       .45       .36      .672       70%
  40.   V12        3.0     388      97%       .59       .23      .687        9%
  41.   V13        4.0     371      93%       .46       .24      .685       20%
  42.   V14        2.0     346      87%       .44       .28      .681       34%
  43.   V15        4.0     373      93%       .52       .27      .683       19%
  44.   V16        1.0     379      95%       .67       .32      .680       18%
  45.   V17        2.0     192      48%       .39       .31      .679       73%
  46. ENDECHO;
  47.  
  48. BOX ROW 3 COL 36
  49. You can obtain for each item
  50. in the scale the frequency and
  51. percentage of correct responses,
  52. ENDBOX;
  53.  
  54. BOX ROW 3 COL 56
  55. the biserial and
  56. point-biserial
  57. correlation between
  58. an item and the
  59. total score omitting
  60. this item,
  61. ENDBOX;
  62.  
  63. BOX ROW 3 COL 20
  64. the value the Cronbach's alpha
  65. would take if the item was
  66. deleted from the scale,
  67. ENDBOX;
  68.  
  69. BOX ROW 3 COL 34
  70. as well as a discrimination
  71. index obtained by computing
  72. the difference between the
  73. percentage of correct
  74. responses of the highest
  75. and lowest groups.
  76. (representing between 10%
  77. and 50% of the cases)
  78. ENDBOX;
  79.  
  80. ECHO
  81.  
  82. ITEM ANALYSIS
  83.  
  84.                                             Point-Bis  Alpha if    25 pct
  85.            Value    Freq  Percent  Biserial    Correl    Delete    Hi-Low
  86.  
  87.   V1         1.0 *   259      65%       .43       .34      .674       62%
  88.              2.0      10       3%      -.62      -.23
  89.              3.0      17       4%      -.15      -.07
  90.              4.0     114      29%      -.33      -.25
  91.  
  92.   V2         1.0      63      16%      -.18      -.12
  93.              2.0      17       4%      -.41      -.18
  94.              3.0       3       1%      -.78      -.19
  95.              4.0 *   317      79%       .34       .24      .686       40%
  96.  
  97.   V3         1.0      15       4%      -.52      -.22
  98.              2.0 *   274      69%       .63       .48      .653       72%
  99.              3.0      22       6%      -.58      -.28
  100.              4.0      89      22%      -.39      -.28
  101.  
  102.   V4         1.0      14       4%      -.78      -.33
  103.              2.0       3       1%      -.61      -.15
  104.              3.0 *   378      95%       .86       .42      .673       22%
  105. ENDECHO;
  106.  
  107. BOX
  108. You may also obtain more detailed information about
  109. the endorsement rate for each response to an item
  110. along with its correlation with the scale total.
  111. ENDBOX;
  112.  
  113. ECHO
  114.  
  115.  ITEM-TOTAL RESPONSE RATE
  116.  
  117.   SCORE       6     7     8     9    10    11    12    13    14    15    16
  118.  
  119.   FREQUENCY   2     1     6     4    15    20    28    41    47    54    61
  120.  
  121.   V1         50%    0%   33%   50%   20%   25%   39%   34%   45%   72%   80%
  122.   V2          0%  100%   50%   25%   53%   55%   54%   76%   77%   78%   85%
  123.   V3          0%    0%    0%    0%   20%   15%   29%   51%   62%   74%   85%
  124.   V4         50%    0%   17%   25%   53%   95%   86%  100%  100%  100%  100%
  125.   V5          0%    0%   83%   50%   60%   75%   86%   85%   96%   93%   97%
  126.   V6        100%    0%   83%  100%   93%  100%  100%   98%   96%   96%   95%
  127.   V7          0%    0%    0%   75%   27%   35%   32%   51%   55%   76%   90%
  128.   V8        100%  100%  100%  100%  100%   95%   79%   88%   96%   91%   90%
  129.   V9          0%    0%   67%   25%   80%   60%   79%   76%   83%   83%   95%
  130.   V10         0%    0%   33%   50%   40%   60%   79%   76%   81%   98%   92%
  131.   V11        50%    0%   33%   25%   13%   25%   25%   27%   32%   54%   66%
  132.   V12        50%  100%   33%  100%   93%   90%   93%  100%   98%  100%  100%
  133.   V13        50%  100%   50%  100%   73%   75%   82%   90%   89%   98%   98%
  134.   V14         0%  100%   50%   25%   60%   75%   68%   76%   89%   89%   92%
  135.   V15        50%  100%   50%   25%   67%   85%   93%   90%   96%   94%   98%
  136.   V16        50%    0%   50%   50%   73%   80%   93%   95%   98%   98%  100%
  137. ENDECHO;
  138.  
  139. BOX
  140. The item-total response rate table provides
  141. detailed information about the percentage of
  142. correct responses for each item in relation
  143. to each value of the total score.
  144. ENDBOX;
  145.  
  146. ECHO
  147.  
  148.  ITEM CHARACTERISTIC CURVES (Smoothed)
  149.  
  150.                V1                        V2                        V3         
  151.   100│                  ▄   100│                ▄ ▀   100│                ▄ ▀   
  152.      │                ▀        │             ▄ ▀         │               ▄       
  153.      │               ▀         │          ▄ ▀            │             ▀         
  154.      │            ▀            │         ▄               │            ▄          
  155.    50│............▄.......   50│......▄▀............   50│..........▄.........   
  156.      │          ▄              │ ▀ ▀▀                    │                       
  157.      │▀▄ ▄   ▄ ▀               │▄                        │         ▀             
  158.      │    ▀ ▀                  │                         │       ▀               
  159.      │                         │                         │    ▄ ▀                
  160.     0│                        0│                        0│▄▄ ▀                   
  161.      └────────────────────     └────────────────────     └────────────────────
  162.       6                 18      6                 18      6                 18
  163.  
  164.                V4                        V5                        V6         
  165.   100│         ▄▀ ▀  ▀▀ ▀   100│            ▄▄ ▀▀ ▀   100│    ▄ ▀▀ ▀▀ ▀▀ ▀▀ ▀   
  166.      │       ▀                 │         ▄▀              │▄  ▀                   
  167.      │                         │       ▀                 │ ▄                     
  168.      │      ▀                  │   ▄▄ ▀                  │                       
  169.    50│....▄...............   50│.▄..................   50│....................   
  170.      │                         │                         │
  171. ENDECHO;
  172.  
  173. BOX ROW 17 COL 1
  174. The same information
  175. may also be displayed
  176. graphically using
  177. item-response
  178. characteristic curves.
  179. ENDBOX;
  180.  
  181. BOX ROW 15 COL 1
  182. These curves allow you to
  183. examine the relationship
  184. between the total score and
  185. the success level on an item,
  186. compare the difficulty level
  187. of several items and estimate
  188. their discriminatory value.
  189. ENDBOX;
  190.  
  191. ECHO
  192.      │▄                        │▄                        │
  193.      │ ▄ ▀                     │                         │                       
  194.      │                         │                         │                       
  195.     0│                        0│                        0│                       
  196.      └────────────────────     └────────────────────     └────────────────────
  197.       6                 18      6                 18      6                 18
  198.  
  199.  ITEM-TOTAL RESPONSE BREAKDOWN (25% of respondents in each group)
  200.  
  201.              C25   C50   C75  C100  HI-LOW
  202.  
  203.   V1         32%   53%   80%   94%     62%
  204.   V2         57%   77%   86%   97%     40%
  205.   V3         26%   64%   85%   98%     72%
  206.   V4         78%  100%  100%  100%     22%
  207.   V5         75%   93%   96%   99%     24%
  208.   V6         96%   96%   96%  100%      4%
  209.   V7         35%   62%   87%   95%     60%
  210.   V8         90%   93%   92%   99%      9%
  211.   V9         69%   82%   92%   97%     28%
  212.   V10        62%   86%   94%   98%     36%
  213.   V11        24%   39%   68%   95%     70%
  214.   V12        90%   99%  100%   99%      9%
  215.   V13        80%   93%   99%  100%     20%
  216.   V14        66%   87%   93%  100%     34%
  217.   V15        81%   94%   98%  100%     19%
  218.   V16        82%   98%  100%  100%     18%
  219.   V17        19%   31%   50%   92%     73%
  220.   V18        57%   73%   88%   96%     39%
  221. ENDECHO;
  222.  
  223. BOX
  224. STATITEM v1.0 can also produce an item-total response
  225. breakdown where the percentage of correct responses is
  226. presented by subgroups defined on their total score.
  227. ENDBOX;
  228.  
  229. BOX
  230. An option let you set the number of subgroups
  231. between 2 and 10.  For example, setting this
  232. option to 4 will creates four groups, each 
  233. containing 25% of the respondents.
  234. ENDBOX;
  235.  
  236. BOX COL 45 ROW 3
  237. A discrimination index is also
  238. computed for each item by
  239. computing the difference in the
  240. percentage of endorsement
  241. between the groups with the
  242. highest and the lowest scores.
  243. ENDBOX;
  244.  
  245. ECHO
  246.  
  247.  SCALE STATISTICS
  248.  
  249.                     Total score  Percentage   Biserial  Item-Total
  250.  
  251.      Mean               14.76        82.0        .45        .28
  252.      Median             15.00        85.8        .45        .28
  253.      Minimum             6.00        48.0       -.03       -.02
  254.      Maximum            18.00        97.3        .86        .48
  255.      Variance            6.62       206.7        .04        .01
  256.      Std. Dev.           2.57        14.4        .19        .12
  257.  
  258.      Skewness           -.745
  259.      S.E. Skewness       .122
  260.      Kurtosis            .104
  261.      S.E. Kurtosis       .245
  262.  
  263.      Nb of cases          400
  264.      Nb of items           18
  265.  
  266.      Cronbach's Alpha    .694
  267.      Ferguson's Delta    .928
  268. ENDECHO;
  269.  
  270. BOX COL 34 ROW 5
  271. STATITEM v1.0 also provides numerous
  272. descriptive statistics on the
  273. distribution of the final scores
  274. such as the mean, the median, the
  275. minimum and maximum values, the
  276. variance and the standard deviation.
  277. ENDBOX;
  278.  
  279. BOX COL 32 ROW 13
  280. The shape of this distribution
  281. can also be assessed using
  282. the skewness, the kurtosis,
  283. and their standard error.
  284. ENDBOX;
  285.  
  286. BOX COL 36 ROW 14
  287. Descriptive statistics
  288. are also provided for
  289. percentages of correct
  290. responses, point-biserial
  291. and biserial correlations.
  292. ENDBOX;
  293.  
  294. BOX COL 33 ROW 18
  295. STATITEM v1.0 also compute the
  296. Cronbach's alpha and the Ferguson's
  297. Delta discrimination index for the
  298. entire scale.
  299. ENDBOX;
  300.  
  301. ECHO
  302.  
  303.  TOTAL SCORE FREQUENCY DISTRIBUTION
  304.  
  305.                                  Cumul      Cumul
  306.    Value  Frequency   Percent Frequency   Percent
  307.  
  308.       6          2        .5         2        .5   │▌
  309.       7          1        .3         3        .8   │▌
  310.       8          6       1.5         9       2.3   │█▌
  311.       9          4       1.0        13       3.3   │█
  312.      10         15       3.8        28       7.0   │███▌
  313.      11         20       5.0        48      12.0   │█████
  314.      12         28       7.0        76      19.0   │███████
  315.      13         41      10.3       117      29.3   │██████████▌
  316.      14         47      11.8       164      41.0   │███████████▌
  317.      15         54      13.5       218      54.5   │█████████████▌
  318.      16         61      15.3       279      69.8   │███████████████▌
  319.      17         60      15.0       339      84.8   │███████████████
  320.      18         61      15.3       400     100.0   │███████████████▌
  321.           --------  --------  --------  --------   └─────────────────────────
  322.    TOTAL       400     100.0       400     100.0    0                     100
  323. ENDECHO;
  324.  
  325. BOX
  326. A frequency table and a histogram
  327. of the final score distribution
  328. can also be displayed, providing
  329. another perspective on those scores.
  330. ENDBOX;
  331.  
  332. CLS;
  333.  
  334. BOX
  335. STATITEM v1.0 is fully integrated with SIMSTAT.  The program
  336. is accessible from the Addins menu and supports current case
  337. selection and weighting.  STATITEM v1.0 is also easy to use
  338. with a option panel and a context sensitive help.
  339. ENDBOX;
  340.  
  341. BOX
  342. Item analysis can also be automated using SIMSTAT's
  343. command language.  For example, the following
  344. command:
  345.  
  346.   ITEM Q1 TO Q30
  347.     /ISTAT HILOW=10 ITCURVE BREAKDOWN=5 TSTAT FREQ;
  348.  
  349. will perform an item analysis on all questions from
  350. Q1 to Q30 displaying an item-total endorsement rates
  351. and correlations table.  The discrimination index in
  352. this table will be computed using two groups, each one
  353. representing 10% of the respondents.  An item
  354. characteristic curve will then be displayed as well as
  355. an item-total endorsement breakdown for 5 groups, each
  356. containing 20% of the respondents.  Various statistics 
  357. and a frequency table of the final score will also be
  358. displayed.
  359. ENDBOX;
  360.  
  361. BOX
  362. The RECORD SCRIPT function can also be used
  363. to easily generate the proper commands
  364. corresponding to actions undertaken with
  365. the interactive user's interface.
  366. ENDBOX;
  367.  
  368. BOX
  369. STATITEM v1.0 is scheduled to be relesed in May '95
  370. and will be available to registered users of SIMSTAT
  371. for $35.00 only (plus $5 for shipping and handling if
  372. ordered separately).
  373.  
  374.      (see ORDER.FRM for ordering information)
  375. ENDBOX;
  376.  
  377. :FINISH;
  378.