home *** CD-ROM | disk | FTP | other *** search
/ Usenet 1994 January / usenetsourcesnewsgroupsinfomagicjanuary1994.iso / sources / std_unix / volume.24 / text0021.txt < prev    next >
Encoding:
Text File  |  1991-09-03  |  4.0 KB  |  84 lines
  1. Submitted-by: pc@hillside.co.uk (Peter Collinson)
  2.  
  3. USENIX Standards Watchdog Committee
  4. Stephen R. Walli <stephe@usenix.org>, Report Editor
  5. Report on 1003.3: POSIX Test Methods and Conformance
  6.  
  7.  
  8. Andrew Twigger <att@root.co.uk> reports on the April 15-19,
  9. 1991 meeting in Chicago, IL:
  10.  
  11. Summary
  12.  
  13. The POSIX.2 (Shell and Utilities) working group made good progress
  14. writing test assertions this week, with POSIX.3's (Test Methods and
  15. Conformance) help. Many working groups, however, are discovering that
  16. writing test assertions requires a non-trivial effort. This week also
  17. saw the delivery of the newly published ``IEEE 1003.3-1991 - Test
  18. Methods for Measuring Conformance to POSIX''. Concerns are still being
  19. raised over NIST's certification policies.
  20.  
  21. Report
  22.  
  23. Chicago will probably go down in history as the meeting where test
  24. methods invaded the POSIX working groups with a vengeance.  After
  25. years of mild abuse and jesting (mostly aimed at NIST), the SCCT
  26. (Steering Committee on Conformance Testing) seems to be succeeding in
  27. the goal of ensuring that POSIX standards are balloted with test method
  28. specifications.  Despite rumours during the week that a wake had been
  29. arranged for the SCCT Chair, most of the screams were heard from
  30. working groups, who having been previously informed that test methods
  31. would be easy to write and would only take a couple of meetings, were
  32. finding that this was a far from straightforward task.
  33.  
  34. While most of the remaining members of the original POSIX.3 working
  35. group continued work with the remaining members of POSIX.2 in
  36. generating assertions for the POSIX.2 standard, a few of the POSIX.3
  37. elders started helping other working groups to develop test methods
  38. for their standards.  The POSIX.3.2 group (i.e POSIX.3 + POSIX.2) met
  39. for three days during the week and spent all of that time writing
  40. assertions in small groups of three or four people.
  41.  
  42. Some of the more difficult aspects of POSIX.2 were tackled,
  43. specifically Basic Regular Expressions and the Make utility.  Most of
  44. the smaller utilities have assertions written already although most of
  45. these need to be updated to align with the current draft.  It is hoped
  46. that enough of the work will have been completed after the October
  47. balloting commencing in the first half of 1992.
  48.  
  49. Other working groups that have started producing test methods include
  50. POSIX.4, POSIX.6, POSIX.8, POSIX.15, POSIX.17 and P1224.1, P1224.2.
  51. Most of these groups are at an early stage in their test method
  52. development and are producing a wide variety of problems for the
  53. ``experts'' to address.  Several of these groups have noted that the
  54. formal process of producing test assertions has uncovered a variety of
  55. deficiencies in their drafts; so perhaps there is some benefit in test
  56. methods after all!
  57.  
  58. The highlight of the week was the arrival of the latest of the series
  59. of POSIX standards, IEEE 1003.3-1991.  This document was made
  60. available at the extraordinary discounted price of $15.00 per copy,
  61. which works out to 30 cents a page!  Still I suppose that considering
  62. the number of committee hours that went into the document, it's a real
  63. bargain.  (One working group member calculated an industry cost in
  64. excess of $5,000 per page.)
  65.  
  66. Other concerns which arose during the week relate to NIST's adopted
  67. certification policies and procedures.  Many working groups continue
  68. to be concerned about these. This has been a long running battle
  69. involving both accredited testing centres and implementation suppliers
  70. in assisting NIST in the refining of their policies.
  71.  
  72. The current major cause for concern is whether there would be equality
  73. in the certification process or whether a particular implementor would
  74. gain advantage from receiving the first conformance certificate.  NIST
  75. was not explicit as to the procedures that they would employ to deal
  76. with the initial surge of certification requests, but made assurances
  77. that everybody would be satisfied when the process was completed.
  78. This seemed to satisfy nobody!  We'll have to wait until Santa Clara
  79. to see whether NIST is really here to help us.
  80.  
  81.  
  82. Volume-Number: Volume 24, Number 23
  83.  
  84.