home *** CD-ROM | disk | FTP | other *** search
/ NetNews Usenet Archive 1992 #19 / NN_1992_19.iso / spool / bit / listserv / csgl / 866 < prev    next >
Encoding:
Text File  |  1992-08-31  |  2.6 KB  |  51 lines
  1. Comments: Gated by NETNEWS@AUVM.AMERICAN.EDU
  2. Path: sparky!uunet!paladin.american.edu!auvm!BEN.DCIEM.DND.CA!MMT
  3. Message-ID: <9208312137.AA27921@chroma.dciem.dnd.ca>
  4. Newsgroups: bit.listserv.csg-l
  5. Date:         Mon, 31 Aug 1992 17:37:52 EDT
  6. Sender:       "Control Systems Group Network (CSGnet)" <CSG-L@UIUCVMD.BITNET>
  7. From:         mmt@BEN.DCIEM.DND.CA
  8. Subject:      Exploration and Reorganization
  9. Lines: 40
  10.  
  11. [Martin Taylor 920831 17:20]
  12.  
  13. "All behaviour is the control of perception."  But is it?  I've been pondering
  14. a bit on Bill's comment a while ago that he found in his reorganization
  15. simulations that the flip of a sign in an output-to-reference connection
  16. caused a bad transient that troubled the whole net.  It leads to the question
  17. "What is exploration?"
  18.  
  19. Exploratory behaviour is "what if" behaviour.  One is not controlling for any
  20. particular reference (at a higher level one is controlling for a percept of
  21. knowing more than one does, but that's outside this point).  One is just acting,
  22. more or less randomly at the level at which exploration is being done.  Of
  23. course it isn't random at lower levels, and probably not at higher ones.
  24.  
  25. Exploration could be considered action without a reference, or action with a
  26. severed connection between comparator and output, with a noise source
  27. substituted for the error signal.  "What happens if I give a weak positive
  28. output?...OK, now what happens if I give a strong negative output?...OK, now
  29. what..." and so forth.  The results could be used in for reorganization,
  30. in this case the adjustment of the signs of the output gain function or the
  31. signs of randomly selected output links.  Flipping signs has no effect on
  32. the behaviour of the hierarchy if the signs are flipped in a loop with zero
  33. gain.
  34.  
  35. Exploration is for learning, and that is not usually coupled with a desire
  36. for the results to have particular values (unless you are a politician); so
  37. the actions involved in exploration are carried out in the absence of (strong)
  38. negative feedback.  This makes reorganization safe, at the cost of providing
  39. unpredictable (but compensable) disturbances to parts of the hierarchy that
  40. are controlling.
  41.  
  42. In the Layered Protocol formulation, before I heard of PCT, I argued that the
  43. purpose of casual conversation was for the partners to develop models of each
  44. other that would permit them to communicate effectively when the need arose.
  45. In the same vein, I suggest that the purpose of casual exploration is to
  46. develop organizations that permit effective control when the occasion arises.
  47. Exploratory behaviour, then, is NOT the control of perception, but the
  48. discovery of how to control perception.
  49.  
  50. Martin
  51.