home *** CD-ROM | disk | FTP | other *** search
/ The Hacker's Encyclopedia 1998 / hackers_encyclopedia.iso / zines / phrack2 / phrack38.008 < prev    next >
Encoding:
Text File  |  2003-06-11  |  11.2 KB  |  246 lines
  1.  
  2.                                 ==Phrack Inc.==
  3.  
  4.                  Volume Four, Issue Thirty-Eight, File 8 of 15
  5.  
  6.                          Wide Area Information Servers
  7.  
  8.                      How Do I Use It and Why Should I Care?
  9.  
  10.                                    by Mycroft
  11.                             mycroft@gnu.ai.mit.edu
  12.  
  13.  
  14.  Introduction
  15.  ~~~~~~~~~~~~
  16.      This file serves as an introduction to "information servers," and in
  17. particular to the WAIS system from Thinking Machines Corp.
  18.  
  19.  
  20.  Overview
  21.  ~~~~~~~~
  22.      The Wide Area Information Server (or WAIS) system provides a way for
  23. people ("providers") to make information sources ("sources") accessible via a
  24. network, with a very simple interface to search for and retrieve particular
  25. pieces of information ("documents").
  26.  
  27.      Essentially, you pick a source and specify a few keywords, and the WAIS
  28. search engine tries to find documents that match those specific keywords.  Each
  29. document is scored, and the highest scoring documents are listed first.  In
  30. addition, there is a mechanism ("relevance feedback") for feeding information
  31. back to the server about which documents are most interesting to you, and
  32. having it narrow the search based on this.
  33.  
  34.      To summarize:  WAIS gives you a fast and easy way to search vast amounts
  35. of information, and to provide access to it to other users on a network.
  36.  
  37.  
  38.  Why Should I Care?
  39.  ~~~~~~~~~~~~~~~~~~
  40.      You should care because I, through the goodness of my heart, have made all
  41. the issues of Phrack Inc. available through WAIS.  :-)  I'll soon be adding
  42. issues of the LOD/H TJ, NARC, NIA, Worldview, and a lot of other files.  If
  43. anyone would care to donate files, I'd appreciate it.
  44.  
  45.      There are also many other sources currently available that will probably
  46. be of interest to you.
  47.  
  48.  
  49.  Step 1:  Compiling A Client
  50.  ~~~~~~~~~~~~~~~~~~~~~~~~~~~
  51.      To use WAIS, you need a client program.  There are currently 4 available
  52. that I know of:
  53.  
  54.      Xwais - for the X Window System
  55.      SWAIS - terminal-based
  56.      Mac WAIStation
  57.      NeXT WAIStation
  58.      (I vaguely recall something about a Windows client.)
  59.  
  60.      Xwais and SWAIS both come in the standard distribution, with the search
  61. and index engines.
  62.  
  63.      You can FTP any of the above from think.com, in directory /wais.  The
  64. relevant files are:
  65.  
  66.      wais-8-b4.tar.Z - contains the search and index engines, as well Xwais and
  67.                        SWAIS
  68.      WAIStation-0-63.sit.hqx - the Mac WAIStation
  69.      WAIStation-NeXT-1.0.tar.Z - the NeXT WAIStation
  70.  
  71.      After you choose a client and get the source, compile it.  There are
  72. decent directions on how to do this in each package.
  73.  
  74.  
  75.  Step 2:  Finding An Information Source
  76.  ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
  77.      To find a source, you just do a search in the "directory of servers" -- a
  78. source containing pointers to all the registered WAIS sources on the net.
  79.  
  80.      For example, if you're using Xwais:
  81.  
  82. (I am *not* going to go into the details of how to use the scrollbars and
  83. whatnot.  If you're stuck, ask a Mac weenie for help.)
  84.  
  85.  Tell me about:
  86. .----------------------------------------------------------------. .------.
  87. |phrack                                                          | |Search|
  88. `----------------------------------------------------------------' `------'
  89.  In Sources:                Similar to:
  90. .------------------------. .----------------------------------------------.
  91. |directory-of-servers.src| |                                              |
  92. `------------------------' `----------------------------------------------'
  93. .----------. .-------------. .------------+ .---------------. .----. .----.
  94. |Add Source| |Delete Source| |Add Document| |Delete Document| |Help| |Done|
  95. `----------' `-------------' `------------' `---------------' `----' `----'
  96.             .+------------------------------------------------------------.
  97.  Resulting  || 1000   551 phrack.src   /proj/wais/wais-sources/           |
  98.  documents: ||                                                            |
  99. .----.      ||                                                            |
  100. |View|      ||                                                            |
  101. `----'      `+------------------------------------------------------------'
  102.         .-----------------------------------------------------------------.
  103. Status: |Found 1 document.                                                |
  104.         `-----------------------------------------------------------------'
  105.  
  106.      The lines in the "Resulting documents:" window break down into three
  107. parts:
  108.  
  109.      Score    -- How well it matched your query, as compared to other
  110.                  documents.
  111.      Size     -- <In bytes> of the document.
  112.      Headline -- The "headline" is generated while building the index.
  113.  
  114.      For source files, it's broken down by filename and path.  For the p/h/c/a
  115. server, it's the title of the article, the authors, and the issue and file
  116. number.
  117.  
  118.       So double-click on the document, and you'll get another window (shortened
  119. a bit):
  120.  
  121.         Source Edit
  122.  
  123.         Name: phrack.src
  124.       Server: hal.gnu.ai.mit.edu
  125.      Service: 8000
  126.     Database: /src/wais/wais-sources/phrack
  127.         Cost: 0
  128.        Units: :free
  129.   Maintainer: mycroft@hal.gnu.ai.mit.edu
  130.  Description:
  131. .+------------------------------------------------------------------------.
  132. ||Server created with WAIS release 8 b3.1 on Jan 31 12:30:28 1992 by mycro|
  133. ||                                                                        |
  134. ||Here are all the issues of Phrack for your edification.                 |
  135. ||                                                                        |
  136. ||Phrack is an old hacking, cracking, phreaking, and general anarchy      |
  137. ||newsletter.  Articles range from how the phone system works to making   |
  138. ||------------------------------------------------------------------------|
  139. `+------------------------------------------------------------------------'
  140. .----. .------.
  141. |Save| |Cancel|
  142. `----' `------'
  143.  
  144. The fields work like this:
  145.  
  146.     Name:  Filename to store this source under on *your* machine.
  147.     Server, Service, Database:  Where the source lives (my machine).
  148.     Cost, Units:  How much it will cost you to access the information.
  149.     Maintainer:  Me!
  150.     Description:  What is there.
  151.  
  152.      You really want this one, so just click the "Save" button.  This will
  153. create a "source file" on your machine, which you can then access with the "Add
  154. Source" button of the question window.  This setup is sort of a lose, because
  155. your copy could get out of date and not work.  I've proposed a way to fix this
  156. problem, but so far it hasn't been implemented.  This bit me once when I moved
  157. the files to their current location.
  158.  
  159.  
  160.  Step 3:  A Query
  161.  ~~~~~~~~~~~~~~~~
  162.      Now, let's make another query.  I can't remember where I saw this, so:
  163.  
  164.  Tell me about:
  165. .----------------------------------------------------------------. .------.
  166. |that night with tuc                                             | |Search|
  167. `----------------------------------------------------------------' `------'
  168.  In Sources:                Similar to:
  169. .------------------------. .----------------------------------------------.
  170. |phrack.src              | |                                              |
  171. `------------------------' `----------------------------------------------'
  172. .----------. .-------------. .------------+ .---------------. .----. .----.
  173. |Add Source| |Delete Source| |Add Document| |Delete Document| |Help| |Done|
  174. `----------' `-------------' `------------' `---------------' `----' `----'
  175.            .+------------------------------------------------------------.
  176.  Resulting  || 1000 24.9K "Phrack World News Issue XIV, Part 2", compiled |
  177.  documents: ||  967 29.9K "Phrack World News Special Edition III", compile|
  178. .----.      ||  800 74.9K "Phrack World News Special Edition II", compiled|
  179. |View|      ||  467  6.1K "Phrack Pro-Phile V: Tuc", by Taran King (issue |
  180. `----'      `+------------------------------------------------------------'
  181.       .-----------------------------------------------------------------.
  182. Status: |Found 40 documents.                                            |
  183.       `-----------------------------------------------------------------'
  184.  
  185.      All you have to do is double-click on one of the documents.  After a while
  186. you'll get another window:
  187.  
  188. .+------------------------------------------------------------------------.
  189. ||                                                                        |
  190. ||"Phrack World News Issue XIV, Part 2", compiled by Knight Lightning (iss|
  191. ||                                                                        |
  192. ||                                                                        |
  193. ||          PWN ^*^ PWN ^*^ PWN { SummerCon '87 } PWN ^*^ PWN ^*^ PWN     |
  194. ||          ^*^                                                   ^*^     |
  195. ||          PWN                Phrack World News                  PWN     |
  196. ||          ^*^                   Issue XIV/2                     ^*^     |
  197. ||          PWN                                                   PWN     |
  198. ||          ^*^               "SummerCon Strikes"                 ^*^     |
  199. ||          PWN                                                   PWN     |
  200. ||------------------------------------------------------------------------|
  201. `+------------------------------------------------------------------------'
  202. .-----------. .--------. .----. .--------. .------------. .----.
  203. |Add Section| |Find Key| |Next| |Previous| |Save To File| |Done|
  204. `-----------' `--------' `----' `--------' `------------' `----'
  205.  
  206.      Status:
  207.  
  208.      The "Add Section" button is used for relevance feedback.  You select a
  209. region of text and press "Add Section" and it will show up in the "Similar to:"
  210. box in the question window.
  211.  
  212.      "Find Key," "Next," and "Previous" are used to search for the keywords in
  213. the document.  The rest is pretty obvious.
  214.  
  215.  
  216.  What Else?
  217.  ~~~~~~~~~~
  218.      There are more powerful ways to use WAIS.  For example, using the "waisq"
  219. and "waisretrieve" programs, you could query the directory of servers nightly
  220. to get the latest copy of phrack.src.  This would ensure that yours is never
  221. more than a day out of date.  (I recommend subscribing to the wais-discussion
  222. list and/or reading alt.wais instead, though, since it's more interesting and
  223. won't put a load on the directory of servers.)
  224.  
  225.      Or if you keep an archive of your mail, you could use it to index that.
  226. (I know several people who do this, including Brewster.)
  227.  
  228.      Or whatever.  Take a look at some of the existing sources to get an idea.
  229.  
  230.  
  231.  Conclusion
  232.  ~~~~~~~~~~
  233.      WAIS is a very useful tool for finding information.  It is still under
  234. development, though, and there a few rough edges that need to be worked out.
  235. In particular:
  236.  
  237.      * Source files getting out of date.
  238.      * Multiple servers for a single source (for reliability and speed).
  239.      * Multiple indices for the same source on a given server (for transient
  240.        information).
  241.      * Index overhead.  (The Phrack index, for example, is currently larger
  242.        than the text itself!)
  243. _______________________________________________________________________________
  244.  
  245.  
  246.