Annotation of libwww/Library/src/HTTP.c, revision 1.101

1.74      frystyk     1: /*                                                                      HTTP.c
                      2: **     MULTITHREADED IMPLEMENTATION OF HTTP CLIENT
1.2       timbl       3: **
1.84      frystyk     4: **     (c) COPYRIGHT MIT 1995.
1.74      frystyk     5: **     Please first read the full copyright statement in the file COPYRIGH.
                      6: **
                      7: **     This module implments the HTTP protocol as a state machine
1.55      frystyk     8: **
                      9: ** History:
1.59      frystyk    10: **    < May 24 94 ??   Unknown - but obviously written
1.56      frystyk    11: **     May 24 94 HF    Made reentrent and cleaned up a bit. Implemented
                     12: **                     Forward, redirection, error handling and referer field
1.67      duns       13: **      8 Jul 94  FM   Insulate free() from _free structure element.
1.71      frystyk    14: **     Jul 94 HFN      Written on top of HTTP.c, Henrik Frystyk
1.55      frystyk    15: **
1.1       timbl      16: */
                     17: 
1.78      frystyk    18: /* Library include files */
                     19: #include "tcp.h"
1.1       timbl      20: #include "HTUtils.h"
1.78      frystyk    21: #include "HTString.h"
1.71      frystyk    22: #include "HTParse.h"
1.1       timbl      23: #include "HTTCP.h"
                     24: #include "HTFormat.h"
1.85      frystyk    25: #include "HTSocket.h"
1.94      frystyk    26: #include "HTReqMan.h"
1.2       timbl      27: #include "HTAlert.h"
                     28: #include "HTMIME.h"
1.14      luotonen   29: #include "HTAABrow.h"          /* Access Authorization */
1.20      timbl      30: #include "HTTee.h"             /* Tee off a cache stream */
1.78      frystyk    31: #include "HTFWrite.h"          /* Write to cache file */
1.90      frystyk    32: #include "HTCache.h"
1.80      frystyk    33: #include "HTWriter.h"
1.54      luotonen   34: #include "HTError.h"
1.94      frystyk    35: #include "HTAccess.h"
1.55      frystyk    36: #include "HTChunk.h"
1.71      frystyk    37: #include "HTGuess.h"
1.95      frystyk    38: #include "HTNetMan.h"
1.80      frystyk    39: #include "HTTPReq.h"
1.55      frystyk    40: #include "HTTP.h"                                             /* Implements */
                     41: 
                     42: /* Macros and other defines */
1.94      frystyk    43: #ifndef HTTP_PORT
                     44: #define HTTP_PORT 80   /* Allocated to http by Jon Postel/ISI 24-Jan-92 */
                     45: #endif
                     46: 
1.71      frystyk    47: #define PUTC(c)                (*me->target->isa->put_character)(me->target, c)
                     48: #define PUTS(s)                (*me->target->isa->put_string)(me->target, s)
                     49: #define PUTBLOCK(b, l) (*me->target->isa->put_block)(me->target, b, l)
                     50: #define FREE_TARGET    (*me->target->isa->_free)(me->target)
1.74      frystyk    51: #define ABORT_TARGET   (*me->target->isa->abort)(me->target, e)
1.2       timbl      52: 
1.59      frystyk    53: /* Type definitions and global variables etc. local to this module */
1.94      frystyk    54: 
                     55: /* Final states have negative value */
1.59      frystyk    56: typedef enum _HTTPState {
1.81      frystyk    57:     HTTP_RETRY         = -4,
1.71      frystyk    58:     HTTP_ERROR         = -3,
                     59:     HTTP_NO_DATA       = -2,
                     60:     HTTP_GOT_DATA      = -1,
                     61:     HTTP_BEGIN         = 0,
                     62:     HTTP_NEED_CONNECTION,
                     63:     HTTP_NEED_REQUEST,
                     64:     HTTP_REDIRECTION,
1.91      frystyk    65:     HTTP_NOT_MODIFIED,
                     66:     HTTP_EXPIRED,
1.71      frystyk    67:     HTTP_AA
1.59      frystyk    68: } HTTPState;
1.55      frystyk    69: 
1.94      frystyk    70: /* This is the context structure for the this module */
1.55      frystyk    71: typedef struct _http_info {
1.81      frystyk    72:     HTTPState          state;            /* Current State of the connection */
                     73:     HTTPState          next;                                  /* Next state */
1.55      frystyk    74: } http_info;
                     75: 
1.88      frystyk    76: #define MAX_STATUS_LEN         100   /* Max nb of chars to check StatusLine */
1.55      frystyk    77: 
1.71      frystyk    78: struct _HTStream {
                     79:     CONST HTStreamClass *      isa;
                     80:     HTStream *                 target;
                     81:     HTRequest *                        request;
                     82:     http_info *                        http;
                     83:     HTSocketEOL                        state;
                     84:     BOOL                       transparent;
1.81      frystyk    85:     char *                     version;             /* Should we save this? */
1.71      frystyk    86:     int                                status;
1.81      frystyk    87:     char *                     reason;
1.71      frystyk    88:     char                       buffer[MAX_STATUS_LEN+1];
1.80      frystyk    89:     int                                buflen;
1.71      frystyk    90: };
1.21      luotonen   91: 
1.71      frystyk    92: /* ------------------------------------------------------------------------- */
                     93: /*                               Help Functions                             */
                     94: /* ------------------------------------------------------------------------- */
1.21      luotonen   95: 
1.94      frystyk    96: /*     HTTPCleanup
                     97: **     -----------
1.55      frystyk    98: **      This function closes the connection and frees memory.
1.94      frystyk    99: **      Returns YES on OK, else NO
1.1       timbl     100: */
1.94      frystyk   101: PRIVATE int HTTPCleanup (HTRequest *req, int status)
1.1       timbl     102: {
1.94      frystyk   103:     HTNet *net = req->net;
                    104:     http_info *http = (http_info *) net->context;
1.80      frystyk   105: 
1.94      frystyk   106:     /* Free stream with data TO network */
                    107:     if (!HTRequest_isDestination(req) && req->input_stream) {
                    108:        if (status == HT_INTERRUPTED)
                    109:            (*req->input_stream->isa->abort)(req->input_stream, NULL);
                    110:        else
                    111:            (*req->input_stream->isa->_free)(req->input_stream);
                    112:     }
1.88      frystyk   113: 
1.94      frystyk   114:     /* Remove the request object and our own context structure for http */
                    115:     HTNet_delete(net, status);
                    116:     FREE(http);
                    117:     return YES;
1.55      frystyk   118: }
                    119: 
                    120: 
1.94      frystyk   121: PRIVATE BOOL HTTPAuthentication (HTRequest * request)
1.71      frystyk   122: {
                    123:     HTAAScheme scheme;
                    124:     HTList *valid_schemes = HTList_new();
                    125:     HTAssocList **scheme_specifics = NULL;
1.76      frystyk   126:     char *tmplate = NULL;
1.71      frystyk   127: 
                    128:     if (request->WWWAAScheme) {
                    129:        if ((scheme = HTAAScheme_enum(request->WWWAAScheme)) != HTAA_UNKNOWN) {
                    130:            HTList_addObject(valid_schemes, (void *) scheme);
                    131:            if (!scheme_specifics) {
                    132:                int i;
                    133:                scheme_specifics = (HTAssocList**)
                    134:                    malloc(HTAA_MAX_SCHEMES * sizeof(HTAssocList*));
                    135:                if (!scheme_specifics)
                    136:                    outofmem(__FILE__, "HTTPAuthentication");
                    137:                for (i=0; i < HTAA_MAX_SCHEMES; i++)
                    138:                    scheme_specifics[i] = NULL;
                    139:            }
                    140:            scheme_specifics[scheme] = HTAA_parseArgList(request->WWWAARealm);
                    141:        } else if (PROT_TRACE) {
                    142:            HTErrorAdd(request, ERR_INFO, NO, HTERR_UNKNOWN_AA,
                    143:                       (void *) request->WWWAAScheme, 0, "HTTPAuthentication");
                    144:            return NO;
                    145:        }
                    146:     }
                    147:     if (request->WWWprotection) {
                    148:        if (PROT_TRACE)
1.78      frystyk   149:            fprintf(TDEST, "Protection template set to `%s'\n",
1.71      frystyk   150:                    request->WWWprotection);
1.76      frystyk   151:        StrAllocCopy(tmplate, request->WWWprotection);
1.71      frystyk   152:     }
                    153:     request->valid_schemes = valid_schemes;
                    154:     request->scheme_specifics = scheme_specifics;
1.76      frystyk   155:     request->prot_template = tmplate;
1.71      frystyk   156:     return YES;
                    157: }
                    158: 
                    159: 
                    160: /*
                    161: **     This is a big switch handling all HTTP return codes. It puts in any
                    162: **     appropiate error message and decides whether we should expect data
1.78      frystyk   163: **     or not.
1.55      frystyk   164: */
1.100     frystyk   165: PRIVATE void HTTPNextState (HTStream * me)
1.55      frystyk   166: {
1.71      frystyk   167:     switch (me->status) {
                    168: 
1.78      frystyk   169:       case 0:                                               /* 0.9 response */
                    170:       case 200:
                    171:       case 201:
                    172:       case 202:
                    173:       case 203:
1.81      frystyk   174:        me->http->next = HTTP_GOT_DATA;
1.71      frystyk   175:        break;
1.78      frystyk   176: 
                    177:       case 204:                                                      /* No Response */
1.81      frystyk   178:        me->http->next = HTTP_NO_DATA;
1.71      frystyk   179:        break;
1.78      frystyk   180: 
1.71      frystyk   181:       case 301:                                                            /* Moved */
                    182:       case 302:                                                            /* Found */
1.81      frystyk   183:        me->http->next = HTTP_REDIRECTION;
1.71      frystyk   184:        break;
1.55      frystyk   185:        
1.71      frystyk   186:       case 303:                                                           /* Method */
1.92      frystyk   187:        HTAlert(me->request,
                    188:                "This client doesn't support automatic redirection of type `Method'");
1.81      frystyk   189:        me->http->next = HTTP_ERROR;
1.71      frystyk   190:        break;
1.91      frystyk   191: 
                    192:       case 304:                                                     /* Not Modified */
                    193:        me->http->next = HTTP_NOT_MODIFIED;
                    194:        break;
1.55      frystyk   195:        
1.78      frystyk   196:       case 400:                                                      /* Bad Request */
                    197:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_BAD_REQUEST,
1.100     frystyk   198:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   199:        me->http->next = HTTP_ERROR;
1.71      frystyk   200:        break;
1.70      howcome   201: 
1.71      frystyk   202:       case 401:
1.78      frystyk   203:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_UNAUTHORIZED,
1.100     frystyk   204:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   205:        me->http->next = HTTP_AA;
1.71      frystyk   206:        break;
                    207:        
                    208:       case 402:                                                 /* Payment required */
1.78      frystyk   209:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_PAYMENT_REQUIRED,
1.100     frystyk   210:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   211:        me->http->next = HTTP_ERROR;
1.71      frystyk   212:        break;
1.55      frystyk   213:        
1.71      frystyk   214:       case 403:                                                        /* Forbidden */
1.78      frystyk   215:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_FORBIDDEN,
1.100     frystyk   216:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   217:        me->http->next = HTTP_ERROR;
1.71      frystyk   218:        break;
1.55      frystyk   219:        
1.71      frystyk   220:       case 404:                                                        /* Not Found */
1.78      frystyk   221:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_NOT_FOUND,
1.100     frystyk   222:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   223:        me->http->next = HTTP_ERROR;
1.71      frystyk   224:        break;
                    225:        
1.78      frystyk   226:       case 405:                                                      /* Not Allowed */
                    227:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_NOT_ALLOWED,
1.100     frystyk   228:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   229:        me->http->next = HTTP_ERROR;
1.78      frystyk   230:        break;
                    231: 
                    232:       case 406:                                                  /* None Acceptable */
                    233:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_NONE_ACCEPTABLE,
1.100     frystyk   234:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   235:        me->http->next = HTTP_ERROR;
1.78      frystyk   236:        break;
                    237: 
                    238:       case 407:                                    /* Proxy Authentication Required */
                    239:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_PROXY,
1.100     frystyk   240:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   241:        me->http->next = HTTP_ERROR;
1.78      frystyk   242:        break;
                    243: 
                    244:       case 408:                                                  /* Request Timeout */
                    245:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_TIMEOUT,
1.100     frystyk   246:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   247:        me->http->next = HTTP_ERROR;
1.78      frystyk   248:        break;
                    249: 
1.71      frystyk   250:       case 500:
1.78      frystyk   251:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_INTERNAL,
1.100     frystyk   252:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   253:        me->http->next = HTTP_ERROR;
1.78      frystyk   254:        break;
                    255:        
1.71      frystyk   256:       case 501:
1.78      frystyk   257:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_NOT_IMPLEMENTED,
1.100     frystyk   258:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   259:        me->http->next = HTTP_ERROR;
1.78      frystyk   260:        break;
                    261: 
                    262:       case 502:
                    263:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_BAD_GATE,
1.100     frystyk   264:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   265:        me->http->next = HTTP_ERROR;
1.78      frystyk   266:        break;
                    267: 
                    268:       case 503:
                    269:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_DOWN,
1.100     frystyk   270:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   271: 
                    272:        /* If Retry-After header is found then return HT_RETRY else HT_ERROR */
                    273:        if (me->request->retry_after)
                    274:            me->http->next = HTTP_RETRY;
                    275:        else
                    276:            me->http->next = HTTP_ERROR;
1.78      frystyk   277:        break;
                    278: 
                    279:       case 504:
                    280:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_GATE_TIMEOUT,
1.100     frystyk   281:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   282:         me->http->next = HTTP_ERROR;
1.71      frystyk   283:        break;
1.78      frystyk   284: 
1.71      frystyk   285:       default:                                                /* bad number */
                    286:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_BAD_REPLY,
1.100     frystyk   287:                   (void *) me->buffer, me->buflen, "HTTPNextState");
1.81      frystyk   288:        me->http->next = HTTP_ERROR;
1.71      frystyk   289:        break;
1.55      frystyk   290:     }
                    291: }
                    292: 
1.71      frystyk   293: /* ------------------------------------------------------------------------- */
                    294: /*                         HTTP Status Line Stream                          */
                    295: /* ------------------------------------------------------------------------- */
1.55      frystyk   296: 
1.71      frystyk   297: /*
1.80      frystyk   298: **     Analyse the stream we have read. If it is a HTTP 1.0 or higher
1.71      frystyk   299: **     then create a MIME-stream, else create a Guess stream to find out
                    300: **     what the 0.9 server is sending. We need to copy the buffer as we don't
                    301: **     know if we can modify the contents or not.
1.78      frystyk   302: **
                    303: **     Stream handling is a function of the status code returned from the 
                    304: **     server:
                    305: **             200:     Use `output_stream' in HTRequest structure
1.94      frystyk   306: **             else:    Use `debug_stream' in HTRequest structure
1.80      frystyk   307: **
                    308: **     Return: YES if buffer should be written out. NO otherwise
1.56      frystyk   309: */
1.100     frystyk   310: PRIVATE int stream_pipe (HTStream * me)
1.56      frystyk   311: {
1.71      frystyk   312:     HTRequest *req = me->request;
1.95      frystyk   313:     HTNet *net = req->net;
1.80      frystyk   314:     if (me->target) {
                    315:        int status = PUTBLOCK(me->buffer, me->buflen);
                    316:        if (status == HT_OK)
                    317:            me->transparent = YES;
                    318:        return status;
1.88      frystyk   319:     } else if (HTRequest_isSource(req) && !req->output_stream) {
                    320:        /*
                    321:        **  We need to wait for the destinations to get ready
                    322:        */
                    323:        return HT_WOULD_BLOCK;
1.80      frystyk   324:     }
1.88      frystyk   325:        
1.81      frystyk   326:     if (strncasecomp(me->buffer, "http/", 5)) {
1.80      frystyk   327:        int status;
                    328:        HTErrorAdd(req, ERR_INFO, NO, HTERR_HTTP09,
                    329:                   (void *) me->buffer, me->buflen, "HTTPStatusStream");
                    330:        me->target = HTGuess_new(req, NULL, WWW_UNKNOWN,
                    331:                                 req->output_format, req->output_stream);
1.88      frystyk   332:        me->http->next = HTTP_GOT_DATA;
1.80      frystyk   333:        if ((status = PUTBLOCK(me->buffer, me->buflen)) == HT_OK)
                    334:            me->transparent = YES;
1.98      frystyk   335:        HTDNS_setServerVersion(net->dns, HTTP_09);
1.80      frystyk   336:        return status;
                    337:     } else {
1.81      frystyk   338:        char *ptr = me->buffer+5;                      /* Skip the HTTP part */
                    339:        me->version = HTNextField(&ptr);
1.95      frystyk   340: 
                    341:        /* here we want to find out when to use persistent connection */
1.98      frystyk   342:        HTDNS_setServerVersion(net->dns, HTTP_10);
1.95      frystyk   343: 
1.81      frystyk   344:        me->status = atoi(HTNextField(&ptr));
                    345:        me->reason = ptr;
                    346:        if ((ptr = strchr(me->reason, '\r')) != NULL)     /* Strip \r and \n */
                    347:            *ptr = '\0';
                    348:        else if ((ptr = strchr(me->reason, '\n')) != NULL)
                    349:            *ptr = '\0';
                    350: 
                    351:        /* Set up the streams */
                    352:        if (me->status==200) {
1.80      frystyk   353:            HTStream *s;
1.85      frystyk   354:            if (req->output_format == WWW_SOURCE) {
                    355:                me->target = HTMIMEConvert(req, NULL, WWW_MIME,
                    356:                                           req->output_format,
                    357:                                           req->output_stream);
                    358:            } else {
                    359:                me->target = HTStreamStack(WWW_MIME, req->output_format,
                    360:                                           req->output_stream, req, NO);
1.80      frystyk   361:            
1.85      frystyk   362:                /* howcome: test for return value from HTCacheWriter 12/1/95 */
                    363:                if (req->method==METHOD_GET && HTCache_isEnabled() &&
                    364:                    (s = HTCacheWriter(req, NULL, WWW_MIME, req->output_format,
                    365:                                       req->output_stream))) {
                    366:                    me->target = HTTee(me->target, s);
                    367:                }
1.89      frystyk   368:              }
1.94      frystyk   369:        } else if (req->debug_stream) {
                    370:            me->target = HTStreamStack(WWW_MIME, req->debug_format,
                    371:                                       req->debug_stream, req, NO);
1.71      frystyk   372:        } else {
1.94      frystyk   373:            me->target = HTMIMEConvert(req, NULL, WWW_MIME, WWW_PRESENT,
                    374:                                       HTBlackHole());
1.56      frystyk   375:        }
1.80      frystyk   376:        if (!me->target)
                    377:            me->target = HTBlackHole();                         /* What else */
1.56      frystyk   378:     }
1.81      frystyk   379:     HTTPNextState(me);                                    /* Get next state */
1.80      frystyk   380:     me->transparent = YES;
                    381:     return HT_OK;
1.71      frystyk   382: }
1.56      frystyk   383: 
1.80      frystyk   384: /*
                    385: **     Searches for HTTP header line until buffer fills up or a CRLF or LF
                    386: **     is found
                    387: */
1.100     frystyk   388: PRIVATE int HTTPStatus_put_block (HTStream * me, CONST char * b, int l)
1.71      frystyk   389: {
1.80      frystyk   390:     while (!me->transparent && l-- > 0) {
                    391:        int status;
                    392:        if (me->target) {
                    393:            if ((status = stream_pipe(me)) != HT_OK)
                    394:                return status;
                    395:        } else {
                    396:            *(me->buffer+me->buflen++) = *b;
                    397:            if (me->state == EOL_FCR) {
                    398:                if (*b == LF) { /* Line found */
                    399:                    if ((status = stream_pipe(me)) != HT_OK)
                    400:                        return status;
                    401:                } else {
                    402:                    me->state = EOL_BEGIN;
                    403:                }
                    404:            } else if (*b == CR) {
                    405:                me->state = EOL_FCR;
                    406:            } else if (*b == LF) {
                    407:                if ((status = stream_pipe(me)) != HT_OK)
                    408:                    return status;
1.71      frystyk   409:            } else {
1.80      frystyk   410:                if (me->buflen >= MAX_STATUS_LEN) {
                    411:                    if ((status = stream_pipe(me)) != HT_OK)
                    412:                        return status;
                    413:                }
1.71      frystyk   414:            }
1.80      frystyk   415:            b++;
1.71      frystyk   416:        }
1.56      frystyk   417:     }
1.99      frystyk   418:     if (l > 0) return PUTBLOCK(b, l);
                    419:     return HT_OK;
1.56      frystyk   420: }
                    421: 
1.100     frystyk   422: PRIVATE int HTTPStatus_put_string (HTStream * me, CONST char * s)
1.71      frystyk   423: {
1.80      frystyk   424:     return HTTPStatus_put_block(me, s, (int) strlen(s));
1.71      frystyk   425: }
1.56      frystyk   426: 
1.100     frystyk   427: PRIVATE int HTTPStatus_put_character (HTStream * me, char c)
1.71      frystyk   428: {
1.80      frystyk   429:     return HTTPStatus_put_block(me, &c, 1);
                    430: }
                    431: 
1.100     frystyk   432: PRIVATE int HTTPStatus_flush (HTStream * me)
1.80      frystyk   433: {
                    434:     return (*me->target->isa->flush)(me->target);
1.71      frystyk   435: }
                    436: 
1.100     frystyk   437: PRIVATE int HTTPStatus_free (HTStream * me)
1.71      frystyk   438: {
1.87      frystyk   439:     int status = HT_OK;
                    440:     if (me->target) {
                    441:        if ((status = (*me->target->isa->_free)(me->target))==HT_WOULD_BLOCK)
                    442:            return HT_WOULD_BLOCK;
                    443:     }
1.71      frystyk   444:     free(me);
1.100     frystyk   445:     return status;
1.71      frystyk   446: }
                    447: 
1.100     frystyk   448: PRIVATE int HTTPStatus_abort (HTStream * me, HTError e)
1.71      frystyk   449: {
                    450:     if (me->target)
1.74      frystyk   451:        ABORT_TARGET;
1.71      frystyk   452:     free(me);
1.74      frystyk   453:     if (PROT_TRACE)
1.80      frystyk   454:        fprintf(TDEST, "HTTPStatus.. ABORTING...\n");
                    455:     return HT_ERROR;
1.71      frystyk   456: }
                    457: 
                    458: /*     HTTPStatus Stream
                    459: **     -----------------
                    460: */
                    461: PRIVATE CONST HTStreamClass HTTPStatusClass =
                    462: {              
                    463:     "HTTPStatus",
1.80      frystyk   464:     HTTPStatus_flush,
1.71      frystyk   465:     HTTPStatus_free,
                    466:     HTTPStatus_abort,
                    467:     HTTPStatus_put_character,
                    468:     HTTPStatus_put_string,
                    469:     HTTPStatus_put_block
                    470: };
                    471: 
1.100     frystyk   472: PRIVATE HTStream * HTTPStatus_new (HTRequest * request, http_info * http)
1.71      frystyk   473: {
                    474:     HTStream * me = (HTStream *) calloc(1, sizeof(HTStream));
                    475:     if (!me) outofmem(__FILE__, "HTTPStatus_new");
                    476:     me->isa = &HTTPStatusClass;
                    477:     me->request = request;
                    478:     me->http = http;
                    479:     me->state = EOL_BEGIN;
                    480:     return me;
                    481: }
                    482: 
                    483: /* ------------------------------------------------------------------------- */
                    484: 
                    485: /*             Load Document from HTTP Server                       HTLoadHTTP
1.55      frystyk   486: **             ==============================
                    487: **
                    488: **     Given a hypertext address, this routine loads a document.
                    489: **
                    490: ** On entry,
                    491: **      request                This is the request structure
1.94      frystyk   492: **     returns         HT_ERROR        Error has occured in call back
                    493: **                     HT_OK           Call back was OK
1.55      frystyk   494: */
1.94      frystyk   495: PUBLIC int HTLoadHTTP (SOCKET soc, HTRequest * request, SockOps ops)
1.55      frystyk   496: {
1.71      frystyk   497:     int status = HT_ERROR;
1.94      frystyk   498:     HTNet *net = request->net;              /* Generic protocol information */
1.55      frystyk   499:     http_info *http;                       /* Specific protocol information */
1.17      timbl     500:     
1.94      frystyk   501:     /*
                    502:     ** Initiate a new http structure and bind to request structure
                    503:     ** This is actually state HTTP_BEGIN, but it can't be in the state
                    504:     ** machine as we need the structure first.
                    505:     */
                    506:     if (ops == FD_NONE) {
                    507:        if (PROT_TRACE) fprintf(TDEST, "HTTP........ Looking for `%s\'\n",
                    508:                                HTAnchor_physical(request->anchor));
1.71      frystyk   509:        if ((http = (http_info *) calloc(1, sizeof(http_info))) == NULL)
                    510:            outofmem(__FILE__, "HTLoadHTTP");
                    511:        http->state = HTTP_BEGIN;
1.85      frystyk   512:        http->next = HTTP_ERROR;
1.94      frystyk   513:        net->context = http;
1.98      frystyk   514:     } else if (ops == FD_CLOSE) {                            /* Interrupted */
1.100     frystyk   515: #if 1
                    516:        if (HTRequest_isPostWeb(request))
                    517: #else
1.94      frystyk   518:        if(HTRequest_isPostWeb(request)&&!HTRequest_isMainDestination(request))
1.100     frystyk   519: #endif
1.94      frystyk   520:            HTTPCleanup(request, HT_IGNORE);
                    521:        else
                    522:            HTTPCleanup(request, HT_INTERRUPTED);
                    523:        return HT_OK;
                    524:     } else
                    525:        http = (http_info *) net->context;              /* Get existing copy */
1.71      frystyk   526:  
                    527:     /* Now jump into the machine. We know the state from the previous run */
                    528:     while (1) {
                    529:        switch (http->state) {
                    530:          case HTTP_BEGIN:
                    531:            /*
                    532:             ** Compose authorization information (this was moved here
                    533:             ** from after the making of the connection so that the connection
                    534:             ** wouldn't have to wait while prompting username and password
                    535:             ** from the user).                         -- AL 13.10.93
                    536:             */
                    537:            HTAA_composeAuth(request);
                    538:            if (PROT_TRACE) {
                    539:                if (request->authorization)
1.78      frystyk   540:                    fprintf(TDEST, "HTTP........ Sending Authorization: %s\n",
1.71      frystyk   541:                            request->authorization);
                    542:                else
1.78      frystyk   543:                    fprintf(TDEST,
1.71      frystyk   544:                            "HTTP........ Not sending authorization (yet)\n");
                    545:            }
                    546:            http->state = HTTP_NEED_CONNECTION;
                    547:            break;
                    548:            
                    549:          case HTTP_NEED_CONNECTION:        /* Now let's set up a connection */
1.94      frystyk   550:            status = HTDoConnect(net, HTAnchor_physical(request->anchor),
1.95      frystyk   551:                                 HTTP_PORT);
1.80      frystyk   552:            if (status == HT_OK) {
1.95      frystyk   553: 
                    554:                /* Check the protocol class */
1.97      frystyk   555:                char *s_class = HTDNS_serverClass(net->dns);
                    556:                if (s_class && strcasecomp(s_class, "http")) {
1.95      frystyk   557:                    HTErrorAdd(request, ERR_FATAL, NO, HTERR_CLASS,
                    558:                               NULL, 0, "HTLoadHTTP");
                    559:                    http->state = HTTP_ERROR;
                    560:                    break;
                    561:                }
                    562:                HTDNS_setServerClass(net->dns, "http");
                    563: 
1.71      frystyk   564:                if (PROT_TRACE)
1.78      frystyk   565:                    fprintf(TDEST, "HTTP........ Connected, socket %d\n",
1.94      frystyk   566:                            net->sockfd);
1.80      frystyk   567: 
1.88      frystyk   568:                /* Set up stream TO network */
                    569:                request->input_stream =
1.100     frystyk   570:                    HTTPRequest_new(request, HTBufWriter_new(net, YES, 512));
1.88      frystyk   571: 
                    572:                /*
                    573:                ** Set up concurrent read/write if this request isn't the
                    574:                ** source for a PUT or POST. As source we don't start reading
                    575:                ** before all destinations are ready. If destination then
                    576:                ** register the input stream and get ready for read
                    577:                */
                    578:                if (HTRequest_isPostWeb(request)) {
1.94      frystyk   579:                    HTEvent_Register(net->sockfd, request, (SockOps) FD_READ,
                    580:                                     HTLoadHTTP, net->priority);
1.88      frystyk   581:                    HTRequest_linkDestination(request);
                    582:                }
                    583: 
                    584:                /* Set up stream FROM network and corresponding read buffer */
1.94      frystyk   585:                net->isoc = HTInputSocket_new(net->sockfd);
                    586:                net->target = HTImProxy ?
1.80      frystyk   587:                    request->output_stream : HTTPStatus_new(request, http);
1.88      frystyk   588: 
1.71      frystyk   589:                http->state = HTTP_NEED_REQUEST;
1.96      frystyk   590:            } else if (status == HT_WOULD_BLOCK || status == HT_PERSISTENT)
1.94      frystyk   591:                return HT_OK;
1.71      frystyk   592:            else
                    593:                http->state = HTTP_ERROR;              /* Error or interrupt */
                    594:            break;
                    595: 
1.87      frystyk   596:            /* As we can do simultanous read and write this is now one state */
1.80      frystyk   597:          case HTTP_NEED_REQUEST:
1.94      frystyk   598:            if (ops == FD_WRITE || ops == FD_NONE) {
1.88      frystyk   599:                if (HTRequest_isDestination(request)) {
1.94      frystyk   600:                    HTNet *srcnet = request->source->net;
                    601:                    HTEvent_Register(srcnet->sockfd, request->source,
                    602:                                     (SockOps) FD_READ,
1.100     frystyk   603:                                     srcnet->cbf, srcnet->priority);
1.94      frystyk   604:                    return HT_OK;
1.80      frystyk   605:                }
1.101   ! frystyk   606:                status = request->PostCallback ?
        !           607:                    request->PostCallback(request, request->input_stream) :
1.88      frystyk   608:                        (*request->input_stream->isa->flush)(request->input_stream);
1.71      frystyk   609:                if (status == HT_WOULD_BLOCK)
1.94      frystyk   610:                    return HT_OK;
                    611:                else
                    612:                    ops = FD_READ;        /* Trick to ensure that we do READ */
                    613:            } else if (ops == FD_READ) {
1.98      frystyk   614:                status = HTSocketRead(request, net);
1.80      frystyk   615:                if (status == HT_WOULD_BLOCK)
1.94      frystyk   616:                    return HT_OK;
                    617:                else if (status == HT_LOADED)
                    618:                    http->state = http->next;          /* Jump to next state */
1.91      frystyk   619:                else if (status == HT_RELOAD)
                    620:                    http->state = HTTP_EXPIRED;
1.94      frystyk   621:                else
                    622:                    http->state = HTTP_ERROR;
1.90      frystyk   623:            } else {
1.78      frystyk   624:                http->state = HTTP_ERROR;
1.90      frystyk   625:            }
1.71      frystyk   626:            break;
1.80      frystyk   627:            
1.91      frystyk   628:          case HTTP_NOT_MODIFIED:
                    629:            http->state = HTTP_ERROR;
                    630:            break;
                    631: 
                    632:          case HTTP_EXPIRED:
                    633:            /* Dirty hack and fall through */
1.100     frystyk   634:            if (PROT_TRACE) fprintf(TDEST, "HTTP........ Expired\n");
1.91      frystyk   635:            request->redirect = request->anchor->address;
                    636: 
1.80      frystyk   637:          case HTTP_REDIRECTION:
1.88      frystyk   638:            /* Clean up the other connections or just this one */
                    639:            if (HTRequest_isPostWeb(request))
                    640:                HTRequest_killPostWeb(request);
                    641:            else
1.94      frystyk   642:                HTTPCleanup(request, HT_IGNORE);
1.88      frystyk   643: 
                    644:            /* If we found a new URL in the response */
1.71      frystyk   645:            if (request->redirect) {
                    646:                if (status == 301) {
                    647:                    HTErrorAdd(request, ERR_INFO, NO, HTERR_MOVED,
                    648:                               (void *) request->redirect,
                    649:                               (int) strlen(request->redirect), "HTLoadHTTP");
                    650:                } else if (status == 302) {
                    651:                    HTErrorAdd(request, ERR_INFO, NO, HTERR_FOUND,
                    652:                               (void *) request->redirect,
                    653:                               (int) strlen(request->redirect), "HTLoadHTTP");
1.55      frystyk   654:                }
1.88      frystyk   655: 
                    656:                /* If we haven't reached the limit for redirection */
1.94      frystyk   657:                if (HTRequest_retry(request)) {
1.87      frystyk   658:                    HTAnchor *anchor = HTAnchor_findAddress(request->redirect);
1.88      frystyk   659:                    if (HTRequest_isPostWeb(request)) {
                    660:                        HTRequest *dest = HTRequest_mainDestination(request);
                    661:                        char *msg=(char*)malloc(strlen(request->redirect)+100);
1.87      frystyk   662:                        if (!msg) outofmem(__FILE__, "HTLoadHTTP");
1.88      frystyk   663:                        sprintf(msg, "\nLocation of %s has changed to %s for method %s, continue operation?",
                    664:                                HTRequest_isDestination(request) ?
                    665:                                "destination" : "source", request->redirect,
                    666:                                HTMethod_name(request->method));
1.92      frystyk   667:                        if (HTConfirm(request, msg)) {
1.87      frystyk   668:                            free(msg);
1.88      frystyk   669: 
                    670:                            /* The new anchor inherits the Post Web */
1.91      frystyk   671:                            HTAnchor_moveAllLinks((HTAnchor *) request->anchor,
                    672:                                                  anchor);
1.88      frystyk   673:                            if (HTRequest_isSource(request))
                    674:                                HTRequest_delete(request);
1.94      frystyk   675:                            return HTCopyAnchor((HTAnchor *) anchor, dest) ?
                    676:                                HT_OK : HT_ERROR;
1.87      frystyk   677:                        }
                    678:                        free(msg);
1.94      frystyk   679:                        return HT_OK;
1.101   ! frystyk   680:                    } if (request->PostCallback) {
1.87      frystyk   681: #if 0
1.94      frystyk   682:                        return HTUploadAnchor((HTAnchor*) anchor, request) ?
                    683:                            HT_OK : HT_ERROR;
1.87      frystyk   684: #endif
                    685:                    } else {
1.94      frystyk   686:                        return HTLoadAnchor((HTAnchor *) anchor, request) ?
                    687:                            HT_OK : HT_ERROR;
1.87      frystyk   688:                    }
1.71      frystyk   689:                } else {
                    690:                    HTErrorAdd(request, ERR_FATAL, NO, HTERR_MAX_REDIRECT,
1.58      frystyk   691:                               NULL, 0, "HTLoadHTTP");
1.88      frystyk   692:                    if (HTRequest_isPostWeb(request)) {
                    693:                        BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   694:                        if (HTRequest_isDestination(request)) {
                    695:                            HTLink *link =
                    696:                                HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    697:                                                  (HTAnchor *) request->anchor);
                    698:                            HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    699:                        }
1.94      frystyk   700:                        HTNet_callback(request, main ? HT_ERROR : HT_IGNORE);
1.88      frystyk   701:                        HTRequest_removeDestination(request);
                    702:                    }
1.94      frystyk   703:                    return HT_OK;
1.58      frystyk   704:                }
1.71      frystyk   705:            } else {
                    706:                HTErrorAdd(request, ERR_FATAL, NO, HTERR_BAD_REPLY,
                    707:                           NULL, 0, "HTLoadHTTP");
1.94      frystyk   708:                return HT_OK;
1.71      frystyk   709:            }
                    710:            break;
1.80      frystyk   711:            
1.71      frystyk   712:          case HTTP_AA:
1.88      frystyk   713:            /* Clean up the other connections or just this one */
                    714:            if (HTRequest_isPostWeb(request))
                    715:                HTRequest_killPostWeb(request);
                    716:            else
1.94      frystyk   717:                HTTPCleanup(request, HT_IGNORE);
1.88      frystyk   718: 
                    719:            /* Ask the user for a UserID and a passwd */
                    720:            if (HTTPAuthentication(request) && HTAA_retryWithAuth(request)) {
1.94      frystyk   721:                int ret;
1.88      frystyk   722:                if (HTRequest_isPostWeb(request)) {
                    723:                    HTRequest *dest = HTRequest_mainDestination(request);
                    724:                    HTAnchor_appendMethods(request->anchor, request->method);
1.94      frystyk   725:                    ret=HTCopyAnchor((HTAnchor*)request->source->anchor, dest);
                    726:                    return ret ? HT_OK : HT_ERROR;
1.101   ! frystyk   727:                } else if (request->PostCallback) {
1.85      frystyk   728: #if 0
1.94      frystyk   729:                    ret = HTUploadAnchor((HTAnchor*) request->anchor,request);
                    730:                    return ret ? HT_OK : HT_ERROR;
1.85      frystyk   731: #endif
                    732:                } else {
1.94      frystyk   733:                    ret = HTLoadAnchor((HTAnchor *) request->anchor, request);
                    734:                    return ret ? HT_OK : HT_ERROR;
1.85      frystyk   735:                }
1.88      frystyk   736:            } else {                               /* If the guy said no :-( */
1.71      frystyk   737:                HTErrorAdd(request, ERR_FATAL, NO, HTERR_UNAUTHORIZED,
1.94      frystyk   738:                           NULL, 0, "HTLoadHTTP");
1.88      frystyk   739:                if (HTRequest_isPostWeb(request)) {
                    740:                    BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   741:                    if (HTRequest_isDestination(request)) {
                    742:                        HTLink *link =
                    743:                            HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    744:                                              (HTAnchor *) request->anchor);
                    745:                        HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    746:                    }
1.94      frystyk   747:                    HTNet_callback(request, main ? HT_ERROR : HT_IGNORE);
1.88      frystyk   748:                    HTRequest_removeDestination(request);
                    749:                }
1.94      frystyk   750:                return HT_OK;
1.71      frystyk   751:            }
                    752:            break;
1.80      frystyk   753:            
1.71      frystyk   754:          case HTTP_GOT_DATA:
1.88      frystyk   755:            if (HTRequest_isPostWeb(request)) {
1.100     frystyk   756:                HTTPCleanup(request, HTRequest_isMainDestination(request) ?
                    757:                            HT_ERROR : HT_IGNORE);
1.91      frystyk   758:                if (HTRequest_isDestination(request)) {
                    759:                    HTLink *link =
                    760:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    761:                                          (HTAnchor *) request->anchor);
                    762:                    HTAnchor_setLinkResult(link, HT_LINK_OK);
                    763:                }
1.88      frystyk   764:                HTRequest_removeDestination(request);
1.94      frystyk   765:            } else
                    766:                HTTPCleanup(request, HT_LOADED);
                    767:            return HT_OK;
1.71      frystyk   768:            break;
                    769:            
                    770:          case HTTP_NO_DATA:
1.88      frystyk   771:            if (HTRequest_isPostWeb(request)) {
1.100     frystyk   772:                HTTPCleanup(request, HTRequest_isMainDestination(request) ?
                    773:                            HT_ERROR : HT_IGNORE);
1.91      frystyk   774:                if (HTRequest_isDestination(request)) {
                    775:                    HTLink *link =
                    776:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    777:                                          (HTAnchor *) request->anchor);
                    778:                    HTAnchor_setLinkResult(link, HT_LINK_OK);
                    779:                }
1.88      frystyk   780:                HTRequest_removeDestination(request);
1.94      frystyk   781:            } else
                    782:                HTTPCleanup(request, HT_NO_DATA);
                    783:            return HT_OK;
1.71      frystyk   784:            break;
1.80      frystyk   785:            
1.94      frystyk   786:          case HTTP_RETRY:
1.88      frystyk   787:            if (HTRequest_isPostWeb(request)) {
1.100     frystyk   788:                HTTPCleanup(request, HTRequest_isMainDestination(request) ?
                    789:                            HT_ERROR : HT_IGNORE);
1.91      frystyk   790:                HTRequest_killPostWeb(request);
                    791:                if (HTRequest_isDestination(request)) {
                    792:                    HTLink *link = 
                    793:                        HTAnchor_findLink((HTAnchor*) request->source->anchor,
                    794:                                          (HTAnchor*) request->anchor);
                    795:                    HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    796:                }
1.88      frystyk   797:                HTRequest_removeDestination(request);
1.91      frystyk   798:            } else
1.94      frystyk   799:                HTTPCleanup(request, HT_RETRY);
                    800:            return HT_OK;
1.81      frystyk   801:            break;
                    802: 
1.71      frystyk   803:          case HTTP_ERROR:
1.88      frystyk   804:            /* Clean up the other connections or just this one */
                    805:            if (HTRequest_isPostWeb(request)) {
1.100     frystyk   806:                HTTPCleanup(request, HTRequest_isMainDestination(request) ?
                    807:                            HT_ERROR : HT_IGNORE);
1.88      frystyk   808:                HTRequest_killPostWeb(request);
1.91      frystyk   809:                if (HTRequest_isDestination(request)) {
                    810:                    HTLink *link =
                    811:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    812:                                          (HTAnchor *) request->anchor);
                    813:                    HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    814:                }
                    815:                HTRequest_removeDestination(request);
1.88      frystyk   816:            } else
1.94      frystyk   817:                HTTPCleanup(request, HT_ERROR);
                    818:            return HT_OK;
1.71      frystyk   819:            break;
                    820:        }
                    821:     } /* End of while(1) */
                    822: }    
1.88      frystyk   823: 
1.21      luotonen  824: 

Webmaster