Annotation of libwww/Library/src/HTTP.c, revision 1.104

1.74      frystyk     1: /*                                                                      HTTP.c
                      2: **     MULTITHREADED IMPLEMENTATION OF HTTP CLIENT
1.2       timbl       3: **
1.84      frystyk     4: **     (c) COPYRIGHT MIT 1995.
1.74      frystyk     5: **     Please first read the full copyright statement in the file COPYRIGH.
                      6: **
                      7: **     This module implments the HTTP protocol as a state machine
1.55      frystyk     8: **
                      9: ** History:
1.59      frystyk    10: **    < May 24 94 ??   Unknown - but obviously written
1.56      frystyk    11: **     May 24 94 HF    Made reentrent and cleaned up a bit. Implemented
                     12: **                     Forward, redirection, error handling and referer field
1.67      duns       13: **      8 Jul 94  FM   Insulate free() from _free structure element.
1.71      frystyk    14: **     Jul 94 HFN      Written on top of HTTP.c, Henrik Frystyk
1.55      frystyk    15: **
1.1       timbl      16: */
                     17: 
1.78      frystyk    18: /* Library include files */
                     19: #include "tcp.h"
1.1       timbl      20: #include "HTUtils.h"
1.78      frystyk    21: #include "HTString.h"
1.71      frystyk    22: #include "HTParse.h"
1.1       timbl      23: #include "HTTCP.h"
                     24: #include "HTFormat.h"
1.85      frystyk    25: #include "HTSocket.h"
1.94      frystyk    26: #include "HTReqMan.h"
1.2       timbl      27: #include "HTAlert.h"
1.14      luotonen   28: #include "HTAABrow.h"          /* Access Authorization */
1.20      timbl      29: #include "HTTee.h"             /* Tee off a cache stream */
1.78      frystyk    30: #include "HTFWrite.h"          /* Write to cache file */
1.90      frystyk    31: #include "HTCache.h"
1.80      frystyk    32: #include "HTWriter.h"
1.54      luotonen   33: #include "HTError.h"
1.94      frystyk    34: #include "HTAccess.h"
1.55      frystyk    35: #include "HTChunk.h"
1.71      frystyk    36: #include "HTGuess.h"
1.95      frystyk    37: #include "HTNetMan.h"
1.80      frystyk    38: #include "HTTPReq.h"
1.55      frystyk    39: #include "HTTP.h"                                             /* Implements */
                     40: 
                     41: /* Macros and other defines */
1.94      frystyk    42: #ifndef HTTP_PORT
                     43: #define HTTP_PORT 80   /* Allocated to http by Jon Postel/ISI 24-Jan-92 */
                     44: #endif
                     45: 
1.71      frystyk    46: #define PUTC(c)                (*me->target->isa->put_character)(me->target, c)
                     47: #define PUTS(s)                (*me->target->isa->put_string)(me->target, s)
                     48: #define PUTBLOCK(b, l) (*me->target->isa->put_block)(me->target, b, l)
                     49: #define FREE_TARGET    (*me->target->isa->_free)(me->target)
1.74      frystyk    50: #define ABORT_TARGET   (*me->target->isa->abort)(me->target, e)
1.2       timbl      51: 
1.59      frystyk    52: /* Type definitions and global variables etc. local to this module */
1.94      frystyk    53: 
                     54: /* Final states have negative value */
1.59      frystyk    55: typedef enum _HTTPState {
1.81      frystyk    56:     HTTP_RETRY         = -4,
1.71      frystyk    57:     HTTP_ERROR         = -3,
                     58:     HTTP_NO_DATA       = -2,
                     59:     HTTP_GOT_DATA      = -1,
                     60:     HTTP_BEGIN         = 0,
                     61:     HTTP_NEED_CONNECTION,
                     62:     HTTP_NEED_REQUEST,
                     63:     HTTP_REDIRECTION,
1.91      frystyk    64:     HTTP_NOT_MODIFIED,
                     65:     HTTP_EXPIRED,
1.71      frystyk    66:     HTTP_AA
1.59      frystyk    67: } HTTPState;
1.55      frystyk    68: 
1.94      frystyk    69: /* This is the context structure for the this module */
1.55      frystyk    70: typedef struct _http_info {
1.81      frystyk    71:     HTTPState          state;            /* Current State of the connection */
                     72:     HTTPState          next;                                  /* Next state */
1.55      frystyk    73: } http_info;
                     74: 
1.88      frystyk    75: #define MAX_STATUS_LEN         100   /* Max nb of chars to check StatusLine */
1.55      frystyk    76: 
1.71      frystyk    77: struct _HTStream {
                     78:     CONST HTStreamClass *      isa;
                     79:     HTStream *                 target;
                     80:     HTRequest *                        request;
                     81:     http_info *                        http;
                     82:     HTSocketEOL                        state;
                     83:     BOOL                       transparent;
1.81      frystyk    84:     char *                     version;             /* Should we save this? */
1.71      frystyk    85:     int                                status;
1.81      frystyk    86:     char *                     reason;
1.71      frystyk    87:     char                       buffer[MAX_STATUS_LEN+1];
1.80      frystyk    88:     int                                buflen;
1.71      frystyk    89: };
1.21      luotonen   90: 
1.71      frystyk    91: /* ------------------------------------------------------------------------- */
                     92: /*                               Help Functions                             */
                     93: /* ------------------------------------------------------------------------- */
1.21      luotonen   94: 
1.94      frystyk    95: /*     HTTPCleanup
                     96: **     -----------
1.55      frystyk    97: **      This function closes the connection and frees memory.
1.94      frystyk    98: **      Returns YES on OK, else NO
1.1       timbl      99: */
1.94      frystyk   100: PRIVATE int HTTPCleanup (HTRequest *req, int status)
1.1       timbl     101: {
1.94      frystyk   102:     HTNet *net = req->net;
                    103:     http_info *http = (http_info *) net->context;
1.80      frystyk   104: 
1.94      frystyk   105:     /* Free stream with data TO network */
                    106:     if (!HTRequest_isDestination(req) && req->input_stream) {
                    107:        if (status == HT_INTERRUPTED)
                    108:            (*req->input_stream->isa->abort)(req->input_stream, NULL);
                    109:        else
                    110:            (*req->input_stream->isa->_free)(req->input_stream);
1.104   ! frystyk   111:        req->input_stream = NULL;
1.94      frystyk   112:     }
1.88      frystyk   113: 
1.94      frystyk   114:     /* Remove the request object and our own context structure for http */
                    115:     HTNet_delete(net, status);
                    116:     FREE(http);
                    117:     return YES;
1.55      frystyk   118: }
                    119: 
                    120: 
1.94      frystyk   121: PRIVATE BOOL HTTPAuthentication (HTRequest * request)
1.71      frystyk   122: {
                    123:     HTAAScheme scheme;
                    124:     HTList *valid_schemes = HTList_new();
                    125:     HTAssocList **scheme_specifics = NULL;
1.76      frystyk   126:     char *tmplate = NULL;
1.71      frystyk   127: 
                    128:     if (request->WWWAAScheme) {
                    129:        if ((scheme = HTAAScheme_enum(request->WWWAAScheme)) != HTAA_UNKNOWN) {
                    130:            HTList_addObject(valid_schemes, (void *) scheme);
                    131:            if (!scheme_specifics) {
                    132:                int i;
                    133:                scheme_specifics = (HTAssocList**)
                    134:                    malloc(HTAA_MAX_SCHEMES * sizeof(HTAssocList*));
                    135:                if (!scheme_specifics)
                    136:                    outofmem(__FILE__, "HTTPAuthentication");
                    137:                for (i=0; i < HTAA_MAX_SCHEMES; i++)
                    138:                    scheme_specifics[i] = NULL;
                    139:            }
                    140:            scheme_specifics[scheme] = HTAA_parseArgList(request->WWWAARealm);
                    141:        } else if (PROT_TRACE) {
1.104   ! frystyk   142:            HTRequest_addError(request, ERR_INFO, NO, HTERR_UNKNOWN_AA,
1.71      frystyk   143:                       (void *) request->WWWAAScheme, 0, "HTTPAuthentication");
                    144:            return NO;
                    145:        }
                    146:     }
                    147:     if (request->WWWprotection) {
                    148:        if (PROT_TRACE)
1.102     frystyk   149:            TTYPrint(TDEST, "Protection template set to `%s'\n",
1.71      frystyk   150:                    request->WWWprotection);
1.76      frystyk   151:        StrAllocCopy(tmplate, request->WWWprotection);
1.71      frystyk   152:     }
                    153:     request->valid_schemes = valid_schemes;
                    154:     request->scheme_specifics = scheme_specifics;
1.76      frystyk   155:     request->prot_template = tmplate;
1.71      frystyk   156:     return YES;
                    157: }
                    158: 
                    159: 
                    160: /*
                    161: **     This is a big switch handling all HTTP return codes. It puts in any
                    162: **     appropiate error message and decides whether we should expect data
1.78      frystyk   163: **     or not.
1.55      frystyk   164: */
1.100     frystyk   165: PRIVATE void HTTPNextState (HTStream * me)
1.55      frystyk   166: {
1.71      frystyk   167:     switch (me->status) {
                    168: 
1.78      frystyk   169:       case 0:                                               /* 0.9 response */
                    170:       case 200:
                    171:       case 201:
                    172:       case 202:
                    173:       case 203:
1.81      frystyk   174:        me->http->next = HTTP_GOT_DATA;
1.71      frystyk   175:        break;
1.78      frystyk   176: 
                    177:       case 204:                                                      /* No Response */
1.81      frystyk   178:        me->http->next = HTTP_NO_DATA;
1.71      frystyk   179:        break;
1.78      frystyk   180: 
1.71      frystyk   181:       case 301:                                                            /* Moved */
                    182:       case 302:                                                            /* Found */
1.81      frystyk   183:        me->http->next = HTTP_REDIRECTION;
1.71      frystyk   184:        break;
1.55      frystyk   185:        
1.71      frystyk   186:       case 303:                                                           /* Method */
1.92      frystyk   187:        HTAlert(me->request,
                    188:                "This client doesn't support automatic redirection of type `Method'");
1.81      frystyk   189:        me->http->next = HTTP_ERROR;
1.71      frystyk   190:        break;
1.91      frystyk   191: 
                    192:       case 304:                                                     /* Not Modified */
                    193:        me->http->next = HTTP_NOT_MODIFIED;
                    194:        break;
1.55      frystyk   195:        
1.78      frystyk   196:       case 400:                                                      /* Bad Request */
1.104   ! frystyk   197:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_REQUEST,
1.100     frystyk   198:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   199:        me->http->next = HTTP_ERROR;
1.71      frystyk   200:        break;
1.70      howcome   201: 
1.71      frystyk   202:       case 401:
1.104   ! frystyk   203:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_UNAUTHORIZED,
1.100     frystyk   204:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   205:        me->http->next = HTTP_AA;
1.71      frystyk   206:        break;
                    207:        
                    208:       case 402:                                                 /* Payment required */
1.104   ! frystyk   209:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_PAYMENT_REQUIRED,
1.100     frystyk   210:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   211:        me->http->next = HTTP_ERROR;
1.71      frystyk   212:        break;
1.55      frystyk   213:        
1.71      frystyk   214:       case 403:                                                        /* Forbidden */
1.104   ! frystyk   215:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_FORBIDDEN,
1.100     frystyk   216:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   217:        me->http->next = HTTP_ERROR;
1.71      frystyk   218:        break;
1.55      frystyk   219:        
1.71      frystyk   220:       case 404:                                                        /* Not Found */
1.104   ! frystyk   221:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NOT_FOUND,
1.100     frystyk   222:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   223:        me->http->next = HTTP_ERROR;
1.71      frystyk   224:        break;
                    225:        
1.78      frystyk   226:       case 405:                                                      /* Not Allowed */
1.104   ! frystyk   227:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NOT_ALLOWED,
1.100     frystyk   228:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   229:        me->http->next = HTTP_ERROR;
1.78      frystyk   230:        break;
                    231: 
                    232:       case 406:                                                  /* None Acceptable */
1.104   ! frystyk   233:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NONE_ACCEPTABLE,
1.100     frystyk   234:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   235:        me->http->next = HTTP_ERROR;
1.78      frystyk   236:        break;
                    237: 
                    238:       case 407:                                    /* Proxy Authentication Required */
1.104   ! frystyk   239:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_PROXY,
1.100     frystyk   240:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   241:        me->http->next = HTTP_ERROR;
1.78      frystyk   242:        break;
                    243: 
                    244:       case 408:                                                  /* Request Timeout */
1.104   ! frystyk   245:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_TIMEOUT,
1.100     frystyk   246:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   247:        me->http->next = HTTP_ERROR;
1.78      frystyk   248:        break;
                    249: 
1.71      frystyk   250:       case 500:
1.104   ! frystyk   251:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_INTERNAL,
1.100     frystyk   252:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   253:        me->http->next = HTTP_ERROR;
1.78      frystyk   254:        break;
                    255:        
1.71      frystyk   256:       case 501:
1.104   ! frystyk   257:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NOT_IMPLEMENTED,
1.100     frystyk   258:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   259:        me->http->next = HTTP_ERROR;
1.78      frystyk   260:        break;
                    261: 
                    262:       case 502:
1.104   ! frystyk   263:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_GATE,
1.100     frystyk   264:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   265:        me->http->next = HTTP_ERROR;
1.78      frystyk   266:        break;
                    267: 
                    268:       case 503:
1.104   ! frystyk   269:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_DOWN,
1.100     frystyk   270:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   271: 
                    272:        /* If Retry-After header is found then return HT_RETRY else HT_ERROR */
                    273:        if (me->request->retry_after)
                    274:            me->http->next = HTTP_RETRY;
                    275:        else
                    276:            me->http->next = HTTP_ERROR;
1.78      frystyk   277:        break;
                    278: 
                    279:       case 504:
1.104   ! frystyk   280:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_GATE_TIMEOUT,
1.100     frystyk   281:                   me->reason, (int) strlen(me->reason), "HTTPNextState");
1.81      frystyk   282:         me->http->next = HTTP_ERROR;
1.71      frystyk   283:        break;
1.78      frystyk   284: 
1.71      frystyk   285:       default:                                                /* bad number */
1.104   ! frystyk   286:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_REPLY,
1.100     frystyk   287:                   (void *) me->buffer, me->buflen, "HTTPNextState");
1.81      frystyk   288:        me->http->next = HTTP_ERROR;
1.71      frystyk   289:        break;
1.55      frystyk   290:     }
                    291: }
                    292: 
1.71      frystyk   293: /* ------------------------------------------------------------------------- */
                    294: /*                         HTTP Status Line Stream                          */
                    295: /* ------------------------------------------------------------------------- */
1.55      frystyk   296: 
1.71      frystyk   297: /*
1.80      frystyk   298: **     Analyse the stream we have read. If it is a HTTP 1.0 or higher
1.71      frystyk   299: **     then create a MIME-stream, else create a Guess stream to find out
                    300: **     what the 0.9 server is sending. We need to copy the buffer as we don't
                    301: **     know if we can modify the contents or not.
1.78      frystyk   302: **
                    303: **     Stream handling is a function of the status code returned from the 
                    304: **     server:
                    305: **             200:     Use `output_stream' in HTRequest structure
1.94      frystyk   306: **             else:    Use `debug_stream' in HTRequest structure
1.80      frystyk   307: **
                    308: **     Return: YES if buffer should be written out. NO otherwise
1.56      frystyk   309: */
1.100     frystyk   310: PRIVATE int stream_pipe (HTStream * me)
1.56      frystyk   311: {
1.71      frystyk   312:     HTRequest *req = me->request;
1.95      frystyk   313:     HTNet *net = req->net;
1.80      frystyk   314:     if (me->target) {
                    315:        int status = PUTBLOCK(me->buffer, me->buflen);
                    316:        if (status == HT_OK)
                    317:            me->transparent = YES;
                    318:        return status;
1.88      frystyk   319:     } else if (HTRequest_isSource(req) && !req->output_stream) {
                    320:        /*
                    321:        **  We need to wait for the destinations to get ready
                    322:        */
                    323:        return HT_WOULD_BLOCK;
1.80      frystyk   324:     }
1.88      frystyk   325:        
1.81      frystyk   326:     if (strncasecomp(me->buffer, "http/", 5)) {
1.80      frystyk   327:        int status;
1.104   ! frystyk   328:        HTRequest_addError(req, ERR_INFO, NO, HTERR_HTTP09,
1.80      frystyk   329:                   (void *) me->buffer, me->buflen, "HTTPStatusStream");
                    330:        me->target = HTGuess_new(req, NULL, WWW_UNKNOWN,
                    331:                                 req->output_format, req->output_stream);
1.88      frystyk   332:        me->http->next = HTTP_GOT_DATA;
1.80      frystyk   333:        if ((status = PUTBLOCK(me->buffer, me->buflen)) == HT_OK)
                    334:            me->transparent = YES;
1.98      frystyk   335:        HTDNS_setServerVersion(net->dns, HTTP_09);
1.80      frystyk   336:        return status;
                    337:     } else {
1.81      frystyk   338:        char *ptr = me->buffer+5;                      /* Skip the HTTP part */
                    339:        me->version = HTNextField(&ptr);
1.95      frystyk   340: 
                    341:        /* here we want to find out when to use persistent connection */
1.98      frystyk   342:        HTDNS_setServerVersion(net->dns, HTTP_10);
1.95      frystyk   343: 
1.81      frystyk   344:        me->status = atoi(HTNextField(&ptr));
                    345:        me->reason = ptr;
                    346:        if ((ptr = strchr(me->reason, '\r')) != NULL)     /* Strip \r and \n */
                    347:            *ptr = '\0';
                    348:        else if ((ptr = strchr(me->reason, '\n')) != NULL)
                    349:            *ptr = '\0';
                    350: 
                    351:        /* Set up the streams */
                    352:        if (me->status==200) {
1.80      frystyk   353:            HTStream *s;
1.103     frystyk   354:            me->target = HTStreamStack(WWW_MIME, req->output_format,
                    355:                                       req->output_stream, req, NO);
1.80      frystyk   356:            
1.103     frystyk   357:            /* howcome: test for return value from HTCacheWriter 12/1/95 */
                    358:            if (req->method==METHOD_GET && HTCache_isEnabled() &&
                    359:                (s = HTCacheWriter(req, NULL, WWW_MIME, req->output_format,
                    360:                                   req->output_stream))) {
                    361:                me->target = HTTee(me->target, s);
                    362:            }
1.94      frystyk   363:        } else if (req->debug_stream) {
                    364:            me->target = HTStreamStack(WWW_MIME, req->debug_format,
                    365:                                       req->debug_stream, req, NO);
1.71      frystyk   366:        } else {
1.103     frystyk   367:            /* We still need to parser the MIME part */
                    368:            me->target = HTStreamStack(WWW_MIME, WWW_PRESENT,
                    369:                                       HTBlackHole(), req, NO);
1.56      frystyk   370:        }
1.103     frystyk   371:        if (!me->target) me->target = HTBlackHole();
1.56      frystyk   372:     }
1.81      frystyk   373:     HTTPNextState(me);                                    /* Get next state */
1.80      frystyk   374:     me->transparent = YES;
                    375:     return HT_OK;
1.71      frystyk   376: }
1.56      frystyk   377: 
1.80      frystyk   378: /*
                    379: **     Searches for HTTP header line until buffer fills up or a CRLF or LF
                    380: **     is found
                    381: */
1.100     frystyk   382: PRIVATE int HTTPStatus_put_block (HTStream * me, CONST char * b, int l)
1.71      frystyk   383: {
1.80      frystyk   384:     while (!me->transparent && l-- > 0) {
                    385:        int status;
                    386:        if (me->target) {
                    387:            if ((status = stream_pipe(me)) != HT_OK)
                    388:                return status;
                    389:        } else {
                    390:            *(me->buffer+me->buflen++) = *b;
                    391:            if (me->state == EOL_FCR) {
                    392:                if (*b == LF) { /* Line found */
                    393:                    if ((status = stream_pipe(me)) != HT_OK)
                    394:                        return status;
                    395:                } else {
                    396:                    me->state = EOL_BEGIN;
                    397:                }
                    398:            } else if (*b == CR) {
                    399:                me->state = EOL_FCR;
                    400:            } else if (*b == LF) {
                    401:                if ((status = stream_pipe(me)) != HT_OK)
                    402:                    return status;
1.71      frystyk   403:            } else {
1.80      frystyk   404:                if (me->buflen >= MAX_STATUS_LEN) {
                    405:                    if ((status = stream_pipe(me)) != HT_OK)
                    406:                        return status;
                    407:                }
1.71      frystyk   408:            }
1.80      frystyk   409:            b++;
1.71      frystyk   410:        }
1.56      frystyk   411:     }
1.99      frystyk   412:     if (l > 0) return PUTBLOCK(b, l);
                    413:     return HT_OK;
1.56      frystyk   414: }
                    415: 
1.100     frystyk   416: PRIVATE int HTTPStatus_put_string (HTStream * me, CONST char * s)
1.71      frystyk   417: {
1.80      frystyk   418:     return HTTPStatus_put_block(me, s, (int) strlen(s));
1.71      frystyk   419: }
1.56      frystyk   420: 
1.100     frystyk   421: PRIVATE int HTTPStatus_put_character (HTStream * me, char c)
1.71      frystyk   422: {
1.80      frystyk   423:     return HTTPStatus_put_block(me, &c, 1);
                    424: }
                    425: 
1.100     frystyk   426: PRIVATE int HTTPStatus_flush (HTStream * me)
1.80      frystyk   427: {
                    428:     return (*me->target->isa->flush)(me->target);
1.71      frystyk   429: }
                    430: 
1.100     frystyk   431: PRIVATE int HTTPStatus_free (HTStream * me)
1.71      frystyk   432: {
1.87      frystyk   433:     int status = HT_OK;
                    434:     if (me->target) {
                    435:        if ((status = (*me->target->isa->_free)(me->target))==HT_WOULD_BLOCK)
                    436:            return HT_WOULD_BLOCK;
                    437:     }
1.71      frystyk   438:     free(me);
1.100     frystyk   439:     return status;
1.71      frystyk   440: }
                    441: 
1.104   ! frystyk   442: PRIVATE int HTTPStatus_abort (HTStream * me, HTList * e)
1.71      frystyk   443: {
                    444:     if (me->target)
1.74      frystyk   445:        ABORT_TARGET;
1.71      frystyk   446:     free(me);
1.74      frystyk   447:     if (PROT_TRACE)
1.102     frystyk   448:        TTYPrint(TDEST, "HTTPStatus.. ABORTING...\n");
1.80      frystyk   449:     return HT_ERROR;
1.71      frystyk   450: }
                    451: 
                    452: /*     HTTPStatus Stream
                    453: **     -----------------
                    454: */
                    455: PRIVATE CONST HTStreamClass HTTPStatusClass =
                    456: {              
                    457:     "HTTPStatus",
1.80      frystyk   458:     HTTPStatus_flush,
1.71      frystyk   459:     HTTPStatus_free,
                    460:     HTTPStatus_abort,
                    461:     HTTPStatus_put_character,
                    462:     HTTPStatus_put_string,
                    463:     HTTPStatus_put_block
                    464: };
                    465: 
1.100     frystyk   466: PRIVATE HTStream * HTTPStatus_new (HTRequest * request, http_info * http)
1.71      frystyk   467: {
                    468:     HTStream * me = (HTStream *) calloc(1, sizeof(HTStream));
                    469:     if (!me) outofmem(__FILE__, "HTTPStatus_new");
                    470:     me->isa = &HTTPStatusClass;
                    471:     me->request = request;
                    472:     me->http = http;
                    473:     me->state = EOL_BEGIN;
                    474:     return me;
                    475: }
                    476: 
                    477: /* ------------------------------------------------------------------------- */
                    478: 
                    479: /*             Load Document from HTTP Server                       HTLoadHTTP
1.55      frystyk   480: **             ==============================
                    481: **
                    482: **     Given a hypertext address, this routine loads a document.
                    483: **
                    484: ** On entry,
                    485: **      request                This is the request structure
1.94      frystyk   486: **     returns         HT_ERROR        Error has occured in call back
                    487: **                     HT_OK           Call back was OK
1.55      frystyk   488: */
1.94      frystyk   489: PUBLIC int HTLoadHTTP (SOCKET soc, HTRequest * request, SockOps ops)
1.55      frystyk   490: {
1.71      frystyk   491:     int status = HT_ERROR;
1.94      frystyk   492:     HTNet *net = request->net;              /* Generic protocol information */
1.55      frystyk   493:     http_info *http;                       /* Specific protocol information */
1.17      timbl     494:     
1.94      frystyk   495:     /*
                    496:     ** Initiate a new http structure and bind to request structure
                    497:     ** This is actually state HTTP_BEGIN, but it can't be in the state
                    498:     ** machine as we need the structure first.
                    499:     */
                    500:     if (ops == FD_NONE) {
1.102     frystyk   501:        if (PROT_TRACE) TTYPrint(TDEST, "HTTP........ Looking for `%s\'\n",
1.94      frystyk   502:                                HTAnchor_physical(request->anchor));
1.71      frystyk   503:        if ((http = (http_info *) calloc(1, sizeof(http_info))) == NULL)
                    504:            outofmem(__FILE__, "HTLoadHTTP");
                    505:        http->state = HTTP_BEGIN;
1.85      frystyk   506:        http->next = HTTP_ERROR;
1.94      frystyk   507:        net->context = http;
1.98      frystyk   508:     } else if (ops == FD_CLOSE) {                            /* Interrupted */
1.100     frystyk   509: #if 1
                    510:        if (HTRequest_isPostWeb(request))
                    511: #else
1.94      frystyk   512:        if(HTRequest_isPostWeb(request)&&!HTRequest_isMainDestination(request))
1.100     frystyk   513: #endif
1.94      frystyk   514:            HTTPCleanup(request, HT_IGNORE);
                    515:        else
                    516:            HTTPCleanup(request, HT_INTERRUPTED);
                    517:        return HT_OK;
                    518:     } else
                    519:        http = (http_info *) net->context;              /* Get existing copy */
1.71      frystyk   520:  
                    521:     /* Now jump into the machine. We know the state from the previous run */
                    522:     while (1) {
                    523:        switch (http->state) {
                    524:          case HTTP_BEGIN:
                    525:            /*
                    526:             ** Compose authorization information (this was moved here
                    527:             ** from after the making of the connection so that the connection
                    528:             ** wouldn't have to wait while prompting username and password
                    529:             ** from the user).                         -- AL 13.10.93
                    530:             */
                    531:            HTAA_composeAuth(request);
                    532:            if (PROT_TRACE) {
                    533:                if (request->authorization)
1.102     frystyk   534:                    TTYPrint(TDEST, "HTTP........ Sending Authorization: %s\n",
1.71      frystyk   535:                            request->authorization);
                    536:                else
1.102     frystyk   537:                    TTYPrint(TDEST,
1.71      frystyk   538:                            "HTTP........ Not sending authorization (yet)\n");
                    539:            }
                    540:            http->state = HTTP_NEED_CONNECTION;
                    541:            break;
                    542:            
                    543:          case HTTP_NEED_CONNECTION:        /* Now let's set up a connection */
1.94      frystyk   544:            status = HTDoConnect(net, HTAnchor_physical(request->anchor),
1.95      frystyk   545:                                 HTTP_PORT);
1.80      frystyk   546:            if (status == HT_OK) {
1.95      frystyk   547: 
                    548:                /* Check the protocol class */
1.97      frystyk   549:                char *s_class = HTDNS_serverClass(net->dns);
                    550:                if (s_class && strcasecomp(s_class, "http")) {
1.104   ! frystyk   551:                    HTRequest_addError(request, ERR_FATAL, NO, HTERR_CLASS,
1.95      frystyk   552:                               NULL, 0, "HTLoadHTTP");
                    553:                    http->state = HTTP_ERROR;
                    554:                    break;
                    555:                }
                    556:                HTDNS_setServerClass(net->dns, "http");
                    557: 
1.71      frystyk   558:                if (PROT_TRACE)
1.102     frystyk   559:                    TTYPrint(TDEST, "HTTP........ Connected, socket %d\n",
1.94      frystyk   560:                            net->sockfd);
1.80      frystyk   561: 
1.88      frystyk   562:                /* Set up stream TO network */
                    563:                request->input_stream =
1.100     frystyk   564:                    HTTPRequest_new(request, HTBufWriter_new(net, YES, 512));
1.88      frystyk   565: 
                    566:                /*
                    567:                ** Set up concurrent read/write if this request isn't the
                    568:                ** source for a PUT or POST. As source we don't start reading
                    569:                ** before all destinations are ready. If destination then
                    570:                ** register the input stream and get ready for read
                    571:                */
                    572:                if (HTRequest_isPostWeb(request)) {
1.94      frystyk   573:                    HTEvent_Register(net->sockfd, request, (SockOps) FD_READ,
                    574:                                     HTLoadHTTP, net->priority);
1.88      frystyk   575:                    HTRequest_linkDestination(request);
                    576:                }
                    577: 
                    578:                /* Set up stream FROM network and corresponding read buffer */
1.94      frystyk   579:                net->isoc = HTInputSocket_new(net->sockfd);
                    580:                net->target = HTImProxy ?
1.80      frystyk   581:                    request->output_stream : HTTPStatus_new(request, http);
1.88      frystyk   582: 
1.71      frystyk   583:                http->state = HTTP_NEED_REQUEST;
1.96      frystyk   584:            } else if (status == HT_WOULD_BLOCK || status == HT_PERSISTENT)
1.94      frystyk   585:                return HT_OK;
1.71      frystyk   586:            else
                    587:                http->state = HTTP_ERROR;              /* Error or interrupt */
                    588:            break;
                    589: 
1.87      frystyk   590:            /* As we can do simultanous read and write this is now one state */
1.80      frystyk   591:          case HTTP_NEED_REQUEST:
1.94      frystyk   592:            if (ops == FD_WRITE || ops == FD_NONE) {
1.88      frystyk   593:                if (HTRequest_isDestination(request)) {
1.94      frystyk   594:                    HTNet *srcnet = request->source->net;
                    595:                    HTEvent_Register(srcnet->sockfd, request->source,
                    596:                                     (SockOps) FD_READ,
1.100     frystyk   597:                                     srcnet->cbf, srcnet->priority);
1.94      frystyk   598:                    return HT_OK;
1.80      frystyk   599:                }
1.101     frystyk   600:                status = request->PostCallback ?
                    601:                    request->PostCallback(request, request->input_stream) :
1.88      frystyk   602:                        (*request->input_stream->isa->flush)(request->input_stream);
1.71      frystyk   603:                if (status == HT_WOULD_BLOCK)
1.94      frystyk   604:                    return HT_OK;
                    605:                else
                    606:                    ops = FD_READ;        /* Trick to ensure that we do READ */
                    607:            } else if (ops == FD_READ) {
1.98      frystyk   608:                status = HTSocketRead(request, net);
1.80      frystyk   609:                if (status == HT_WOULD_BLOCK)
1.94      frystyk   610:                    return HT_OK;
                    611:                else if (status == HT_LOADED)
                    612:                    http->state = http->next;          /* Jump to next state */
1.91      frystyk   613:                else if (status == HT_RELOAD)
                    614:                    http->state = HTTP_EXPIRED;
1.94      frystyk   615:                else
                    616:                    http->state = HTTP_ERROR;
1.90      frystyk   617:            } else {
1.78      frystyk   618:                http->state = HTTP_ERROR;
1.90      frystyk   619:            }
1.71      frystyk   620:            break;
1.80      frystyk   621:            
1.91      frystyk   622:          case HTTP_NOT_MODIFIED:
                    623:            http->state = HTTP_ERROR;
                    624:            break;
                    625: 
                    626:          case HTTP_EXPIRED:
                    627:            /* Dirty hack and fall through */
1.102     frystyk   628:            if (PROT_TRACE) TTYPrint(TDEST, "HTTP........ Expired\n");
1.91      frystyk   629:            request->redirect = request->anchor->address;
                    630: 
1.80      frystyk   631:          case HTTP_REDIRECTION:
1.88      frystyk   632:            /* Clean up the other connections or just this one */
                    633:            if (HTRequest_isPostWeb(request))
                    634:                HTRequest_killPostWeb(request);
                    635:            else
1.94      frystyk   636:                HTTPCleanup(request, HT_IGNORE);
1.88      frystyk   637: 
                    638:            /* If we found a new URL in the response */
1.71      frystyk   639:            if (request->redirect) {
                    640:                if (status == 301) {
1.104   ! frystyk   641:                    HTRequest_addError(request, ERR_INFO, NO, HTERR_MOVED,
1.71      frystyk   642:                               (void *) request->redirect,
                    643:                               (int) strlen(request->redirect), "HTLoadHTTP");
                    644:                } else if (status == 302) {
1.104   ! frystyk   645:                    HTRequest_addError(request, ERR_INFO, NO, HTERR_FOUND,
1.71      frystyk   646:                               (void *) request->redirect,
                    647:                               (int) strlen(request->redirect), "HTLoadHTTP");
1.55      frystyk   648:                }
1.88      frystyk   649: 
                    650:                /* If we haven't reached the limit for redirection */
1.94      frystyk   651:                if (HTRequest_retry(request)) {
1.87      frystyk   652:                    HTAnchor *anchor = HTAnchor_findAddress(request->redirect);
1.88      frystyk   653:                    if (HTRequest_isPostWeb(request)) {
                    654:                        HTRequest *dest = HTRequest_mainDestination(request);
                    655:                        char *msg=(char*)malloc(strlen(request->redirect)+100);
1.87      frystyk   656:                        if (!msg) outofmem(__FILE__, "HTLoadHTTP");
1.88      frystyk   657:                        sprintf(msg, "\nLocation of %s has changed to %s for method %s, continue operation?",
                    658:                                HTRequest_isDestination(request) ?
                    659:                                "destination" : "source", request->redirect,
                    660:                                HTMethod_name(request->method));
1.92      frystyk   661:                        if (HTConfirm(request, msg)) {
1.87      frystyk   662:                            free(msg);
1.88      frystyk   663: 
                    664:                            /* The new anchor inherits the Post Web */
1.91      frystyk   665:                            HTAnchor_moveAllLinks((HTAnchor *) request->anchor,
                    666:                                                  anchor);
1.88      frystyk   667:                            if (HTRequest_isSource(request))
                    668:                                HTRequest_delete(request);
1.94      frystyk   669:                            return HTCopyAnchor((HTAnchor *) anchor, dest) ?
                    670:                                HT_OK : HT_ERROR;
1.87      frystyk   671:                        }
                    672:                        free(msg);
1.94      frystyk   673:                        return HT_OK;
1.101     frystyk   674:                    } if (request->PostCallback) {
1.87      frystyk   675: #if 0
1.94      frystyk   676:                        return HTUploadAnchor((HTAnchor*) anchor, request) ?
                    677:                            HT_OK : HT_ERROR;
1.87      frystyk   678: #endif
                    679:                    } else {
1.94      frystyk   680:                        return HTLoadAnchor((HTAnchor *) anchor, request) ?
                    681:                            HT_OK : HT_ERROR;
1.87      frystyk   682:                    }
1.71      frystyk   683:                } else {
1.104   ! frystyk   684:                    HTRequest_addError(request, ERR_FATAL, NO, HTERR_MAX_REDIRECT,
1.58      frystyk   685:                               NULL, 0, "HTLoadHTTP");
1.88      frystyk   686:                    if (HTRequest_isPostWeb(request)) {
                    687:                        BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   688:                        if (HTRequest_isDestination(request)) {
                    689:                            HTLink *link =
                    690:                                HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    691:                                                  (HTAnchor *) request->anchor);
                    692:                            HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    693:                        }
1.94      frystyk   694:                        HTNet_callback(request, main ? HT_ERROR : HT_IGNORE);
1.88      frystyk   695:                        HTRequest_removeDestination(request);
                    696:                    }
1.94      frystyk   697:                    return HT_OK;
1.58      frystyk   698:                }
1.71      frystyk   699:            } else {
1.104   ! frystyk   700:                HTRequest_addError(request, ERR_FATAL, NO, HTERR_BAD_REPLY,
1.71      frystyk   701:                           NULL, 0, "HTLoadHTTP");
1.94      frystyk   702:                return HT_OK;
1.71      frystyk   703:            }
                    704:            break;
1.80      frystyk   705:            
1.71      frystyk   706:          case HTTP_AA:
1.88      frystyk   707:            /* Clean up the other connections or just this one */
                    708:            if (HTRequest_isPostWeb(request))
                    709:                HTRequest_killPostWeb(request);
                    710:            else
1.94      frystyk   711:                HTTPCleanup(request, HT_IGNORE);
1.88      frystyk   712: 
                    713:            /* Ask the user for a UserID and a passwd */
                    714:            if (HTTPAuthentication(request) && HTAA_retryWithAuth(request)) {
1.94      frystyk   715:                int ret;
1.88      frystyk   716:                if (HTRequest_isPostWeb(request)) {
                    717:                    HTRequest *dest = HTRequest_mainDestination(request);
                    718:                    HTAnchor_appendMethods(request->anchor, request->method);
1.94      frystyk   719:                    ret=HTCopyAnchor((HTAnchor*)request->source->anchor, dest);
                    720:                    return ret ? HT_OK : HT_ERROR;
1.101     frystyk   721:                } else if (request->PostCallback) {
1.85      frystyk   722: #if 0
1.94      frystyk   723:                    ret = HTUploadAnchor((HTAnchor*) request->anchor,request);
                    724:                    return ret ? HT_OK : HT_ERROR;
1.85      frystyk   725: #endif
                    726:                } else {
1.94      frystyk   727:                    ret = HTLoadAnchor((HTAnchor *) request->anchor, request);
                    728:                    return ret ? HT_OK : HT_ERROR;
1.85      frystyk   729:                }
1.88      frystyk   730:            } else {                               /* If the guy said no :-( */
1.104   ! frystyk   731:                HTRequest_addError(request, ERR_FATAL, NO, HTERR_UNAUTHORIZED,
1.94      frystyk   732:                           NULL, 0, "HTLoadHTTP");
1.88      frystyk   733:                if (HTRequest_isPostWeb(request)) {
                    734:                    BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   735:                    if (HTRequest_isDestination(request)) {
                    736:                        HTLink *link =
                    737:                            HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    738:                                              (HTAnchor *) request->anchor);
                    739:                        HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    740:                    }
1.94      frystyk   741:                    HTNet_callback(request, main ? HT_ERROR : HT_IGNORE);
1.88      frystyk   742:                    HTRequest_removeDestination(request);
                    743:                }
1.94      frystyk   744:                return HT_OK;
1.71      frystyk   745:            }
                    746:            break;
1.80      frystyk   747:            
1.71      frystyk   748:          case HTTP_GOT_DATA:
1.88      frystyk   749:            if (HTRequest_isPostWeb(request)) {
1.100     frystyk   750:                HTTPCleanup(request, HTRequest_isMainDestination(request) ?
                    751:                            HT_ERROR : HT_IGNORE);
1.91      frystyk   752:                if (HTRequest_isDestination(request)) {
                    753:                    HTLink *link =
                    754:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    755:                                          (HTAnchor *) request->anchor);
                    756:                    HTAnchor_setLinkResult(link, HT_LINK_OK);
                    757:                }
1.88      frystyk   758:                HTRequest_removeDestination(request);
1.94      frystyk   759:            } else
                    760:                HTTPCleanup(request, HT_LOADED);
                    761:            return HT_OK;
1.71      frystyk   762:            break;
                    763:            
                    764:          case HTTP_NO_DATA:
1.88      frystyk   765:            if (HTRequest_isPostWeb(request)) {
1.100     frystyk   766:                HTTPCleanup(request, HTRequest_isMainDestination(request) ?
                    767:                            HT_ERROR : HT_IGNORE);
1.91      frystyk   768:                if (HTRequest_isDestination(request)) {
                    769:                    HTLink *link =
                    770:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    771:                                          (HTAnchor *) request->anchor);
                    772:                    HTAnchor_setLinkResult(link, HT_LINK_OK);
                    773:                }
1.88      frystyk   774:                HTRequest_removeDestination(request);
1.94      frystyk   775:            } else
                    776:                HTTPCleanup(request, HT_NO_DATA);
                    777:            return HT_OK;
1.71      frystyk   778:            break;
1.80      frystyk   779:            
1.94      frystyk   780:          case HTTP_RETRY:
1.88      frystyk   781:            if (HTRequest_isPostWeb(request)) {
1.100     frystyk   782:                HTTPCleanup(request, HTRequest_isMainDestination(request) ?
                    783:                            HT_ERROR : HT_IGNORE);
1.91      frystyk   784:                HTRequest_killPostWeb(request);
                    785:                if (HTRequest_isDestination(request)) {
                    786:                    HTLink *link = 
                    787:                        HTAnchor_findLink((HTAnchor*) request->source->anchor,
                    788:                                          (HTAnchor*) request->anchor);
                    789:                    HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    790:                }
1.88      frystyk   791:                HTRequest_removeDestination(request);
1.91      frystyk   792:            } else
1.94      frystyk   793:                HTTPCleanup(request, HT_RETRY);
                    794:            return HT_OK;
1.81      frystyk   795:            break;
                    796: 
1.71      frystyk   797:          case HTTP_ERROR:
1.88      frystyk   798:            /* Clean up the other connections or just this one */
                    799:            if (HTRequest_isPostWeb(request)) {
1.100     frystyk   800:                HTTPCleanup(request, HTRequest_isMainDestination(request) ?
                    801:                            HT_ERROR : HT_IGNORE);
1.88      frystyk   802:                HTRequest_killPostWeb(request);
1.91      frystyk   803:                if (HTRequest_isDestination(request)) {
                    804:                    HTLink *link =
                    805:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    806:                                          (HTAnchor *) request->anchor);
                    807:                    HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    808:                }
                    809:                HTRequest_removeDestination(request);
1.88      frystyk   810:            } else
1.94      frystyk   811:                HTTPCleanup(request, HT_ERROR);
                    812:            return HT_OK;
1.71      frystyk   813:            break;
                    814:        }
                    815:     } /* End of while(1) */
                    816: }    
1.88      frystyk   817: 
1.21      luotonen  818: 

Webmaster