Annotation of libwww/Library/src/HTTP.c, revision 1.99

1.74      frystyk     1: /*                                                                      HTTP.c
                      2: **     MULTITHREADED IMPLEMENTATION OF HTTP CLIENT
1.2       timbl       3: **
1.84      frystyk     4: **     (c) COPYRIGHT MIT 1995.
1.74      frystyk     5: **     Please first read the full copyright statement in the file COPYRIGH.
                      6: **
                      7: **     This module implments the HTTP protocol as a state machine
1.55      frystyk     8: **
                      9: ** History:
1.59      frystyk    10: **    < May 24 94 ??   Unknown - but obviously written
1.56      frystyk    11: **     May 24 94 HF    Made reentrent and cleaned up a bit. Implemented
                     12: **                     Forward, redirection, error handling and referer field
1.67      duns       13: **      8 Jul 94  FM   Insulate free() from _free structure element.
1.71      frystyk    14: **     Jul 94 HFN      Written on top of HTTP.c, Henrik Frystyk
1.55      frystyk    15: **
1.1       timbl      16: */
                     17: 
1.78      frystyk    18: /* Library include files */
                     19: #include "tcp.h"
1.1       timbl      20: #include "HTUtils.h"
1.78      frystyk    21: #include "HTString.h"
1.71      frystyk    22: #include "HTParse.h"
1.1       timbl      23: #include "HTTCP.h"
                     24: #include "HTFormat.h"
1.85      frystyk    25: #include "HTSocket.h"
1.94      frystyk    26: #include "HTReqMan.h"
1.2       timbl      27: #include "HTAlert.h"
                     28: #include "HTMIME.h"
1.14      luotonen   29: #include "HTAABrow.h"          /* Access Authorization */
1.20      timbl      30: #include "HTTee.h"             /* Tee off a cache stream */
1.78      frystyk    31: #include "HTFWrite.h"          /* Write to cache file */
1.90      frystyk    32: #include "HTCache.h"
1.80      frystyk    33: #include "HTWriter.h"
1.54      luotonen   34: #include "HTError.h"
1.94      frystyk    35: #include "HTAccess.h"
1.55      frystyk    36: #include "HTChunk.h"
1.71      frystyk    37: #include "HTGuess.h"
1.95      frystyk    38: #include "HTNetMan.h"
1.80      frystyk    39: #include "HTTPReq.h"
1.55      frystyk    40: #include "HTTP.h"                                             /* Implements */
                     41: 
                     42: /* Macros and other defines */
1.94      frystyk    43: #ifndef HTTP_PORT
                     44: #define HTTP_PORT 80   /* Allocated to http by Jon Postel/ISI 24-Jan-92 */
                     45: #endif
                     46: 
1.71      frystyk    47: #define PUTC(c)                (*me->target->isa->put_character)(me->target, c)
                     48: #define PUTS(s)                (*me->target->isa->put_string)(me->target, s)
                     49: #define PUTBLOCK(b, l) (*me->target->isa->put_block)(me->target, b, l)
                     50: #define FREE_TARGET    (*me->target->isa->_free)(me->target)
1.74      frystyk    51: #define ABORT_TARGET   (*me->target->isa->abort)(me->target, e)
1.2       timbl      52: 
1.59      frystyk    53: /* Type definitions and global variables etc. local to this module */
1.94      frystyk    54: 
                     55: /* Final states have negative value */
1.59      frystyk    56: typedef enum _HTTPState {
1.81      frystyk    57:     HTTP_RETRY         = -4,
1.71      frystyk    58:     HTTP_ERROR         = -3,
                     59:     HTTP_NO_DATA       = -2,
                     60:     HTTP_GOT_DATA      = -1,
                     61:     HTTP_BEGIN         = 0,
                     62:     HTTP_NEED_CONNECTION,
                     63:     HTTP_NEED_REQUEST,
                     64:     HTTP_REDIRECTION,
1.91      frystyk    65:     HTTP_NOT_MODIFIED,
                     66:     HTTP_EXPIRED,
1.71      frystyk    67:     HTTP_AA
1.59      frystyk    68: } HTTPState;
1.55      frystyk    69: 
1.94      frystyk    70: /* This is the context structure for the this module */
1.55      frystyk    71: typedef struct _http_info {
1.81      frystyk    72:     HTTPState          state;            /* Current State of the connection */
                     73:     HTTPState          next;                                  /* Next state */
1.55      frystyk    74: } http_info;
                     75: 
1.88      frystyk    76: #define MAX_STATUS_LEN         100   /* Max nb of chars to check StatusLine */
1.55      frystyk    77: 
1.71      frystyk    78: struct _HTStream {
                     79:     CONST HTStreamClass *      isa;
                     80:     HTStream *                 target;
                     81:     HTRequest *                        request;
                     82:     http_info *                        http;
                     83:     HTSocketEOL                        state;
                     84:     BOOL                       transparent;
1.81      frystyk    85:     char *                     version;             /* Should we save this? */
1.71      frystyk    86:     int                                status;
1.81      frystyk    87:     char *                     reason;
1.71      frystyk    88:     char                       buffer[MAX_STATUS_LEN+1];
1.80      frystyk    89:     int                                buflen;
1.71      frystyk    90: };
1.21      luotonen   91: 
1.71      frystyk    92: /* ------------------------------------------------------------------------- */
                     93: /*                               Help Functions                             */
                     94: /* ------------------------------------------------------------------------- */
1.21      luotonen   95: 
1.94      frystyk    96: /*     HTTPCleanup
                     97: **     -----------
1.55      frystyk    98: **      This function closes the connection and frees memory.
1.94      frystyk    99: **      Returns YES on OK, else NO
1.1       timbl     100: */
1.94      frystyk   101: PRIVATE int HTTPCleanup (HTRequest *req, int status)
1.1       timbl     102: {
1.94      frystyk   103:     HTNet *net = req->net;
                    104:     http_info *http = (http_info *) net->context;
1.80      frystyk   105: 
1.94      frystyk   106:     /* Free stream with data TO network */
                    107:     if (!HTRequest_isDestination(req) && req->input_stream) {
                    108:        if (status == HT_INTERRUPTED)
                    109:            (*req->input_stream->isa->abort)(req->input_stream, NULL);
                    110:        else
                    111:            (*req->input_stream->isa->_free)(req->input_stream);
                    112:     }
1.88      frystyk   113: 
1.94      frystyk   114:     /* Remove the request object and our own context structure for http */
                    115:     HTNet_delete(net, status);
                    116:     FREE(http);
                    117:     return YES;
1.55      frystyk   118: }
                    119: 
                    120: 
1.94      frystyk   121: PRIVATE BOOL HTTPAuthentication (HTRequest * request)
1.71      frystyk   122: {
                    123:     HTAAScheme scheme;
                    124:     HTList *valid_schemes = HTList_new();
                    125:     HTAssocList **scheme_specifics = NULL;
1.76      frystyk   126:     char *tmplate = NULL;
1.71      frystyk   127: 
                    128:     if (request->WWWAAScheme) {
                    129:        if ((scheme = HTAAScheme_enum(request->WWWAAScheme)) != HTAA_UNKNOWN) {
                    130:            HTList_addObject(valid_schemes, (void *) scheme);
                    131:            if (!scheme_specifics) {
                    132:                int i;
                    133:                scheme_specifics = (HTAssocList**)
                    134:                    malloc(HTAA_MAX_SCHEMES * sizeof(HTAssocList*));
                    135:                if (!scheme_specifics)
                    136:                    outofmem(__FILE__, "HTTPAuthentication");
                    137:                for (i=0; i < HTAA_MAX_SCHEMES; i++)
                    138:                    scheme_specifics[i] = NULL;
                    139:            }
                    140:            scheme_specifics[scheme] = HTAA_parseArgList(request->WWWAARealm);
                    141:        } else if (PROT_TRACE) {
                    142:            HTErrorAdd(request, ERR_INFO, NO, HTERR_UNKNOWN_AA,
                    143:                       (void *) request->WWWAAScheme, 0, "HTTPAuthentication");
                    144:            return NO;
                    145:        }
                    146:     }
                    147:     if (request->WWWprotection) {
                    148:        if (PROT_TRACE)
1.78      frystyk   149:            fprintf(TDEST, "Protection template set to `%s'\n",
1.71      frystyk   150:                    request->WWWprotection);
1.76      frystyk   151:        StrAllocCopy(tmplate, request->WWWprotection);
1.71      frystyk   152:     }
                    153:     request->valid_schemes = valid_schemes;
                    154:     request->scheme_specifics = scheme_specifics;
1.76      frystyk   155:     request->prot_template = tmplate;
1.71      frystyk   156:     return YES;
                    157: }
                    158: 
                    159: 
                    160: /*
                    161: **     This is a big switch handling all HTTP return codes. It puts in any
                    162: **     appropiate error message and decides whether we should expect data
1.78      frystyk   163: **     or not.
1.55      frystyk   164: */
1.81      frystyk   165: PRIVATE void HTTPNextState ARGS1(HTStream *, me)
1.55      frystyk   166: {
1.71      frystyk   167:     switch (me->status) {
                    168: 
1.78      frystyk   169:       case 0:                                               /* 0.9 response */
                    170:       case 200:
                    171:       case 201:
                    172:       case 202:
                    173:       case 203:
1.81      frystyk   174:        me->http->next = HTTP_GOT_DATA;
1.71      frystyk   175:        break;
1.78      frystyk   176: 
                    177:       case 204:                                                      /* No Response */
1.81      frystyk   178:        me->http->next = HTTP_NO_DATA;
1.71      frystyk   179:        break;
1.78      frystyk   180: 
1.71      frystyk   181:       case 301:                                                            /* Moved */
                    182:       case 302:                                                            /* Found */
1.81      frystyk   183:        me->http->next = HTTP_REDIRECTION;
1.71      frystyk   184:        break;
1.55      frystyk   185:        
1.71      frystyk   186:       case 303:                                                           /* Method */
1.92      frystyk   187:        HTAlert(me->request,
                    188:                "This client doesn't support automatic redirection of type `Method'");
1.81      frystyk   189:        me->http->next = HTTP_ERROR;
1.71      frystyk   190:        break;
1.91      frystyk   191: 
                    192:       case 304:                                                     /* Not Modified */
                    193:        me->http->next = HTTP_NOT_MODIFIED;
                    194:        break;
1.55      frystyk   195:        
1.78      frystyk   196:       case 400:                                                      /* Bad Request */
                    197:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_BAD_REQUEST,
1.81      frystyk   198:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    199:        me->http->next = HTTP_ERROR;
1.71      frystyk   200:        break;
1.70      howcome   201: 
1.71      frystyk   202:       case 401:
1.78      frystyk   203:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_UNAUTHORIZED,
1.81      frystyk   204:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    205:        me->http->next = HTTP_AA;
1.71      frystyk   206:        break;
                    207:        
                    208:       case 402:                                                 /* Payment required */
1.78      frystyk   209:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_PAYMENT_REQUIRED,
1.81      frystyk   210:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    211:        me->http->next = HTTP_ERROR;
1.71      frystyk   212:        break;
1.55      frystyk   213:        
1.71      frystyk   214:       case 403:                                                        /* Forbidden */
1.78      frystyk   215:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_FORBIDDEN,
1.81      frystyk   216:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    217:        me->http->next = HTTP_ERROR;
1.71      frystyk   218:        break;
1.55      frystyk   219:        
1.71      frystyk   220:       case 404:                                                        /* Not Found */
1.78      frystyk   221:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_NOT_FOUND,
1.81      frystyk   222:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    223:        me->http->next = HTTP_ERROR;
1.71      frystyk   224:        break;
                    225:        
1.78      frystyk   226:       case 405:                                                      /* Not Allowed */
                    227:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_NOT_ALLOWED,
1.81      frystyk   228:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    229:        me->http->next = HTTP_ERROR;
1.78      frystyk   230:        break;
                    231: 
                    232:       case 406:                                                  /* None Acceptable */
                    233:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_NONE_ACCEPTABLE,
1.81      frystyk   234:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    235:        me->http->next = HTTP_ERROR;
1.78      frystyk   236:        break;
                    237: 
                    238:       case 407:                                    /* Proxy Authentication Required */
                    239:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_PROXY,
1.81      frystyk   240:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    241:        me->http->next = HTTP_ERROR;
1.78      frystyk   242:        break;
                    243: 
                    244:       case 408:                                                  /* Request Timeout */
                    245:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_TIMEOUT,
1.81      frystyk   246:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    247:        me->http->next = HTTP_ERROR;
1.78      frystyk   248:        break;
                    249: 
1.71      frystyk   250:       case 500:
1.78      frystyk   251:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_INTERNAL,
1.81      frystyk   252:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    253:        me->http->next = HTTP_ERROR;
1.78      frystyk   254:        break;
                    255:        
1.71      frystyk   256:       case 501:
1.78      frystyk   257:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_NOT_IMPLEMENTED,
1.81      frystyk   258:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    259:        me->http->next = HTTP_ERROR;
1.78      frystyk   260:        break;
                    261: 
                    262:       case 502:
                    263:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_BAD_GATE,
1.81      frystyk   264:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    265:        me->http->next = HTTP_ERROR;
1.78      frystyk   266:        break;
                    267: 
                    268:       case 503:
                    269:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_DOWN,
1.81      frystyk   270:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    271: 
                    272:        /* If Retry-After header is found then return HT_RETRY else HT_ERROR */
                    273:        if (me->request->retry_after)
                    274:            me->http->next = HTTP_RETRY;
                    275:        else
                    276:            me->http->next = HTTP_ERROR;
1.78      frystyk   277:        break;
                    278: 
                    279:       case 504:
                    280:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_GATE_TIMEOUT,
1.81      frystyk   281:                   me->reason, (int) strlen(me->reason), "HTLoadHTTP");
                    282:         me->http->next = HTTP_ERROR;
1.71      frystyk   283:        break;
1.78      frystyk   284: 
1.71      frystyk   285:       default:                                                /* bad number */
                    286:        HTErrorAdd(me->request, ERR_FATAL, NO, HTERR_BAD_REPLY,
1.80      frystyk   287:                   (void *) me->buffer, me->buflen, "HTLoadHTTP");
1.81      frystyk   288:        me->http->next = HTTP_ERROR;
1.71      frystyk   289:        break;
1.55      frystyk   290:     }
                    291: }
                    292: 
1.71      frystyk   293: /* ------------------------------------------------------------------------- */
                    294: /*                         HTTP Status Line Stream                          */
                    295: /* ------------------------------------------------------------------------- */
1.55      frystyk   296: 
1.71      frystyk   297: /*
1.80      frystyk   298: **     Analyse the stream we have read. If it is a HTTP 1.0 or higher
1.71      frystyk   299: **     then create a MIME-stream, else create a Guess stream to find out
                    300: **     what the 0.9 server is sending. We need to copy the buffer as we don't
                    301: **     know if we can modify the contents or not.
1.78      frystyk   302: **
                    303: **     Stream handling is a function of the status code returned from the 
                    304: **     server:
                    305: **             200:     Use `output_stream' in HTRequest structure
1.94      frystyk   306: **             else:    Use `debug_stream' in HTRequest structure
1.80      frystyk   307: **
                    308: **     Return: YES if buffer should be written out. NO otherwise
1.56      frystyk   309: */
1.80      frystyk   310: PRIVATE int stream_pipe ARGS1(HTStream *, me)
1.56      frystyk   311: {
1.71      frystyk   312:     HTRequest *req = me->request;
1.95      frystyk   313:     HTNet *net = req->net;
1.80      frystyk   314:     if (me->target) {
                    315:        int status = PUTBLOCK(me->buffer, me->buflen);
                    316:        if (status == HT_OK)
                    317:            me->transparent = YES;
                    318:        return status;
1.88      frystyk   319:     } else if (HTRequest_isSource(req) && !req->output_stream) {
                    320:        /*
                    321:        **  We need to wait for the destinations to get ready
                    322:        */
                    323:        return HT_WOULD_BLOCK;
1.80      frystyk   324:     }
1.88      frystyk   325:        
1.81      frystyk   326:     if (strncasecomp(me->buffer, "http/", 5)) {
1.80      frystyk   327:        int status;
                    328:        HTErrorAdd(req, ERR_INFO, NO, HTERR_HTTP09,
                    329:                   (void *) me->buffer, me->buflen, "HTTPStatusStream");
                    330:        me->target = HTGuess_new(req, NULL, WWW_UNKNOWN,
                    331:                                 req->output_format, req->output_stream);
1.88      frystyk   332:        me->http->next = HTTP_GOT_DATA;
1.80      frystyk   333:        if ((status = PUTBLOCK(me->buffer, me->buflen)) == HT_OK)
                    334:            me->transparent = YES;
1.98      frystyk   335:        HTDNS_setServerVersion(net->dns, HTTP_09);
1.80      frystyk   336:        return status;
                    337:     } else {
1.81      frystyk   338:        char *ptr = me->buffer+5;                      /* Skip the HTTP part */
                    339:        me->version = HTNextField(&ptr);
1.95      frystyk   340: 
                    341:        /* here we want to find out when to use persistent connection */
1.98      frystyk   342:        HTDNS_setServerVersion(net->dns, HTTP_10);
1.95      frystyk   343: 
1.81      frystyk   344:        me->status = atoi(HTNextField(&ptr));
                    345:        me->reason = ptr;
                    346:        if ((ptr = strchr(me->reason, '\r')) != NULL)     /* Strip \r and \n */
                    347:            *ptr = '\0';
                    348:        else if ((ptr = strchr(me->reason, '\n')) != NULL)
                    349:            *ptr = '\0';
                    350: 
                    351:        /* Set up the streams */
                    352:        if (me->status==200) {
1.80      frystyk   353:            HTStream *s;
1.85      frystyk   354:            if (req->output_format == WWW_SOURCE) {
                    355:                me->target = HTMIMEConvert(req, NULL, WWW_MIME,
                    356:                                           req->output_format,
                    357:                                           req->output_stream);
                    358:            } else {
                    359:                me->target = HTStreamStack(WWW_MIME, req->output_format,
                    360:                                           req->output_stream, req, NO);
1.80      frystyk   361:            
1.85      frystyk   362:                /* howcome: test for return value from HTCacheWriter 12/1/95 */
                    363:                if (req->method==METHOD_GET && HTCache_isEnabled() &&
                    364:                    (s = HTCacheWriter(req, NULL, WWW_MIME, req->output_format,
                    365:                                       req->output_stream))) {
                    366:                    me->target = HTTee(me->target, s);
                    367:                }
1.89      frystyk   368:              }
1.94      frystyk   369:        } else if (req->debug_stream) {
                    370:            me->target = HTStreamStack(WWW_MIME, req->debug_format,
                    371:                                       req->debug_stream, req, NO);
1.71      frystyk   372:        } else {
1.94      frystyk   373:            me->target = HTMIMEConvert(req, NULL, WWW_MIME, WWW_PRESENT,
                    374:                                       HTBlackHole());
1.56      frystyk   375:        }
1.80      frystyk   376:        if (!me->target)
                    377:            me->target = HTBlackHole();                         /* What else */
1.56      frystyk   378:     }
1.81      frystyk   379:     HTTPNextState(me);                                    /* Get next state */
1.80      frystyk   380:     me->transparent = YES;
                    381:     return HT_OK;
1.71      frystyk   382: }
1.56      frystyk   383: 
1.80      frystyk   384: /*
                    385: **     Searches for HTTP header line until buffer fills up or a CRLF or LF
                    386: **     is found
                    387: */
                    388: PRIVATE int HTTPStatus_put_block ARGS3(HTStream *, me, CONST char*, b, int, l)
1.71      frystyk   389: {
1.80      frystyk   390:     while (!me->transparent && l-- > 0) {
                    391:        int status;
                    392:        if (me->target) {
                    393:            if ((status = stream_pipe(me)) != HT_OK)
                    394:                return status;
                    395:        } else {
                    396:            *(me->buffer+me->buflen++) = *b;
                    397:            if (me->state == EOL_FCR) {
                    398:                if (*b == LF) { /* Line found */
                    399:                    if ((status = stream_pipe(me)) != HT_OK)
                    400:                        return status;
                    401:                } else {
                    402:                    me->state = EOL_BEGIN;
                    403:                }
                    404:            } else if (*b == CR) {
                    405:                me->state = EOL_FCR;
                    406:            } else if (*b == LF) {
                    407:                if ((status = stream_pipe(me)) != HT_OK)
                    408:                    return status;
1.71      frystyk   409:            } else {
1.80      frystyk   410:                if (me->buflen >= MAX_STATUS_LEN) {
                    411:                    if ((status = stream_pipe(me)) != HT_OK)
                    412:                        return status;
                    413:                }
1.71      frystyk   414:            }
1.80      frystyk   415:            b++;
1.71      frystyk   416:        }
1.56      frystyk   417:     }
1.99    ! frystyk   418:     if (l > 0) return PUTBLOCK(b, l);
        !           419:     return HT_OK;
1.56      frystyk   420: }
                    421: 
1.80      frystyk   422: PRIVATE int HTTPStatus_put_string ARGS2(HTStream *, me, CONST char*, s)
1.71      frystyk   423: {
1.80      frystyk   424:     return HTTPStatus_put_block(me, s, (int) strlen(s));
1.71      frystyk   425: }
1.56      frystyk   426: 
1.80      frystyk   427: PRIVATE int HTTPStatus_put_character ARGS2(HTStream *, me, char, c)
1.71      frystyk   428: {
1.80      frystyk   429:     return HTTPStatus_put_block(me, &c, 1);
                    430: }
                    431: 
                    432: PRIVATE int HTTPStatus_flush ARGS1(HTStream *, me)
                    433: {
                    434:     return (*me->target->isa->flush)(me->target);
1.71      frystyk   435: }
                    436: 
                    437: PRIVATE int HTTPStatus_free ARGS1(HTStream *, me)
                    438: {
1.87      frystyk   439:     int status = HT_OK;
                    440:     if (me->target) {
                    441:        if ((status = (*me->target->isa->_free)(me->target))==HT_WOULD_BLOCK)
                    442:            return HT_WOULD_BLOCK;
                    443:     }
1.71      frystyk   444:     free(me);
1.80      frystyk   445:     return HT_OK;
1.71      frystyk   446: }
                    447: 
                    448: PRIVATE int HTTPStatus_abort ARGS2(HTStream *, me, HTError, e)
                    449: {
                    450:     if (me->target)
1.74      frystyk   451:        ABORT_TARGET;
1.71      frystyk   452:     free(me);
1.74      frystyk   453:     if (PROT_TRACE)
1.80      frystyk   454:        fprintf(TDEST, "HTTPStatus.. ABORTING...\n");
                    455:     return HT_ERROR;
1.71      frystyk   456: }
                    457: 
                    458: /*     HTTPStatus Stream
                    459: **     -----------------
                    460: */
                    461: PRIVATE CONST HTStreamClass HTTPStatusClass =
                    462: {              
                    463:     "HTTPStatus",
1.80      frystyk   464:     HTTPStatus_flush,
1.71      frystyk   465:     HTTPStatus_free,
                    466:     HTTPStatus_abort,
                    467:     HTTPStatus_put_character,
                    468:     HTTPStatus_put_string,
                    469:     HTTPStatus_put_block
                    470: };
                    471: 
1.94      frystyk   472: PRIVATE HTStream * HTTPStatus_new ARGS2(HTRequest *, request,
                    473:                                        http_info *, http)
1.71      frystyk   474: {
                    475:     HTStream * me = (HTStream *) calloc(1, sizeof(HTStream));
                    476:     if (!me) outofmem(__FILE__, "HTTPStatus_new");
                    477:     me->isa = &HTTPStatusClass;
                    478:     me->request = request;
                    479:     me->http = http;
                    480:     me->state = EOL_BEGIN;
                    481:     return me;
                    482: }
                    483: 
                    484: /* ------------------------------------------------------------------------- */
                    485: 
                    486: /*             Load Document from HTTP Server                       HTLoadHTTP
1.55      frystyk   487: **             ==============================
                    488: **
                    489: **     Given a hypertext address, this routine loads a document.
                    490: **
                    491: ** On entry,
                    492: **      request                This is the request structure
1.94      frystyk   493: **     returns         HT_ERROR        Error has occured in call back
                    494: **                     HT_OK           Call back was OK
1.55      frystyk   495: */
1.94      frystyk   496: PUBLIC int HTLoadHTTP (SOCKET soc, HTRequest * request, SockOps ops)
1.55      frystyk   497: {
1.71      frystyk   498:     int status = HT_ERROR;
1.94      frystyk   499:     HTNet *net = request->net;              /* Generic protocol information */
1.55      frystyk   500:     http_info *http;                       /* Specific protocol information */
1.17      timbl     501:     
1.94      frystyk   502:     /*
                    503:     ** Initiate a new http structure and bind to request structure
                    504:     ** This is actually state HTTP_BEGIN, but it can't be in the state
                    505:     ** machine as we need the structure first.
                    506:     */
                    507:     if (ops == FD_NONE) {
                    508:        if (PROT_TRACE) fprintf(TDEST, "HTTP........ Looking for `%s\'\n",
                    509:                                HTAnchor_physical(request->anchor));
1.71      frystyk   510:        if ((http = (http_info *) calloc(1, sizeof(http_info))) == NULL)
                    511:            outofmem(__FILE__, "HTLoadHTTP");
                    512:        http->state = HTTP_BEGIN;
1.85      frystyk   513:        http->next = HTTP_ERROR;
1.94      frystyk   514:        net->context = http;
1.98      frystyk   515:     } else if (ops == FD_CLOSE) {                            /* Interrupted */
1.94      frystyk   516:        if(HTRequest_isPostWeb(request)&&!HTRequest_isMainDestination(request))
                    517:            HTTPCleanup(request, HT_IGNORE);
                    518:        else
                    519:            HTTPCleanup(request, HT_INTERRUPTED);
                    520:        return HT_OK;
                    521:     } else
                    522:        http = (http_info *) net->context;              /* Get existing copy */
1.71      frystyk   523:  
                    524:     /* Now jump into the machine. We know the state from the previous run */
                    525:     while (1) {
                    526:        switch (http->state) {
                    527:          case HTTP_BEGIN:
                    528:            /*
                    529:             ** Compose authorization information (this was moved here
                    530:             ** from after the making of the connection so that the connection
                    531:             ** wouldn't have to wait while prompting username and password
                    532:             ** from the user).                         -- AL 13.10.93
                    533:             */
                    534:            HTAA_composeAuth(request);
                    535:            if (PROT_TRACE) {
                    536:                if (request->authorization)
1.78      frystyk   537:                    fprintf(TDEST, "HTTP........ Sending Authorization: %s\n",
1.71      frystyk   538:                            request->authorization);
                    539:                else
1.78      frystyk   540:                    fprintf(TDEST,
1.71      frystyk   541:                            "HTTP........ Not sending authorization (yet)\n");
                    542:            }
                    543:            http->state = HTTP_NEED_CONNECTION;
                    544:            break;
                    545:            
                    546:          case HTTP_NEED_CONNECTION:        /* Now let's set up a connection */
1.94      frystyk   547:            status = HTDoConnect(net, HTAnchor_physical(request->anchor),
1.95      frystyk   548:                                 HTTP_PORT);
1.80      frystyk   549:            if (status == HT_OK) {
1.95      frystyk   550: 
                    551:                /* Check the protocol class */
1.97      frystyk   552:                char *s_class = HTDNS_serverClass(net->dns);
                    553:                if (s_class && strcasecomp(s_class, "http")) {
1.95      frystyk   554:                    HTErrorAdd(request, ERR_FATAL, NO, HTERR_CLASS,
                    555:                               NULL, 0, "HTLoadHTTP");
                    556:                    http->state = HTTP_ERROR;
                    557:                    break;
                    558:                }
                    559:                HTDNS_setServerClass(net->dns, "http");
                    560: 
1.71      frystyk   561:                if (PROT_TRACE)
1.78      frystyk   562:                    fprintf(TDEST, "HTTP........ Connected, socket %d\n",
1.94      frystyk   563:                            net->sockfd);
1.80      frystyk   564: 
1.88      frystyk   565:                /* Set up stream TO network */
                    566:                request->input_stream =
1.94      frystyk   567:                    HTTPRequest_new(request, HTWriter_new(net, YES));
1.88      frystyk   568: 
                    569:                /*
                    570:                ** Set up concurrent read/write if this request isn't the
                    571:                ** source for a PUT or POST. As source we don't start reading
                    572:                ** before all destinations are ready. If destination then
                    573:                ** register the input stream and get ready for read
                    574:                */
                    575:                if (HTRequest_isPostWeb(request)) {
1.94      frystyk   576:                    HTEvent_Register(net->sockfd, request, (SockOps) FD_READ,
                    577:                                     HTLoadHTTP, net->priority);
1.88      frystyk   578:                    HTRequest_linkDestination(request);
                    579:                }
                    580: 
                    581:                /* Set up stream FROM network and corresponding read buffer */
1.94      frystyk   582:                net->isoc = HTInputSocket_new(net->sockfd);
                    583:                net->target = HTImProxy ?
1.80      frystyk   584:                    request->output_stream : HTTPStatus_new(request, http);
1.88      frystyk   585: 
1.71      frystyk   586:                http->state = HTTP_NEED_REQUEST;
1.96      frystyk   587:            } else if (status == HT_WOULD_BLOCK || status == HT_PERSISTENT)
1.94      frystyk   588:                return HT_OK;
1.71      frystyk   589:            else
                    590:                http->state = HTTP_ERROR;              /* Error or interrupt */
                    591:            break;
                    592: 
1.87      frystyk   593:            /* As we can do simultanous read and write this is now one state */
1.80      frystyk   594:          case HTTP_NEED_REQUEST:
1.94      frystyk   595:            if (ops == FD_WRITE || ops == FD_NONE) {
1.88      frystyk   596:                if (HTRequest_isDestination(request)) {
1.94      frystyk   597:                    HTNet *srcnet = request->source->net;
                    598:                    HTEvent_Register(srcnet->sockfd, request->source,
                    599:                                     (SockOps) FD_READ,
                    600:                                     HTLoadHTTP, srcnet->priority);
                    601:                    return HT_OK;
1.80      frystyk   602:                }
1.88      frystyk   603:                status = request->PostCallBack ?
                    604:                    request->PostCallBack(request, request->input_stream) :
                    605:                        (*request->input_stream->isa->flush)(request->input_stream);
1.71      frystyk   606:                if (status == HT_WOULD_BLOCK)
1.94      frystyk   607:                    return HT_OK;
                    608:                else
                    609:                    ops = FD_READ;        /* Trick to ensure that we do READ */
                    610:            } else if (ops == FD_READ) {
1.98      frystyk   611:                status = HTSocketRead(request, net);
1.80      frystyk   612:                if (status == HT_WOULD_BLOCK)
1.94      frystyk   613:                    return HT_OK;
                    614:                else if (status == HT_LOADED)
                    615:                    http->state = http->next;          /* Jump to next state */
1.91      frystyk   616:                else if (status == HT_RELOAD)
                    617:                    http->state = HTTP_EXPIRED;
1.94      frystyk   618:                else
                    619:                    http->state = HTTP_ERROR;
1.90      frystyk   620:            } else {
1.78      frystyk   621:                http->state = HTTP_ERROR;
1.90      frystyk   622:            }
1.71      frystyk   623:            break;
1.80      frystyk   624:            
1.91      frystyk   625:          case HTTP_NOT_MODIFIED:
                    626:            http->state = HTTP_ERROR;
                    627:            break;
                    628: 
                    629:          case HTTP_EXPIRED:
                    630:            /* Dirty hack and fall through */
                    631:            request->redirect = request->anchor->address;
                    632: 
1.80      frystyk   633:          case HTTP_REDIRECTION:
1.88      frystyk   634:            /* Clean up the other connections or just this one */
                    635:            if (HTRequest_isPostWeb(request))
                    636:                HTRequest_killPostWeb(request);
                    637:            else
1.94      frystyk   638:                HTTPCleanup(request, HT_IGNORE);
1.88      frystyk   639: 
                    640:            /* If we found a new URL in the response */
1.71      frystyk   641:            if (request->redirect) {
                    642:                if (status == 301) {
                    643:                    HTErrorAdd(request, ERR_INFO, NO, HTERR_MOVED,
                    644:                               (void *) request->redirect,
                    645:                               (int) strlen(request->redirect), "HTLoadHTTP");
                    646:                } else if (status == 302) {
                    647:                    HTErrorAdd(request, ERR_INFO, NO, HTERR_FOUND,
                    648:                               (void *) request->redirect,
                    649:                               (int) strlen(request->redirect), "HTLoadHTTP");
1.55      frystyk   650:                }
1.88      frystyk   651: 
                    652:                /* If we haven't reached the limit for redirection */
1.94      frystyk   653:                if (HTRequest_retry(request)) {
1.87      frystyk   654:                    HTAnchor *anchor = HTAnchor_findAddress(request->redirect);
1.88      frystyk   655:                    if (HTRequest_isPostWeb(request)) {
                    656:                        HTRequest *dest = HTRequest_mainDestination(request);
                    657:                        char *msg=(char*)malloc(strlen(request->redirect)+100);
1.87      frystyk   658:                        if (!msg) outofmem(__FILE__, "HTLoadHTTP");
1.88      frystyk   659:                        sprintf(msg, "\nLocation of %s has changed to %s for method %s, continue operation?",
                    660:                                HTRequest_isDestination(request) ?
                    661:                                "destination" : "source", request->redirect,
                    662:                                HTMethod_name(request->method));
1.92      frystyk   663:                        if (HTConfirm(request, msg)) {
1.87      frystyk   664:                            free(msg);
1.88      frystyk   665: 
                    666:                            /* The new anchor inherits the Post Web */
1.91      frystyk   667:                            HTAnchor_moveAllLinks((HTAnchor *) request->anchor,
                    668:                                                  anchor);
1.88      frystyk   669:                            if (HTRequest_isSource(request))
                    670:                                HTRequest_delete(request);
1.94      frystyk   671:                            return HTCopyAnchor((HTAnchor *) anchor, dest) ?
                    672:                                HT_OK : HT_ERROR;
1.87      frystyk   673:                        }
                    674:                        free(msg);
1.94      frystyk   675:                        return HT_OK;
1.88      frystyk   676:                    } if (request->PostCallBack) {
1.87      frystyk   677: #if 0
1.94      frystyk   678:                        return HTUploadAnchor((HTAnchor*) anchor, request) ?
                    679:                            HT_OK : HT_ERROR;
1.87      frystyk   680: #endif
                    681:                    } else {
1.94      frystyk   682:                        return HTLoadAnchor((HTAnchor *) anchor, request) ?
                    683:                            HT_OK : HT_ERROR;
1.87      frystyk   684:                    }
1.71      frystyk   685:                } else {
                    686:                    HTErrorAdd(request, ERR_FATAL, NO, HTERR_MAX_REDIRECT,
1.58      frystyk   687:                               NULL, 0, "HTLoadHTTP");
1.88      frystyk   688:                    if (HTRequest_isPostWeb(request)) {
                    689:                        BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   690:                        if (HTRequest_isDestination(request)) {
                    691:                            HTLink *link =
                    692:                                HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    693:                                                  (HTAnchor *) request->anchor);
                    694:                            HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    695:                        }
1.94      frystyk   696:                        HTNet_callback(request, main ? HT_ERROR : HT_IGNORE);
1.88      frystyk   697:                        HTRequest_removeDestination(request);
                    698:                    }
1.94      frystyk   699:                    return HT_OK;
1.58      frystyk   700:                }
1.71      frystyk   701:            } else {
                    702:                HTErrorAdd(request, ERR_FATAL, NO, HTERR_BAD_REPLY,
                    703:                           NULL, 0, "HTLoadHTTP");
1.94      frystyk   704:                return HT_OK;
1.71      frystyk   705:            }
                    706:            break;
1.80      frystyk   707:            
1.71      frystyk   708:          case HTTP_AA:
1.88      frystyk   709:            /* Clean up the other connections or just this one */
                    710:            if (HTRequest_isPostWeb(request))
                    711:                HTRequest_killPostWeb(request);
                    712:            else
1.94      frystyk   713:                HTTPCleanup(request, HT_IGNORE);
1.88      frystyk   714: 
                    715:            /* Ask the user for a UserID and a passwd */
                    716:            if (HTTPAuthentication(request) && HTAA_retryWithAuth(request)) {
1.94      frystyk   717:                int ret;
1.88      frystyk   718:                if (HTRequest_isPostWeb(request)) {
                    719:                    HTRequest *dest = HTRequest_mainDestination(request);
                    720:                    HTAnchor_appendMethods(request->anchor, request->method);
1.94      frystyk   721:                    ret=HTCopyAnchor((HTAnchor*)request->source->anchor, dest);
                    722:                    return ret ? HT_OK : HT_ERROR;
1.85      frystyk   723:                } else if (request->PostCallBack) {
                    724: #if 0
1.94      frystyk   725:                    ret = HTUploadAnchor((HTAnchor*) request->anchor,request);
                    726:                    return ret ? HT_OK : HT_ERROR;
1.85      frystyk   727: #endif
                    728:                } else {
1.94      frystyk   729:                    ret = HTLoadAnchor((HTAnchor *) request->anchor, request);
                    730:                    return ret ? HT_OK : HT_ERROR;
1.85      frystyk   731:                }
1.88      frystyk   732:            } else {                               /* If the guy said no :-( */
1.71      frystyk   733:                HTErrorAdd(request, ERR_FATAL, NO, HTERR_UNAUTHORIZED,
1.94      frystyk   734:                           NULL, 0, "HTLoadHTTP");
1.88      frystyk   735:                if (HTRequest_isPostWeb(request)) {
                    736:                    BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   737:                    if (HTRequest_isDestination(request)) {
                    738:                        HTLink *link =
                    739:                            HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    740:                                              (HTAnchor *) request->anchor);
                    741:                        HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    742:                    }
1.94      frystyk   743:                    HTNet_callback(request, main ? HT_ERROR : HT_IGNORE);
1.88      frystyk   744:                    HTRequest_removeDestination(request);
                    745:                }
1.94      frystyk   746:                return HT_OK;
1.71      frystyk   747:            }
                    748:            break;
1.80      frystyk   749:            
1.71      frystyk   750:          case HTTP_GOT_DATA:
1.88      frystyk   751:            if (HTRequest_isPostWeb(request)) {
                    752:                BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   753:                if (HTRequest_isDestination(request)) {
                    754:                    HTLink *link =
                    755:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    756:                                          (HTAnchor *) request->anchor);
                    757:                    HTAnchor_setLinkResult(link, HT_LINK_OK);
                    758:                }
1.88      frystyk   759:                HTRequest_removeDestination(request);
1.94      frystyk   760:                HTTPCleanup(request, main ? HT_LOADED : HT_IGNORE);
                    761:            } else
                    762:                HTTPCleanup(request, HT_LOADED);
                    763:            return HT_OK;
1.71      frystyk   764:            break;
                    765:            
                    766:          case HTTP_NO_DATA:
1.88      frystyk   767:            if (HTRequest_isPostWeb(request)) {
                    768:                BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   769:                if (HTRequest_isDestination(request)) {
                    770:                    HTLink *link =
                    771:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    772:                                          (HTAnchor *) request->anchor);
                    773:                    HTAnchor_setLinkResult(link, HT_LINK_OK);
                    774:                }
1.88      frystyk   775:                HTRequest_removeDestination(request);
1.94      frystyk   776:                HTTPCleanup(request, main ? HT_NO_DATA : HT_IGNORE);
                    777:            } else
                    778:                HTTPCleanup(request, HT_NO_DATA);
                    779:            return HT_OK;
1.71      frystyk   780:            break;
1.80      frystyk   781:            
1.94      frystyk   782:          case HTTP_RETRY:
1.88      frystyk   783:            if (HTRequest_isPostWeb(request)) {
                    784:                BOOL main = HTRequest_isMainDestination(request);
1.91      frystyk   785:                HTRequest_killPostWeb(request);
                    786:                if (HTRequest_isDestination(request)) {
                    787:                    HTLink *link = 
                    788:                        HTAnchor_findLink((HTAnchor*) request->source->anchor,
                    789:                                          (HTAnchor*) request->anchor);
                    790:                    HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    791:                }
1.88      frystyk   792:                HTRequest_removeDestination(request);
1.94      frystyk   793:                HTTPCleanup(request, main ? HT_RETRY : HT_IGNORE);
1.91      frystyk   794:            } else
1.94      frystyk   795:                HTTPCleanup(request, HT_RETRY);
                    796:            return HT_OK;
1.81      frystyk   797:            break;
                    798: 
1.71      frystyk   799:          case HTTP_ERROR:
1.88      frystyk   800:            /* Clean up the other connections or just this one */
                    801:            if (HTRequest_isPostWeb(request)) {
1.91      frystyk   802:                BOOL main = HTRequest_isMainDestination(request);
1.88      frystyk   803:                HTRequest_killPostWeb(request);
1.91      frystyk   804:                if (HTRequest_isDestination(request)) {
                    805:                    HTLink *link =
                    806:                        HTAnchor_findLink((HTAnchor *) request->source->anchor,
                    807:                                          (HTAnchor *) request->anchor);
                    808:                    HTAnchor_setLinkResult(link, HT_LINK_ERROR);
                    809:                }
                    810:                HTRequest_removeDestination(request);
1.94      frystyk   811:                HTTPCleanup(request, main ? HT_ERROR : HT_IGNORE);
1.88      frystyk   812:            } else
1.94      frystyk   813:                HTTPCleanup(request, HT_ERROR);
                    814:            return HT_OK;
1.71      frystyk   815:            break;
                    816:        }
                    817:     } /* End of while(1) */
                    818: }    
1.88      frystyk   819: 
1.21      luotonen  820: 

Webmaster