Annotation of libwww/Library/src/HTTP.c, revision 1.171

1.74      frystyk     1: /*                                                                      HTTP.c
                      2: **     MULTITHREADED IMPLEMENTATION OF HTTP CLIENT
1.2       timbl       3: **
1.84      frystyk     4: **     (c) COPYRIGHT MIT 1995.
1.74      frystyk     5: **     Please first read the full copyright statement in the file COPYRIGH.
1.171   ! frystyk     6: **     @(#) $Id: HTTP.c,v 1.170 1998/11/24 03:18:44 frystyk Exp $
1.74      frystyk     7: **
                      8: **     This module implments the HTTP protocol as a state machine
1.55      frystyk     9: **
                     10: ** History:
1.59      frystyk    11: **    < May 24 94 ??   Unknown - but obviously written
1.56      frystyk    12: **     May 24 94 HF    Made reentrent and cleaned up a bit. Implemented
                     13: **                     Forward, redirection, error handling and referer field
1.67      duns       14: **      8 Jul 94  FM   Insulate free() from _free structure element.
1.71      frystyk    15: **     Jul 94 HFN      Written on top of HTTP.c, Henrik Frystyk
1.55      frystyk    16: **
1.1       timbl      17: */
                     18: 
1.78      frystyk    19: /* Library include files */
1.161     frystyk    20: #include "wwwsys.h"
1.123     frystyk    21: #include "WWWUtil.h"
                     22: #include "WWWCore.h"
                     23: #include "WWWMIME.h"
                     24: #include "WWWStream.h"
1.125     frystyk    25: #include "WWWTrans.h"
1.94      frystyk    26: #include "HTReqMan.h"
1.109     frystyk    27: #include "HTTPUtil.h"
1.80      frystyk    28: #include "HTTPReq.h"
1.55      frystyk    29: #include "HTTP.h"                                             /* Implements */
                     30: 
                     31: /* Macros and other defines */
1.94      frystyk    32: #ifndef HTTP_PORT
                     33: #define HTTP_PORT 80   /* Allocated to http by Jon Postel/ISI 24-Jan-92 */
                     34: #endif
                     35: 
1.71      frystyk    36: #define PUTC(c)                (*me->target->isa->put_character)(me->target, c)
                     37: #define PUTS(s)                (*me->target->isa->put_string)(me->target, s)
                     38: #define PUTBLOCK(b, l) (*me->target->isa->put_block)(me->target, b, l)
                     39: #define FREE_TARGET    (*me->target->isa->_free)(me->target)
1.74      frystyk    40: #define ABORT_TARGET   (*me->target->isa->abort)(me->target, e)
1.2       timbl      41: 
1.140     frystyk    42: #define HTTP_DUMP
                     43: #ifdef HTTP_DUMP
1.147     frystyk    44: #define HTTP_OUTPUT     "w3chttp.out"
1.162     frystyk    45: PRIVATE FILE * htfp = NULL;
1.140     frystyk    46: #endif
1.139     frystyk    47: 
1.59      frystyk    48: /* Type definitions and global variables etc. local to this module */
1.94      frystyk    49: 
                     50: /* Final states have negative value */
1.59      frystyk    51: typedef enum _HTTPState {
1.167     frystyk    52:     HTTP_KILL_PIPE     = -4,
1.141     frystyk    53:     HTTP_RECOVER_PIPE  = -3,
1.134     frystyk    54:     HTTP_ERROR         = -2,
                     55:     HTTP_OK            = -1,
1.71      frystyk    56:     HTTP_BEGIN         = 0,
1.144     frystyk    57:     HTTP_NEED_STREAM,
1.141     frystyk    58:     HTTP_CONNECTED
1.59      frystyk    59: } HTTPState;
1.55      frystyk    60: 
1.94      frystyk    61: /* This is the context structure for the this module */
1.55      frystyk    62: typedef struct _http_info {
1.81      frystyk    63:     HTTPState          state;            /* Current State of the connection */
                     64:     HTTPState          next;                                  /* Next state */
1.134     frystyk    65:     int                        result;      /* Result to report to the after filter */
1.139     frystyk    66:     BOOL               lock;                           /* Block for writing */
1.141     frystyk    67:     HTNet *            net;
1.157     frystyk    68:     HTRequest *                request;
                     69:     HTTimer *          timer;
1.165     frystyk    70:     BOOL               usedTimer;
1.55      frystyk    71: } http_info;
                     72: 
1.88      frystyk    73: #define MAX_STATUS_LEN         100   /* Max nb of chars to check StatusLine */
1.55      frystyk    74: 
1.71      frystyk    75: struct _HTStream {
1.119     frystyk    76:     const HTStreamClass *      isa;
1.71      frystyk    77:     HTStream *                 target;
1.157     frystyk    78:     HTStream *                 info_target;    /* For 100 codes */
1.71      frystyk    79:     HTRequest *                        request;
                     80:     http_info *                        http;
1.121     frystyk    81:     HTEOLState                 state;
1.71      frystyk    82:     BOOL                       transparent;
1.150     frystyk    83:     BOOL                       cont;
1.81      frystyk    84:     char *                     version;             /* Should we save this? */
1.71      frystyk    85:     int                                status;
1.81      frystyk    86:     char *                     reason;
1.71      frystyk    87:     char                       buffer[MAX_STATUS_LEN+1];
1.80      frystyk    88:     int                                buflen;
1.146     frystyk    89:     int                                startLen;/* buflen when put_block was called */
1.71      frystyk    90: };
1.21      luotonen   91: 
1.123     frystyk    92: struct _HTInputStream {
                     93:     const HTInputStreamClass * isa;
                     94: };
                     95: 
1.169     frystyk    96: /* How long to wait before writing the body in PUT and POST requests */
                     97: #define DEFAULT_FIRST_WRITE_DELAY      2000
                     98: #define DEFAULT_SECOND_WRITE_DELAY     3000
                     99: 
                    100: PRIVATE ms_t HTFirstWriteDelay = DEFAULT_FIRST_WRITE_DELAY;
                    101: PRIVATE ms_t HTSecondWriteDelay = DEFAULT_SECOND_WRITE_DELAY;
                    102: 
1.147     frystyk   103: #ifdef HT_NO_PIPELINING
1.156     frystyk   104: PRIVATE HTTPConnectionMode ConnectionMode = HTTP_11_NO_PIPELINING;
1.147     frystyk   105: #else
1.156     frystyk   106: #ifdef HT_MUX
                    107: PRIVATE HTTPConnectionMode ConnectionMode = HTTP_11_MUX;
                    108: #else
                    109: #ifdef HT_FORCE_10
                    110: PRIVATE HTTPConnectionMode ConnectionMode = HTTP_FORCE_10;
                    111: #else
                    112: PRIVATE HTTPConnectionMode ConnectionMode = HTTP_11_PIPELINING;
                    113: #endif
                    114: #endif
1.147     frystyk   115: #endif
                    116: 
1.71      frystyk   117: /* ------------------------------------------------------------------------- */
                    118: /*                               Help Functions                             */
                    119: /* ------------------------------------------------------------------------- */
1.21      luotonen  120: 
1.94      frystyk   121: /*     HTTPCleanup
                    122: **     -----------
1.55      frystyk   123: **      This function closes the connection and frees memory.
1.94      frystyk   124: **      Returns YES on OK, else NO
1.1       timbl     125: */
1.94      frystyk   126: PRIVATE int HTTPCleanup (HTRequest *req, int status)
1.1       timbl     127: {
1.126     frystyk   128:     HTNet * net = HTRequest_net(req);
                    129:     http_info * http = (http_info *) HTNet_context(net);
                    130:     HTStream * input = HTRequest_inputStream(req);
1.80      frystyk   131: 
1.144     frystyk   132:     if (PROT_TRACE)
                    133:        HTTrace("HTTP Clean.. Called with status %d, net %p\n", status, net);
                    134: 
1.164     frystyk   135:     if (status == HT_INTERRUPTED) {
                    136:        HTAlertCallback * cbf = HTAlert_find(HT_PROG_INTERRUPT);
                    137:        if (cbf) (*cbf)(req, HT_PROG_INTERRUPT,
                    138:            HT_MSG_NULL, NULL, NULL, NULL);
1.166     frystyk   139:     } else if (status == HT_TIMEOUT) {
                    140:        HTAlertCallback * cbf = HTAlert_find(HT_PROG_TIMEOUT);
                    141:        if (cbf) (*cbf)(req, HT_PROG_TIMEOUT,
                    142:            HT_MSG_NULL, NULL, NULL, NULL);
1.164     frystyk   143:     }  
1.166     frystyk   144: 
1.94      frystyk   145:     /* Free stream with data TO network */
1.167     frystyk   146:     if (input) {
1.166     frystyk   147:        if (status==HT_INTERRUPTED || status==HT_RECOVER_PIPE || status==HT_TIMEOUT)
1.126     frystyk   148:            (*input->isa->abort)(input, NULL);
1.94      frystyk   149:        else
1.126     frystyk   150:            (*input->isa->_free)(input);
                    151:        HTRequest_setInputStream(req, NULL);
1.94      frystyk   152:     }
1.88      frystyk   153: 
1.144     frystyk   154:     /*
1.157     frystyk   155:     **  Remove if we have registered an upload function as a callback
                    156:     */
                    157:     if (http->timer) {
                    158:        HTTimer_delete(http->timer);
                    159:        http->timer = NULL;
                    160:     }
                    161: 
                    162:     /*
1.144     frystyk   163:     ** Remove the request object and our own context structure for http.
                    164:     */
                    165:     if (status != HT_RECOVER_PIPE) {
1.153     frystyk   166:         HTNet_delete(net, status);
1.141     frystyk   167:        HT_FREE(http);
                    168:     }
1.94      frystyk   169:     return YES;
1.55      frystyk   170: }
                    171: 
1.71      frystyk   172: /*
1.130     frystyk   173: **     Informational 1xx codes are handled separately
1.136     frystyk   174: **     Returns YES if we should continue, NO if we should stop
1.55      frystyk   175: */
1.130     frystyk   176: PRIVATE BOOL HTTPInformation (HTStream * me)
1.55      frystyk   177: {
1.136     frystyk   178:     http_info * http = me->http;
1.71      frystyk   179:     switch (me->status) {
                    180: 
1.136     frystyk   181:     case 100:
1.161     frystyk   182: #if 0
1.136     frystyk   183:        HTRequest_addError(me->request, ERR_INFO, NO, HTERR_CONTINUE,
                    184:                           me->reason, (int) strlen(me->reason),
                    185:                           "HTTPInformation");
1.161     frystyk   186: #endif
1.136     frystyk   187:        return YES;
                    188:        break;
                    189: 
1.130     frystyk   190:     case 101:
1.136     frystyk   191:        /*
                    192:        **  We consider 101 Switching as a final state and exit this request
                    193:        */
1.130     frystyk   194:        HTRequest_addError(me->request, ERR_INFO, NO, HTERR_SWITCHING,
1.127     frystyk   195:                           me->reason, (int) strlen(me->reason),
1.130     frystyk   196:                           "HTTPInformation");
1.136     frystyk   197:        http->next = HTTP_OK;
                    198:        http->result = HT_UPGRADE;
1.127     frystyk   199:        break;
                    200: 
1.130     frystyk   201:     default:
1.136     frystyk   202:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_REPLY,
                    203:                   (void *) me->buffer, me->buflen, "HTTPNextState");
                    204:        http->next = HTTP_ERROR;
                    205:        http->result = HT_ERROR;
1.127     frystyk   206:        break;
1.130     frystyk   207:     }
1.136     frystyk   208:     return NO;
1.130     frystyk   209: }
                    210: 
1.158     frystyk   211: 
                    212: 
1.130     frystyk   213: /*
                    214: **     This is a big switch handling all HTTP return codes. It puts in any
                    215: **     appropiate error message and decides whether we should expect data
                    216: **     or not.
                    217: */
                    218: PRIVATE void HTTPNextState (HTStream * me)
                    219: {
1.134     frystyk   220:     http_info * http = me->http;
1.158     frystyk   221:     int error_class = me->status / 100;
                    222:     switch (error_class) {
1.127     frystyk   223: 
1.158     frystyk   224:     case 0:                                                         /* 0.9 response */
                    225:     case 2:
1.112     frystyk   226: 
1.158     frystyk   227:        switch (me->status) {
1.112     frystyk   228: 
1.158     frystyk   229:        case 201:                                                         /* Created */
                    230:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_CREATED,
                    231:                               me->reason, (int) strlen(me->reason),
                    232:                               "HTTPNextState");
                    233:            http->next = HTTP_OK;
                    234:            http->result = HT_CREATED;
                    235:            break;
                    236: 
                    237:        case 202:                                                        /* Accepted */
                    238:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_ACCEPTED,
                    239:                               me->reason, (int) strlen(me->reason),
                    240:                               "HTTPNextState");
                    241:            http->next = HTTP_OK;
                    242:            http->result = HT_ACCEPTED;
                    243:            break;
                    244: 
                    245:        case 203:                                   /* Non-authoritative information */
                    246:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_NON_AUTHORITATIVE,
                    247:                               me->reason, (int) strlen(me->reason),
                    248:                               "HTTPNextState");
                    249:            http->next = HTTP_OK;
                    250:            http->result = HT_LOADED;
                    251:            break;
                    252: 
                    253:        case 204:                                                     /* No Response */
                    254:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_NO_CONTENT,
                    255:                               me->reason, (int) strlen(me->reason),
                    256:                               "HTTPNextState");
                    257:            http->next = HTTP_OK;
                    258:            http->result = HT_NO_DATA;
                    259:            break;
                    260: 
                    261:        case 205:                                                   /* Reset Content */
                    262:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_RESET,
                    263:                               me->reason, (int) strlen(me->reason),
                    264:                               "HTTPNextState");
                    265:            http->next = HTTP_OK;
                    266:            http->result = HT_RESET_CONTENT;
                    267:            break;
                    268: 
                    269:        case 206:                                                 /* Partial Content */
                    270:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_PARTIAL,
                    271:                               me->reason, (int) strlen(me->reason),
                    272:                               "HTTPNextState");
                    273:            http->next = HTTP_OK;
                    274:            http->result = HT_PARTIAL_CONTENT;
                    275:            break;
                    276: 
                    277:        case 207:                                               /* Partial Update OK */
                    278:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_PARTIAL_OK,
                    279:                               me->reason, (int) strlen(me->reason),
                    280:                               "HTTPNextState");
                    281:            http->next = HTTP_OK;
                    282:            http->result = HT_PARTIAL_CONTENT;
                    283:            break;
                    284: 
                    285:        default:
                    286:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_OK,
                    287:                               me->reason, (int) strlen(me->reason),
                    288:                               "HTTPNextState");
                    289:            http->next = HTTP_OK;
                    290:            http->result = HT_LOADED;
                    291:            break;
                    292:        }
1.134     frystyk   293:        break;
                    294: 
1.158     frystyk   295:     case 3:
1.134     frystyk   296: 
1.158     frystyk   297:        switch (me->status) {
1.78      frystyk   298: 
1.158     frystyk   299:        case 301:                                                           /* Moved */
                    300:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_MOVED,
                    301:                               me->reason, (int) strlen(me->reason),
                    302:                               "HTTPNextState");
                    303:            http->next = HTTP_ERROR;
                    304:            http->result = HT_PERM_REDIRECT;
                    305:            break;
                    306: 
                    307:        case 302:                                                           /* Found */
                    308:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_FOUND,
                    309:                               me->reason, (int) strlen(me->reason),
                    310:                               "HTTPNextState");
                    311:            http->next = HTTP_ERROR;
                    312:            http->result = HT_FOUND;
                    313:            break;
1.55      frystyk   314:        
1.158     frystyk   315:        case 303:                                                          /* Method */
                    316:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_METHOD,
                    317:                               me->reason, (int) strlen(me->reason),
                    318:                               "HTTPNextState");
                    319:            http->next = HTTP_ERROR;
                    320:            http->result = HT_SEE_OTHER;
                    321:            break;
                    322: 
                    323:        case 304:                                                    /* Not Modified */
                    324:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_NOT_MODIFIED,
                    325:                               me->reason, (int) strlen(me->reason),
                    326:                               "HTTPNextState");
                    327:            http->next = HTTP_OK;
                    328:            http->result = HT_NOT_MODIFIED;
                    329:            break;
1.134     frystyk   330:        
1.158     frystyk   331:        case 305:                                                       /* Use proxy */
                    332:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_USE_PROXY,
                    333:                               me->reason, (int) strlen(me->reason),
                    334:                               "HTTPNextState");
                    335:            http->next = HTTP_ERROR;
                    336:            http->result = HT_USE_PROXY;
                    337:            break;
1.55      frystyk   338:        
1.152     frystyk   339: #if 0
1.158     frystyk   340:        case 306:                                                       /* Use proxy */
                    341:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_PROXY_REDIRECT,
                    342:                               me->reason, (int) strlen(me->reason),
                    343:                               "HTTPNextState");
                    344:            http->next = HTTP_ERROR;
                    345:            http->result = HT_USE_PROXY;
                    346:            break;
1.152     frystyk   347: #endif
                    348: 
1.158     frystyk   349:        case 307:                                                       /* Use proxy */
                    350:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_TEMP_REDIRECT,
                    351:                               me->reason, (int) strlen(me->reason),
                    352:                               "HTTPNextState");
                    353:            http->next = HTTP_ERROR;
                    354:            http->result = HT_TEMP_REDIRECT;
                    355:            break;
                    356: 
                    357:        default:
                    358:            HTRequest_addError(me->request, ERR_INFO, NO, HTERR_MULTIPLE,
                    359:                               me->reason, (int) strlen(me->reason),
                    360:                               "HTTPNextState");
                    361:            http->next = HTTP_OK;
                    362:            http->result = HT_LOADED;
                    363:            break;
                    364:        }       
                    365:        break;
                    366: 
                    367:     case 4:
                    368: 
                    369:        switch (me->status) {
                    370:        case 401:
                    371:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_UNAUTHORIZED,
                    372:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    373:            http->next = HTTP_ERROR;
                    374:            http->result = HT_NO_ACCESS;
                    375:            break;
1.152     frystyk   376:        
1.158     frystyk   377:        case 402:                                                /* Payment required */
                    378:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_PAYMENT_REQUIRED,
                    379:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    380:            http->next = HTTP_ERROR;
                    381:            http->result = -402;
                    382:            break;
1.71      frystyk   383:        
1.158     frystyk   384:        case 403:                                                       /* Forbidden */
                    385:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_FORBIDDEN,
                    386:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    387:            http->next = HTTP_ERROR;
                    388:            http->result = HT_FORBIDDEN;
                    389:            break;
1.55      frystyk   390:        
1.158     frystyk   391:        case 404:                                                       /* Not Found */
                    392:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NOT_FOUND,
                    393:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    394:            http->next = HTTP_ERROR;
                    395:            http->result = -404;
                    396:            break;
1.55      frystyk   397:        
1.158     frystyk   398:        case 405:                                                     /* Not Allowed */
                    399:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NOT_ALLOWED,
                    400:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    401:            http->next = HTTP_ERROR;
                    402:            http->result = -405;
                    403:            break;
                    404: 
                    405:        case 406:                                                 /* None Acceptable */
                    406:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NONE_ACCEPTABLE,
                    407:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    408:            http->next = HTTP_ERROR;
                    409:            http->result = HT_NOT_ACCEPTABLE;
                    410:            break;
                    411: 
                    412:        case 407:                                   /* Proxy Authentication Required */
                    413:            HTRequest_addError(me->request, ERR_FATAL, NO,HTERR_PROXY_UNAUTHORIZED,
                    414:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    415:            http->next = HTTP_ERROR;
                    416:            http->result = HT_NO_PROXY_ACCESS;
                    417:            break;
                    418: 
                    419:        case 408:                                                 /* Request Timeout */
                    420:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_TIMEOUT,
                    421:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    422:            http->next = HTTP_ERROR;
                    423:            http->result = -408;
                    424:            break;
                    425: 
                    426:        case 409:                                                        /* Conflict */
                    427:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_CONFLICT,
                    428:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    429:            http->next = HTTP_ERROR;
                    430:            http->result = HT_CONFLICT;
                    431:            break;
                    432: 
                    433:        case 410:                                                            /* Gone */
                    434:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_GONE,
                    435:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    436:            http->next = HTTP_ERROR;
                    437:            http->result = -410;
                    438:            break;
                    439: 
                    440:        case 411:                                                 /* Length Required */
                    441:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_LENGTH_REQUIRED,
                    442:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    443:            http->next = HTTP_ERROR;
                    444:            http->result = HT_LENGTH_REQUIRED;
                    445:            break;
                    446: 
                    447:        case 412:                                             /* Precondition failed */
                    448:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_PRECON_FAILED,
                    449:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    450:            http->next = HTTP_ERROR;
                    451:            http->result = -412;
                    452:            break;
                    453: 
                    454:        case 413:                                        /* Request entity too large */
                    455:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_TOO_BIG,
                    456:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    457:            http->next = HTTP_ERROR;
                    458:            http->result = -413;
                    459:            break;
                    460: 
                    461:        case 414:                                            /* Request-URI too long */
                    462:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_URI_TOO_BIG,
                    463:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    464:            http->next = HTTP_ERROR;
                    465:            http->result = -414;
                    466:            break;
                    467: 
                    468:        case 415:                                                     /* Unsupported */
                    469:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_UNSUPPORTED,
                    470:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    471:            http->next = HTTP_ERROR;
                    472:            http->result = -415;
                    473:            break;
                    474: 
                    475:        case 416:                                   /* Request Range not satisfiable */
                    476:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_RANGE,
                    477:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    478:            http->next = HTTP_ERROR;
                    479:            http->result = -416;
                    480:            break;
                    481: 
                    482:        case 417:                                              /* Expectation Failed */
                    483:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_EXPECTATION_FAILED,
                    484:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    485:            http->next = HTTP_ERROR;
                    486:            http->result = -417;
                    487:            break;
                    488: 
                    489:        case 418:                                       /* Reauthentication required */
                    490:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_REAUTH,
                    491:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    492:            http->next = HTTP_ERROR;
                    493:            http->result = -418;
                    494:            break;
                    495: 
                    496:        case 419:                                 /* Proxy Reauthentication required */
                    497:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_PROXY_REAUTH,
                    498:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    499:            http->next = HTTP_ERROR;
                    500:            http->result = -419;
                    501:            break;
                    502: 
                    503:        default:
                    504:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_REQUEST,
                    505:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    506:            http->next = HTTP_ERROR;
                    507:            http->result = -400;
                    508:            break;
                    509:        }
1.134     frystyk   510:        break;
                    511: 
1.158     frystyk   512:     case 5:
1.134     frystyk   513: 
1.158     frystyk   514:        switch (me->status) {
                    515:        case 501:
                    516:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NOT_IMPLEMENTED,
                    517:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    518:            http->next = HTTP_ERROR;
                    519:            http->result = -501;
                    520:            break;
                    521: 
                    522:        case 502:
                    523:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_GATE,
                    524:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    525:            http->next = HTTP_ERROR;
                    526:            http->result = -502;
                    527:            break;
                    528: 
                    529:        case 503:
                    530:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_DOWN,
                    531:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    532:            http->next = HTTP_ERROR;
                    533: 
                    534:            /*
                    535:            ** If Retry-After header is found then return HT_RETRY else HT_ERROR.
                    536:            ** The caller may want to reissue the request at a later point in time.
                    537:            */
                    538:            {
                    539:                HTResponse * response = HTRequest_response(me->request);
                    540:                if (HTResponse_retryTime(response))
                    541:                    http->result = HT_RETRY;
                    542:                else
                    543:                    http->result = -500;
                    544:            }
                    545:            break;
                    546: 
                    547:        case 504:
                    548:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_GATE_TIMEOUT,
                    549:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    550:            http->next = HTTP_ERROR;
                    551:            http->result = -504;
                    552:            break;
                    553: 
                    554:        case 505:                                    /* Unsupported protocol version */
                    555:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_VERSION,
                    556:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    557:            http->next = HTTP_ERROR;
                    558:            http->result = HT_BAD_VERSION;
                    559:            break;
                    560: 
                    561:        case 506:                                  /* Partial update Not Implemented */
                    562:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_NO_PARTIAL_UPDATE,
                    563:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    564:            http->next = HTTP_ERROR;
                    565:            http->result = HT_BAD_VERSION;
                    566:            break;
                    567: 
                    568:        default:                                                       /* bad number */
                    569:            HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_INTERNAL,
                    570:                               me->reason, (int) strlen(me->reason), "HTTPNextState");
                    571:            http->next = HTTP_ERROR;
                    572:            http->result = -500;
                    573:            break;
1.140     frystyk   574:        }
1.78      frystyk   575:        break;
                    576: 
1.158     frystyk   577:     default:
1.104     frystyk   578:        HTRequest_addError(me->request, ERR_FATAL, NO, HTERR_BAD_REPLY,
1.158     frystyk   579:                           (void *) me->buffer, me->buflen, "HTTPNextState");
1.134     frystyk   580:        http->next = HTTP_ERROR;
1.155     frystyk   581:        http->result = -(me->status);
1.71      frystyk   582:        break;
1.55      frystyk   583:     }
                    584: }
                    585: 
1.71      frystyk   586: /* ------------------------------------------------------------------------- */
                    587: /*                         HTTP Status Line Stream                          */
                    588: /* ------------------------------------------------------------------------- */
1.55      frystyk   589: 
1.71      frystyk   590: /*
1.141     frystyk   591: **     Analyze the stream we have read. If it is a HTTP 1.0 or higher
1.71      frystyk   592: **     then create a MIME-stream, else create a Guess stream to find out
                    593: **     what the 0.9 server is sending. We need to copy the buffer as we don't
                    594: **     know if we can modify the contents or not.
1.78      frystyk   595: **
                    596: **     Stream handling is a function of the status code returned from the 
                    597: **     server:
                    598: **             200:     Use `output_stream' in HTRequest structure
1.94      frystyk   599: **             else:    Use `debug_stream' in HTRequest structure
1.80      frystyk   600: **
                    601: **     Return: YES if buffer should be written out. NO otherwise
1.56      frystyk   602: */
1.157     frystyk   603: PRIVATE int stream_pipe (HTStream * me, int length)
1.56      frystyk   604: {
1.136     frystyk   605:     HTRequest * request = me->request;
                    606:     HTNet * net = HTRequest_net(request);
1.123     frystyk   607:     HTHost * host = HTNet_host(net);
1.141     frystyk   608: 
1.153     frystyk   609: #if 0
                    610:     {
                    611:        char * uri = HTAnchor_address((HTAnchor *) HTRequest_anchor(request));
                    612:        fprintf(stderr, "HTTP header: %s for '%s'\n", me->buffer, uri);
                    613:        HT_FREE(uri);
                    614:     }
                    615: #endif
                    616:     
1.132     frystyk   617:     /*
                    618:     ** Just check for HTTP and not HTTP/ as NCSA server chokes on 1.1 replies
                    619:     ** Thanks to Markku Savela <msa@msa.tte.vtt.fi>
1.141     frystyk   620: 
1.132     frystyk   621:     */
                    622:     if (strncasecomp(me->buffer, "http", 4)) {
1.80      frystyk   623:        int status;
1.136     frystyk   624:        HTRequest_addError(request, ERR_INFO, NO, HTERR_HTTP09,
1.80      frystyk   625:                   (void *) me->buffer, me->buflen, "HTTPStatusStream");
1.136     frystyk   626:        me->target = HTStreamStack(WWW_UNKNOWN,
                    627:                                   HTRequest_outputFormat(request),
                    628:                                   HTRequest_outputStream(request),
                    629:                                   request, NO);
1.134     frystyk   630:        me->http->next = HTTP_OK;
1.80      frystyk   631:        if ((status = PUTBLOCK(me->buffer, me->buflen)) == HT_OK)
                    632:            me->transparent = YES;
1.123     frystyk   633:        HTHost_setVersion(host, HTTP_09);
1.157     frystyk   634:        if (length > 0) HTHost_setConsumed(host, length);
1.171   ! frystyk   635:        if (PROT_TRACE)
        !           636:            HTTrace("HTTP Status. `%s\' is probably a broken 1.0 server that doesn't understand HEAD\n",
        !           637:                    HTHost_name(host));
        !           638:        return HT_ERROR;
1.80      frystyk   639:     } else {
1.140     frystyk   640:        HTResponse * response = HTRequest_response(request);
1.155     frystyk   641:        char * ptr = me->buffer+5;                     /* Skip the HTTP part */
                    642:        char * vptr = NULL;
                    643:        int major = 0;
                    644:        int minor = 0;
                    645:        me->version = vptr = HTNextField(&ptr);
                    646:        if (vptr) {
                    647:            major = (int) strtol(me->version, &vptr, 10);
                    648:            if (vptr++) minor = strtol(vptr, NULL, 10);
                    649:        }
1.95      frystyk   650: 
1.130     frystyk   651:        /* Here we want to find out when to use persistent connection */
1.171   ! frystyk   652:        if (major > 1 && major < 100) {
1.155     frystyk   653:            if (PROT_TRACE)HTTrace("HTTP Status. Major version number is %d\n", major);
                    654:            me->target = HTErrorStream();
1.158     frystyk   655:            me->status = 9999;
1.155     frystyk   656:            HTTPNextState(me);                                     /* Get next state */
1.158     frystyk   657:            return HT_ERROR;
1.155     frystyk   658:        } else if (minor <= 0) {
1.171   ! frystyk   659:            if (major > 100) {
        !           660:                if (PROT_TRACE) HTTrace("HTTP Status. This is a *BROKEN* HTTP/1.0 server\n");
        !           661:                me->status = 200;
        !           662:            } else {
        !           663:                if (PROT_TRACE)HTTrace("HTTP Status. This is an HTTP/1.0 server\n");
        !           664:                me->status = atoi(HTNextField(&ptr));
        !           665:            }
1.128     frystyk   666:            HTHost_setVersion(host, HTTP_10);
1.155     frystyk   667:        } else {                                        /* 1.x, x>0 family */
                    668:            HTHost_setVersion(host, HTTP_11);           /* Best we can do */
1.156     frystyk   669:            if (ConnectionMode & HTTP_11_NO_PIPELINING) {
                    670:                if (PROT_TRACE)
                    671:                    HTTrace("HTTP........ Mode is HTTP/1.1 with NO PIPELINING\n");
1.147     frystyk   672:                HTNet_setPersistent(net, YES, HT_TP_SINGLE);
1.156     frystyk   673:            } else if (ConnectionMode & HTTP_11_MUX) {
                    674:                if (PROT_TRACE)
                    675:                    HTTrace("HTTP........ Mode is HTTP/1.1 with MUXING\n");
                    676:                HTNet_setPersistent(net, YES, HT_TP_INTERLEAVE);
1.147     frystyk   677:            } else if (ConnectionMode & HTTP_FORCE_10) {
                    678:                if (PROT_TRACE) HTTrace("HTTP........ Mode is FORCE HTTP/1.0\n");
                    679:                HTHost_setVersion(host, HTTP_10);
                    680:                HTNet_setPersistent(net, NO, HT_TP_SINGLE);
                    681:            } else
                    682:                HTNet_setPersistent(net, YES, HT_TP_PIPELINE);
1.171   ! frystyk   683:            me->status = atoi(HTNextField(&ptr));
1.128     frystyk   684:        }
1.95      frystyk   685: 
1.81      frystyk   686:        me->reason = ptr;
                    687:        if ((ptr = strchr(me->reason, '\r')) != NULL)     /* Strip \r and \n */
                    688:            *ptr = '\0';
                    689:        else if ((ptr = strchr(me->reason, '\n')) != NULL)
                    690:            *ptr = '\0';
                    691: 
1.130     frystyk   692:        /* 
                    693:        **  If it is a 1xx code then find out what to do and return until we
                    694:        **  get the next code. In the case of Upgrade we may not get back here
                    695:        **  at all. If we are uploading an entity then continue doing that
                    696:        */
                    697:        if (me->status/100 == 1) {
1.136     frystyk   698:            if (HTTPInformation(me) == YES) {
                    699:                me->buflen = 0;
                    700:                me->state = EOL_BEGIN;
1.157     frystyk   701:                if (me->info_target) (*me->info_target->isa->_free)(me->info_target);
                    702:                me->info_target = HTStreamStack(WWW_MIME_CONT,
                    703:                                                HTRequest_debugFormat(request),
                    704:                                                HTRequest_debugStream(request),
                    705:                                                request, NO);
                    706:                if (length > 0) HTHost_setConsumed(host, length);
                    707:                return HT_OK;
1.103     frystyk   708:            }
1.56      frystyk   709:        }
1.133     frystyk   710: 
                    711:        /*
                    712:        **  As we are getting fresh metainformation in the HTTP response,
                    713:        **  we clear the old metainfomation in order not to mix it with the new
                    714:        **  one. This is particularly important for the content-length and the
1.139     frystyk   715:        **  like. The TRACE and OPTIONS method just adds to the current 
                    716:        **  metainformation so in that case we don't clear the anchor.
1.133     frystyk   717:        */
1.136     frystyk   718:        if (me->status==200 || me->status==203 || me->status==300) {
1.140     frystyk   719:            /*
                    720:            **  200, 203 and 300 are all fully cacheable responses. No byte 
                    721:            **  ranges or anything else make life hard in this case.
                    722:            */
1.148     frystyk   723:            HTAnchor_clearHeader(HTRequest_anchor(request));
1.166     frystyk   724:            HTResponse_setCachable(response, HT_CACHE_ALL);
1.136     frystyk   725:            me->target = HTStreamStack(WWW_MIME,
                    726:                                       HTRequest_outputFormat(request),
                    727:                                       HTRequest_outputStream(request),
                    728:                                       request, NO);
1.140     frystyk   729:        } else if (me->status==206) {
                    730:            /*
                    731:            **  We got a partial response and now we must check whether
                    732:            **  we issued a cache If-Range request or it was a new 
                    733:            **  partial response which we don't have in cache. In the latter
                    734:            **  case, we don't cache the object and in the former we append
                    735:            **  the result to the already existing cache entry.
                    736:            */
                    737:            HTReload reload = HTRequest_reloadMode(request);
                    738:            if (reload == HT_CACHE_RANGE_VALIDATE) {
1.166     frystyk   739:                HTResponse_setCachable(response, HT_CACHE_ALL);
1.140     frystyk   740:                me->target = HTStreamStack(WWW_MIME_PART,
                    741:                                           HTRequest_outputFormat(request),
                    742:                                           HTRequest_outputStream(request),
                    743:                                           request, NO);
                    744:            } else {
1.149     frystyk   745:                HTAnchor_clearHeader(HTRequest_anchor(request));
1.140     frystyk   746:                me->target = HTStreamStack(WWW_MIME,
                    747:                                           HTRequest_outputFormat(request),
                    748:                                           HTRequest_outputStream(request),
                    749:                                           request, NO);
                    750:            }
1.139     frystyk   751:        } else if (me->status==204 || me->status==304) {
1.166     frystyk   752:            HTResponse_setCachable(response, HT_CACHE_ALL);
1.136     frystyk   753:            me->target = HTStreamStack(WWW_MIME_HEAD,
                    754:                                       HTRequest_debugFormat(request),
                    755:                                       HTRequest_debugStream(request),
                    756:                                       request, NO);
                    757:        } else if (HTRequest_debugStream(request)) {
1.166     frystyk   758:            if (me->status == 201) HTResponse_setCachable(response, HT_CACHE_ETAG);
1.136     frystyk   759:            me->target = HTStreamStack(WWW_MIME,
                    760:                                       HTRequest_debugFormat(request),
                    761:                                       HTRequest_debugStream(request),
                    762:                                       request, NO);
                    763:        } else {
1.140     frystyk   764:            /*
                    765:            **  We still need to parse the MIME part in order to find any
                    766:            **  valuable meta information which is needed from the response.
                    767:            */
1.166     frystyk   768:            if (me->status == 201) HTResponse_setCachable(response, HT_CACHE_ETAG);
1.136     frystyk   769:            me->target = HTStreamStack(WWW_MIME,
                    770:                                       HTRequest_debugFormat(request),
                    771:                                       HTRequest_debugStream(request),
                    772:                                       request, NO);
1.133     frystyk   773:        }
1.56      frystyk   774:     }
1.113     frystyk   775:     if (!me->target) me->target = HTErrorStream();
1.81      frystyk   776:     HTTPNextState(me);                                    /* Get next state */
1.80      frystyk   777:     me->transparent = YES;
1.157     frystyk   778:     if (length > 0) HTHost_setConsumed(HTNet_host(HTRequest_net(me->request)), length);
1.80      frystyk   779:     return HT_OK;
1.71      frystyk   780: }
1.56      frystyk   781: 
1.80      frystyk   782: /*
                    783: **     Searches for HTTP header line until buffer fills up or a CRLF or LF
                    784: **     is found
                    785: */
1.119     frystyk   786: PRIVATE int HTTPStatus_put_block (HTStream * me, const char * b, int l)
1.71      frystyk   787: {
1.150     frystyk   788:     int status = HT_OK;
1.153     frystyk   789:     int length = l;
1.146     frystyk   790:     me->startLen = me->buflen;
1.80      frystyk   791:     while (!me->transparent && l-- > 0) {
1.157     frystyk   792:        if (me->info_target) {
                    793: 
                    794:            /* Put data down the 1xx return code parser until we are done. */
                    795:            status = (*me->info_target->isa->put_block)(me->info_target, b, l+1);
                    796:            if (status != HT_CONTINUE) return status;
                    797: 
                    798:            /* Now free the info stream */
                    799:            (*me->info_target->isa->_free)(me->info_target);
                    800:            me->info_target = NULL;             
                    801: 
                    802:            /* Update where we are in the stream */
                    803:            l = HTHost_remainingRead(HTNet_host(HTRequest_net(me->request)));
1.163     frystyk   804:            b += (length-l);        
1.159     frystyk   805:            length = l;
1.163     frystyk   806:            if (l <= 0) break;
1.157     frystyk   807: 
1.80      frystyk   808:        } else {
                    809:            *(me->buffer+me->buflen++) = *b;
                    810:            if (me->state == EOL_FCR) {
                    811:                if (*b == LF) { /* Line found */
1.157     frystyk   812:                    if ((status = stream_pipe(me, length-l)) != HT_OK) return status;
1.80      frystyk   813:                } else {
                    814:                    me->state = EOL_BEGIN;
                    815:                }
                    816:            } else if (*b == CR) {
                    817:                me->state = EOL_FCR;
                    818:            } else if (*b == LF) {
1.157     frystyk   819:                if ((status = stream_pipe(me, length-l)) != HT_OK) return status;
1.71      frystyk   820:            } else {
1.80      frystyk   821:                if (me->buflen >= MAX_STATUS_LEN) {
1.157     frystyk   822:                    if ((status = stream_pipe(me, length-l)) != HT_OK) return status;
1.80      frystyk   823:                }
1.71      frystyk   824:            }
1.80      frystyk   825:            b++;
1.71      frystyk   826:        }
1.56      frystyk   827:     }
1.153     frystyk   828: 
1.159     frystyk   829:     if (!me->transparent && length != l)
                    830:        HTHost_setConsumed(HTNet_host(HTRequest_net(me->request)), length-l);
                    831: 
1.99      frystyk   832:     if (l > 0) return PUTBLOCK(b, l);
1.150     frystyk   833:     return status;
1.56      frystyk   834: }
                    835: 
1.119     frystyk   836: PRIVATE int HTTPStatus_put_string (HTStream * me, const char * s)
1.71      frystyk   837: {
1.80      frystyk   838:     return HTTPStatus_put_block(me, s, (int) strlen(s));
1.71      frystyk   839: }
1.56      frystyk   840: 
1.100     frystyk   841: PRIVATE int HTTPStatus_put_character (HTStream * me, char c)
1.71      frystyk   842: {
1.80      frystyk   843:     return HTTPStatus_put_block(me, &c, 1);
                    844: }
                    845: 
1.100     frystyk   846: PRIVATE int HTTPStatus_flush (HTStream * me)
1.80      frystyk   847: {
                    848:     return (*me->target->isa->flush)(me->target);
1.71      frystyk   849: }
                    850: 
1.100     frystyk   851: PRIVATE int HTTPStatus_free (HTStream * me)
1.71      frystyk   852: {
1.87      frystyk   853:     int status = HT_OK;
                    854:     if (me->target) {
                    855:        if ((status = (*me->target->isa->_free)(me->target))==HT_WOULD_BLOCK)
                    856:            return HT_WOULD_BLOCK;
                    857:     }
1.115     frystyk   858:     HT_FREE(me);
1.100     frystyk   859:     return status;
1.71      frystyk   860: }
                    861: 
1.104     frystyk   862: PRIVATE int HTTPStatus_abort (HTStream * me, HTList * e)
1.71      frystyk   863: {
                    864:     if (me->target)
1.74      frystyk   865:        ABORT_TARGET;
1.115     frystyk   866:     HT_FREE(me);
1.74      frystyk   867:     if (PROT_TRACE)
1.116     eric      868:        HTTrace("HTTPStatus.. ABORTING...\n");
1.80      frystyk   869:     return HT_ERROR;
1.71      frystyk   870: }
                    871: 
                    872: /*     HTTPStatus Stream
                    873: **     -----------------
                    874: */
1.119     frystyk   875: PRIVATE const HTStreamClass HTTPStatusClass =
1.71      frystyk   876: {              
                    877:     "HTTPStatus",
1.80      frystyk   878:     HTTPStatus_flush,
1.71      frystyk   879:     HTTPStatus_free,
                    880:     HTTPStatus_abort,
                    881:     HTTPStatus_put_character,
                    882:     HTTPStatus_put_string,
                    883:     HTTPStatus_put_block
                    884: };
                    885: 
1.113     frystyk   886: PUBLIC HTStream * HTTPStatus_new (HTRequest *  request,
                    887:                                  void *        param,
                    888:                                  HTFormat      input_format,
                    889:                                  HTFormat      output_format,
                    890:                                  HTStream *    output_stream)
1.71      frystyk   891: {
1.115     frystyk   892:     HTStream * me;
                    893:     if ((me = (HTStream  *) HT_CALLOC(1, sizeof(HTStream))) == NULL)
                    894:         HT_OUTOFMEM("HTTPStatus_new");
1.71      frystyk   895:     me->isa = &HTTPStatusClass;
1.113     frystyk   896:     if (request) {
1.126     frystyk   897:        HTNet * net = HTRequest_net(request);
1.125     frystyk   898:         /* Get existing copy */
                    899:        http_info * http = (http_info *) HTNet_context(net);
1.113     frystyk   900:        me->request = request;
                    901:        me->http = http;
                    902:        http->next = HTTP_ERROR;
                    903:        me->state = EOL_BEGIN;
                    904:        return me;
                    905:     } else
                    906:        return HTErrorStream();
1.71      frystyk   907: }
                    908: 
                    909: /* ------------------------------------------------------------------------- */
                    910: 
                    911: /*             Load Document from HTTP Server                       HTLoadHTTP
1.55      frystyk   912: **             ==============================
                    913: **
                    914: **     Given a hypertext address, this routine loads a document.
                    915: **
                    916: ** On entry,
                    917: **      request                This is the request structure
1.94      frystyk   918: **     returns         HT_ERROR        Error has occured in call back
                    919: **                     HT_OK           Call back was OK
1.55      frystyk   920: */
1.141     frystyk   921: PRIVATE int HTTPEvent (SOCKET soc, void * pVoid, HTEventType type);
                    922: 
                    923: PUBLIC int HTLoadHTTP (SOCKET soc, HTRequest * request)
1.55      frystyk   924: {
                    925:     http_info *http;                       /* Specific protocol information */
1.112     frystyk   926:     HTParentAnchor *anchor = HTRequest_anchor(request);
1.141     frystyk   927:     HTNet * net = HTRequest_net(request);
1.112     frystyk   928: 
1.94      frystyk   929:     /*
                    930:     ** Initiate a new http structure and bind to request structure
                    931:     ** This is actually state HTTP_BEGIN, but it can't be in the state
                    932:     ** machine as we need the structure first.
                    933:     */
1.141     frystyk   934:     if (PROT_TRACE) HTTrace("HTTP........ Looking for `%s\'\n",
                    935:                            HTAnchor_physical(anchor));
                    936:     if ((http = (http_info *) HT_CALLOC(1, sizeof(http_info))) == NULL)
                    937:       HT_OUTOFMEM("HTLoadHTTP");
                    938:     http->net = net;
1.157     frystyk   939:     http->request = request;
1.141     frystyk   940:     HTNet_setContext(net, http);
                    941:     HTNet_setEventCallback(net, HTTPEvent);
                    942:     HTNet_setEventParam(net, http);  /* callbacks get http* */
                    943: 
1.157     frystyk   944:     return HTTPEvent(soc, http, HTEvent_BEGIN);            /* get it started - ops is ignored */
                    945: }
                    946: 
                    947: PRIVATE int FlushPutEvent (HTTimer * timer, void * param, HTEventType type)
                    948: {
                    949:     http_info * http = (http_info *) param;
                    950:     HTStream * input = HTRequest_inputStream(http->request);
                    951:     HTPostCallback * pcbf = HTRequest_postCallback(http->request);
                    952: 
1.165     frystyk   953:     http->usedTimer = YES;
1.160     frystyk   954:     if (timer != http->timer)
                    955:        HTDebugBreak(__FILE__, __LINE__, "HTTP timer %p not in sync\n", timer);
1.157     frystyk   956:     if (PROT_TRACE) HTTrace("Uploading... Flushing %p with timer %p\n", http, timer);
                    957: 
                    958:     /*
                    959:     **  We ignore the return code here which we shouldn't!!!
                    960:     */
                    961:     if (http && input && pcbf) (*pcbf)(http->request, input);
                    962: 
                    963:     /*
1.165     frystyk   964:     **  Delete the timer but remember that we have used it
1.157     frystyk   965:     */
                    966:     http->timer = NULL;
1.165     frystyk   967: 
1.157     frystyk   968:     return HT_OK;
1.141     frystyk   969: }
                    970: 
                    971: PRIVATE int HTTPEvent (SOCKET soc, void * pVoid, HTEventType type)
                    972: {
                    973:     http_info * http = (http_info *)pVoid;
                    974:     int status = HT_ERROR;
                    975:     HTNet * net = http->net;
                    976:     HTRequest * request = HTNet_request(net);
1.144     frystyk   977:     HTParentAnchor * anchor = HTRequest_anchor(request);
                    978:     HTHost * host = HTNet_host(net);
1.141     frystyk   979: 
                    980:     /*
1.166     frystyk   981:     **  Check whether we have been interrupted or timed out
1.141     frystyk   982:     */
                    983:     if (type == HTEvent_BEGIN) {
1.134     frystyk   984:        http->next = HTTP_OK;
                    985:        http->result = HT_ERROR;
1.141     frystyk   986:     } else if (type == HTEvent_CLOSE) {
1.112     frystyk   987:        HTRequest_addError(request, ERR_FATAL, NO, HTERR_INTERRUPTED,
                    988:                           NULL, 0, "HTLoadHTTP");
                    989:        HTTPCleanup(request, HT_INTERRUPTED);
1.166     frystyk   990:        return HT_OK;
                    991:     } else if (type == HTEvent_TIMEOUT) {
                    992:        HTRequest_addError(request, ERR_FATAL, NO, HTERR_TIME_OUT,
                    993:                           NULL, 0, "HTLoadHTTP");
                    994:        HTTPCleanup(request, HT_TIMEOUT);
1.94      frystyk   995:        return HT_OK;
1.141     frystyk   996:     } else if (type == HTEvent_END) {
                    997:        HTTPCleanup(request, http->result);
                    998:        return HT_OK;
                    999:     } else if (type == HTEvent_RESET) {
                   1000:        HTTPCleanup(request, HT_RECOVER_PIPE);
1.145     frystyk  1001:        http->state = HTTP_BEGIN;
1.141     frystyk  1002:        return HT_OK;
                   1003:     }
                   1004: 
1.71      frystyk  1005:     /* Now jump into the machine. We know the state from the previous run */
                   1006:     while (1) {
                   1007:        switch (http->state) {
1.134     frystyk  1008:        case HTTP_BEGIN:
1.144     frystyk  1009:            status = HTHost_connect(host, net, HTAnchor_physical(anchor), HTTP_PORT);
                   1010:            host = HTNet_host(net);
1.153     frystyk  1011:             if (status == HT_OK) {
1.140     frystyk  1012: 
1.123     frystyk  1013:                /*
1.140     frystyk  1014:                **  Check the protocol class to see if we have connected to a
                   1015:                **  the right class of server, in this case HTTP. If we don't 
                   1016:                **  know the server then assume a HTTP/1.0
1.123     frystyk  1017:                */
                   1018:                {
                   1019:                    char * s_class = HTHost_class(host);
1.140     frystyk  1020:                    if (!s_class) {
                   1021:                        if (HTRequest_proxy(request) == NULL)
                   1022:                            HTRequest_addConnection(request, "Keep-Alive", "");
                   1023:                        HTHost_setClass(host, "http");
                   1024:                    } else if (strcasecomp(s_class, "http")) {
1.123     frystyk  1025:                        HTRequest_addError(request, ERR_FATAL, NO, HTERR_CLASS,
                   1026:                                           NULL, 0, "HTLoadHTTP");
                   1027:                        http->state = HTTP_ERROR;
                   1028:                        break;
                   1029:                    }
1.95      frystyk  1030:                }
1.147     frystyk  1031: 
1.156     frystyk  1032:                if (ConnectionMode & HTTP_11_NO_PIPELINING) {
1.147     frystyk  1033:                    if (PROT_TRACE) HTTrace("HTTP........ Mode is HTTP/1.1 WITH NO PIPELINING\n");
                   1034:                    HTRequest_setFlush(request, YES);
                   1035:                } else if (ConnectionMode & HTTP_FORCE_10) {
                   1036:                    if (PROT_TRACE) HTTrace("HTTP........ Mode is FORCE HTTP/1.0\n");
                   1037:                    HTHost_setVersion(host, HTTP_10);
                   1038:                }
                   1039: 
1.151     frystyk  1040:                if (HTNet_preemptive(net)) {
                   1041:                    if (PROT_TRACE) HTTrace("HTTP........ Force flush on preemptive load\n");
                   1042:                    HTRequest_setFlush(request, YES);
                   1043:                }
                   1044: 
1.147     frystyk  1045:                /* Jump to next state */
1.144     frystyk  1046:                http->state = HTTP_NEED_STREAM;
1.159     frystyk  1047:            } else if (status == HT_WOULD_BLOCK || status == HT_PENDING) {
1.144     frystyk  1048:                return HT_OK;
1.171   ! frystyk  1049:            } else if (status == HT_NO_HOST) {
        !          1050:                http->result = HT_NO_HOST;
        !          1051:                http->state = HTTP_ERROR;
1.159     frystyk  1052:            } else      
1.144     frystyk  1053:                http->state = HTTP_ERROR;              /* Error or interrupt */
                   1054:            break;
                   1055:            
                   1056:        case HTTP_NEED_STREAM:
1.138     frystyk  1057: 
1.144     frystyk  1058:            /* 
                   1059:            ** Create the stream pipe FROM the channel to the application.
                   1060:            ** The target for the input stream pipe is set up using the
                   1061:            ** stream stack.
                   1062:            */
1.167     frystyk  1063:            {
                   1064:             /*
                   1065:             **  during a recovery, we might keep the same HTNet object.
                   1066:             **  if so, reuse it's read stream 
                   1067:             */
                   1068:             HTStream * me = HTNet_readStream( net );
                   1069:             if ( me == NULL ) {
                   1070:                 me=HTStreamStack(WWW_HTTP,
                   1071:                                                 HTRequest_outputFormat(request),
                   1072:                                                 HTRequest_outputStream(request),
                   1073:                                                 request, YES);
                   1074:                                HTNet_setReadStream(net, me);
                   1075:             }
                   1076:             HTRequest_setOutputConnected(request, YES);
1.144     frystyk  1077:            }
1.127     frystyk  1078: 
1.144     frystyk  1079:            /*
                   1080:            ** Create the stream pipe TO the channel from the application
                   1081:            ** and hook it up to the request object
                   1082:            */
                   1083:            {
                   1084:                HTChannel * channel = HTHost_channel(host);
                   1085:                HTOutputStream * output = HTChannel_getChannelOStream(channel);
                   1086:                int version = HTHost_version(host);
                   1087:                HTStream * app = NULL;
                   1088:                
1.139     frystyk  1089: #ifdef HTTP_DUMP
1.144     frystyk  1090:                if (PROT_TRACE) {
1.162     frystyk  1091:                    if (!htfp) htfp = fopen(HTTP_OUTPUT, "ab");
                   1092:                    if (htfp) {
1.144     frystyk  1093:                        output = (HTOutputStream *)
1.162     frystyk  1094:                            HTTee((HTStream *) output, HTFWriter_new(request, htfp, YES), NULL);
1.147     frystyk  1095:                        HTTrace("HTTP........ Dumping request to `%s\'\n", HTTP_OUTPUT);
1.144     frystyk  1096:                    }
                   1097:                }       
1.139     frystyk  1098: #endif /* HTTP_DUMP */
1.144     frystyk  1099:                app = HTMethod_hasEntity(HTRequest_method(request)) ?
                   1100:                    HTMIMERequest_new(request,
                   1101:                                      HTTPRequest_new(request, (HTStream *) output, NO,
                   1102:                                                      version),
                   1103:                                      YES) :
                   1104:                    HTTPRequest_new(request, (HTStream *) output, YES, version);
                   1105:                HTRequest_setInputStream(request, app);
                   1106:            }
1.88      frystyk  1107: 
1.144     frystyk  1108:            /*
                   1109:            ** Set up concurrent read/write if this request isn't the
                   1110:            ** source for a PUT or POST. As source we don't start reading
                   1111:            ** before all destinations are ready. If destination then
                   1112:            ** register the input stream and get ready for read
                   1113:            */
                   1114:            if (HTRequest_isDestination(request)) {
                   1115:                HTHost_register(host, net, HTEvent_READ);
                   1116:                HTRequest_linkDestination(request);
                   1117:            }
                   1118:            http->state = HTTP_CONNECTED;
                   1119:            type = HTEvent_WRITE;                           /* fresh, so try a write */
1.71      frystyk  1120:            break;
                   1121: 
1.87      frystyk  1122:            /* As we can do simultanous read and write this is now one state */
1.141     frystyk  1123:          case HTTP_CONNECTED:
                   1124:              if (type == HTEvent_WRITE) {
1.157     frystyk  1125:                  HTStream * input = HTRequest_inputStream(request);
                   1126:                  HTPostCallback * pcbf = HTRequest_postCallback(request);
                   1127:                  status = HTRequest_flush(request) ?
                   1128:                      HTHost_forceFlush(host) : (*input->isa->flush)(input);
                   1129: 
                   1130:                  /*
                   1131:                  **  Check to see if we are uploading something or just a normal
                   1132:                  **  GET kind of thing.
                   1133:                  */
                   1134:                  if (pcbf) {
                   1135:                      if (http->lock == NO) {
                   1136:                          int retrys = HTRequest_retrys(request);
1.169     frystyk  1137:                          ms_t delay = retrys > 3 ? HTSecondWriteDelay : HTFirstWriteDelay;
1.165     frystyk  1138:                          if (!http->timer && !http->usedTimer) {
1.162     frystyk  1139:                              http->timer = HTTimer_new(NULL, FlushPutEvent,
                   1140:                                                        http, delay, YES, NO);
1.157     frystyk  1141:                              if (PROT_TRACE)
1.165     frystyk  1142:                                  HTTrace("Uploading... Holding %p for %lu ms using time %p\n",
                   1143:                                          http, delay, http->timer);
1.157     frystyk  1144:                              HTHost_register(host, net, HTEvent_READ);
                   1145:                          }
                   1146:                          http->lock = YES;
                   1147:                      }
                   1148:                      type = HTEvent_READ;
                   1149:                  } else {
                   1150: 
                   1151:                      /*
                   1152:                      **  Check to see if we can start a new request
                   1153:                      **  pending in the host object.
                   1154:                      */
                   1155:                      HTHost_launchPending(host);
                   1156:                      type = HTEvent_READ;
                   1157:                  }
                   1158: 
                   1159:                  /* Now check the status code */
                   1160:                  if (status == HT_WOULD_BLOCK)
                   1161:                      return HT_OK;
                   1162:                  else if (status == HT_PAUSE || status == HT_LOADED) {
                   1163:                      type = HTEvent_READ;
1.168     frystyk  1164:                  } else if (status==HT_ERROR)
1.157     frystyk  1165:                      http->state = HTTP_RECOVER_PIPE;
                   1166:              } else if (type == HTEvent_FLUSH) {
                   1167:                  HTStream * input = HTRequest_inputStream(request);
                   1168:                  if (input == NULL)
                   1169:                      return HT_ERROR;
                   1170:                  return (*input->isa->flush)(input);
                   1171:              } else if (type == HTEvent_READ) {
                   1172:                  status = HTHost_read(host, net);
                   1173:                  if (status == HT_WOULD_BLOCK)
                   1174:                      return HT_OK;
                   1175:                  else if (status == HT_CONTINUE) {
                   1176:                      if (PROT_TRACE) HTTrace("HTTP........ Continuing\n");
                   1177:                      http->lock = NO;
                   1178:                      continue;
                   1179:                  } else if (status==HT_LOADED)
                   1180:                      http->state = http->next; /* Jump to next state (OK or ERROR) */
                   1181:                  else if (status==HT_CLOSED)
                   1182:                      http->state = HTTP_RECOVER_PIPE;
1.167     frystyk  1183:                  else if (status == HT_ERROR)
                   1184:                      http->state = HTTP_KILL_PIPE;
1.157     frystyk  1185:                  else
                   1186:                      http->state = HTTP_ERROR;
                   1187:              } else {
                   1188:                  http->state = HTTP_ERROR;     /* don't know how to handle OOB */
                   1189:              }
                   1190:              break;
1.141     frystyk  1191: 
1.134     frystyk  1192:          case HTTP_OK:
                   1193:            HTTPCleanup(request, http->result);
1.94      frystyk  1194:            return HT_OK;
1.71      frystyk  1195:            break;
1.141     frystyk  1196: 
                   1197:           case HTTP_RECOVER_PIPE:
                   1198:          {
                   1199:              /*
                   1200:              ** If this is a persistent connection and we get a close
                   1201:              ** then it is an error and we should recover from it by
                   1202:              ** restarting the pipe line of requests if any
                   1203:              */
1.151     frystyk  1204:              if (HTHost_isPersistent(host) && !HTHost_closeNotification(host)) {
1.143     frystyk  1205:                  if (host == NULL) return HT_ERROR;
1.144     frystyk  1206:                  HTRequest_setFlush(request, YES);
                   1207:                  HTHost_recoverPipe(host);
                   1208:                  return HT_OK;
1.141     frystyk  1209:              } else
                   1210:                  http->state = HTTP_OK;
                   1211:          }
1.143     frystyk  1212:          break;
1.141     frystyk  1213: 
1.167     frystyk  1214:           case HTTP_KILL_PIPE:
                   1215:              if (host == NULL) return HT_ERROR;
                   1216:              HTHost_killPipe(host);
                   1217:              return HT_OK;
                   1218:              break;
                   1219: 
1.71      frystyk  1220:          case HTTP_ERROR:
1.143     frystyk  1221:              HTTPCleanup(request, http->result);
                   1222:              return HT_OK;
                   1223:              break;
                   1224: 
1.141     frystyk  1225:        default:
1.160     frystyk  1226:            HTDebugBreak(__FILE__, __LINE__, "Bad http state %d\n", http->state);
1.71      frystyk  1227:        }
                   1228:     } /* End of while(1) */
                   1229: }    
1.88      frystyk  1230: 
1.147     frystyk  1231: PUBLIC void HTTP_setConnectionMode (HTTPConnectionMode mode)
                   1232: {
                   1233:     ConnectionMode = mode;
                   1234: }
                   1235: 
                   1236: PUBLIC HTTPConnectionMode HTTP_connectionMode (void)
                   1237: {
                   1238:     return ConnectionMode;
                   1239: }
1.21      luotonen 1240: 
1.169     frystyk  1241: PUBLIC BOOL HTTP_setBodyWriteDelay (ms_t first_try, ms_t second_try)
                   1242: {
                   1243:        if (first_try > 20 && second_try >= first_try) {
                   1244:            HTFirstWriteDelay = first_try;
                   1245:                HTSecondWriteDelay = second_try;
                   1246:                return YES;
                   1247:        }
                   1248:        return NO;
                   1249: }
                   1250: 
                   1251: PUBLIC void HTTP_bodyWriteDelay (ms_t * first_try, ms_t * second_try)
                   1252: {
                   1253:        *first_try = HTFirstWriteDelay;
                   1254:        *second_try = HTSecondWriteDelay;
1.170     frystyk  1255: }
                   1256: 

Webmaster