B
üûó\ñ‘ã ! @ s d dl Z d dlZd dlZd dlZd dlZd dlZd dlZd dlZd dl Z d dl
Z
d dl Z d dl Z d dl
Z
d dlZd dlZd dlZd dlmZmZmZ d dlmZmZmZmZmZmZm Z m Z m Z m Z m Z m!Z!m"Z"m#Z#m$Z$m%Z%m&Z&m'Z' d dl(m)Z)m*Z* y d dl+Z+W n e,k
r dZ-Y nX dZ-ddd d
d d d
ddddddddddddddd d d d d d!d"d#d$d%d&d'g!Z.d(e j/dd)… Z0da1de
j2fddddd*œd+d „Z3d,d „ Z4g Z5d}d-d$„Z6d.d%„ Z7e 8d/e j9¡Z:d0d1„ Z;G d2d„ dƒZG d5d „ d ƒZ?G d6d „ d e?ƒZ@G d7d
„ d
e?ƒZAG d8d „ d e?ƒZBd9d:„ ZCG d;d
„ d
e?ƒZDG dd„ deFƒZGG d?d„ dƒZHG d@d„ deHe?ƒZIG dAd„ deHe?ƒZJejKZLG dBd„ dƒZMG dCd„ de?eMƒZNG dDd„ de?eMƒZOG dEdF„ dFe?ƒZPG dGd„ dePƒZQeRejSdHƒr&G dIdJ„ dJePƒZTe. UdJ¡ G dKd „ d e?ƒZVG dLd „ d e?ƒZWdMdN„ ZXdOdP„ ZYG dQd„ de?ƒZZdRdS„ Z[G dTd„ de?ƒZ\G dUd„ de\ƒZ]G dVd„ de?ƒZ^dWZ_ej`dXkrÀd dYlambZbmcZc ndZd"„ Zbd[d!„ Zci ZdG d\d&„ d&ƒZeG d]d'„ d'eeƒZfdagd^d_„ Zhdaid`da„ Zjdakdbdc„ Zldamddde„ ZnG dfdg„ dgƒZodhdi„ Zpd~djdk„Zqdldm„ Zre jsdnkrˆd doltmuZumvZv dpdq„ Zwdrds„ Zxdtdu„ Zydvd#„ Zzn6ej`dXkr¶dwdx„ Z{dyd#„ Zzdzd{„ Z|d|du„ ZynepZzeqZydS )é N)ÚURLErrorÚ HTTPErrorÚContentTooShortError)ÚurlparseÚurlsplitÚurljoinÚunwrapÚquoteÚunquoteÚ splittypeÚ splithostÚ splitportÚ splituserÚ splitpasswdÚ splitattrÚ
splitqueryÚ
splitvalueÚsplittagÚto_bytesÚunquote_to_bytesÚ
urlunparse)Ú
addinfourlÚ addclosehookFTÚRequestÚOpenerDirectorÚ BaseHandlerÚHTTPDefaultErrorHandlerÚHTTPRedirectHandlerÚHTTPCookieProcessorÚ ProxyHandlerÚHTTPPasswordMgrÚ HTTPPasswordMgrWithDefaultRealmÚ HTTPPasswordMgrWithPriorAuthÚAbstractBasicAuthHandlerÚHTTPBasicAuthHandlerÚProxyBasicAuthHandlerÚAbstractDigestAuthHandlerÚHTTPDigestAuthHandlerÚProxyDigestAuthHandlerÚ HTTPHandlerÚ FileHandlerÚ
FTPHandlerÚCacheFTPHandlerÚ DataHandlerÚUnknownHandlerÚHTTPErrorProcessorÚurlopenÚinstall_openerÚ build_openerÚ pathname2urlÚ url2pathnameÚ
getproxiesÚ urlretrieveÚ
urlcleanupÚ URLopenerÚFancyURLopenerz%d.%dé )ÚcafileÚcapathÚ cadefaultÚcontextc
C s¤ |s |s |rfdd l }| dtd¡ |d k r2tdƒ‚ts>tdƒ‚tjtjj||d}t |d}t
|ƒ} n0|r~t |d}t
|ƒ} nt d kr’t
ƒ a } nt } | | ||¡S )Nr zJcafile, capath and cadefault are deprecated, use a custom context instead.r: zDYou can't pass both context and any of cafile, capath, and cadefaultzSSL support not available)r; r< )r> )
ÚwarningsÚwarnÚDeprecationWarningÚ
ValueErrorÚ _have_sslÚsslZcreate_default_contextZPurposeZ SERVER_AUTHÚ HTTPSHandlerr2 Ú_openerÚopen)
ÚurlÚdataÚtimeoutr; r< r= r> r? Z
https_handlerÚopener© rL ú3/opt/alt/python37/lib64/python3.7/urllib/request.pyr0 ‹ s* <
c C s | a d S )N)rF )rK rL rL rM r1 à s c
C s2 t | ƒ\}}t t| |ƒ¡æ}| ¡ }|dkrB|sBtj |¡|fS |rRt|dƒ}n t j
dd}|j }t
|¡ |† ||f} d}
d} d} d}
d|kr t|d ƒ} |r°||
|
| ƒ xB| |
¡}|sÂP | t|ƒ7 } | |¡ |
d
7 }
|r²||
|
| ƒ q²W W d Q R X W d Q R X | dkr.| | k r.td | | f | ƒ‚| S ) NÚfileÚwbF)Údeletei éÿÿÿÿr zcontent-lengthzContent-Lengthé z1retrieval incomplete: got only %i out of %i bytes)r Ú
contextlibÚclosingr0 ÚinfoÚosÚpathÚnormpathrG ÚtempfileZNamedTemporaryFileÚnameÚ_url_tempfilesÚappendÚintÚreadÚlenÚwriter )rH ÚfilenameÚ
reporthookrI Zurl_typerW ÚfpÚheadersÚtfpÚresultÚbsÚsizer^ ÚblocknumÚblockrL rL rM r6 å sD
$c C sH x0t D ](} yt | ¡ W q tk
r, Y qX qW t d d …= trDd ad S )N)r[ rV ÚunlinkÚOSErrorrF )Z temp_filerL rL rM r7 $ s
z:\d+$c C s< | j }t|ƒd }|dkr&| dd¡}t d|d¡}| ¡ S )NrR Ú ÚHost)Úfull_urlr Ú
get_headerÚ _cut_port_reÚsubÚlower)ÚrequestrH ÚhostrL rL rM Ú request_host3 s rv c @ sÊ e Zd Zdi dddfdd„Zedd„ ƒZejdd„ ƒZejdd„ ƒZed d
„ ƒZejd d
„ ƒZejd d
„ ƒZd
d„ Z dd„ Z
dd„ Z dd„ Z dd„ Z
dd„ Zdd„ Zdd „ Zd#d d „Zd d „ Zd!d"„ ZdS )$r NFc C sp || _ i | _i | _d | _|| _d | _x | ¡ D ]\}}| ||¡ q.W |d krVt| ƒ}|| _ || _
|rl|| _ d S )N) ro rd Úunredirected_hdrsÚ_datarI Ú _tunnel_hostÚitemsÚ
add_headerrv Úorigin_req_hostÚ unverifiableÚmethod) ÚselfrH rI rd r| r} r~ ÚkeyÚvaluerL rL rM Ú__init__E s zRequest.__init__c C s | j rd | j| j ¡S | jS )Nz{}#{})ÚfragmentÚformatÚ _full_url)r rL rL rM ro W s zRequest.full_urlc C s( t |ƒ| _t| jƒ\| _| _| ¡ d S )N)r r… r rƒ Ú_parse)r rH rL rL rM ro ] s
c C s d | _ d | _d| _d S )Nrm )r… rƒ Úselector)r rL rL rM ro d s c C s | j S )N)rx )r rL rL rM rI j s z Request.datac C s( || j kr$|| _ | d¡r$| d¡ d S )NzContent-length)rx Ú
has_headerÚ
remove_header)r rI rL rL rM rI n s
c C s
d | _ d S )N)rI )r rL rL rM rI x s c C sN t | jƒ\| _}| jd kr(td| j ƒ‚t|ƒ\| _| _| jrJt| jƒ| _d S )Nzunknown url type: %r) r r… ÚtyperB ro r ru r‡ r
)r ÚrestrL rL rM r† | s
zRequest._parsec C s | j d k rdnd}t| d|ƒS )NÚPOSTÚGETr~ )rI Úgetattr)r Zdefault_methodrL rL rM Ú
get_method„ s zRequest.get_methodc C s | j S )N)ro )r rL rL rM Ú get_full_url‰ s zRequest.get_full_urlc C s2 | j dkr| js| j| _n|| _ | j| _|| _d S )NÚhttps)rŠ ry ru ro r‡ )r ru rŠ rL rL rM Ú set_proxyŒ s
zRequest.set_proxyc C s | j | jkS )N)r‡ ro )r rL rL rM Ú has_proxy” s zRequest.has_proxyc C s || j | ¡ < d S )N)rd Ú
capitalize)r r€ ÚvalrL rL rM r{ — s zRequest.add_headerc C s || j | ¡ < d S )N)rw r” )r r€ r• rL rL rM Úadd_unredirected_header› s z Request.add_unredirected_headerc C s || j kp|| jkS )N)rd rw )r Ú header_namerL rL rM rˆ Ÿ s
zRequest.has_headerc C s | j || j ||¡¡S )N)rd Úgetrw )r r— ÚdefaultrL rL rM rp £ s zRequest.get_headerc C s | j |d ¡ | j |d ¡ d S )N)rd Úpoprw )r r— rL rL rM r‰ ¨ s zRequest.remove_headerc C s" | j ¡ }| | j¡ t| ¡ ƒS )N)rw ÚcopyÚupdaterd Úlistrz )r ÚhdrsrL rL rM Ú header_items¬ s
zRequest.header_items)N)Ú__name__Ú
__module__Ú __qualname__r‚ Úpropertyro ÚsetterÚdeleterrI r† r r r’ r“ r{ r– rˆ rp r‰ rŸ rL rL rL rM r C s(
c @ sN e Zd Zdd„ Zdd„ Zdd„ Zdd„ Zd ejfd
d „Z dd d
„Z
dd„ Z d S )r c C s6 dt }d|fg| _g | _i | _i | _i | _i | _d S )NzPython-urllib/%sz
User-agent)Ú __version__Ú
addheadersÚhandlersÚ handle_openÚ handle_errorÚprocess_responseÚprocess_request)r Zclient_versionrL rL rM r‚ ² s zOpenerDirector.__init__c C sZ t |dƒstdt|ƒ ƒ‚d}xt|ƒD ]}|dkr:q*| d¡}|d |… }||d d … }| d¡rÈ| d¡| d }||d d … }y t|ƒ}W n tk
r¬ Y nX | j |i ¡} | | j|< n>|dkrÜ|}| j
} n*|d krð|}| j } n|d
kr*|}| j } nq*|
|g ¡}
|
r&t |
|¡ n
|
|¡ d }q*W |rVt | j|¡ | | ¡ d S ) NÚ
add_parentz%expected BaseHandler instance, got %rF)Úredirect_requestÚdo_openÚ
proxy_openÚ_rR ÚerrorrG Úresponsert T)ÚhasattrÚ TypeErrorrŠ ÚdirÚfindÚ
startswithr] rB rª r˜ r© r« r¬ Ú
setdefaultÚbisectZinsortr\ r¨ r ) r ÚhandlerZaddedÚmethÚiÚprotocolZ conditionÚjÚkindÚlookupr¨ rL rL rM Ú add_handler½ sJ
zOpenerDirector.add_handlerc C s d S )NrL )r rL rL rM Úcloseì s zOpenerDirector.closec G s< | |d¡}x*|D ]"}t||ƒ}||Ž }|d k r|S qW d S )NrL )r˜ rŽ ) r ÚchainrÀ Ú meth_nameÚargsr¨ r» Úfuncrf rL rL rM Ú _call_chainð s
zOpenerDirector._call_chainNc
C sª t |tƒrt||ƒ}n|}|d k r(||_||_|j}|d }x(| j |g ¡D ]}t||ƒ}||ƒ}qLW | ||¡} |d }x*| j
|g ¡D ]}t||ƒ}||| ƒ} qŠW | S )NZ_requestZ _response) Ú
isinstanceÚstrr rI rJ rŠ r¬ r˜ rŽ Ú_openr« )
r ÚfullurlrI rJ Úreqr¾ rÅ Z processorr¼ r³ rL rL rM rG û s"
zOpenerDirector.openc C sP | | jdd|¡}|r|S |j}| | j||d |¡}|r>|S | | jdd|¡S )Nr™ Z default_openrË ÚunknownÚ unknown_open)rÈ r© rŠ )r rÍ rI rf r¾ rL rL rM rË s
zOpenerDirector._openc G s~ |dkr,| j d }|d }d| }d}|}n| j }|d }d}|||f| }| j|Ž }|r^|S |rz|dd f| }| j|Ž S d S )
N)Úhttpr‘ rÐ r: z
http_error_%srR Ú_errorr r™ Úhttp_error_default)rª rÈ )r ÚprotorÆ ÚdictrÅ Zhttp_errZ orig_argsrf rL rL rM r² & s
zOpenerDirector.error)N) r r¡ r¢ r‚ r rà rÈ ÚsocketÚ_GLOBAL_DEFAULT_TIMEOUTrG rË r² rL rL rL rM r ± s /
c G sæ t ƒ }ttttttttt g }t
t j dƒr2|
t¡ tƒ }xN|D ]F}x@| D ]8}t|tƒrlt||ƒr€| |¡ qHt||ƒrH| |¡ qHW q>W x|D ]}| |¡ qŽW x|D ]}| |ƒ ¡ q¦W x&| D ] }t|tƒrÔ|ƒ }| |¡ qÀW |S )NÚHTTPSConnection)r r r. r) r r r+ r* r/ r- r´ rÐ Úclientr\ rE ÚsetrÉ rŠ Ú
issubclassÚaddÚremover )r¨ rK Zdefault_classesÚskipÚklassZcheckÚhrL rL rM r2 ? s0
c @ s( e Zd ZdZdd„ Zdd„ Zdd„ ZdS ) r iô c C s
|| _ d S )N)Úparent)r rà rL rL rM r f s zBaseHandler.add_parentc C s d S )NrL )r rL rL rM rà i s zBaseHandler.closec C s t |dƒsdS | j|jk S )NÚ
handler_orderT)r´ rá )r ÚotherrL rL rM Ú__lt__m s
zBaseHandler.__lt__N)r r¡ r¢ rá r rà rã rL rL rL rM r c s c @ s e Zd ZdZdd„ ZeZdS )r/ iè c C sH |j |j| ¡ }}}d| kr,dk sDn | j d|||||¡}|S )NéÈ i, rÐ )ÚcodeÚmsgrU rà r² )r rt r³ rå ræ rž rL rL rM Ú
http_responsez s
z HTTPErrorProcessor.http_responseN)r r¡ r¢ rá rç Úhttps_responserL rL rL rM r/ v s c @ s e Zd Zdd„ ZdS )r c C s t |j||||ƒ‚d S )N)r ro )r rÍ rc rå ræ rž rL rL rM rÒ ˆ s z*HTTPDefaultErrorHandler.http_error_defaultN)r r¡ r¢ rÒ rL rL rL rM r ‡ s c @ s4 e Zd ZdZdZdd„ Zdd„ Ze Z ZZ dZ
dS ) r é é
c st | ¡ }|dkr|dks:|dkr(|dks:t|j||||ƒ‚| dd¡}d‰ ‡ fdd „|j ¡ D ƒ}t|||jd
d S ) N)i- i. i/ i3 )r ZHEAD)i- i. i/ rŒ ú z%20)zcontent-lengthz content-typec s" i | ]\}}| ¡ ˆ kr||“qS rL )rs )Ú.0ÚkÚv)ÚCONTENT_HEADERSrL rM ú
® s z8HTTPRedirectHandler.redirect_request..T)rd r| r} )r r ro Úreplacerd rz r r| ) r rÍ rc rå ræ rd ÚnewurlÚmZ
newheadersrL )rï rM r® “ s
z$HTTPRedirectHandler.redirect_requestc
C sL d|kr|d }nd|kr$|d }nd S t |ƒ}|jdkrRt||d||f ||ƒ‚|jsn|jrnt|ƒ}d|d< t|ƒ}t|dtj d}t
|j |ƒ}| ||||||¡}|d kr²d S t
|d ƒr|j } |_| |d
¡| jksìt| ƒ| jkrt|j || j| ||ƒ‚ni } |_|_| |d
¡d | |< | ¡ | ¡ | jj||jd S )
NÚlocationÚuri)rÐ r‘ Úftprm z+%s - Redirection to url '%s' is not allowedú/r: z
iso-8859-1)ÚencodingÚsafeÚ
redirect_dictr rR )rJ )r Úschemer rW Znetlocr r r ÚstringZ punctuationr ro r® r´ rú r˜ Ú max_repeatsr_ Úmax_redirectionsÚinf_msgr^ rà rà rG rJ )
r rÍ rc rå ræ rd rò ÚurlpartsÚnewZvisitedrL rL rM Úhttp_error_302¹ s@
z"HTTPRedirectHandler.http_error_302zoThe HTTP server returned a redirect error that would lead to an infinite loop.
The last 30x error message was:
N) r r¡ r¢ rý rþ r® r Úhttp_error_301Úhttp_error_303Úhttp_error_307rÿ rL rL rL rM r ‹ s &< c C s t | ƒ\}}| d¡s d }| }n:| d¡s6td| ƒ‚| dd¡}|dkrNd }|d|… }t|ƒ\}}|d k r|t|ƒ\}}nd }}||||fS )Nr÷ z//z proxy URL with no authority: %rr: rQ )r r¸ rB r· r r ) Úproxyrû Zr_schemeÚ authorityÚendZuserinfoÚhostportÚuserÚpasswordrL rL rM Ú _parse_proxyü s
r c @ s" e Zd ZdZddd„Zdd„ ZdS )r éd Nc C sL |d krt ƒ }|| _x2| ¡ D ]&\}}t| d| ||| jfdd„ƒ q W d S )Nz%s_openc S s || ||ƒS )NrL )Úrr rŠ r¼ rL rL rM Ú$ s z'ProxyHandler.__init__..)r5 Úproxiesrz Úsetattrr° )r r rŠ rH rL rL rM r‚ s
zProxyHandler.__init__c C s´ |j }t|ƒ\}}}}|d kr"|}|jr6t|jƒr6d S |rv|rvdt|ƒt|ƒf } t | ¡ ¡ d¡}
| dd|
¡ t|ƒ}|
||¡ ||ksš|dkržd S | j j ||j
dS d S )Nz%s:%sÚasciizProxy-authorizationzBasic r‘ )rJ )rŠ r ru Ú proxy_bypassr
Úbase64Ú b64encodeÚencodeÚdecoder{ r’ rà rG rJ ) r rÍ r rŠ Z orig_typeZ
proxy_typer
r r Z user_passZcredsrL rL rM r° ' s zProxyHandler.proxy_open)N)r r¡ r¢ rá r‚ r° rL rL rL rM r s
c @ s6 e Zd Zdd„ Zdd„ Zdd„ Zd
dd „Zd
d „ Zd S )r c C s
i | _ d S )N)Úpasswd)r rL rL rM r‚ E s zHTTPPasswordMgr.__init__c s` t |tƒr|g}|ˆjkr$i ˆj|< x6dD ].‰ t‡ ‡fdd„|D ƒƒ}||fˆj| |< q*W d S )N)TFc 3 s | ]}ˆ |ˆ ¡V qd S )N)Ú
reduce_uri)rì Úu)Ú default_portr rL rM ú P s z/HTTPPasswordMgr.add_password..)rÉ rÊ r Útuple)r Úrealmrõ r
r Ú reduced_urirL )r r rM Ú add_passwordH s
z HTTPPasswordMgr.add_passwordc C s` | j |i ¡}xLdD ]D}| ||¡}x2| ¡ D ]&\}}x |D ]}| ||¡r<|S qdD ]6}| ||¡}x$| jD ]}| ||¡r | j| S q W qW d S )N)TF)r r+ r! )r r" r r# rõ rL rL rM r0 ¤ s
z-HTTPPasswordMgrWithPriorAuth.is_authenticated)F)F)r r¡ r¢ r‚ r r/ r0 Ú
__classcell__rL rL )r. rM r" s
c @ sT e Zd Ze dej¡Zddd„Zdd„ Zdd„ Z d d
„ Z
d d „ Z d
d„ Z e Z
e ZdS )r# z1(?:^|,)[ ]*([^ ,]+)[ ]+realm=(["']?)([^"']*)\2Nc C s" |d krt ƒ }|| _| jj| _d S )N)r r r )r Z password_mgrrL rL rM r‚ Á s z!AbstractBasicAuthHandler.__init__c c st d}xFt j |¡D ]6}| ¡ \}}}|dkr:t dtd¡ ||fV d}qW |sp|rb| ¡ d }nd}|d fV d S )NF)ú"ú'z Basic Auth Realm was unquotedé Tr rm )r# ÚrxÚfinditerÚgroupsr? r@ Ú UserWarningÚsplit)r ÚheaderZfound_challengeÚmorû r r rL rL rM Ú _parse_realmÇ s
z%AbstractBasicAuthHandler._parse_realmc C s~ | |¡}|sd S d }xL|D ]D}x>| |¡D ]0\}}| ¡ dkrF|}q,|d k r,| |||¡S q,W q W |d k rztd|f ƒ‚d S )NÚbasiczBAbstractBasicAuthHandler does not support the following scheme: %r)Zget_allr< rs Úretry_http_basic_authrB ) r Úauthreqru rÍ rd Z unsupportedr: rû r rL rL rM Úhttp_error_auth_reqedÛ s
z.AbstractBasicAuthHandler.http_error_auth_reqedc C s| | j ||¡\}}|d k rtd||f }dt | ¡ ¡ d¡ }| | jd ¡|krTd S | | j|¡ | j j
||j dS d S d S )Nz%s:%szBasic r )rJ ) r r$ r r r r rp Ú auth_headerr– rà rG rJ )r ru rÍ r r
ÚpwÚrawÚauthrL rL rM r> õ s z.AbstractBasicAuthHandler.retry_http_basic_authc C st t | jdƒr| j |j¡s |S | d¡sp| j d |j¡\}}d ||¡ ¡ }t |¡
¡ }| dd | ¡ ¡¡ |S )Nr0 Ú
Authorizationz{0}:{1}zBasic {})
r´ r r0 ro rˆ r$ r„ r r Zstandard_b64encoder r– Ústrip)r rÍ r
r Z credentialsZauth_strrL rL rM Ú http_request s
z%AbstractBasicAuthHandler.http_requestc C sL t | jdƒrHd|j kr"dk r8n n| j |jd¡ n| j |jd¡ |S )Nr0 rä i, TF)r´ r rå r/ ro )r rÍ r³ rL rL rM rç s
z&AbstractBasicAuthHandler.http_response)N)r r¡ r¢ ÚreÚcompileÚIr5 r‚ r< r@ r> rG rç Ú
https_requestrè rL rL rL rM r# ¬ s
c @ s e Zd ZdZdd„ ZdS )r$ rE c C s |j }| d|||¡}|S )Nzwww-authenticate)ro r@ )r rÍ rc rå ræ rd rH r³ rL rL rM Úhttp_error_401 s
z#HTTPBasicAuthHandler.http_error_401N)r r¡ r¢ rA rL rL rL rL rM r$ s c @ s e Zd ZdZdd„ ZdS )r% zProxy-authorizationc C s |j }| d|||¡}|S )Nzproxy-authenticate)ru r@ )r rÍ rc rå ræ rd r r³ rL rL rM Úhttp_error_407* s
z$ProxyBasicAuthHandler.http_error_407N)r r¡ r¢ rA rM rL rL rL rM r% & s c @ sN e Zd Zddd„Zdd„ Zdd„ Zdd „ Zd
d „ Zd d
„ Zdd„ Z dd„ Z
dS )r& Nc C s4 |d krt ƒ }|| _| jj| _d| _d| _d | _d S )Nr )r r r ÚretriedÚ nonce_countÚ
last_nonce)r r rL rL rM r‚ D s
z"AbstractDigestAuthHandler.__init__c C s
d| _ d S )Nr )rN )r rL rL rM Úreset_retry_countM s z+AbstractDigestAuthHandler.reset_retry_countc C s| | |d ¡}| jdkr*t|jdd|d ƒ‚n| jd7 _|rx| ¡ d }| ¡ dkr`| ||¡S | ¡ dkrxtd| ƒ‚d S ) Né i‘ zdigest auth failedrR r Zdigestr= zEAbstractDigestAuthHandler does not support the following scheme: '%s')r˜ rN r ro r9 rs Úretry_http_digest_authrB )r rA ru rÍ rd r? rû rL rL rM r@ P s
z/AbstractDigestAuthHandler.http_error_auth_reqedc C sz | dd¡\}}ttd t|ƒƒƒ}| ||¡}|rvd| }|j | jd ¡|krRd S | | j|¡ | j j
||j d}|S d S )Nrë rR z Digest %s)rJ ) r9 Úparse_keqv_listÚfilterÚparse_http_listÚget_authorizationrd r˜ rA r– rà rG rJ )r rÍ rD ÚtokenZ challengeÚchalZauth_valZresprL rL rM rS d s z0AbstractDigestAuthHandler.retry_http_digest_authc C s@ d| j |t ¡ f }| d¡tdƒ }t |¡ ¡ }|d d… S )Nz %s:%s:%s:r é é )rO ÚtimeZctimer Ú _randombytesÚhashlibÚsha1Ú hexdigest)r ÚnonceÚsÚbÚdigrL rL rM Ú
get_cnoncep s z$AbstractDigestAuthHandler.get_cnoncec C sÄ y6|d }|d }| d¡}| dd¡}| dd ¡}W n tk
rJ d S X | |¡\}} |d krfd S | j ||j¡\}
} |
d kr†d S |jd k r | |j|¡} nd } d|
|| f }
d| ¡ |j f }|d krè| ||
ƒd|||ƒf ƒ}n~d |
d
¡krZ|| j kr| j d 7 _ n d | _ || _ d | j }|
|¡}d
|||d ||ƒf }| ||
ƒ|ƒ}n td| ƒ‚d|
|||j |f }|rŒ|d| 7 }| rž|d| 7 }|d| 7 }|rÀ|d||f 7 }|S )Nr ra ÚqopÚ algorithmÚMD5Úopaquez%s:%s:%sz%s:%srD ú,rR z%08xz%s:%s:%s:%s:%szqop '%s' is not supported.z>username="%s", realm="%s", nonce="%s", uri="%s", response="%s"z
, opaque="%s"z
, digest="%s"z, algorithm="%s"z , qop=auth, nc=%s, cnonce="%s")r˜ ÚKeyErrorÚget_algorithm_implsr r$ ro rI Úget_entity_digestr r‡ r9 rP rO re r )r rÍ rY r ra rf rg ri ÚHÚKDr
rB ZentdigZA1ZA2ZrespdigZncvalueZcnonceZnoncebitr( rL rL rM rW { sV
z+AbstractDigestAuthHandler.get_authorizationc sD |dkrdd„ ‰ n |dkr$dd„ ‰ n t d| ƒ‚‡ fdd„}ˆ |fS )Nrh c S s t | d¡¡ ¡ S )Nr )r^ Zmd5r r` )ÚxrL rL rM r ¼ ó z?AbstractDigestAuthHandler.get_algorithm_impls..ZSHAc S s t | d¡¡ ¡ S )Nr )r^ r_ r r` )rp rL rL rM r ¾ rq z.Unsupported digest authentication algorithm %rc s ˆ d| |f ƒS )Nz%s:%srL )rb Úd)rn rL rM r à rq )rB )r rg ro rL )rn rM rl ¹ s
z-AbstractDigestAuthHandler.get_algorithm_implsc C s d S )NrL )r rI rY rL rL rM rm Æ s z+AbstractDigestAuthHandler.get_entity_digest)N) r r¡ r¢ r‚ rQ r@ rS re rW rl rm rL rL rL rM r& 9 s
>
c @ s e Zd ZdZdZdd„ ZdS )r' rE iê c C s* t |jƒd }| d|||¡}| ¡ |S )NrR zwww-authenticate)r ro r@ rQ )r rÍ rc rå ræ rd ru ÚretryrL rL rM rL Õ s
z$HTTPDigestAuthHandler.http_error_401N)r r¡ r¢ rA rá rL rL rL rL rM r' Ë s c @ s e Zd ZdZdZdd„ ZdS )r( zProxy-Authorizationiê c C s" |j }| d|||¡}| ¡ |S )Nzproxy-authenticate)ru r@ rQ )r rÍ rc rå ræ rd ru rs rL rL rM rM â s
z%ProxyDigestAuthHandler.http_error_407N)r r¡ r¢ rA rá rM rL rL rL rM r( Ý s c @ s6 e Zd Zd
dd„Zdd„ Zdd„ Zdd „ Zd
d „ Zd S )ÚAbstractHTTPHandlerr c C s
|| _ d S )N)Ú _debuglevel)r Ú
debuglevelrL rL rM r‚ ë s z AbstractHTTPHandler.__init__c C s
|| _ d S )N)ru )r ÚlevelrL rL rM Úset_http_debuglevelî s z'AbstractHTTPHandler.set_http_debuglevelc C s t jj |j| ¡ ¡S )N)rÐ rØ ÚHTTPConnectionÚ_get_content_lengthrI r )r rt rL rL rM rz ñ s z'AbstractHTTPHandler._get_content_lengthc C s |j }|stdƒ‚|jd k r’|j}t|tƒr8d}t|ƒ‚| d¡sN| dd¡ | d¡s’| d¡s’| |¡}|d k r†| dt|ƒ¡ n | dd¡ |}| ¡ r¸t
|j ƒ\}}t |ƒ\}} | d¡sÎ| d|¡ x2| j
jD ]&\}
} |
¡ }
| |
¡sØ| |
| ¡ qØW |S ) Nz
no host givenz\POST data should be bytes, an iterable of bytes, or a file object. It cannot be of type str.z Content-typez!application/x-www-form-urlencodedzContent-lengthzTransfer-encodingZchunkedrn )ru r rI rÉ rÊ rµ rˆ r– rz r“ r r‡ r rà r§ r” ) r rt ru rI ræ Zcontent_lengthZsel_hostrû ZselZsel_pathrZ r rL rL rM Ú do_request_ö s>
z AbstractHTTPHandler.do_request_c
sT |j }|stdƒ‚||fd|ji|—Ž}| | j¡ t|jƒ‰ ˆ ‡ fdd„|j ¡ D ƒ¡ dˆ d< dd„ ˆ ¡ D ƒ‰ |j
r®i }d}|ˆ kržˆ | ||< ˆ |= |j |j
|d y`y&|j |
¡ |j|jˆ | d
¡d W n, tk
r } z t|ƒ‚W d d }~X Y nX | ¡ } W n | ¡ ‚ Y nX |jr>|j ¡ d |_| ¡ | _| j| _| S ) Nz
no host givenrJ c s i | ]\}}|ˆ kr||“qS rL rL )rì rí rî )rd rL rM rð * s z/AbstractHTTPHandler.do_open..rà Ú
Connectionc S s i | ]\}}|| ¡ “qS rL )Útitle)rì rZ r• rL rL rM rð 7 s zProxy-Authorization)rd zTransfer-encoding)Zencode_chunked)ru r rJ Zset_debuglevelru rÔ rw rœ rd rz ry Z
set_tunnelrt r r‡ rI rˆ rl Ú getresponserà Zsockr rH Úreasonræ )
r Z
http_classrÍ Zhttp_conn_argsru rß Ztunnel_headersZproxy_auth_hdrÚerrr rL )rd rM r¯ s@
zAbstractHTTPHandler.do_openN)r )r r¡ r¢ r‚ rx rz r{ r¯ rL rL rL rM rt é s
&rt c @ s e Zd Zdd„ ZejZdS )r) c C s | tjj|¡S )N)r¯ rÐ rØ ry )r rÍ rL rL rM Ú http_opena s zHTTPHandler.http_openN)r r¡ r¢ r rt r{ rG rL rL rL rM r) _ s r× c @ s$ e Zd Zddd„Zdd„ ZejZdS )rE r Nc C s t | |¡ || _|| _d S )N)rt r‚ Ú_contextÚ_check_hostname)r rv r> Úcheck_hostnamerL rL rM r‚ j s zHTTPSHandler.__init__c C s | j tjj|| j| jdS )N)r> r„ )r¯ rÐ rØ r× r‚ rƒ )r rÍ rL rL rM Ú
https_openo s zHTTPSHandler.https_open)r NN)r r¡ r¢ r‚ r… rt r{ rK rL rL rL rM rE h s
rE c @ s. e Zd Zddd„Zdd„ Zdd„ ZeZeZdS ) r Nc C s$ dd l }|d kr|j ¡ }|| _d S )Nr )Zhttp.cookiejarÚ cookiejarZ CookieJar)r r† rÐ rL rL rM r‚ x s
z HTTPCookieProcessor.__init__c C s | j |¡ |S )N)r† Zadd_cookie_header)r rt rL rL rM rG ~ s z HTTPCookieProcessor.http_requestc C s | j ||¡ |S )N)r† Zextract_cookies)r rt r³ rL rL rM rç ‚ s z!HTTPCookieProcessor.http_response)N)r r¡ r¢ r‚ rG rç rK rè rL rL rL rM r w s
c @ s e Zd Zdd„ ZdS )r. c C s |j }td| ƒ‚d S )Nzunknown url type: %s)rŠ r )r rÍ rŠ rL rL rM rÏ Š s zUnknownHandler.unknown_openN)r r¡ r¢ rÏ rL rL rL rM r. ‰ s c C sR i }xH| D ]@}| dd¡\}}|d dkrB|d dkrB|dd… }|||< q
W |S )Nú=rR r r2 rQ )r9 )ÚlZparsedZeltrí rî rL rL rM rT Ž s
rT c C s¢ g }d}d }}xt| D ]l}|r,||7 }d}q|rV|dkr@d}qn |dkrLd}||7 }q|dkrn| |¡ d}q|dkrzd}||7 }qW |r”| |¡ dd„ |D ƒS ) Nrm Fú\Tr2 rj c S s g | ] }| ¡ ‘qS rL )rF )rì ÚpartrL rL rM ú
Á s z#parse_http_list..)r\ )rb ZresrŠ Úescaper ZcurrL rL rM rV ˜ s4
rV c @ s( e Zd Zdd„ ZdZdd„ Zdd„ ZdS )r* c C s\ |j }|d d… dkrN|dd… dkrN|jrN|jdkrN|j| ¡ krXtdƒ‚n
| |¡S d S )Nr: z//r4 r÷ Ú localhostz-file:// scheme is supported only on localhost)r‡ ru Ú get_namesr Úopen_local_file)r rÍ rH rL rL rM Ú file_openÅ s &
zFileHandler.file_openNc C s` t jd krZy*tt d¡d t t ¡ ¡d ƒt _W n$ tjk
rX t d¡ft _Y nX t jS )Nr r: )r* Únamesr rÕ Úgethostbyname_exÚ gethostnameÚgaierrorÚ
gethostbyname)r rL rL rM rŽ Ð s
zFileHandler.get_namesc
C sü dd l }dd l}|j}|j}t|ƒ}y t |¡}|j}|jj |j
dd} | |¡d }
| d|
pbd|| f ¡} |r~t
|ƒ\}} |r–| sÂt|ƒ| ¡ krÂ|r¨d| | }
nd| }
tt|dƒ| |
ƒS W n* tk
rî } z t|ƒ‚W d d }~X Y nX tdƒ‚d S ) Nr T)Úusegmtz6Content-type: %s
Content-length: %d
Last-modified: %s
z
text/plainzfile://Úrbzfile not on local host)Ú email.utilsÚ mimetypesru r‡ r4 rV ÚstatÚst_sizeÚutilsÚ
formatdateÚst_mtimeÚ
guess_typeÚmessage_from_stringr
Ú_safe_gethostbynamerŽ r rG rl r )r rÍ Úemailr™ ru ra Z localfileÚstatsrh ÚmodifiedÚmtyperd r' ZorigurlÚexprL rL rM r Û s0
zFileHandler.open_local_file)r r¡ r¢ r r‘ rŽ r rL rL rL rM r* Ã s
c C s& y
t | ¡S t jk
r d S X d S )N)rÕ r• r” )ru rL rL rM r¡ ö s
r¡ c @ s e Zd Zdd„ Zdd„ ZdS )r+ c
C s, dd l }dd l}|j}|s"tdƒ‚t|ƒ\}}|d kr>|j}nt|ƒ}t|ƒ\}}|rdt|ƒ\}}nd }t |ƒ}|pvd}|p~d}yt
|¡}W n* t k
r¸ } z t|ƒ‚W d d }~X Y nX t
|jƒ\} }
| d¡} ttt | ƒƒ} | d d… | d } } | r| d s| dd … } yÐ| ||||| |j¡}
| r6dp8d}x:|
D ]2}t|ƒ\}}| ¡ d kr@|d
kr@| ¡ }q@W |
| |¡\}}d}| |j¡d }|r¬|d | 7 }|d k rÌ|dkrÌ|d | 7 }t |¡}t |||jƒS |j k
r& } z"td
| ƒ}| t ¡ d ¡‚W d d }~X Y nX d S )Nr zftp error: no host givenrm r÷ rQ rR rJ ÚDrŠ )ÚaÚAr½ rJ rr r§ zContent-type: %s
zContent-length: %d
z
ftp error: %rr: )!Úftplibr™ ru r r
ÚFTP_PORTr] r r r
rÕ r• rl r r‡ r9 r ÚmapÚ connect_ftprJ r rs ÚupperÚretrfilerŸ ro r¢ r r Ú
all_errorsÚwith_tracebackÚsysÚexc_info)r rÍ rª r™ ru r' r
r ræ rW ÚattrsÚdirsrN ÚfwrŠ Úattrr rc Úretrlenrd r¥ r¦ ÚexcrL rL rM Úftp_opený s\
zFTPHandler.ftp_openc C s t ||||||ddS )NF)Ú
persistent)Ú
ftpwrapper)r r
r ru r' rµ rJ rL rL rM r 2 s zFTPHandler.connect_ftpN)r r¡ r¢ rº r rL rL rL rM r+ ü s 5c @ s< e Zd Zdd„ Zdd„ Zdd„ Zdd„ Zd d
„ Zd d „ Zd
S )r, c C s" i | _ i | _d| _d| _d| _d S )Nr é< r[ )ÚcacherJ ÚsoonestÚdelayÚ max_conns)r rL rL rM r‚ 9 s
zCacheFTPHandler.__init__c C s
|| _ d S )N)rÀ )r ÚtrL rL rM Ú
setTimeout@ s zCacheFTPHandler.setTimeoutc C s
|| _ d S )N)rÁ )r ró rL rL rM Ú setMaxConnsC s zCacheFTPHandler.setMaxConnsc C sr |||d |¡|f}|| jkr4t ¡ | j | j|< n,t||||||ƒ| j|< t ¡ | j | j|< | ¡ | j| S )Nr÷ )Újoinr¾ r\ rÀ rJ r¼ Ú check_cache)r r
r ru r' rµ rJ r€ rL rL rM r F s
zCacheFTPHandler.connect_ftpc C sÈ t ¡ }| j|krTx@t| j ¡ ƒD ].\}}||k r"| j| ¡ | j|= | j|= q"W tt| j ¡ ƒƒ| _t | jƒ| j
krÄx6t| j ¡ ƒD ]$\}}|| jkrˆ| j|= | j|= P qˆW tt| j ¡ ƒƒ| _d S )N) r\ r¿ r rJ rz r¾ rà ÚminÚvaluesr_ rÁ )r r rí rî rL rL rM rÆ Q s
zCacheFTPHandler.check_cachec C s4 x| j ¡ D ] }| ¡ q W | j ¡ | j ¡ d S )N)r¾ rÈ rà ÚclearrJ )r ÚconnrL rL rM Ú clear_cachee s
zCacheFTPHandler.clear_cacheN) r r¡ r¢ r‚ rà rÄ r rÆ rË rL rL rL rM r, 6 s c @ s e Zd Zdd„ ZdS )r- c C s~ |j }| dd¡\}}| dd¡\}}t|ƒ}| d¡rNt |¡}|d d… }|sVd}t d|t|ƒf ¡}t t
|¡||ƒS )Nú:rR rj z;base64iùÿÿÿztext/plain;charset=US-ASCIIz$Content-type: %s
Content-length: %d
) ro r9 r Úendswithr Ú decodebytesr¢ r r_ r ÚioÚBytesIO)r rÍ rH rû rI Z mediatyperd rL rL rM Ú data_openl s
zDataHandler.data_openN)r r¡ r¢ rÑ rL rL rL rM r- k s rê Únt)r4 r3 c C s t | ƒS )N)r
)ÚpathnamerL rL rM r4 ’ s c C s t | ƒS )N)r )rÓ rL rL rM r3 — s c @ sÆ e Zd ZdZde Zd)dd„Zdd„ Zdd„ Zd d
„ Z d d „ Z
d*d
d„Z d+dd„Z d,dd„Z
d-dd„Zdd„ Zd.dd„Zd/dd„Zdd „ Zer d d „ Zd0d d „Zd!d"„ Zd#d$„ Zd%d&„ Zd1d'd(„ZdS )2r8 NzPython-urllib/%sc K sz dd| j ji }tj|tdd |d kr.tƒ }|| _| d¡| _| d¡| _ d| j
fdg| _ g | _ t
j| _d | _t| _d S ) NzW%(class)s style of invoking requests is deprecated. Use newer urlopen functions/methodsÚclassr4 )Ú
stacklevelÚkey_fileÚ cert_filez
User-Agent)ZAcceptz*/*)r. r r? r@ rA r5 r r˜ rÖ r× Úversionr§ Ú_URLopener__tempfilesrV rk Ú_URLopener__unlinkÚ tempcacheÚftpcache)r r Zx509ræ rL rL rM r‚ s zURLopener.__init__c C s | ¡ d S )N)rà )r rL rL rM Ú__del__Ç s zURLopener.__del__c C s | ¡ d S )N)Úcleanup)r rL rL rM rÃ Ê s zURLopener.closec C sZ | j rFx2| j D ](}y| |¡ W q tk
r4 Y qX qW | j d d …= | jrV| j ¡ d S )N)rÙ rÚ rl rÛ rÉ )r rN rL rL rM rÞ Í s
zURLopener.cleanupc G s | j |¡ d S )N)r§ r\ )r rÆ rL rL rM Ú addheaderÛ s zURLopener.addheaderc
C sl t t|ƒƒ}t|dd}| jrL|| jkrL| j| \}}t|dƒ}t|||ƒS t|ƒ\}}|s`d}|| jkr–| j| }t|ƒ\}} t| ƒ\}
} |
|f}nd }d| } || _ |
dd¡} t | | ƒrÆ| dkrä|rØ| |||¡S |
||¡S y,|d k rþt| | ƒ|ƒS t| | ƒ||ƒS W nV ttfk
r, ‚ Y n< tk
rf }
z td |
ƒ t ¡ d
¡‚W d d }
~
X Y nX d S ) Nz%/:=&?~#+!$,;'@()*[]|)rù r— rN Zopen_ú-r± r z socket errorr: )r r r rÛ rG r r r r rŠ rñ r´ Úopen_unknown_proxyÚ open_unknownrŽ r r rl r± r² r³ )r rÌ rI ra rd rc ÚurltyperH r Ú proxyhostru r‡ rZ ræ rL rL rM rG á s<
zURLopener.openc C s t |ƒ\}}tdd|ƒ‚d S )Nz url errorzunknown url type)r rl )r rÌ rI rŠ rH rL rL rM râ s zURLopener.open_unknownc C s t |ƒ\}}tdd| |ƒ‚d S )Nz url errorzinvalid proxy for %s)r rl )r r rÌ rI rŠ rH rL rL rM rá
s z URLopener.open_unknown_proxyc
C s t t|ƒƒ}| jr&|| jkr&| j| S t|ƒ\}}|d kr˜|rF|dkr˜y.| |¡}| ¡ }| ¡ tt|ƒd ƒ|fS t k
r– } zW d d } ~ X Y nX |
||¡}z>| ¡ }
|rÀt
|dƒ} nrt|ƒ\} }
t|
pÔdƒ\} }
t |
pädƒ\}
} t |
pôdƒ\}
} t
j |
¡d }t |¡\}}| j |¡ t
|d¡} z¤||
f}| jd k rR|| j|< d}d}d}d}d|
krxt|
d ƒ}|rŠ||||ƒ xH| |¡}|sžP |t|ƒ7 }| |¡ |d7 }|rŒ||||ƒ qŒW W d | ¡ X W d | ¡ X |dkr||k rtd
||f |ƒ‚|S ) NrN rR rO rm i rQ r zcontent-lengthzContent-Lengthz1retrieval incomplete: got only %i out of %i bytes)r r rÛ r r rU rà r4 r rl rG r r rV rW ÚsplitextrY ZmkstemprÙ r\ Úfdopenr] r^ r_ r` r )r rH ra rb rI rŠ Zurl1rc rž ræ rd re ZgarbagerW ÚsuffixÚfdrf rg rh r^ ri rj rL rL rM Úretrieve sj
zURLopener.retrievec C s( d }d }t |tƒrtd | ƒ‚tt|d ƒ| |
ƒS td
ƒ‚d S )Nr T)r– z6Content-Type: %s
Content-Length: %d
Last-modified: %s
z
text/plainrR r÷ zfile://r— r: z./zAlocal file url may start with / or file:. Unknown url of type: %sz#local file error: not on local host)r˜ r™ r r4 rV rš rl r Ústrerrorra r› rœ r rž rŸ r r rG r
rÕ r• r ÚthishostrB )r rH r¢ r™ ru rN Z localnamer£ Úerh r¤ r¥ rd Zurlfiler' rL rL rM r Ù s:
zURLopener.open_local_filec
C s’ t |tƒstdƒ‚dd l}t|ƒ\}}|s2tdƒ‚t|ƒ\}}t|ƒ\}}|r\t|ƒ\}}nd }t|ƒ}t|ppdƒ}t|p|dƒ}t
|¡}|sždd l }|j }nt
|ƒ}t|ƒ\}} t|ƒ}| d¡}
|
d d… |
d }
} |
rò|
d sò|
dd … }
|
r
|
d s
d|
d< |||d |
¡f} t| jƒtkrfx8t| jƒD ]*}
|
| kr8| j|
}| j|
= | ¡ q8W yæ| | jkrŠt|||||
ƒ| j| < | s–d}nd }x:| D ]2}t|ƒ\}}| ¡ d
kr |d kr | ¡ }q W | j| | |¡\}}| d | ¡d }d}|r|d
| 7 }|d k r4|dkr4|d| 7 }t |¡}t ||d | ƒS t ƒ k
rŒ } z td| ƒ t! "¡ d ¡‚W d d }~X Y nX d S )NzCftp error: proxy support for ftp protocol currently not implementedr zftp error: no host givenrm r÷ rQ rR r§ rJ rŠ )r¨ r© r½ rJ rr r§ zftp:zContent-Type: %s
zContent-Length: %d
z ftp error %rr: )#rÉ rÊ r r™ r r
r r r
rÕ r• rª r« r] r r9 rÅ r_ rÜ Ú MAXFTPCACHEr rà r¼ r rs r® r¯ rŸ r¢ r r Ú ftperrorsr± r² r³ )r rH r™ ru rW r' r
r rª r´ rµ rN r€ rí rî rŠ r· r rc r¸ r¥ rd r¦ rL rL rM Úopen_ftpù sp
zURLopener.open_ftpc
C s< t |tƒstdƒ‚y| dd¡\}}W n tk
rD tddƒ‚Y nX |sNd}| d¡}|dkrŽd ||d … krŽ||d d … }|d |… }nd
}g }| d t d t
t ¡ ¡¡ ¡ | d
| ¡ |dkrät |
d¡¡ d¡}nt|ƒ}| dt|ƒ ¡ | d
¡ | |¡ d |¡}t |¡}t |¡}t|||ƒS )NzEdata error: proxy support for data protocol currently not implementedrj rR z
data errorz bad data URLztext/plain;charset=US-ASCIIú;r r‡ rm zDate: %sz%a, %d %b %Y %H:%M:%S GMTzContent-type: %sr r zlatin-1zContent-Length: %dÚ
)rÉ rÊ r r9 rB rl Úrfindr\ r\ ZstrftimeZgmtimer rÎ r r r
r_ rÅ r¢ r rÏ ÚStringIOr ) r rH rI rŠ Zsemirø ræ rd ÚfrL rL rM Ú open_data3 s6
zURLopener.open_data)N)N)N)N)NNN)N)N)N)N)r r¡ r¢ rÙ r¦ rØ r‚ rÝ rà rÞ rß rG râ rá ré rì rí rë rÒ rC rð rñ ró r rù rÿ rL rL rL rM r8 s,
$
A\
:c @ sš e Zd Zdd„ Zdd„ Zd"dd„Zdd „ Zd#d
d „Zd$d d
„Zd%dd„Z d&dd„Z
d'dd„Z d(dd„Z d)dd„Z
d*dd„Zd+dd „Zd,d d „Zd d!„ ZdS )-r9 c O s( t j| f|ž|Ž i | _d| _d| _d S )Nr rê )r8 r‚ Ú
auth_cacheÚtriesÚmaxtries)r rÆ r- rL rL rM r‚ ` s zFancyURLopener.__init__c C s t ||d| |ƒS )Nzhttp:)r )r rH rc rî rï rd rL rL rM rÒ f s z!FancyURLopener.http_error_defaultNc C sn | j d7 _ zR| jrJ| j | jkrJt| dƒr4| j}n| j}|||dd|ƒS | ||||||¡}|S d| _ X d S )NrR Úhttp_error_500iô z)Internal Server Error: Redirect Recursionr )r r r´ r rÒ Úredirect_internal) r rH rc rî rï rd rI r¼ rf rL rL rM r j s
z FancyURLopener.http_error_302c C sx d|kr|d }nd|kr$|d }nd S | ¡ t| jd | |ƒ}t|ƒ}|jdkrnt|||d| ||ƒ‚| |¡S )Nrô rõ rÌ )rÐ r‘ rö rm z( Redirection to url '%s' is not allowed.)rà r rŠ r rû r rG ) r rH rc rî rï rd rI rò r rL rL rM r | s
z FancyURLopener.redirect_internalc C s | ||||||¡S )N)r )r rH rc rî rï rd rI rL rL rM r ˜ s z FancyURLopener.http_error_301c C s | ||||||¡S )N)r )r rH rc rî rï rd rI rL rL rM r œ s z FancyURLopener.http_error_303c C s2 |d kr | ||||||¡S | |||||¡S d S )N)r rÒ )r rH rc rî rï rd rI rL rL rM r s z FancyURLopener.http_error_307Fc
C sÈ d|kr t | |||||¡ |d }t d|¡} | sHt | |||||¡ | ¡ \}
} |
¡ dkrtt | |||||¡ |sŒt | |||||¡ d| j d } |d kr²t| | ƒ|| ƒS t| | ƒ|| |ƒS d S )Nzwww-authenticatez![ ]*([^ ]+)[ ]+realm="([^"]*)"r= Zretry_Ú _basic_auth)r8 rÒ rH Úmatchr7 rs rŠ rŽ )
r rH rc rî rï rd rI rs Ústuffr rû r rZ rL rL rM rL § s&
z FancyURLopener.http_error_401c
C sÈ d|kr t | |||||¡ |d }t d|¡} | sHt | |||||¡ | ¡ \}
} |
¡ dkrtt | |||||¡ |sŒt | |||||¡ d| j d } |d kr²t| | ƒ|| ƒS t| | ƒ|| |ƒS d S )Nzproxy-authenticatez![ ]*([^ ]+)[ ]+realm="([^"]*)"r= Z retry_proxy_r )r8 rÒ rH r r7 rs rŠ rŽ )
r rH rc rî rï rd rI rs r r rû r rZ rL rL rM rM À s&
z FancyURLopener.http_error_407c C sÄ t |ƒ\}}d| | }| jd }t|ƒ\}} t | ƒ\} }
| d¡d } | | d … } | | || ¡\} }
| sr|
srd S dt| ddt|
dd| f } d| |
| jd< |d kr´| |¡S | ||¡S d S )Nzhttp://rÐ ú@rR z%s:%s@%srm )rù )r r r r· Úget_user_passwdr rG )r rH r rI ru r‡ rò r rã rä Ú
proxyselectorr½ r
r rL rL rM Úretry_proxy_http_basic_authÙ s
z*FancyURLopener.retry_proxy_http_basic_authc C sÄ t |ƒ\}}d| | }| jd }t|ƒ\}} t | ƒ\} }
| d¡d } | | d … } | | || ¡\} }
| sr|
srd S dt| ddt|
dd| f } d| |
| jd< |d kr´| |¡S | ||¡S d S )Nzhttps://r‘ r rR z%s:%s@%srm )rù )r r r r· r r rG )r rH r rI ru r‡ rò r rã rä r
r½ r
r rL rL rM Ú retry_proxy_https_basic_authë s
z+FancyURLopener.retry_proxy_https_basic_authc
C s t |ƒ\}}| d¡d }||d … }| |||¡\}}|sD|sDd S dt|ddt|dd|f }d| | } |d kr€| | ¡S | | |¡S d S )Nr rR z%s:%s@%srm )rù zhttp://)r r· r r rG )
r rH r rI ru r‡ r½ r
r rò rL rL rM r> ý s
z$FancyURLopener.retry_http_basic_authc
C s t |ƒ\}}| d¡d }||d … }| |||¡\}}|sD|sDd S dt|ddt|dd|f }d| | } |d kr€| | ¡S | | |¡S d S )Nr rR z%s:%s@%srm )rù zhttps://)r r· r r rG )
r rH r rI ru r‡ r½ r
r rò rL rL rM Úretry_https_basic_auth s
z%FancyURLopener.retry_https_basic_authr c C s` |d | ¡ }|| jkr2|r(| j|= n
| j| S | ||¡\}}|sJ|rX||f| j|< ||fS )Nr )rs r Úprompt_user_passwd)r ru r rË r€ r
r rL rL rM r s
z FancyURLopener.get_user_passwdc C sT dd l }y,td||f ƒ}| d|||f ¡}||fS tk
rN tƒ dS X d S )Nr z Enter username for %s at %s: z#Enter password for %s in %s at %s: )NN)ÚgetpassÚinputÚKeyboardInterruptÚprint)r ru r r r
r rL rL rM r $ s z!FancyURLopener.prompt_user_passwd)N)N)N)N)NF)NF)N)N)N)N)r )r r¡ r¢ r‚ rÒ r r r r r rL rM r r r> r
r r rL rL rL rM r9 ] s"
c C s t d krt d¡a t S )Nr )Ú
_localhostrÕ r• rL rL rL rM r 4 s
r c C sP t d krLytt t ¡ ¡d ƒa W n( tjk
rJ tt d¡d ƒa Y nX t S )Nr: r )Ú _thishostr rÕ r’ r“ r” rL rL rL rM rõ < s rõ c C s t d krdd l} | ja t S )Nr )Ú
_ftperrorsrª r° )rª rL rL rM rø G s rø c C s t d krt d¡a t S )Nrm )Ú
_noheadersr¢ r rL rL rL rM Ú noheadersP s
r c @ sF e Zd Zddd„Zdd„ Zdd„ Zd d
„ Zd d „ Zd
d„ Zdd„ Z dS )r¼ NTc C sX || _ || _|| _|| _|| _|| _d| _|| _y | ¡ W n | ¡ ‚ Y nX d S )Nr )
r
r ru r' rµ rJ ÚrefcountÚ keepaliveÚinitrà )r r
r ru r' rµ rJ r» rL rL rM r‚ ] s zftpwrapper.__init__c C s\ dd l }d| _| ¡ | _| j | j| j| j¡ | j | j | j
¡ d | j ¡}| j
|¡ d S )Nr r÷ )rª ÚbusyZFTPrö Zconnectru r' rJ Zloginr
r rÅ rµ Úcwd)r rª Z_targetrL rL rM r m s
zftpwrapper.initc
C s¶ dd l }| ¡ |dkr"d}d}n d| }d}y| j |¡ W n* |jk
rh | ¡ | j |¡ Y nX d }|ræ|sæy d| }| j |¡\}}W nR |jk
rä } z2t|ƒd d… dkrÔt d | ƒ
t ¡ d
¡‚W d d }~X Y nX |s€| j d¡ |rl| j
¡ } zJy| j |¡ W n4 |jk
rN } zt d | ƒ|‚W d d }~X Y nX W d | j | ¡ X d | }nd }| j |¡\}}d| _t| d
¡| jƒ}
| jd7 _| ¡ |
|fS )Nr )rr r§ zTYPE ArR zTYPE zRETR r4 Z550z
ftp error: %rr: zLIST ZLISTr— )rª Ú endtransferrö Zvoidcmdr° r Z ntransfercmdZ
error_permrÊ r r± r² r³ Úpwdr r r ZmakefileÚ
file_closer rà ) r rN rŠ rª ÚcmdÚisdirrÊ r¸ r r ZftpobjrL rL rM r¯ v sN
$
zftpwrapper.retrfilec C s
d| _ d S )Nr )r )r rL rL rM r £ s zftpwrapper.endtransferc C s d| _ | jdkr| ¡ d S )NFr )r r Ú
real_close)r rL rL rM rà ¦ s
zftpwrapper.closec C s2 | ¡ | jd8 _| jdkr.| js.| ¡ d S )NrR r )r r r r" )r rL rL rM r « s zftpwrapper.file_closec C s2 | ¡ y| j ¡ W n tƒ k
r, Y nX d S )N)r rö rà rø )r rL rL rM r" ± s
zftpwrapper.real_close)NT)
r r¡ r¢ r‚ r r¯ r rà r r" rL rL rL rM r¼ Z s
-r¼ c C s¼ i } xBt j ¡ D ]4\}}| ¡ }|r|dd … dkr|| |d d… < qW dt jkr^| dd ¡ xXt j ¡ D ]J\}}|dd … dkrj| ¡ }|r || |d d… < qj| |d d… d ¡ qjW | S )NiúÿÿÿÚ_proxyZREQUEST_METHODrÐ )rV Úenvironrz rs rš )r rZ r rL rL rM Úgetproxies_environment¹ s
r% c C sº |d krt ƒ }y |d }W n tk
r. dS X |dkr |d d> B |d d> B |d B S )
Nr( ré r é rR r[ r: rZ r4 )r9 r r¬ r] r_ )ZipAddrr& rL rL rM Úip2num
s
z,_proxy_bypass_macosx_sysconf..ip2numr( Zexclude_simpleTÚ
exceptionsrL z(\d+(?:\.\d+)*)(/\d+)?rR r: rZ é F) r, r
r˜ rH r rÕ r• rl ÚgroupÚcountr] ) ru Úproxy_settingsr, r* r' r. ZhostIPr ró r( ÚmaskrL rL rM Ú _proxy_bypass_macosx_sysconfý s:
r5 Údarwin)Ú_get_proxy_settingsÚ _get_proxiesc C s t ƒ }t| |ƒS )N)r7 r5 )ru r3 rL rL rM Úproxy_bypass_macosx_sysconf<
s r9 c C s t ƒ S )N)r8 rL rL rL rM Úgetproxies_macosx_sysconf@
s r: c C s t ƒ }|rt| |ƒS t| ƒS d S )N)r% r+ r9 )ru r rL rL rM r J
s
r c C s t ƒ p
tƒ S )N)r% r: rL rL rL rM r5 W
s c
C s i } y dd l }W n tk
r$ | S X yÎ| |jd¡}| |d¡d }|rêt| |d¡d ƒ}d|kr¬x‚| d¡D ]4}| dd¡\}}t d|¡sžd ||f }|| |< qrW n>|d d
… d krÆ|| d < n$d
| | d < d| | d< d| | d< | ¡ W n t
t t fk
r Y nX | S )Nr z;Software\Microsoft\Windows\CurrentVersion\Internet SettingsÚ ProxyEnableZ ProxyServerr‡ rú rR z
(?:[^/:]+)://z%s://%srR zhttp:rÐ z http://%sz
https://%sr‘ zftp://%srö )
ÚwinregÚ ImportErrorÚOpenKeyÚHKEY_CURRENT_USERÚ QueryValueExrÊ r9 rH r ZCloserl rB rµ )r r< ÚinternetSettingsÚ proxyEnableZ proxyServerÚpr¾ ZaddressrL rL rM Úgetproxies_registry\
s8
rD c C s t ƒ p
tƒ S )N)r% rD rL rL rL rM r5 ‰
s c C sx y dd l }W n tk
r dS X y6| |jd¡}| |d¡d }t| |d¡d ƒ}W n tk
rl dS X |rv|szdS t| ƒ\}}|g} y t |¡}||krª|
|¡ W n tk
rÀ Y nX y t |¡}||krà|
|¡ W n tk
rö Y nX | d¡}xp|D ]h} | dkr$d|kr$dS |
dd ¡} |
d
d ¡} |
d d¡} x$| D ] }
t | |
tj¡rNdS qNW qW dS )
Nr z;Software\Microsoft\Windows\CurrentVersion\Internet Settingsr; Z
ProxyOverriderú zr( rR z\.r' z.*ú?)r< r= r> r? r@ rÊ rl r
rÕ r• r\ Zgetfqdnr9 rñ rH r rJ ) ru r< rA rB Z
proxyOverrideZrawHostr' ZaddrZfqdnr) r• rL rL rM Úproxy_bypass_registry’
sR
rF c C s t ƒ }|rt| |ƒS t| ƒS d S )N)r% r+ rF )ru r rL rL rM r Ä
s
)NNN)N)}r rº r¢ r^ Z http.clientrÐ rÏ rV Ú posixpathrH rÕ rü r² r\ rY rS r? Z urllib.errorr r r Z urllib.parser r r r r r
r r r
r r r r r r r r r Zurllib.responser r rD r= rC Ú__all__Ú version_infor¦ rF rÖ r0 r1 r[ r6 r7 rI ÚASCIIrq rv r r r2 r r/ r r r r r r! r" r# r$ r% Úurandomr] r& r' r( rt r) r´ rØ rE r\ r r. rT rV r* r¡ r+ r, r- r÷ rZ Z
nturl2pathr4 r3 rÜ r8 r9 r r r rõ r rø r r r¼ r% r+ r5 ÚplatformZ_scproxyr7 r8 r9 r: r r5 rD rF rL rL rL rM ÚT sè P
T
?n $q *@
o v
+3:5! @ W
_
%<
- 2