240 lines
44 KiB
Plaintext
240 lines
44 KiB
Plaintext
|
Ë
|
|||
|
|
>û gam ã óL — d dl Z d dlZd dlZd dlmZ d dlZd dlmZmZm Z d dl
|
|||
|
|
Z
|
|||
|
|
d dl m Z d dl
|
|||
|
|
mZ d dlmZ d dlmZ d dlmZmZ d d lmZ d d
|
|||
|
|
lmZmZmZm Z d d l m Z d d
|
|||
|
|
l m Z m!Z! d dl"Z" e"jF d « e"jH d « d„ Z&d„ Z'd„ Z(d„ Z)ejT d„ « Z+d„ Z,d„ Z-d„ Z.d„ Z/d„ Z0d„ Z1d„ Z2d„ Z3d„ Z4ejT d „ « Z5ejT d „ « Z6ejT d „ « Z7ejp js d d d g« d!„ « Z:ejp js d d d g« d"„ « Z;ejp js d d d g« d#„ « Z<ejp js d d d g« d$„ « Z=ejp js d d d g« d%„ « Z>ejp js d d d g« d&„ « Z?ejp js d d d g« d'„ « Z@ejp j‚ ejp js d d d g« d(„ « « ZBd)„ ZCd*„ ZDd+„ ZEd,„ ZFd-„ ZGd.„ ZHejp js d/g d0¢« d1„ « ZIejp js d/g d2¢« d3„ « ZJejp js d4d5dd6d7gee g« d8„ « ZKd9„ ZLejp js d d d g« d:„ « ZMd;„ ZNejp jŸ eP e « e« d<¬=« d>„ « ZQd?„ ZRd@„ ZSy# e%$ r Y �Œ”w xY w)Aé N)Úmock)ÚCupyOpsÚNumpyOpsÚget_current_ops)ÚGerman©ÚEnglish)ÚLanguage)ÚScorer)ÚDocÚSpan)ÚExample)Úfind_matching_languageÚ ignore_errorÚ raise_errorÚregistry)ÚVocabé )Úadd_vecs_to_vocabÚassert_docs_equalc ó8 — d| j v r t d« ‚| S )NÚ2zno dice)ÚtextÚ
|
|||
|
|
ValueError©Údocs úZC:\Users\garci\AppData\Roaming\Python\Python312\site-packages\spacy/tests/test_language.pyÚevil_componentr s € Ø
|
|||
|
|
ˆc�h‰h�ܘÓ#Ð#Ø €Jó c óP — | j j d« s
|
|||
|
|
d| d _ | S )NÚ4Téÿÿÿÿ)r Ú
|
|||
|
|
startswithÚ
|
|||
|
|
is_sent_startr s r Úperhaps_set_sentencesr% % s% € Ø �8‰8× Ñ ˜sÔ #Ø $ˆˆB‰Ô Ø €Jr c ó> — | j d« s t d« ‚| S )NÚ
|
|||
|
|
SENT_STARTzno sents)Úhas_annotationr r s r Úassert_sents_errorr) + s € Ø × Ñ ˜lÔ +ܘÓ$Ð$Ø €Jr c óR — t j d« }|j d| « y )NÚspacyzTrouble with component %s.)ÚloggingÚ getLoggerÚwarning)Ú proc_nameÚprocÚdocsÚeÚloggers r Ú
|
|||
|
|
warn_errorr4 1 s! € Ü
|
|||
|
|
×
|
|||
|
|
Ñ
|
|||
|
|
˜wÓ
|
|||
|
|
'€FØ
|
|||
|
|
‡N�NÐ/°Õ;r c óž — t t « « } | j d« }dD ] }|j |« Œ | j « | S )NÚtextcat©ÚPOSITIVEÚNEGATIVE)r
|
|||
|
|
r Úadd_pipeÚ add_labelÚ
|
|||
|
|
initialize)Únlpr6 Úlabels r r= r= 6 sC € ä
|
|||
|
|
”5“7Ó
|
|||
|
|
€CØ�l‰l˜9Ó%€GÛ)ˆØ×ј%Õ ð *à‡N�NÔØ €Jr c óL — d}ddddœi}ddi}t | j |j d« ¬ « }t j ||« }| j |g« t
|
|||
|
|
j t « 5 | j |« d d d « t
|
|||
|
|
j t « 5 | j ||f« d d d « t
|
|||
|
|
j t « 5 | j ||f« d d d « t
|
|||
|
|
j t « 5 t j |d « }d d d « t
|
|||
|
|
j t « 5 t j ||« }d d d « y # 1 sw Y ŒäxY w# 1 sw Y Œ»xY w# 1 sw Y Œ’xY w# 1 sw Y ŒfxY w# 1 sw Y y xY w)
|
|||
|
|
Nú hello worldÚcatsç ð?ç r7 ÚLABELTú ©Úwords) r ÚvocabÚsplitr Ú from_dictÚupdateÚpytestÚraisesÚ TypeErrorr ÚKeyError)r= r ÚannotsÚwrongkeyannotsr Úexamples r Útest_language_updaterS @ s2 € Ø €DØ 3°CÑ8Ð
|
|||
|
|
9€FØ ˜t�_€NÜ
|
|||
|
|
|
|||
|
|
ˆc�i‰i˜tŸz™z¨#›Ô
|
|||
|
|
/€CÜ× Ñ VÓ,€G؇J�J�ˆyÔô
|
|||
|
|
� ‰ ”yÕ !Ø �
|
|||
|
|
‰
|
|||
|
|
�7Ô÷
|
|||
|
|
"ô
|
|||
|
|
� ‰ ”yÕ !Ø �
|
|||
|
|
‰
|
|||
|
|
�D˜&�>Ô"÷
|
|||
|
|
"ô
|
|||
|
|
� ‰ ”yÕ !Ø �
|
|||
|
|
‰
|
|||
|
|
�C˜�=Ô!÷
|
|||
|
|
"ô
|
|||
|
|
� ‰ ”zÕ "Ü×#Ñ# C¨Ó.ˆ÷
|
|||
|
|
#ä � ‰ ”xÕ Ü×#Ñ# C¨ Ó8ˆ÷
|
|||
|
|
!Ð ÷
|
|||
|
|
"Ð !ú÷
|
|||
|
|
"Ð !ú÷
|
|||
|
|
"Ð !ú÷
|
|||
|
|
#Ð "úç Ð ús< Á5E*Â(E6Ã FÄFÅ
|
|||
|
|
FÅ*E3Å6E?ÆF ÆFÆF#c ó — d}dddddœii}t | j |j d« ¬« }t j ||« }| j |g« }|d d
|
|||
|
|
kD sJ ‚| j d „ |fD « « }|d d
|
|||
|
|
kD sJ ‚t
|
|||
|
|
j t « 5 | j |« d d d « t
|
|||
|
|
j t « 5 | j ||fg« d d d « t
|
|||
|
|
j t « 5 | j ||fg« d d d « t
|
|||
|
|
j t « 5 | j ||g« d d d « y # 1 sw Y Œ«xY w# 1 sw Y Œ�xY w# 1 sw Y ŒWxY w# 1 sw Y y xY w) Nr@ Údoc_annotationrA rB rC r7 rE rF Úspeedr c 3 ó K — | ] }|–— Œ y w©N© )Ú.0Úegs r ú <genexpr>z)test_language_evaluate.<locals>.<genexpr>c s è ø€ Ð1¡y œ"¡yùs ‚ ) r rH rI r rJ ÚevaluaterL rM rN )r= r rP r rR Úscoress r Útest_language_evaluater_ Z sA € Ø €DØ °cÀsÑ)KÐ LÐ
|
|||
|
|
M€FÜ
|
|||
|
|
|
|||
|
|
ˆc�i‰i˜tŸz™z¨#›Ô
|
|||
|
|
/€CÜ× Ñ VÓ,€GØ
|
|||
|
|
�\‰\˜7˜)Ó
|
|||
|
|
$€FØ �'‰?˜QÒ Ð Ð ð �\‰\Ñ1¨¡yÓ1Ó
|
|||
|
|
1€FØ �'‰?˜QÒ Ð Ð ô
|
|||
|
|
� ‰ ”yÕ !Ø � ‰ �WÔ ÷
|
|||
|
|
"ô
|
|||
|
|
� ‰ ”yÕ !Ø � ‰ �t˜V�nÐ%Ô&÷
|
|||
|
|
"ô
|
|||
|
|
� ‰ ”yÕ !Ø � ‰ �s˜F�m�_Ô%÷
|
|||
|
|
"ä � ‰ ”yÕ !Ø � ‰ �d˜F�^Ô$÷
|
|||
|
|
"Ð !÷
|
|||
|
|
"Ð !ú÷
|
|||
|
|
"Ð !ú÷
|
|||
|
|
"Ð !úç !Ð !ús0 Â E ÃE(Ä E4Ä?F Å E%Å(E1Å4E=Æ F c óð — t j d« d„ « }d}ddddœi}t t « « } | |« }| j d« | j t j ||« g« y) zoTest that docs are processed correctly within Language.pipe if the
|
|||
|
|
component doesn't expose a .pipe method.Útest_evaluate_no_pipec ó — | S rX rY r s r Úpipez#test_evaluate_no_pipe.<locals>.pipex ó € àˆ
|
|||
|
|
r r@ rA rB rC r7 N)r
|
|||
|
|
Ú componentr r: r] r rJ )r= rc r rP r s r ra ra t sv € ô ×ÑÐ/Ó0ñó 1ðð €DØ 3°CÑ8Ð
|
|||
|
|
9€FÜ
|
|||
|
|
”5“7Ó
|
|||
|
|
€CÙ
|
|||
|
|
|
|||
|
|
ˆd‹)€C؇L�LÐ(Ô)؇L�L”'×#Ñ# C¨Ó0Ð1Õ2r c ó — t | « }|j d« }dD ] }|j |« Œ |j « ddddœi}|j d« }t j ||« }|j |g« }|j d« j }|D ] }|d j |« �ŒJ ‚ |j j j « D ] } | |vsŒ|d j | « €Œ J ‚ y) z8Test that evaluate works with a multilabel textcat pipe.Útextcat_multilabel©ÚFEATUREÚREQUESTÚBUGÚQUESTIONrA rB )ri rl r@ Úcats_f_per_typeN)r
|
|||
|
|
r: r; r< Úmake_docr rJ r] Úget_pipeÚlabelsÚgetÚ referencerA Úkeys)
|
|||
|
|
Úen_vocabr= rg r> rP r rR r^ rp Úkeys
|
|||
|
|
r Ú test_evaluate_textcat_multilabelrv „ sý € ä
|
|||
|
|
�8Ó
|
|||
|
|
€CØ Ÿ ™ Ð&:Ó;ÐÛ:ˆØ×$Ñ$ UÕ+ð ;à‡N�NÔà #°3Ñ7Ð
|
|||
|
|
8€FØ
|
|||
|
|
|
|||
|
|
�,‰,�}Ó
|
|||
|
|
%€CÜ× Ñ VÓ,€GØ
|
|||
|
|
�\‰\˜7˜)Ó
|
|||
|
|
$€FØ
|
|||
|
|
�\‰\Ð.Ó
|
|||
|
|
/×
|
|||
|
|
6Ñ
|
|||
|
|
6€FÛˆØÐ'Ñ(×,Ñ,¨UÓ3Ñ?Ð?Ð?ð à× Ñ ×%Ñ%×*Ñ*Ö,ˆØ �fÒ ØÐ+Ñ,×0Ñ0°Ó5Ñ=Ð =Ð=ñ -r c óx — t | « }|j d« }dD ] }|j |« Œ |j d« }dD ] }|j |« Œ |j « ddddddddœi}|j d « }t j ||« }|j |g« }|j |j d
|
|||
|
|
« j } | D ] }|d j |« �ŒJ ‚ |j j j « D ] }
|
|||
|
|
|
|
|||
|
|
| vsŒ|d j |
|
|||
|
|
« €Œ J ‚ y )
|
|||
|
|
z|Test that evaluate evaluates the final textcat component in a pipeline
|
|||
|
|
with more than one textcat or textcat_multilabel.r6 r7 rg rh rA rB rC ©r8 r9 ri rl r8 r9 r@ r" rm N)r
|
|||
|
|
r: r; r< rn r rJ r] ro Ú
|
|||
|
|
pipe_namesrp rq rr rA rs ) rt r= r6 r> rg rP r rR r^ rp ru s r Ú$test_evaluate_multiple_textcat_finalrz ˜ sC € ô �8Ó
|
|||
|
|
€CØ�l‰l˜9Ó%€GÛ)ˆØ×ј%Õ ð *à Ÿ ™ Ð&:Ó;ÐÛ:ˆØ×$Ñ$ UÕ+ð ;à‡N�NÔð ØØØØØØñ
|
|||
|
|
|
|||
|
|
ð €Fð �,‰,�}Ó
|
|||
|
|
%€CÜ× Ñ VÓ,€GØ
|
|||
|
|
�\‰\˜7˜)Ó
|
|||
|
|
$€Fà
|
|||
|
|
�\‰\˜#Ÿ.™.¨Ñ,Ó
|
|||
|
|
-×
|
|||
|
|
4Ñ
|
|||
|
|
4€FÛˆØÐ'Ñ(×,Ñ,¨UÓ3Ñ?Ð?Ð?ð à× Ñ ×%Ñ%×*Ñ*Ö,ˆØ �fÒ ØÐ+Ñ,×0Ñ0°Ó5Ñ=Ð =Ð=ñ -r c óô ‡ — d„ Š t j j d« ˆ fd„« }t | « }|j ddddii¬« }dD ] }|j |« Œ |j d « }d
|
|||
|
|
D ] }|j |« Œ |j
|
|||
|
|
« d d d
|
|||
|
|
d d d d
|
|||
|
|
dœi}|j d« }t j ||« }|j |g« } d| v sJ ‚|j d« j }
|
|||
|
|
t | d j « « t |
|
|||
|
|
« k( sJ ‚d| v sJ ‚|j d « j }
|
|||
|
|
t | d j « « t |
|
|||
|
|
« k( sJ ‚y)z_Test that evaluate can evaluate multiple textcat components separately
|
|||
|
|
with custom scorers.c óŽ — t j | dfddi|¤Ž}|j « D ��ci c] \ }}d|› �|“Œ
|
|||
|
|
c}}S c c}}w )NrA Ú multi_labelFÚcustom_)r Ú
|
|||
|
|
score_catsÚitems)ÚexamplesÚkwargsr^ ÚkÚvs r Úcustom_textcat_scorezEtest_evaluate_multiple_textcat_separate.<locals>.custom_textcat_score¾ s[ € Ü×"Ñ"Ø Ø ñ
|
|||
|
|
ð ð
|
|||
|
|
ð ñ
|
|||
|
|
ˆð .4¯\©\¬^Ô<©^¡T Q¨�'˜!˜�
|
|||
|
|
˜qÑ ¨^Ò<Ð<ùÓ<s AÚtest_custom_textcat_scorerc ó •— ‰ S rX rY )r… s €r Úmake_custom_textcat_scorerzKtest_evaluate_multiple_textcat_separate.<locals>.make_custom_textcat_scorerÇ s ø€ à#Ð#r r6 Úscorerz@scorers©Úconfigr7 rg rh rA rB rC rx r@ Úcustom_cats_f_per_typerm N)r+ r Úscorersr
|
|||
|
|
r: r; r< rn r rJ r] ro rp Úsetrs ) rt rˆ r= r6 r> rg rP r rR r^ rp r… s @r Ú'test_evaluate_multiple_textcat_separater� º sŽ ø€ ò=ô ‡^�^×ÑÐ 8Ó9ó$ó :ð$ô �8Ó
|
|||
|
|
€CØ�l‰lØؘ:Ð'CÐDÐEð ó €Gó *ˆØ×ј%Õ ð *à Ÿ ™ Ð&:Ó;ÐÛ:ˆØ×$Ñ$ UÕ+ð ;à‡N�NÔð ØØØØØØñ
|
|||
|
|
|
|||
|
|
ð €Fð �,‰,�}Ó
|
|||
|
|
%€CÜ× Ñ VÓ,€GØ
|
|||
|
|
�\‰\˜7˜)Ó
|
|||
|
|
$€Fà # vÑ -Ð-Ð -Ø
|
|||
|
|
�\‰\˜)Ó
|
|||
|
|
$×
|
|||
|
|
+Ñ
|
|||
|
|
+€FÜ ˆvÐ.Ñ/×4Ñ4Ó6Ó 7¼3¸v»;Ò FÐFÐ Fà Ñ &Ð&Ð &Ø
|
|||
|
|
�\‰\Ð.Ó
|
|||
|
|
/×
|
|||
|
|
6Ñ
|
|||
|
|
6€FÜ ˆvÐ'Ñ(×-Ñ-Ó/Ó 0´C¸³KÒ ?Ð?Ñ ?r c ó0 — | xj dz
|
|||
|
|
c_ | S )Nr )Úvectorr s r Úvector_modification_piper’ î s € ؇J‚J�!�O…JØ €Jr c ó$ — d| j d< | S )NÚbarÚfoo)Ú user_datar s r Ú
|
|||
|
|
userdata_piper— ó s € Ø €C‡M�M�%ÑØ €Jr c óP — t | ddd¬« }| xj |fz
|
|||
|
|
c_ | S )Nr r ÚFIRST)r> )r
|
|||
|
|
Úents)r Úspans r Úner_piperœ ø s' € Ü ��Q˜ Ô )€D؇H‚H��Ñ…HØ €Jr c ó$ — dg d¢fdg d¢fdg d¢fgS )Nr+ )gš™™™™™¹¿çš™™™™™É¿ç333333Ó¿Úworld)rž rŸ gš™™™™™Ù¿rc )gffffffæ?gš™™™™™é?gÍÌÌÌÌÌì?rY rY r r Úsample_vectorsr¡ þ s( € ð
|
|||
|
|
Ò$Ð%Ø Ò$Ð%Ø ’ Ð!ð ð r c ó: — t j dt ¬« t j dt ¬« t j dt ¬« t | j |« | j d« | j d« | j d« | S )NÚ&test_language_vector_modification_pipe©ÚfuncÚtest_language_userdata_pipeÚtest_language_ner_pipe)r
|
|||
|
|
re r’ r— rœ r rH r: )r= r¡ s r Únlp2r¨ st € ä ×ÑØ0Ô7Oõô
|
|||
|
|
×ÑÐ4¼=ÕIÜ ×ÑÐ/´hÕ?Ü�c—i‘i Ô0؇L�LÐ9Ô:؇L�LÐ)Ô*؇L�LÐ.Ô/Ø €Jr c ó — g d¢} | S )N)z Hello world.zThis is spacy.z-You can use multiprocessing with pipe method.z Please try!rY )Údatas r Útextsr« s € ò €Dð €Kr Ú n_processé c óê — t « }t |t « s|dk rO|dz }|D �cg c]
|
|||
|
|
} | |« ‘Œ }}| j ||d¬« }t ||« D ] \ }}t ||« Œ y y c c}w )Nr é
|
|||
|
|
©r¬ Ú
|
|||
|
|
batch_size)r Ú
|
|||
|
|
isinstancer rc Úzipr ) r¨ r¬ r« Úopsr Ú expectedsr1 r Ú expected_docs r Útest_language_piper· sw € ä
|
|||
|
|
Ó
|
|||
|
|
€CÜ�#”xÔ I°¢Mؘ‘
|
|||
|
|
ˆÙ,1Ó2©E D‘T˜$•Z¨Eˆ Ð2Ø�y‰y˜¨)ÀˆyÓBˆä!$ T¨9Ö!5Ñ ˆC� Ü ˜c <Õ 0ñ "6ð %2ùâ2s ©A0c óJ ‡ — t « }t |t « s|dk rƒt j |« }t j
|
|||
|
|
|« \ }}ˆ fd„|D « }‰ j
|
|||
|
|
||d¬« }d} t j t ||« | « D ] \ }
|
|||
|
|
} t |
|
|||
|
|
| « Œ y y )Nr c 3 ó. •K — | ] } ‰|« –— Œ y wrX rY )rZ r r¨ s €r r\ z,test_language_pipe_stream.<locals>.<genexpr>3 s øè ø€ Ð3©F D‘T˜$—Z©Fùs ƒr° é )
|
|||
|
|
r r² r Ú itertoolsÚcycleÚteerc Úislicer³ r ) r¨ r¬ r« r´ Ú stream_textsÚtexts0Útexts1rµ r1 Ún_fetchr r¶ s ` r Útest_language_pipe_streamrà , s‘ ø€ ä
|
|||
|
|
Ó
|
|||
|
|
€CÜ�#”xÔ I°¢Mä —‘ uÓ-ˆ Ü"Ÿ ™ |Ó4‰ˆ�Û3©FÓ3ˆ Ø�y‰y˜¨9ÀˆyÓCˆàˆÜ!*×!1Ñ!1´#°d¸IÓ2FÈÖ!PÑ ˆC� Ü ˜c <Õ 0ñ "Qð %2r c ó — t « }t |t « s| dk �r:t « }|j d« |j « ddg}t
|
|||
|
|
j t « 5 ||d « ddd« t
|
|||
|
|
j t « 5 t |j || ¬« « ddd« |j t « t
|
|||
|
|
j t « 5 t |j || ¬« « ddd« |j t « t |j || ¬« « }t |« dk( sJ ‚ ||d « yy# 1 sw Y ŒèxY w# 1 sw Y Œ¶xY w# 1 sw Y ŒoxY w)z3Test that the error handling of nlp.pipe works wellr Úmerge_subtokensz-Curious to see what will happen to this text.z
|
|||
|
|
And this one.r N©r¬ )r r² r r r: r< rL rM r Úlistrc Úset_error_handlerr r Úlen©r¬ r´ r= r« r1 s r Ú test_language_pipe_error_handlerrË ; s € ô Ó
|
|||
|
|
€CÜ�#”xÔ I°£MÜ‹iˆØ � ‰ Ð&Ô'Ø �‰ÔØ@À/ÐRˆä
|
|||
|
|
�]‰]œ:Õ
|
|||
|
|
&Ù ��a‘ŒM÷ 'ä
|
|||
|
|
�]‰]œ:Õ
|
|||
|
|
&Ü �—‘˜%¨9�Ó5Ô 6÷ 'à × Ñ œkÔ*Ü
|
|||
|
|
�]‰]œ:Õ
|
|||
|
|
&Ü �—‘˜%¨9�Ó5Ô 6÷ 'ð × Ñ œlÔ+Ü�C—H‘H˜U¨i�HÓ8Ó9ˆÜ�4‹y˜AŠ~Ð ˆ~Ù ˆE�!‰H�
|
|||
|
|
ð# %2÷ 'Ð
|
|||
|
|
&úç
|
|||
|
|
&Ð
|
|||
|
|
&ú÷ 'Ð
|
|||
|
|
&ús$ Á) E  E(Ã) E4Å E%Å(E1Å4E=c ó& — t j dt ¬« t « }t |t
|
|||
|
|
« s|dk �r9t
|
|||
|
|
« }|j d« g d¢}t j t « 5 t |j |« « ddd« |j t « t j d« }t" j$ j' |d« 5 }t |j ||¬« « }|d k( rG|j) « |j* dk( sJ ‚t- |« |j* z t- |« k( sJ ‚|D �cg c] }|j. ‘Œ c}g d
|
|||
|
|
¢k( sJ ‚ ddd« yy# 1 sw Y ŒèxY wc c}w # 1 sw Y yxY w) zETest the error handling of a custom component that has no pipe methodÚmy_evil_componentr¤ r )úTEXT 111úTEXT 222úTEXT 333úTEXT 342úTEXT 666Nr+ r. rÆ r )rÎ rÐ rÒ ©r
|
|||
|
|
re r r r² r r r: rL rM r rÇ rc rÈ r4 r, r- r ÚpatchÚobjectÚ
|
|||
|
|
assert_calledÚ
|
|||
|
|
call_countrÉ r ) rt r¬ r´ r= r« r3 Ú mock_warningr1 r s r Ú'test_language_pipe_error_handler_customrÙ S sE € ô
|
|||
|
|
×ÑÐ*´ Õ@Ü
|
|||
|
|
Ó
|
|||
|
|
€CÜ�#”xÔ I°£MÜ‹iˆØ � ‰ Ð(Ô)ÚLˆÜ
|
|||
|
|
�]‰]œ:Õ
|
|||
|
|
&ä �—‘˜%“ Ô !÷ 'ð × Ñ œjÔ)Ü×"Ñ" 7Ó+ˆÜ
|
|||
|
|
�Z‰Z×
|
|||
|
|
Ñ
|
|||
|
|
˜v yÔ
|
|||
|
|
1°\ô ˜Ÿ™ °)˜Ó<Ó=ˆDð ˜AŠ~Ø ×*Ñ*Ô,Ø#×.Ñ.°!Ò3Ð3Ð3ܘ4“y <×#:Ñ#:Ñ:¼cÀ%»jÒHÐHÐHÙ(,Ó-© �C—H“H¨Ñ-Ò1UÒUÐ UÑU÷ 2Ð
|
|||
|
|
1ð %2÷ 'Ð
|
|||
|
|
&üò .÷ 2Ð
|
|||
|
|
1ús+ Á4E6Ã!A-FÅFÅ!
|
|||
|
|
FÅ6E?ÆFÆFc óœ — t j dt ¬« t « }t |t
|
|||
|
|
« s|dk �rxt
|
|||
|
|
« }|j d« g d¢}t j t « 5 t |j |d¬« « ddd« |j t « t j d« }t" j$ j' |d « 5 }t |j |d|¬
|
|||
|
|
« « }|d k( rG|j) « |j* dk( sJ ‚t- |« |j* z t- |« k( sJ ‚|d d j. |d d fd
|
|||
|
|
k( sJ ‚|d d j. |d d fdk( sJ ‚|d d j. |d d fdk( sJ ‚ ddd« yy# 1 sw Y �Œ&xY w# 1 sw Y yxY w)z8Test the error handling of nlp.pipe with input as tuplesrÍ r¤ r )©rÎ éo )rÏ éÞ ©rÐ iM )rÑ iV ©rÒ iš T)Ú as_tuplesNr+ r. )rà r¬ r r rÛ rÞ rß rÓ )rt r¬ r´ r= r« r3 rØ Útupless r Ú0test_language_pipe_error_handler_input_as_tuplesrâ o s¤ € ô
|
|||
|
|
×ÑÐ*´ Õ@Ü
|
|||
|
|
Ó
|
|||
|
|
€CÜ�#”xÔ I°£MÜ‹iˆØ � ‰ Ð(Ô)ò
|
|||
|
|
ˆô �]‰]œ:Õ
|
|||
|
|
&Ü �—‘˜%¨4�Ó0Ô 1÷ 'à × Ñ œjÔ)Ü×"Ñ" 7Ó+ˆÜ
|
|||
|
|
�Z‰Z×
|
|||
|
|
Ñ
|
|||
|
|
˜v yÔ
|
|||
|
|
1°\ܘ#Ÿ(™( 5°DÀI˜(ÓNÓOˆFð ˜AŠ~Ø ×*Ñ*Ô,Ø#×.Ñ.°!Ò3Ð3Ð3ܘ6“{ \×%<Ñ%<Ñ<ÄÀEÃ
|
|||
|
|
ÒJÐJÐJؘ1‘I˜a‘L×%Ñ% v¨a¡y°¡|Ð4Ð8IÒIÐ IÐIؘ1‘I˜a‘L×%Ñ% v¨a¡y°¡|Ð4Ð8IÒIÐ IÐIؘ1‘I˜a‘L×%Ñ% v¨a¡y°¡|Ð4Ð8IÒIÐ IÑI÷ 2Ð
|
|||
|
|
1ð %2÷ 'Ñ
|
|||
|
|
&ú÷ 2Ð
|
|||
|
|
1ús Á4 F5Ã#CGÆ5F?ÇG c ó” — t j dt ¬« t j dt ¬« t « }t |t « s|dk rât d« D �cg c] }t |« › d�‘Œ }}t « }|j d« |j d« |j « t j t « 5 t |j! ||d¬« « }d d d « |j# t$ « t |j! ||d¬« « }t' |« d
|
|||
|
|
k( sJ ‚y y c c}w # 1 sw Y ŒRxY w) z4Test the error handling of a component's pipe methodÚmy_perhaps_sentencesr¤ r) r éd z is enough. Doner¯ r° NéY )r
|
|||
|
|
re r% r) r r² r ÚrangeÚstrr r: r< rL rM r rÇ rc rÈ r rÉ )rt r¬ r´ Úir« r= r1 s r Ú%test_language_pipe_error_handler_piperê � s € ô
|
|||
|
|
×ÑÐ-Ô4IÕJÜ ×ÑÐ+Ô2DÕEÜ
|
|||
|
|
Ó
|
|||
|
|
€CÜ�#”xÔ I°¢MÜ6;¸C´jÓA±j°”C˜“F�8Ð+Ò,°jˆÐAÜ‹iˆØ � ‰ Ð+Ô,Ø � ‰ Ð)Ô*Ø �‰ÔÜ
|
|||
|
|
�]‰]œ:Õ
|
|||
|
|
&䘟™ °)ȘÓKÓLˆD÷ 'ð × Ñ œlÔ+Ü�C—H‘H˜U¨iÀB�HÓGÓHˆä�4‹y˜BŠÐ ‰ð %2ùÚA÷
|
|||
|
|
'Ð
|
|||
|
|
&ús Á#D9à D>Ä>Ec ó — t « }t |t « s| dk rÒt « }d|_ ddgdz }t j t « 5 t |j || ¬« « ddd« t |_ | dk( r?t j t « 5 t |j || ¬« « ddd« yt |j || ¬« « }t |« dk( sJ ‚yy# 1 sw Y Œ†xY w# 1 sw Y yxY w) ú$Test the error handling for make_docr r¯ Ú12345678901234567890Ú12345rÆ Nr r ©
|
|||
|
|
r r² r r Ú
|
|||
|
|
max_lengthrL rM r rÇ rc r Údefault_error_handlerrÉ rÊ s r Ú0test_language_pipe_error_handler_make_doc_actualrò ¤ s× € ô
|
|||
|
|
Ó
|
|||
|
|
€CÜ�#”xÔ I°¢MÜ‹iˆØˆŒØ'¨Ð1°BÑ6ˆÜ
|
|||
|
|
�]‰]œ:Õ
|
|||
|
|
&Ü �—‘˜%¨9�Ó5Ô 6÷ 'ä$0ˆÔ!Ø ˜Š>Ü— ‘ œzÕ*Ü�S—X‘X˜e¨y�XÓ9Ô:÷ +Ð*ô ˜Ÿ™ °)˜Ó<Ó=ˆDÜ�t“9 ’>Ð !‘>ð %2÷ 'Ð
|
|||
|
|
&ú÷ +Ð*ús Á C3 C?Ã3C<Ã?Dc óv — t « }t |t « s| dk rŽt « }d|_ ddgdz }t j t « 5 t |j || ¬« « ddd« t |_ t |j || ¬« « }t |« dk( sJ ‚yy# 1 sw Y ŒBxY w)rì r r¯ rí rî rÆ Nr rï rÊ s r Ú3test_language_pipe_error_handler_make_doc_preferredrô ¹ sœ € ô
|
|||
|
|
Ó
|
|||
|
|
€CÜ�#”xÔ I°¢MÜ‹iˆØˆŒØ'¨Ð1°BÑ6ˆÜ
|
|||
|
|
�]‰]œ:Õ
|
|||
|
|
&Ü �—‘˜%¨9�Ó5Ô 6÷ 'ä$0ˆÔ!Ü�C—H‘H˜U¨i�HÓ8Ó9ˆÜ�4‹y˜AŠ~Ð ‰~ð %2÷ 'Ð
|