77 lines
15 KiB
Plaintext
77 lines
15 KiB
Plaintext
|
Ë
|
|||
|
|
?û gf& ã óD — d dl Z d dlZd dlmZmZ d dlmZ d dlmZ d dl m
|
|||
|
|
Z
|
|||
|
|
d dl m Z ddlm
|
|||
|
|
Z
|
|||
|
|
ej d „ « Zej d
|
|||
|
|
„ « Zej d „ « Zej d „ « Zd
|
|||
|
|
„ Zd„ Zd„ Zd„ Zd„ Zd„ Zd„ Zd„ Zd„ Zd„ Z d„ Z d„ Z d„ Z d„ Z y)é N)ÚregistryÚutil©ÚEnglish)ÚAttributeRuler)ÚDoc)ÚExampleé )Ú make_tempdirc ó — t « S ©Nr © ó úiC:\Users\garci\AppData\Roaming\Python\Python312\site-packages\spacy/tests/pipeline/test_attributeruler.pyÚnlpr
|
|||
|
|
s
|
|||
|
|
€ ä ‹9Ðr c óN — ddigddiggdddœdœddiggd d
|
|||
|
|
idœddiggd d id
|
|||
|
|
dœgS ©NÚORTHÚaÚ
|
|||
|
|
irrelevantÚtheúCase=Nom|Number=Plur©ÚLEMMAÚMORPH©ÚpatternsÚattrsÚtestr Úcatr úCase=Nom|Number=Singr )r r Úindexr r r r Ú
|
|||
|
|
pattern_dictsr# sm € ð " 3˜-˜ ¨F°LÐ+AÐ*BÐCØ $Ð/EÑFñ
|
|||
|
|
ð
|
|||
|
|
Ð'Ð(Ð)°W¸eÐ4DÑEð " 6Ð*Ð+Ð,Ø Ð 5Ð6Øñ
|
|||
|
|
ð
|
|||
|
|
ð
|
|||
|
|
r c ó — dddœdddœdœS )NÚPUNCTÚperi)ÚPOSÚ PunctTypeÚcomm)ú.ú,r r r r Útag_mapr, $ s € ð ¨6Ñ
|
|||
|
|
2Ø ¨6Ñ
|
|||
|
|
2ñ ð r c ó — ddddddœiiS )NÚDTr ÚDETr ÚNom)r' r ÚCaser r r r Ú morph_rulesr2 , s € à �5 %°#¸uÑEÐFÐ GÐGr c óN — t | j g d¢g d¢¬« } | |« }t t |« « D ]j }|dk( r2|| j dk( sJ ‚t || j « dk( rŒ8J ‚|| j dk( sJ ‚t || j « dk( rŒjJ ‚ y )N©ÚThisÚisr r r* ©r. ÚVBZr. ÚNNr* ©ÚwordsÚtagsé r% zPunctType=periÚ )r ÚvocabÚrangeÚlenÚpos_ÚstrÚmorph©ÚrulerÚdocÚis r Ú
|
|||
|
|
check_tag_maprI 1 s € Ü
|
|||
|
|
|
|||
|
|
Ø
|
|||
|
|
� ‰ Ú.Ú
|
|||
|
|
+ô €Cñ
|
|||
|
|
�‹*€CÜ
|
|||
|
|
”3�s“8Ž_ˆØ �Š6Ø�q‘6—;‘; 'Ò)Ð )Ð)Ü�s˜1‘v—|‘|Ó$Ð(8Ó8Ð 8Ð8à�q‘6—;‘; "Ò$Ð $Ð$Ü�s˜1‘v—|‘|Ó$¨Ó*Ð *Ð*ñ
|
|||
|
|
r c óv — t | j g d¢g d¢¬« } | |« }t t |« « D ]~ }|dk7 r2|| j dk( sJ ‚t || j « dk( rŒ8J ‚|d j dk( sJ ‚|d j dk( sJ ‚t |d j « dk( rŒ~J ‚ y ) N)r5 r6 r r r* r7 r: r
|
|||
|
|
r> r/ r zCase=Nom)r r? r@ rA rB rC rD Úlemma_rE s r Úcheck_morph_rulesrL A sµ € Ü
|
|||
|
|
|
|||
|
|
Ø
|
|||
|
|
� ‰ Ú0Ú
|
|||
|
|
+ô €Cñ
|
|||
|
|
�‹*€CÜ
|
|||
|
|
”3�s“8Ž_ˆØ �Š6Ø�q‘6—;‘; "Ò$Ð $Ð$Ü�s˜1‘v—|‘|Ó$¨Ó*Ð *Ð*à�q‘6—;‘; %Ò'Ð 'Ð'Ø�q‘6—=‘= CÒ'Ð 'Ð'Ü�s˜1‘v—|‘|Ó$¨
|
|||
|
|
Ó2Ð 2Ð2ñ r c óx — | j d« }|D ] } |j d i |¤Ž Œ | d« }|d j dk( sJ ‚t |d j « dk( sJ ‚|d j dk( sJ ‚t |d j « dk( sJ ‚|j d « sJ ‚|j d
|
|||
|
|
« sJ ‚y ) NÚattribute_rulerúThis is a test.r
|
|||
|
|
r r é r r! r r r )Úadd_pipeÚaddrK rC rD Úhas_annotation)r r# r ÚprG s r Útest_attributeruler_initrU R sÁ € Ø � ‰ Ð&Ó'€AÛ
|
|||
|
|
ˆØ
|
|||
|
|
ˆ�‰‰
|
|||
|
|
�‹
|
|||
|
|
ð á
|
|||
|
|
|
|||
|
|
Ð Ó
|
|||
|
|
€CØ ˆq‰6�=‰=˜EÒ !Ð!Ð !Ü ˆs�1‰v�|‰|Ó Ð 6Ò 6Ð6Ð 6Ø ˆq‰6�=‰=˜EÒ !Ð!Ð !Ü ˆs�1‰v�|‰|Ó Ð 6Ò 6Ð6Ð 6Ø × Ñ ˜gÔ &Ð&Ð &Ø × Ñ ˜gÔ &Ð&Ñ &r c óZ — | j d« }|j d„ |¬« | d« }|d j dk( sJ ‚t |d j « dk( sJ ‚|d j d k( sJ ‚t |d j « d
|
|||
|
|
k( sJ ‚|j d « sJ ‚|j d « sJ ‚| j
|
|||
|
|
d« t j d
|
|||
|
|
« d„ « }ddd
|
|||
|
|
ii| j d d d< | j d« | j « | d« }|d j dk( sJ ‚t |d j « dk( sJ ‚|d j d k( sJ ‚t |d j « d
|
|||
|
|
k( sJ ‚|j d « sJ ‚|j d « sJ ‚y )NrN c ó — g S r
|
|||
|
|
r r r r ú<lambda>z3test_attributeruler_init_patterns.<locals>.<lambda>b ó € ™Rr ©r rO r
|
|||
|
|
r r rP r r! r r Úattribute_ruler_patternsc óN — ddigddiggdddœdœddiggd d
|
|||
|
|
idœddiggd d id
|
|||
|
|
dœgS r r r r r r[ zCtest_attributeruler_init_patterns.<locals>.attribute_ruler_patternsm sm € ð & s˜m˜_°¸ Ð/EÐ.FÐ GØ#(Ð3IÑJñ
|
|||
|
|
ð
|
|||
|
|
# FÐ+Ð,Ð-¸À%Ð8HÑ Ið & vÐ .Ð /Ð 0Ø!Ð#9Ð:Øñ
|
|||
|
|
ð
|
|||
|
|
|
|||
|
|
ð
|
|||
|
|
|
|||
|
|
r r ú@miscÚ
|
|||
|
|
initializeÚ
|
|||
|
|
components)
|
|||
|
|
rQ r^ rK rC rD rS Ú remove_piper ÚmiscÚconfig)r r# rF rG r[ s r Ú!test_attributeruler_init_patternsrc _ s¿ € à �L‰LÐ*Ó +€EØ ×Ñ‘Z¨-ÐÔ8Ù
|
|||
|
|
|
|||
|
|
Ð Ó
|
|||
|
|
€CØ ˆq‰6�=‰=˜EÒ !Ð!Ð !Ü ˆs�1‰v�|‰|Ó Ð 6Ò 6Ð6Ð 6Ø ˆq‰6�=‰=˜EÒ !Ð!Ð !Ü ˆs�1‰v�|‰|Ó Ð 6Ò 6Ð6Ð 6Ø × Ñ ˜gÔ &Ð&Ð &Ø × Ñ ˜gÔ &Ð&Ð &؇O�OÐ%Ô&ô ‡]�]Ð-Ó.ñ
|
|||
|
|
ó /ð
|
|||
|
|
ð" �WÐ 8Ð9ðA€C‡J�Jˆ|Ñ ˜\Ñ*Ð+<Ñ=ð ‡L�LÐ"Ô#؇N�NÔÙ
|
|||
|
|
|
|||
|
|
Ð Ó
|
|||
|
|
€CØ ˆq‰6�=‰=˜EÒ !Ð!Ð !Ü ˆs�1‰v�|‰|Ó Ð 6Ò 6Ð6Ð 6Ø ˆq‰6�=‰=˜EÒ !Ð!Ð !Ü ˆs�1‰v�|‰|Ó Ð 6Ò 6Ð6Ð 6Ø × Ñ ˜gÔ &Ð&Ð &Ø × Ñ ˜gÔ &Ð&Ñ &r c óö — | j d« }t |j « rJ ‚|j |« t |j « sJ ‚|j d„ « t |j « rJ ‚y)z)Test that initialization clears patterns.rN c ó — g S r
|
|||
|
|
r r r r rX z0test_attributeruler_init_clear.<locals>.<lambda>’ rY r N)rQ rA ÚmatcherÚ add_patternsr^ )r r# rF s r Ú test_attributeruler_init_clearrh Œ sf € à �L‰LÐ*Ó +€EÜ�5—=‘=Ô!Ð!Ð !Ø ×Ñ�}Ô%Ü ˆu�}‰}Ô Ð Ð Ø ×Ñ‘ZÔ Ü�5—=‘=Ô!Ð!Ð !Ð!r c ó& — | j d« }|j d„ |¬« | d« }|d j dk( sJ ‚t |d j « dk( sJ ‚|d j d k( sJ ‚t |d j « d
|
|||
|
|
k( sJ ‚| j d« }t
|
|||
|
|
j |d g d ¢i« g}| j |« }|d
|
|||
|
|
t j d« k( sJ ‚|d �J ‚| j d« t j d« d„ « }| j ddddii¬« }|j d„ |¬« | j |ddi¬« }|d dk( sJ ‚d|v sJ ‚d
|