o ^Ph$@sddlmZddlZddlZddlZddlZddlmZddlZddl m Z ddl m Z dZ e ddd ZdddZddddDZd?ddZd@d d!Zhd"Zd#d$hZhd%Zhd&Zd'hZhd(Zd)ZdAd-d.ZdBd0d1Zdr-)i i i iscCsv|sdS|dddd}|ddtD}|dd d d d d d d}td|}tdd|}|S)Nr'    cSsi|]}t|dqSr()ordr*rrr $sz_normalize..u–-u—u（(u）)NFKC[ \t]+)replace translate_ZW unicodedata normalizeresubstrip)r/rrr _normalize s$ rCtext List[str]cCs*t|}dd|dD}dd|DS)NcSsg|]}t|qSr)rCr+xrrr -z_prep_lines..r1cSsg|]}|r|qSrr)r+lnrrrrH.rI)rCsplit)rDlinesrrr _prep_lines*srM> 시작일 종료일성명성별임기직위직책 (시작일) (종료일) 선임절차 임명권자 주요경력당연직여부선임절차규정u상임기관장u 기관장> 변경전 변경후 변경 전 변경 후 변경사유>rWrXrZr[rY>rPrQrRrSrTrUrV)u사장u원장u 이사장u 대표이사u 부사장u 본부장tok str | Noneboolcs&sdStfddtDS)NFc3s|]}|VqdSr()endswith)r+r/rarrr-Asz$_looks_like_title..)rBanyTITLE_HINT_SUFFIXrerrer_looks_like_title=srhtcCs(|tvp|tvp|tvp|tvp|tvSr() ALL_LABELS LABEL_FLOW LABEL_BLOCKROW_START_SYNONYMS CHANGE_TOKENS)rirrr _is_labelCsro endpoint_urlcCst||d}z|}Wn tyi}YnwdD]}||}t|tr1|dr1|Sqt d|j }|r@| dSdS)u https://alio.go.kr/download/pdf.json?... 응답에서 PDF URL을 추출. 키가 들쭉날쭉하므로 여러 후보 + 백업 정규식으로 탐색. )r )fileUrlpdfUrlr file_pathfileurlpdfz.pdfzhttps?://[^\s\"']+?\.pdfrr') rjson Exceptionr isinstancer lowerrdr@searchrDgroup)rpr rjkvmrrr_fetch_pdf_url_from_alio_jsonNs    rraw_textcs0t|t}dfdd }g}d}d}||kr |}|tvr||p(|}|}g} d} ||kr|} | d vru|d 7}||krM|d krM|d 7}||krtt|stt|sc|tvrh|d 7}qM| ||d 7} q/| d vr|d 7}||kr|d kr|d 7}||krt|st|s|tvr|d 7}q| ||d 7} q/| d kr|d 7}g} ||krt|s| ||d 7}||krt|rd| } nt| r| dvrn|d 7}||ks3|r| rd| dd} |ddd|| | fDt ||d }q|t vrN|||d 7}||krMt|sM|||d 7}||krMt|r6q|t vr|d }|g}||kr}t|s}|||d 7}||kr}t|rf|d||}q|t vs|tvr|}g}||kr|} | t vs| t vs| tvrnB| t vs| tvr|| |d 7}||krt|s| dkr׈|}|||d 7}||krt|rΐq |r|d||}q|||d 7}||ksdd|D}d|S)uD 규칙: - 라벨 체인(직위/성명/직책/성별/임기/(시작일)/(종료일))은 가능한 한 줄로 이어 붙임 예) '직위 상임기관장 성명 김동철' / '임기 (시작일) 2023... (종료일) 2026...' - '주요경력'은 헤더 1줄 + 항목들 각 1줄 유지 - '선임절차/선임절차규정/당연직여부/임명권자'는 '라벨 + 값'을 한 줄로 - '변경 전/변경 후/변경사유' 블록은 직전 '직위' 값을 추정해 요약 한 줄: 예) '상임이사 서근배 공석 의원면직(5.19)' idxintr r csTt|dtd|ddD]}|}|rt|rq |ds#|tvr'|Sq dS)Nu이사r')rangemaxrordrm)rr}riLrrguess_position_beforeqs z9_linearize_text_for_export..guess_position_beforerr'>r\r^rrP>r]r_r`r3>rPNcss|]}|r|VqdSr(rrFrrrr-r.z-_linearize_text_for_export..rScSs*g|]}|r|rtdd|qS)r:r3)rBr@rArFrrrrHs*z._linearize_text_for_export..r1)rrr r ) rMlenrnrorhrmappendjoinrBrrlrk LABEL_INLINE)rnroutilast_pos_valueriposr|namesreasontt reason_bufbodybufrrr_linearize_text_for_exportds      *       g ralio_pdf_json_urldictcCs6t|}|s tdt|j}t|}t|}d|iS)u 1) alio pdf.json → PDF URL 추출 2) PDF 다운로드 → 텍스트 추출 3) 기대 레이아उ트로 선형화 4) {"text": "..."} 반환 u2PDF URL을 alio json에서 찾지 못했습니다.rD)r RuntimeErrorrcontentr&r)rpdf_urlrurDlinearrrrendpoint_to_text_jsons r)r)r r r r r r)rrr r )r/r r r )rDr r rE)rarbr rc)rir r rc)rpr r r r r )rr r r )rr r r)! __future__rr!r@rvr>typingrrpdfminer.high_levelrpdfminer.layoutrUArrr&rr=rCrMrjrmrnrkrlrrgrhrorrrrrrrs4