U >j@s<ddlZddlZddlZddlZddlZddlZddlZddlZddlZddl Z ddl m Z ddl m Z ddlmZddlmZddlmZddlZddlmZddlmZdd lTdd lmZdd lmZdd lmZm Z dd l!m"Z"Gddde#Z$Gddde#Z%Gddde&e Z'e(j)j*Z*e(j)j+Z+GdddZ,dS)N)contextmanager)Enum) permutations)Path)List) BeautifulSoup) cmf_context)*)CmfPluginImportMixin) ConfluenceApi)EmptySQLiteQueueBroker) JQLNormalizerc@seZdZdZdS)ObjectModifiedErroru<Объект был изменен после импортаN__name__ __module__ __qualname____doc__rr"./modules/confluence/api_import.pyrsrc@seZdZdZdS)RemoteDeletedSourceErroruФайл существует локально, но удален в исходной системе (нет метаданных)Nrrrrrr!src@s eZdZdZdZdZddZdS) GetPageModeu=Способ получения страниц через APIZbatchsinglecCs|jSNvalueselfrrr__str__+szGetPageMode.__str__N)rrrrBATCHSINGLErrrrrr&src@seZdZdZdZdddZeejdddZ d d Z d d Z d dZ ddZ ddZddZed7edddZeddZeddZedddZeeed d!d"Zedd#d$Zd%d&Zd8edd(d)Zedd*d+Zeeed,d-d.Z d/d0Z!d9d1d2Z"d3d4Z#d5d6Z$d7d8Z%ed9d:d;Z&dd?Z(d@dAZ)dBdCZ*dDdEZ+eedFdGdHZ,dIdJZ-dKdLZ.d:dOdPZ/dQdRZ0d;dTdUZ1dVdWZ2dXdYZ3dZd[Z4d\d]Z5d^d_Z6ddpdqZ?drdsZ@dtduZAdvdwZBdxdyZCdzd{ZDd|d}ZEd~dZFddZGddZHeddZIddZJddZKd=ddZLddZMddZNddZOddZPedddZQddZRddZSddZTedddZUddZVddZWddZXddZYddZZddZ[ddZ\ddZ]d>ddZ^ddZ_ddZ`ddZaddZbddZcddZdddZeddZfddÄZgddńZhddDŽZiddɄZjed?dd˄Zkdd̈́Zld@ddτZmddфZnddӄZoddՄZpddׄZqddلZrddۄZsdd݄Ztdd߄ZuddZvddZwddZxddZyddZzddZ{ddZ|ddZ}ddZ~ddZddZddZddZddZddZddZddZddZddZddZdd Zd d Zd d ZddZdAeedddZddZddZddZddZddZddZdd Zd!d"ZdBd#d$Zd%d&Zd'd(Zd)d*Zedd+d,ZdCd-d.ZdDd/d0ZdEeed1d2d3ZdFd5d6ZdS(GConfluenceAPIImportu;Класс загрузки объектов через API).meta.dirty.trashed.remote CmfDocument CmfFolder)pagefolder) confluence cmf_importcCs||_||_|jjrdnd|_|j|_|jjjj|_||jj d|_ t j j dd|_|||||||jjddt|_dS)N accountIduserKeyZimport_settingszdefault.system:defaultcodeF)log)r+r,clouduser_keyZget_download_path download_pathplugin source_hash_normalize_settings json_settingssettingsmodelsZ CmfWorkflowgetdefault_workflow_setup_config_params_setup_rest_client_logger_setup_queue_broker_logger_setup_projects_dir_setup_expand_params_setup_fallback_personget_max_processes threadinglocal_local)rr+r,rrr__init__Cs zConfluenceAPIImport.__init__c Csttdd|_ttdd|_ttdtj|_|jtjtjfkrv|jj d|jdtjdtjd tjd tj|_ttd dpd|_ ttd d pd |_ ttddpd|_ ttddpd|_t|j|_ttddpd|_ttd|_dS)uBНастраивает параметры конфигурацииZ"IMPORT_CONFLUENCE_DOWNLOAD_THREADSZIMPORT_REFRESH_DUMPFZIMPORT_CONFLUENCE_GET_PAGE_MODEuNНедопустимое значение 'IMPORT_CONFLUENCE_GET_PAGE_MODE': 'u+'. Допустимые значения: '', 'u'. Проверьте настройки в config.py. Будет установлено значение по умолчанию: ''Z IMPORT_CONFLUENCE_GET_PAGE_LIMITZ&IMPORT_CONFLUENCE_GET_ATTACHMENT_LIMITZ#IMPORT_CONFLUENCE_GET_COMMENT_LIMIT2Z$IMPORT_CONFLUENCE_DUMP_LAST_PAGE_VERrZ$IMPORT_CONFLUENCE_PROC_LAST_PAGE_VERZIMPORT_QUEUE_BROKER_DIRN)getattrconfignum_download_threadsZ refresh_dumprr page_moder!r,loggerwarning page_limitattachment_limit comment_limitdump_last_versions_countbool dump_versionsprocess_last_versions_countqueue_broker_dirrrrrr=Ys$ z(ConfluenceAPIImport._setup_config_paramscCs*td}|jjj|_||jjjdS)u/Настраивает логгер rest_clientzatlassian.rest_clientNloggingZ getLoggerr,rQZhandlersZsetLevellevelrrQrrrr>|s  z-ConfluenceAPIImport._setup_rest_client_loggercCs*td}|jjj|_||jjjdS)u0Настраивает логгер queue_brokerZ queue_brokerNr[r^rrrr?s  z.ConfluenceAPIImport._setup_queue_broker_loggercCs |jd|_|jjdddS)uCПодготовка каталога для пространствprojectsTexist_okN)r4joinpath projects_dirmkdirrrrrr@sz'ConfluenceAPIImport._setup_projects_dirc Csdddg}ddg}|jjr$|dddg}d g}d d d d g}ddddg}|jjr\|dddg}dddddddg}d||_d||||||_d||_d||_d||dg||_dS)ukНастройка списка свойств для расширения данных в запросах ancestorszhistory.lastUpdatedzhistory.ownedByz body.editorz body.storagezbody.atlas_doc_formatzchildren.attachment.versionzchildren.commentzmetadata.labelsz$restrictions.read.restrictions.groupz#restrictions.read.restrictions.userz&restrictions.update.restrictions.groupz%restrictions.update.restrictions.userzcontent.body.editorzcontent.body.storagezcontent.body.viewzcontent.versionzcontent.body.atlas_doc_formatzextensions.inlinePropertieszextensions.resolutionzdescription.plainzhomepage.history.lastUpdatedzhomepage.history.ownedByz-homepage.restrictions.read.restrictions.groupz,homepage.restrictions.read.restrictions.userz/homepage.restrictions.update.restrictions.groupz.homepage.restrictions.update.restrictions.user, body.viewN) r+r2appendjoin expand_spaceexpand_current_pageZexpand_trashed_pageexpand_version_pageexpand_comment) rmainbodychildrenmetadata restrictionsversion extensionsspacerrrrAsT     z(ConfluenceAPIImport._setup_expand_paramscCs>|jjjd}t||_|jr2tjj|d|_nt j |_dS)u Устанавливает резервного пользователя, если пользователь не будет найден в методе _get_person() default_user_id)idN) r,r8rr;rW_is_default_userr: CmfPerson_fallback_persongZ system_user)rrvrrrrBs  z*ConfluenceAPIImport._setup_fallback_personNnamec csd}|r|d|}|jj|t}dVt|}t|d\}}t|d\}}dt|ddt|dd|d } |r|d| } |jj| dS) u0Замеряет время выполненияu Запуск. N<uВыполнено за 02d:06.3f)r,rQinfotime perf_counterdivmodint) rr}Z log_startstartelapsedhours remainderminutessecondsZ log_timerrrrtimers $zConfluenceAPIImport.timerccsr|j|}|d}z@|r,||n |jdd||_|V||||_Wntk rlYnXdS)u|Контекстный менеджер для атомарного обновления директории проектаr$Tr`N)rcrb with_suffixexistsreplacerd project_dir Exception)r space_key clean_dir dirty_dirrrrproject_directorys      z%ConfluenceAPIImport.project_directoryccs|j|}|d}zNd}|r0||n|r>d}n |jdd||fV|rb||Wntk rzYnXdS)u~Контекстный менеджер для атомарного обновления директории контентаr$TFr`N) contents_dirrbrrrrdr)r content_idrrZshould_replacerrrcontent_directorys     z%ConfluenceAPIImport.content_directory)returncCs2dttjjttjjdddgddddgS)NZ current_user)emailr})r}fieldsselectedObjects)r}r import_type)strr{Zcurrent_personrr}rrrrcalc_import_settingss   z(ConfluenceAPIImport.calc_import_settings)r9rcCsdd|DS)uOПреобразуем список с настройками в словарьcSsi|]}|d|qSr|r.0srrr sz;ConfluenceAPIImport._normalize_settings..r)r9rrrr7sz'ConfluenceAPIImport._normalize_settingscCsgS)uo Для импорта из Confluence предварительный просмотр не требуется rrrrrpreview!szConfluenceAPIImport.previewc Csggd}d}t|ddd}|D]}|ddkr|dddD]*}d}|||j}|rL|d|qL|dd dD]t} d}|jjrd |jd | d d } nd |jd | d d } d dd| dg} tj j | d} | r|d| q|ddkr*|dddD]8}|dkr,d}|||j}|r|d|q|dd dD]} |dkrvd}|jjrd |jd | d d } nd |jd | d d } d dd| dg} tj j | d} | rd|d| qdq*|j r|r||_ |j r|jdd|jdd|jgdddgg} tjj| d|drntj|j|jd|ddjdd|drtj|j|jd|ddjdddS)N)readwriterr operationruserresultsZprivategroup::rwr}ext_idLIKE%filterupdatereadonlyrTZ save_importparent==r,!=)rr,Z access_levelsubjects)listvalues _get_personr3rhr+r2r6r:CmfPersonGroupr;import_original perm_policy is_changedsaveZperm_aclloadZ CmfAccessRule bulk_deleter,) r content_obj content_dataZpermsrrr restrictionrperson group_infor_filterrrrr_process_content_restrictions%sz          z1ConfluenceAPIImport._process_content_restrictionsFc Csr|j|d}|d}|r.t|t|d&}|D]}|t |dq@W5QRX| |dS)N.jsonr$a+ ) r4rbrrosremoveopenrjsondumpsr)rZapi_funcr}Z overwrite file_pathZ file_path_tmpfrowrrr _simple_dumpfs     z ConfluenceAPIImport._simple_dumpc csJ|j|d}|rFt|d}|D]}t|Vq*W5QRXdS)Nrr+)r4rbrrrloads)rr}rrrrrr _simple_getps  zConfluenceAPIImport._simple_get)textattachments_dirobjc sd|sdS|jjdtj|jj}t|d ddD]"}| drNdnd}|j |sbq:zddd d d g}t fd d |DrWq:t drWq:d}dst |r|jjdWq:tj} | js | js tj|jjtj} | jdr8| j|jjkr8| j|jsP|jjdWq:tjdddd} t| \} } | s|jjd| Wq:tj| } || }|jd|d}tjj||jd}|stj|j||jd}||_| |_ d|_!|"t#Wq:t$k r\}z$t%|jjdd|W5d}~XYq:Xq:dS) Nu/Обработка ссылок в текстеlxmlcSs|dp|dSNhrefsrchas_attrtagrrrz1ConfluenceAPIImport._dump_links..rrz /attachments/z /thumbnails/z /thumbnail/z /display/z/servlet/benryanconversionc3s|]}|kVqdSrr)rZurl_parturlrr sz2ConfluenceAPIImport._dump_links../display/~([^/]+)(?:/)?$z3\b[A-Za-z0-9._%+-]+@[A-Za-z0-9.-]+\.[A-Z|a-z]{2,}\bzmailto:uЭто почта: httpuHЭто внешняя ссылка, оставляем как есть: /r?ruЭто не файл: rrw)r obj_ext_idr6)r,rrr6Fu6Не удалось обработать ссылку : )&r,rQrurllibparseurlparser+rrfind_allrattrsanyresearch startswithrRschemenetlocurljoinpathunquotesplit mimetypes guess_typer:r'Z _get_filenamerbr6CmfImportDownloadr;r} downloadedr cmf_commitrZ cmf_rollback)rrrrparsed_confluence_urlrkeyZ url_partsZ email_pattern parsed_urlr} mime_typeencoding file_namerr download_joberrr _dump_linksxs|           zConfluenceAPIImport._dump_linksc sz ||WSd}|jj||ds<|jj||dsP|jj||dr|jjrp|jjdd}n|jjdd}fdd|D| d}t |d }| t d W5QRX|jjd |d YnXdS) Nz%operations,status,email,personalSpaceexpandr-)usernamerc3s*|]"\}}|ks|dkr||fVqdS)Nrrkv user_inforrrsz5ConfluenceAPIImport._get_user_info.. users.jsonrru4Информация о пользователе ID u добавлена в дамп)_get_user_info_from_dumpr+Z get_user_infoZget_user_info_by_keyZget_user_info_by_usernamer2Zget_user_detailritemsrbrrrrr,rQr)ruser_id dump_pathrZ user_detail users_pathrrrr_get_user_infos$   z"ConfluenceAPIImport._get_user_infocCs|dD]}||j|kr&|S|dd|krF|S|dd|krf|S|dd|kr|S|dd|kr|S|dd|kr|S|dd|kr |Sq td |d dS) Nusersr}rruserNamer displayNameZfullNameuПользователь 'u!' не найден в дампе)rr;r3lowerr)rrrrrrrrs  z,ConfluenceAPIImport._get_user_info_from_dumpcCshddddddddd d d d d d d d}i}z|jd}t|dd}|j||}|jjrV|D]}|dd|ddf}||} | sqd|| | ggdd} |dr@|ddr|ddddd} || |j | d | |ddr@| d |ddddd|dddddd|d rdd!| d"<qdnr|d#kr$|D]}|dd|dd$f}||} | sqd|| | ggdd} |d%} | d&} | dkr| d'}|||j | d |n4| dkr | d d| din| d"krdd!| d"<qdn|D]}|d(D]}||d&|d&ggdd} |d)r||d)|j | d |d)|d*r| d d|d*i|d)s4|d*s4d!| d"<q4q(|j d+}| rt|t|d,*}d-d.|D|d/}t||W5QRXWn>tk rb}z|jjd0|d1d2d3d4W5d}~XYnXdS)5N EDITSPACE REMOVEPAGEZEDITBLOGZ REMOVEBLOGCOMMENT REMOVECOMMENTCREATEATTACHMENTREMOVEATTACHMENT VIEWSPACEREMOVEOWNCONTENTSETPAGEPERMISSIONSSETSPACEPERMISSIONSZ EXPORTSPACE))r)create)r)delete)blogpostr-)r/r.)commentr-)r0r.) attachmentr-)r1r.)rur)rur.)ruZ delete_own)ruZrestrict_content)ruZrestrict)ruZ administer)ruZexportrs.rrZ targetTypeF) permissionrgroups anonymousrrrr-rrr4rwr})rwr}ZanonymousAccessTr5 Z operationKeysubjecttyper.ZspacePermissionsr Z groupNamepermissions.jsonrcSsg|]}|qSrrr_rrr asz?ConfluenceAPIImport._dump_space_permissions..) convertedZoriginalu@Не удалось сдампить права доступа. zERR-0056 CmfProjectdump)obj_type error_type) system_inforrr+Zget_space_permissionsr2r; setdefaultrr4rhrrbrrrrrrr?rr, log_error)rrZ mapping_typeZpermissions_dictZconfluence_versionZ main_version permissionsr3rtype_permrr7Z subject_typer3Zpermission_typepermission_filerZpermissions_dataexcrrr_dump_space_permissionss                   z+ConfluenceAPIImport._dump_space_permissionsc s@g}t}jd}|rPt|d"}t|}fdd|D}W5QRXt}jD]}| r`|j j r|q`|d}|r`t|F}t|D]4}|ddkrq| |j||kr||qW5QRX|q`t|d}tjt||dd d W5QRX||} | D]} | jq&d S) us Собирает пользователей из файла users.json в каталогах документов rrcsh|]}t|jqSr)rr3)rurrr vsz5ConfluenceAPIImport._collect_users..r8r5w+Findent ensure_asciiN)setrrbrrrrriterdiris_dirr}endswithEXCLUDED_DIR_SUFFIXESaddr3rhunlinkr?r differencerr4) rZ current_usersZcurrent_user_ids users_filerZ new_user_idsZdoc_dirrrZ diff_usersrrrr_collect_usersms4          z"ConfluenceAPIImport._collect_usersc csx|jd}|D]^}|jdr&q|d}|sP|jjd|dqt |d}t |VW5QRXqdS)Nr_)r$r# info.jsonuNОтсутствует файл info.json в каталоге проекта 'rJrK) r4rbrTr}rVrr,rQrRrrr)rrcr info_filerrrr _get_projectss      z!ConfluenceAPIImport._get_projects) applink_idc Cs:|jd}t|d}t|}W5QRX||p8iS)N applinks.jsonr)r4rbrrrr;)rr`rrapplinksrrr _get_applinkss  z!ConfluenceAPIImport._get_applinksc Csvddlm}i}|jD]$}||dd|d<|||d<q|jd}|d}tj ||d d W5QRXdS) Nr) cmf_hashlibZrpcUrlr6rwrawFrR) Zcmf.utilrdr+Z get_applinksZ short_str_encr4rbrrr?)rrdrbapplinkrrrrr_dump_applinkss   z"ConfluenceAPIImport._dump_applinksccs|jjrX|jj|ddD]&}|V|jj|ddddEdHq|jj|ddEdHn|jj|ddddEdH|jj|ddEdHdS) NrerrwrKlimitrcurrent)rkrstatus)r)r+r2Zget_root_pages_from_spaceZget_descendantsZ get_all_pages_from_space_archiveget_all_pages_from_spaceZget_all_pages_from_space_trash)rrZ root_pagerrr_get_all_space_contents,  z*ConfluenceAPIImport._get_all_space_contentc sli_fdd}i}|D]}|d}|dg}t|D]X\}} |dkrh|ddkrbdnd } n||d d} || t| d|| | qB|r|d d} ndd d } | |dd } || t|||| q"jd} | d}t j j|dddW5QRXdd| D_ jd}| d}t j j |dddW5QRXdS)NcsV|d}|jkrdS||d|d|d|did||kd}|j|<dS)Nrwr8rmtitlertposition)rwr8rmrprqr is_homepage)all_content_metar;)content parent_idr content_meta homepage_idrrr add_contents  zAConfluenceAPIImport._build_content_hierarchy..add_contentrwrerrmarchivedarchiverootrtrash)rztrashedall_content_meta.jsonrfFrOrRrQcSsi|]\}}|t|qSr)rrrrrrsz@ConfluenceAPIImport._build_content_hierarchy..parent_to_children.json)rsror; enumeraterCrSrXrrbrrr?rparent_to_children)rrrxryrrtrreiZancestorZancestor_parent_idZdirect_parent_idZstatus_to_parentall_content_filerparent_to_children_filerrwr_build_content_hierarchys6       z,ConfluenceAPIImport._build_content_hierarchyc Csggggdddd}|jD]\}}|d}|d}|dkrp|d||dd kr|d |n.|d kr|d |n|d kr|d||dkr|ddd7<|dkr |ddd7<q t|j}|jj|jd|jjdt|ddt|d d|jjdt|d |jjdt|d|jjd|d|ddd|ddd|S)Nr)pagesfolders)root_ids current_ids archived_ids trashed_idstotalsrmr8rlrrr|rrzrrrr)rrr}r*ru' Статистика контента:u Текущий: u, из них u - корневойu В архиве: u В корзине: u, Всего (страниц/папок):  (r)) rsrr;rhlenr,rQr log_space)rstatsrrtrm content_typetotalrrr_calculate_content_stats sD     &z,ConfluenceAPIImport._calculate_content_statsc Cs|jj||jd}|jj|jd||t||d<|j d}| d}t ||W5QRX||jd$|did}|||W5QRX|jstd |}|d |d <|d |d <| d}t ||W5QRX|S)Nru8 Дамп прав доступа (Разрешения)rr]rfu? Получение структуры пространстваhomepagerwuPПустой проект или возможно нет прав доступаr root_pagesrZarchived_pages)r+Z get_spacerjr,rQrrrJrrrbrrr?rr;rrsCmfErrorr)rrrrur^rrxZ content_statsrrr _dump_space6s$       zConfluenceAPIImport._dump_space) new_users content_dirc s|d}z$|d}t|}W5QRXWntk rFg}YnXfdd|D}|D]>}|shq^|ddkrvq^|j}||kr^||||q^|d}tj||dd d W5QRXdS) NrrKcsh|]}|jqSr)r3)rrrrrrM[sz.r8r5rfrOFrP) rbrrrFileNotFoundErrorr3rXrhr?) rrrr[rZexisting_usersZexisting_user_idsZnew_userZ new_user_idrrr_append_content_usersRs$        z)ConfluenceAPIImport._append_content_userscCst|dS)Nzutf-8)hashlibZsha256encodeZ hexdigest)rZ body_datarrr_get_body_hashjsz"ConfluenceAPIImport._get_body_hashc CsD|d}|jjd|d|d}zZt|d}t|}W5QRX|ddd}|d } |d d } |d p~d } Wn$tk rd}d} d} d } YnXg} | |dd| |ddid| |ddt |d dd} | D](}|dddD]}| |q q | | ||ddkr|d}|j dd|dd}|didrd}n>d}|d}|d}|d }tj||d!dd"W5QRX|d#d r|j||f|dd$d#d r |j|n|d%}|d&||d d'd(}| rZ| |krZ|d d | in|j||d)f|d*}||dddk}| dko|j| ko|j| kp|jdk}|r|s|r|ddd+}|j||f|jr|j|d <t||d,<|d }tj||d!dd"W5QRX|jd-dS).Nrw[ID:u] Дамп метаданныхr]rKhistory lastUpdatedwhen body_hashroviewlast_versions_countr createdBybyownedByrrrrrr8r) attachmentsTr`rpr1_linksnextFattachments.jsonrfrOrPsizer0 comments.jsonrstoragerrmversionsnumberrdocument)r,rQrrbrrrr;rrhrrrrdr?content_attachments_queueputcontent_comments_queue write_textrrcontent_rendered_queuerVrcontent_versions_queuerinc_stat)rrrrrr^r current_dataZcurrent_last_updatedZcurrent_body_hashZcurrent_body_viewZcurrent_last_versions_countrrrrrrr skip_dumpattachments_dataattachments_file comments_fileZ new_body_hash versions_dirZ has_updatedZversions_config_changedcurrent_versionrrr_dump_content_basicms|                  z'ConfluenceAPIImport._dump_content_basicrlrLc Cstddt|jrq||j|j}|j|7_W5QRXz|jj|jd|d|d||jj |||||j d}|sWq||D]|}z0| |d\}}| |||W5QRXWqt k r } z&|jjd|dd | d d d W5d } ~ XYqXqWqt k rx} zH|jj|jd|d|d|j d|d| d dd dWYq|W5d } ~ XYqXqW5QRXd S)u4Получение контента пакетамиFZinit_views_and_dsuB Дамп метаданных пакета страниц: start=z, limit=z , status=)rrkrmrrwr=] Не удалось получить метаданные. ERR-0025r? error_coderANu^ Не удалось получить метаданные пакета страниц: start=z , expand=r~r'rr@rA)rr, is_cancel start_lock_startrQrrr+rnrkrrrrD) rrrmrkrcontentsrtrrrIrrr_dump_content_basic_batchsJ ( z-ConfluenceAPIImport._dump_content_basic_batchc Cs tdd|js|jr"qz|jdd}Wn0tjk rb|rZ|jrZYqYq YnX|d}zD|j j ||j |dd}| |\}}| |||W5QRXWn@tk r}z"|jjd|d |d d d W5d }~XYnX|q W5QRXd S)u5Получение контента по одномуFr?timeoutrwrmrrmrrrr?rN)r stop_eventis_setr,rr;queuer emptyr+get_page_by_idrkrrrrD task_done)r content_queuervrrrrrIrrr_dump_content_basic_singles4    z.ConfluenceAPIImport._dump_content_basic_singleTcCs2|r$|jtjkr$|j|||jdn ||dS)N)rrmrk)rPrr rrSr)rr all_contentrrmrrr_dump_content_basic_workersz.ConfluenceAPIImport._dump_content_basic_workerc Cszh|jd|}|d}|d}|D]2}|d} |d} |jjr^d|d| d} n$|dd } | d | krxd nd d 7} |j|jj| } d |kr|d d} ntd| } | r| dnd} |d| }t j j ||jdddgd}|s t j ||j|j d}| |_ | |_|| d| |_|jsL|| d| s,d|_||_|q,tWnDtk r}z$|j jd|d|ddddW5d}~XYnXdS)Nrrrwrpzrest/api/content/z/child/attachment/z /downloadrdownloadr&z download=truersrz[?&]version=(\d+)r}r}rr)rr6r)rr6r,r2Fruf] Ошибка при планировании задач на скачивание вложений. rr?T)rrArollback)r6rbr+r2 url_joinerrrrrr:rr;r,r}rrrrrimport_raw_jsonrrrrD)rrrrrcontent_ext_idZattachments_clean_dirZattachments_dirty_dirattatt_idr Z download_linkZ download_urlrsZ att_ext_idr rIrrr_schedule_download_jobs(s\       z+ConfluenceAPIImport._schedule_download_jobsc Cstdd||js|jr(qz|jdd\}}Wn2tjk rn|rf|jrfYqYqYnXd|d}|jj |d| |\}}zz| d}|r| d }t|} W5QRXnFd d |jj||jd d D} | d}tj| |dddW5QRXWnDtk r^} z$|jj|d| dddg} W5d} ~ XYnX||| ||W5QRX|qW5QRXdS)NFrrrr]u Дамп вложенийrrKcSsg|]}|qSrr)rrrrrr<{szHConfluenceAPIImport._dump_content_attachments_worker..rsrjrfrOrPuM Не удалось получить метаданные вложений. rr?r)rrrr,rr;rr rrQrrrbrrrr+Zget_all_attachmentrTr?rrDrr) rrrr log_contentrrrrrrIrrr _dump_content_attachments_workerasH         z4ConfluenceAPIImport._dump_content_attachments_workerc Cstdd|js |jr(q z|jdd}Wn2tjk rj|rb|jrbYq YqYnXd|d}|jj |dz2dd |j j ||j |jdd D}g}g}|D]}|d s||n,|d d d }||kr||d|||dd||ddid||dd|jdq||V\} } | d} | d&} |D]}| t|dqW5QRX||| W5QRXWn@tk r} z |jj|d| dddW5d} ~ XYnX|qW5QRXdS)NFrrrrru" Дамп комментариевcSs"i|]}|ddkr|d|qS)rmrlrwr)rr0rrrrs zEConfluenceAPIImport._dump_content_comments_worker..)rkrrprerrwrprrrrrr0rrfru> Не удалось получить комментарии. rr?r)rrrr,rr;rr rrQrr+Zget_page_commentsrUrmrrhrrrbrrrrrrrDr)rrrrZcommentsrrootsr0rurrrrrIrrr_dump_content_comments_workers\          " z1ConfluenceAPIImport._dump_content_comments_workerc Cstdd|js|jr(qz|jdd\}}Wn2tjk rn|rf|jrfYqYqYnXd|d}|jj |dz| |\}}| d}t |d }t|} W5QRX|jj|d |d } | d d | d d i|| d dd} | | d<| d}tj| |dddW5QRXW5QRXWn@tk r} z |jj|d| dddW5d} ~ XYnX|qW5QRXdS)NFrrrrru= Дамп отрендеренного содержимогоr]rKrgrrorrrrrfrOrPuW Не удалось получить отрендеренное содержимое. rr?r)rrrr,rr;rr rrQrrrbrrrr+rrrr?rrDr) rrrZcontent_statusrrrr^rrZnew_datarrIrrr_dump_content_rendered_workersD       * z1ConfluenceAPIImport._dump_content_rendered_workerc Cstdd|js|jr(qz|jdd\}}Wn2tjk rn|rf|jrfYqYqYnXd|d}|jj |dg}| |\}}| d}|j d d | d } | rt| | |jj|||j|jd D]} t| tr&|jj|d | ddddq| d| ddd} | d} tj| | dddW5QRX|| d|jdq|||W5QRX|qW5QRXdS)NFrrrrru: Дамп версий (история изменений)z versions.jsonT) missing_okr)rrZ last_versionsu& Не удалось получить zERR-0038r'r?rZversion_rZ03drrfrOrrrs) rrrr,rr;rr rrQrrrbrYrshutilrmtreerdr+Zget_page_versionsrlrV isinstancerrDrrr?rhrrr) rrrrrrrrZ versions_filerZ page_version version_filerrrr_dump_content_versions_workersR            z1ConfluenceAPIImport._dump_content_versions_workercCspd|_g}t|jD](}tj||f|d}|||q||j |D] }|qT|j dS)Nr)targetargskwargs) rrangerOrDThreadrrhrirrSclear)rrrrthreadsrthreadrrr_run_dump_stage5s   z#ConfluenceAPIImport._run_dump_stagec Cs |jj|jd|drdnddt|_t|_t }t }t }t |_ t |_ t |_ t |_|dr|jtjkr|jD]&}|ddkr|dd kr||qnF|d D]<}|j|}|dd kr||q|dd kr||qd |j||d|d ddd|j||d|d d|jjdd|j||jjdd|j|j dd|j|j dd|j|jdd|j|j |jdg}|D]l} |jrdS| ddsq| |jd| d"|!| d| d| dW5QRXqdS) Nu Дамп allu всегоu!только выбранногоu контентаr8r*rm)rlrzidsrlrzu.Дамп метаданных контента)rrrm)r}rr target_kwargsu@Дамп метаданных контента (в архиве))r}rrrrun_ifu(Дамп метаданных папок)r}rrru*Дамп вложений контента)r}rru2Дамп комментариев контентаuMДамп отрендеренного содержимого контентаuJДамп версий контента (история изменений)rT r}rrr)"r,rQrRrrDLockrEventrrQueuerrrrrPrr rsrrrr+r2rrrrrrXrr;rr) rrselected_contentZselected_current_content_queueZselected_archived_content_queueZ folders_queuervrZpipelineZstagerrr_dump_space_contentsJs                 9 z(ConfluenceAPIImport._dump_space_contentscsgddtdfdd |dsfg|d<dD].}j|gD]}|d|dgdqHq6|dgD]F}|d rd |d krd |d d |qrd d<qrS)NT)rr)rtcs|ddsdd<gSg}|dsFddj|dgD|d<|dD]2}|drx||||dqNdd<qN|S) N isCheckedTFrrpcSsg|]}|dgdqS)Trwrrpr)rchild_idrrrr<szUConfluenceAPIImport._collect_selected_content.._walk_tree..rw)r;rextendrh)rtZ children_idschild _walk_treerrrrr s     zAConfluenceAPIImport._collect_selected_content.._walk_treerp)r|r{rrZ_archived_pagesrwrFr)dictr;rrhr )rrururZ root_contentrr r_collect_selected_contents(    z-ConfluenceAPIImport._collect_selected_contentc Cs|jd|_|jjdd|jD]V}|r&|jdr@q&|j}||j kr&| | d|j j |jd|dq&|jdgD]}|j j |jd |d |j|}| d }| d }| d}|r| |q|r| |q|r| |q|D]z}|j|}d D]*}| |} | r*| |qbq*|jdd|j |} |d} | tj| dddqdS)N documentsTr`r#r&u Контент ID:u был полностью удален, либо перемещен в другое пространство. Каталог помечен '.remote'r~u Контент ID uN удален в корзину. Он не будет импортированr$r%)r$r%r&rOFrP)rrbrrdrTrUr}rVstemrsrrr,rQrRrrr;rrrr) rZ selected_idsrrrrZ trashed_dir remote_dirsuffixZold_dirrv meta_filerrr_prepare_selected_content_dirssH                 z2ConfluenceAPIImport._prepare_selected_content_dirsc Cs|jD]}|jrdS|d}|d}|dp<|d}d|d|d|_z|jj|jd|d ||}|||W5QRX| |}||d <| |jd | |d W5QRX| |jd | ||W5QRX| |jd| W5QRX|jd}|tj|dddWqtk r}z,|jj|jd|d|dddddW5d}~XYqXqdS)Nrwr original_namer} [SPACE ID: KEY:ru$ Дамп пространства 'rJruK Подготовка каталогов для дампа контентаru Дамп контентаuH Агрегация пользователей из документовr#rOFrPu3 Ошибка дампа пространства ''. zERR-0026r>r?T)rr@rAr)selected_spacesr,rr;rrQrrrrrrrr\rrbrrrrrD) r space_metaspace_idr space_namerrrrIrrr _dump_spacess:     z ConfluenceAPIImport._dump_spacescCsH|jjjddr2|jjd||jjdn|jj dt j ddS)N load_usersTu#Дамп пользователейru4Дамп пользователей отключёнr]) r,r8rr;rQrrr+Z get_all_usersr1r\WARNINGrrrr _dump_usersGszConfluenceAPIImport._dump_usersc Csj|jd}|rdS|jdd|jD]4}|jjrJt|d}nt|ddddd}||}|jdd|d }t |d }t ||W5QRX|d }|jd }|jdd|jdd|j |dD]|} || |j d } t | d }t | |W5QRX|| |j d } | r@qt | d }t | |W5QRXqq.dS) Nr4Tr`rwr}rr;rr]rNrr)r4rbrrdr+Zget_all_groupsr2rrrrr?Zget_group_membersr3) r groups_dirrrZ group_dirZ data_filerZ users_dirZ all_users_dirrZuser_data_filerrr _dump_groupsNs4             z ConfluenceAPIImport._dump_groupscCs|j|_|jSr)r+Zget_system_inforBrrrr_get_system_infoks z$ConfluenceAPIImport._get_system_infoc Cs8|jd}t|d}tj||dddW5QRXdS)Nzsystem_info.jsonrfrOFrP)r4rbrrr?)rrZsystem_info_filerrrr_save_system_infoos  z%ConfluenceAPIImport._save_system_infoc Csf|jjd|ddrdnd}|jjd|d|dd |jjd |d d d dS) Nu-Сведения о системе ConfluenceZisCloudFZCloudZServerz Confluence rrsZUnknownz Confluence URL 'rrJ)r,rQrr;)rrZconfluence_typerrr_log_system_infotsz$ConfluenceAPIImport._log_system_infocCs |}||||dSr)r%r&r')rrrrr_collect_system_infos z(ConfluenceAPIImport._collect_system_infoc Cs|jddd}|ds"td|dg}|rrg|_|D]2}|dsJq<|d}|d|d<|j|qНе выбрано ни одного пространстваrpru=Для импорта выбрано пространств: rr}z [SPACE ID:rwrrz] 'rJ) r9rr;rcopyrhrr+Zget_all_spacesr,rQrr)rZ all_spacesrpru space_datarrrr_collect_selected_spacess&    z,ConfluenceAPIImport._collect_selected_spacesc Cs2|d|||W5QRXdS)Nu0Скачивание данных через API)rrir"rrrrr download_datas z!ConfluenceAPIImport.download_datac Csd}tdd|jr q|}|dkr4qtjj|ddddd gd }t|j}t|j}t|j }t|j  d } t | d krd | d dnd} d|d}|j r|j dd} | d} |d| dd}|jj| d|d|dzX|jj||tjd|jj| d|d|dd|_|t|jdWqtk r} z:|jj| d|d|d| d d!d"|dd#|d 7}W5d} ~ XYqXq||W5QRXdS)$NrFrDONEr}rrrrrwrrr}u[Страница ID: z] rrJrtfileSizeir.2fz MB)uСкачивание : 'ru Файл u сохранен в 'Tr1u"Ошибка скачивания rzERR-0027rr?)rr@rAZext_hrefr)rr,rr;r:rrr}rrrrrrrQrr+Z download_filerNZIMPORT_DOWNLOAD_TIMEOUTrrrrrrDr)rdownload_queue done_queueerrorsZdownload_job_idZ download_objr Zfile_urlrZ ext_id_splitZ page_id_msg file_sizeZ file_size_mbrIrrr_download_file_workersf       z)ConfluenceAPIImport._download_file_workercCst}t}d}|jdgdd|jgdddgddd gg}|jd }d}g}|jD]j}||d } t|  d st| d } d d| dgg} t j j || d} | rZ|| 7}| || qZ|s|jjd|S|jjd|g} t|jD]J} tj|jd| ||dd}| |||jjd|q|D],}t j j|dgdD]}||jqdqNt| D]}|dq|s| D]}|q|jr|jjd|s||7}q|jjd|dS)Nrzplugin.plugin.source_hashr6rrFr}rall_attachments.zipr_rrrrrruCОтсутствуют вложения для скачиванияu'Скачивание вложений: r6)r2r3rr}ru Запустили задачу --rrr-uИмпорт прерванuCЗакончили скачивание файлов, ошибок )rrr, load_fieldsr6r4rbrrrVr:rcountrhrQrrrOrDrr6rslistrrwrrrirrRr;)rr2r3Z has_errorsZ main_filterZ projects_pathZattachment_countfiltersruZ project_pathZ path_filterZdownload_countZprocsrprocZfilter_r rrrdownload_filessd         z"ConfluenceAPIImport.download_filesc cs>|j|d}|d}|D]}t|VqW5QRXdS)NrrK)rrbrrr)rrrrrrrr_get_content_comments!s z)ConfluenceAPIImport._get_content_commentscs0|D] }dfdd |dq dS)Nc s zz|ddkr4jjd|WWdSjd|d}tjj|dgd }|rp|jspWWdS|stj|jd }n | d g|d d r|d d ddkr҈ |d d j |_ nJ|d dr|d dddkr |d dj |_ nt j|_ |d d|_|d drl|d dddkrl |d dj |_n|j |_|d dr|d ddddkrЈ |d ddj |_|d dd|_n|j |_|j|_|ddd}|ddd}|rV|rVt|d}t|d}|||||ddd|jjD|_||_||_|dddkrzd |_|dd!dd"krd#|_|jd d$|d%D]}||q|WW4Sjjj j!d&|d'd d(YnXW5jddXdS))Nr0 processedrmZdraftuJНе обрабатываем черновики комментариев rrwrrr)rrr,**rrr8r5r createdDaterrrrorreditorrrcSsg|] }t|qSrrrxrrrr<TszQConfluenceAPIImport._process_content_comments..create..rtlocationinlineT resolutionZresolvedclosedrrpu9 Ошибка обработки комментария: zERR-0028rrr)"r,rrQrRr6r: CmfCommentr;rr;rr3 cmf_ownerr{anonymous_usercmf_created_at cmf_authorcmf_modified_bycmf_modified_atr_convert_mentions_convert_linksrirorprr tree_parentrKrmrrDrFr) r0rXrZ cmf_commentrrF view_soup editor_soupr rr-rrrr-)sv           z=ConfluenceAPIImport._process_content_comments..create)r0)N)rA)rrrr0rr[r_process_content_comments'sCz-ConfluenceAPIImport._process_content_commentsccsP|j|d}|D]4}|s$q|j}|dks|dr>q||dVqdS)Nrr7r#)r r)rrbrTis_filer}rV)rrattachments_pathrr rrr_get_content_attachmentsns z,ConfluenceAPIImport._get_content_attachmentsc Cstd|}|r|dnd}|r(|dnd}|D]~}d|krNt|dd}n4tj|dd}tj|j}|ddgd }|d |kst|d |kr0||kr0|Sq0|r|rt dS) Nz((?:att)?\d+)\.(\d+)r}rOrsrrr1rrprw) r fullmatchrrrrparse_qsqueryr;r) r rZ file_matchZfile_idZ file_versionattachrsrZ query_paramsrrr_get_attachment_meta{s$   z(ConfluenceAPIImport._get_attachment_metacCsg}|D]&}t|d}||jd|qdd|gdddgdd|gdddgg}tjj|d d }|r|jj|j j d |d t dS) Nrwrr=rrzNOT INr,Trinclude_deletedu Удалено u вложений) rrhr6r: CmfAttachmentrr,rQrRrFrr)rrrZattachment_ext_idsZatt_datarattachment_filterresultrrr_delete_content_attachmentss z/ConfluenceAPIImport._delete_content_attachmentscsPfdd}|D]$}||d|djddq&dS)Nc sddddg}d}z|}|r,|dnd}|r<|dn|}|rdjd|}tjj||d }|sd d |gd d gd d dgg}tjj||d}|stj|jdd}|jdd|jr|r||_nd|_ j |_ |rL|drL|d} | d|_ | dr6| dddkr6 | dj|_ntj|_|j|_||_t|d} |j| dddW5QRXd|_|jdd|r|dd} |j| ksttWntk rjjjjd|d|dYntk r<tjjjjd|d |d!|jd"| d# d$d%Yn@t k rzjjjjd&|d |d'd$dd(YnXdS))Nrrurl_preview_img url_previewrwrrprrCr}rfrrr:Tr}rr,rrrsrrr8r5rbFZ smart_backupZ mark_dirtyrtr/u Файл 'u)' существует локально 'uU', но удален в исходной системе (нет метаданных)u Размер файла '' (u@) не соответствует размеру из меты: z bytes / z byteszERR-0029ru< Не удалось обработать вложение 'rrr)!rer6r:rir;r,rrrZembeddedrprojectrRrr3rSr{rQrPrr upload_filerst_sizeAssertionErrorrrrQdebugrFrrDr) r rZattachment_fieldsr1Zattachment_metaZ attachment_idZattachment_nameZattachment_ext_idrjattachment_versionrZfile_size_metarrrrr_process_attachments       & zMConfluenceAPIImport._process_content_attachments.._process_attachmentr rr1rB)rlr_r,r)rrrrr|Zattachment_datarr{r_process_content_attachmentss ^z0ConfluenceAPIImport._process_content_attachmentsc Cs|ddd}|ddd}|ddd}|s<|s<|S|sH|rHd}z>t|d}t|d}t|d} |jjr zH|jj|jjd t |dd d} |j || d ||d WnXt k r|jjd } | dr| d|ddd7} |jj | d|dYnX|||||||||||| ||| ||| |||| |||| |j||| |d|||| |||| |||| |||| |||| |||| ||| ||| ||| | ||| |!||| |"|||#|||$|| |%|||&|| |j'||| |dd(dd|j)j*D} WnNt k r} z.|} |jj |jjd| d|d|dW5d} ~ XYnX| S)NrorrrrFz

html.parserruD Конвертация текста из atlassian разметкиZatlas_doc_formatrt)soupsubobjuS Не удалось конвертировать разметку страницыrs (версия rrzERR-0031rrrrcSsg|] }t|qSrrGrHrrrr<Psz=ConfluenceAPIImport._convert_content_text..uB Ошибка обработки текста документа. r~zERR-0039)+rr+r2r,rQrrFrrr_convert_atlas_docrr;rD_convert_text_color _convert_code_convert_panelrV_convert_status_convert_status_handy_convert_plantuml_convert_drawio_convert_msoviewer_convert_childpages_convert_task_filter_convert_excerpt_include_convert_include_convert_content_by_label_convert_details_summary_convert_anchor _convert_toc_convert_livesearch_convert_recently_updatedrW_convert_table_filter_convert_pivot_table _convert_tabs_convert_inline_comments_convert_excerpt_convert_detailsrirorp)rrrrrrrF storage_souprYrZ atlas_rawZexception_textrrIrrr_convert_content_textst                   z)ConfluenceAPIImport._convert_content_textc csj|j|d}|rfdd|D}|jdddd|D]&}|d}t|VW5QRXq>dS) NrcSsg|]}|r|qSr)r])rrrrrr<^sz=ConfluenceAPIImport._get_content_versions..cSs|jSrr|)rrrrr_rz;ConfluenceAPIImport._get_content_versions..T)rreverserK)rrbrrTsortrrr)rrrZ version_filesrrrrr_get_content_versions[s z)ConfluenceAPIImport._get_content_versionscCs8d|_d|_|jddtjjdd|gddtdS)u8 Удаляет все версии документа. NT)Z only_datarrfrg)Zcur_published_versioncur_workflow_versionrr:CmfDocumentHistoryrr)rdoc_objrrr_delete_all_content_versionses z0ConfluenceAPIImport._delete_all_content_versionsc CsF|d}|dr8|dddkr8||d|j}ntj}ttj|d ddd}|di}|d d k}z|d d d Wn8t k r|j j d|d d d diiYnX|||||d|d|||d||d||d||jd||j d} tjf| } |j||| d| _| jdd| S)Nrrr8r5r%Y%m%d%H%M%S%frtrmrlrorru\Некорректный дамп версии документа. Обновите дампrmessageTr)rrPrSrTrRrU cmf_versionZ doc_versionZ official_dateofficial_numberreasonrm cur_workflowZ has_publishedrrr,rr)r;rr3r{rQrdateutilparserrstrftimerr,rQrRrrr:rrrr) rr version_datarmversion_numberZversion_authorrZversion_contentZis_current_versionZdocument_history_dataZcmf_document_historyrrr_process_content_versionpsX   z,ConfluenceAPIImport._process_content_versioncCs"tj|dddd}|jdddS)uL Создает фейковую версию с текущей датой. FTr)rrZ cmf_deletedrrN)r:rr)rrZ fake_historyrrr_create_fake_content_versionsz0ConfluenceAPIImport._create_fake_content_version)doc_datac CsZ||ddd}|d}|d}|jjdd}d}t||D]\}} ||jkr\q,| d} d| d |d } zzN|jj |j j d | | || |} | j r| }t|dd7<WnNtk r|jj|j j d| d| d|dd|dd7<YnXW5|jd d XqD||_|jrF|jdd||t|S)Nr succeededfailedrwrpCLOSED status_typeru версии u документа 'rJrsrB Обработка rr}u! Ошибка обработки r~zERR-0033Trtrr)rworkflowget_default_statusrrrYr,rrQrrFrrrrrrDrrrr) rrrrkpage_idZ page_titleZdefault_statusr version_countrrZ log_page_verZdocument_historyrrr_process_content_versionssJ    z-ConfluenceAPIImport._process_content_versionsc Cs|j|}|sT|d}|r4d|d}n d|d}t|jd||d}|s|t|jd|d|d }t|}W5QRXg|d <|d }|r|d }t||d <W5QRX|S) Nr&uКонтент ID:un был полностью удален, либо перемещен в другое пространство.u-Не найден каталог дампа 'rJrr]u* Не найден файл данных 'rKrr) rrbrrrrrrr) rrrr error_msgr^rrrrrr_get_content_datas&        z%ConfluenceAPIImport._get_content_datac csV|jD]F}|r |j|js z||jVWq tk rNYq Yq Xq dSr) rrTrUr}rVrWrrr)rrrrr _get_contents s z!ConfluenceAPIImport._get_contentsc Cstddt|js|jr4q|j(|j|kr^|j W5QRqW5QRXz"|j j dd}|d}|d}WnZt k rYqYnBt k r}z$|jjd|dd WYqW5d}~XYnX|j*|jd7_|j|kr|j W5QRX|d}|d }d |d |j_z|jd krPd}n d|j}|jj|jjd|d||jd|} tjj | dddddgd} | st dd |d| jd |j_| jr||| } |j || ntdWqtk rX}z<|jj|jjd|d|dd} |j || W5d}~XYqt k r}z8|jj|jjd |d|d!d"d#d$|j |W5d}~XYqXq|j W5QRXW5QRXdS)%NFrr}rrwpayloadHОшибка при получении элемента очереди: ERR-0018rrprrruВсе версии.uПоследние: u5 Обработка версий документа 'rrrrrrrrCu4Документ не найден в системеz CODE:u:Документ изменен пользователемrrrruB Ошибка обработки версий документа 'ERR-0084r'Trr@r)rcmfutil disable_aclrrr,r counter_lockitems_processed_counterrS item_queuer;r rrDrFrrYrQrr6r:r'r0rrcompleterrRfailclose_local_conn) r max_itemsitemitem_idrvrIr content_titleZ num_ver_msgrrrkrrr_process_versions s             z%ConfluenceAPIImport._process_versions)labelscCsg}|D]t}|d}d|jd|d}tjjddd|dgd}|rT||q|jj|jjd|d|d d |d q|S) u; Возвращает список тегов документа Args: content_obj (CmfDocument): объект документа labels (list): список тегов страницы Confluence Returns: list: список тегов (CmfTag) rwrrrrru Не найден тег 'rrrzERR-0017r) r6r:CmfTagr;rhr,rDrFr)rrrtagslabelZlabel_idZ tag_ext_idrrrr_get_content_tagsb s  z%ConfluenceAPIImport._get_content_tagscCs|jd|d}tjj|dgd}|s@tj|d||jdd}|dd rj|j|jj|dd }n |jjjj }|j d |d |d |_ |j dd dS)u# Создает комментарий со ссылкой на оригинальную страницу в Confluence Args: content_obj (CmfDocument): объект документа content (dict): данные страницы Confluence z ::comment:rwrrCrOT)rZ log_levelrr,rrZwebuiu4 импортирован из Confluence: z"rN) r6r:rOr;r,r+rrr5Zext_urlZ verbose_namerr)rrrtZcomment_ext_idr0rrrr_add_external_link_comment| s,  z.ConfluenceAPIImport._add_external_link_commentcCs|j|d}tt|}|o(|jjdk}|r:|jjj}n$|j|dgd}|s^||j d|d}|j sr| ddg|j st ||S) Nr'r>rrCT)r,rrrDr)TYPE_MODEL_MAPr;varsr: root_parent class_namerudescr_documentrr,is_newr;rr)rrrrrcontent_model_nameZ content_modelZwiki_project_homepagerrrr_get_or_create_content_obj s(  z.ConfluenceAPIImport._get_or_create_content_objc Cs|dd}|jj|jjd||ddkr
Диаграмма: "{name}"
drawioz drawio-sketchimgdata-macro-namerzdiagramName=([^|]+)data-macro-parametersr}r}ru#Диаграмма с именем u@ не найдена во вложениях документа zERR-0019rrrr}r%.pngrr:100%zdiagramWidth=([^|]+)zdiagramHeight=([^|]+)r} attach_idwidthheightimg_srcrrr~rwzdrawio-macro-content- data-macro-iduUНеудалось конвертировать диаграмму из текста )rrrrrr:rir;r,rDr}rrwrrrformatfind replace_with currentTag)rrrYrZTAG_TMPLZ macro_namermatchr rd attach_imgrrdatarZ drawio_tagrrrrs sX     z#ConfluenceAPIImport._convert_drawioc Csd}|jddidD]}ztj|j|jj}Wn*d}|jjd|jd|dYnXt |j d |j|d d }|jddidD]}| |qqqdS) Nu
PlantUML
{svg}
rZplantumlrerroru.Не удалось получить svg из zERR-0002rz{})paramsZumlsvgr~) rr:r'Zconvert_uml2svgrrwrr,rDrrr) rrrYrZZTMPrr new_tagold_tagrrrr s(  z%ConfluenceAPIImport._convert_plantumlcCsd}|dg|j}t|j}|}|jdddg}t|D]R\} } | |d| d| dd krr| dn d | d| d |d } || qDd ddddgdddddddgddd} dt|j||ddt|d} | | |t |j t j| dd||| dd d!}|jS)"u8 Создает тег макроса Word или Excel u
{plugin_title}
rmcSs|dS)Nrr)rrrrr rzAConfluenceAPIImport._create_msoviewer_macro_tag..rr;r}Z sheet_nameruЛистr)numrwrprZimgUrlz Office WordZwordz .doc,.docxz.docz.docx) pluginTitleZ pluginTypeZ acceptTypesZacceptTypesListZ pageScalez Office ExcelZexcelz .xlsx,.xlsz.xlsxz.xlsrO)viewdocviewxlsr)verparentIdrZcurrentPageRefZ slicePageNumZ pagesCountFrgr)rrrmZ plugin_titler~)r;rwrrmZ get_fullviewrrrhrrr;rrrrr)rrrdZ plugin_typeTMPLrrmZfullview_pagesrr Z fullview_pager)Z param_typesrr rrr_create_msoviewer_macro_tag sX)     z/ConfluenceAPIImport._create_msoviewer_macro_tagc Cs4ddg}|D] }|jd|idD]}zz|d}tdd|dD}|d } tjj|| d } | sxtd | d |jd|id} | r| | || |Wq"tk r*} zhd |d|j d|j dd} t |tj r| d|jd7} | d| 7} |jj| d|p|dW5d} ~ XYq"Xq"q dS)u7 Конвертирует макросы Word и Excel rrrrrcss|]}|ddVqdSrfr}NrrparamrrrrB sz9ConfluenceAPIImport._convert_msoviewer..|r}rr}&Не найдено вложение 'rJ0Ошибка обработки макроса '' в документе 'rrrwrrr~ERR-0012rN)rr;rrr:rirrrrr}rrrrr,rD)rrrYrZrZ macro_types macro_typeroriginal_paramsr rdr rI error_textrrrr: s0   z&ConfluenceAPIImport._convert_msoviewercCs>dtdtdtdtdtdtdtdtd td }|jd d id D]}d}|d}|dd}dt|jddddd} tdd|dD} | drd| d<nd| d<| dr| d| d<| d r| d | d<| d!r| d!| d"<| d#r8dd$d$d%} | | d#| d&<| d'rbd(d)d*d+} | | d'| d,<| d-rvd| d.<d} | d/r| d/d0krt|jj| d1<t|jj} d2}nnd2}t |j t|j| t j | dd3d4 d5d6||d7 d8dd9}|r|jd|id nd:}|s(|jd d id }|r^||jq^d:S);ua Конвертирует макрос "Отображение дочерних" z
Макрос "Отображение дочерних" | {doc_name}
rrprfalserrrF50none)isShowChildrenrchildrenAmountr]includeViewType isOrderByDeskcss.|]&}t|dddkr|ddVqdSrfr}rONrrrrrrr sz:ConfluenceAPIImport._convert_childpages..rrTr&r`r]firstr'depthstyle headerType excerptTypertr%Zsimplez rich contentr(rr}rRrUrpZcreationrsortTyperr)r)r documentIdtruerfrrRZ separators"")doc_iddoc_namerr! cmf_convertedrr~N) get_data_idrr;rrwrrrr}rrrrrrrr)rrrYrZrrr<macro_idZdata_macro_parametersrmacro_parameters view_type_map sort_type_mapr;r r rrrrZ s(                  z'ConfluenceAPIImport._convert_childpagesc Csd}|jddidD]}|d}|dd}tdd |d D}|d d }|rf|jd|idnd }|s~|jddid}|rt|j|ddd |jDdd} | | j qd S)uH Конвертирует макрос "Выборка" u~
Макрос Include. 'Создать выборку' | name = {name}
{content}
rexcerptrrrrcss.|]&}t|dddkr|ddVqdSr*r+rrrrr sz7ConfluenceAPIImport._convert_excerpt..rr}&Выборка без названияNcss|]}t|VqdSrrGrrtrrrr sr}rtr~) rr;rrrrrrirrr) rrYrZrrr>r? excerpt_namer r rrrr s("   z$ConfluenceAPIImport._convert_excerptc Cs&d}|jddidD] }|d}|d}d|krH|dd\}} n0t|tjrd|jd }n|jjd }|} |d } | rt d d | d D} | dd} nd} t |j | t | ddt |dddd} |r|jd|idnd} | s|jddid} | r| | jqdS)u~ Конвертирует макрос "Включить выборку"("Вставить фрагмент") u
Макрос Include. "Вставить выборку" | Имя = {excerpt_name}
rexcerpt-includerrdata-macro-default-parameterrr}rrcss|]}|ddVqdSrrrrrrrL sz?ConfluenceAPIImport._convert_excerpt_include..rr}rC  rF page_namerr~N)rr;rrr:r>rrrrrrhtmlescaperrrr)rrrYrZrrr>macro_default_parameterrrLr?rFr r rrrr s8%     z,ConfluenceAPIImport._convert_excerpt_includec Csd}|jddidD]}|d}|d}d|krF|dd\}} n0t|tjrb|jd }n|jjd }|} t |j t |  d d t | d d d d } |r|jd|idnd} | s|jddid} | r| | jqdS)u[ Конвертирует макрос "Включить страницу" uM
Макрос Include. "Вставить страницу" | Имя = {page_label}
rincluderrrHrr}rrIrJ page_labelrr~N)rr;rrr:r>rrrrrrMrNrrrr) rrrYrZrrr>rOrrRr r rrrr` s,$   z$ConfluenceAPIImport._convert_includec Csdtdtdtdtdtdtdtdtd td td }|jd d idD]$}|dd}tdd|dD}|dd|dd|dd|dd|ddd|dd d|d!d"|d#|d$|d%d&|d'd&|d(d) }tj|dd*d+d,d-}t|j ||d.d/}|d0} | r`|j d0| idnd1} | s||j d2d d id} | rf| |j qfd1S)3uN Конвертирует макрос "Оглавление" zr
Макрос "Оглавление"

rZtocrrrcss.|]&}t|dddkr|ddVqdSr*r+rrrrr sz3ConfluenceAPIImport._convert_toc..rr8routlineF separatorZbracketsrQZ40pxr.ZmixedhminLevelr`maxLevel6excluderP printableT absoluteUrlclass) r8rVrWrQr.rYrZr\rPr]r^r_r6r7r8r9rr!r~rNdiv) r=rr;rrrrrrrrrr) rrYrZrrr?r parametersr r>r rrrr sx'         z ConfluenceAPIImport._convert_toccCsdtdtdtdtdtdtdtdtd td }|jd d id D]4}d}|dd}tdd|dD}|dd}|d} | rtjjddd|jdgddd| dggdgd } | r| j } nd!}| d"d#|d$dd%D||d&d'd(} t j | d)d*d+ d,d-} t |j| |||d.d/} |d0} | rh|jd0| id nd1}|s|jd2d d id }|r^|| jq^d1S)3uj Конвертирует макрос "Livesearch" (Динамический поиск) #
Макрос "Динамический поиск"
rZ livesearchrr5rrcss.|]&}t|dddkr|ddVqdSr*r+rrrrr1 sz:ConfluenceAPIImport._convert_livesearch..r placeholderu ПоискZspaceKeyrr%::::%rILIKE%"key":""%r9r:r#cSsg|]}|r|qSrstrip)rZlablerrrr<H sz;ConfluenceAPIImport._convert_livesearch..rrfrZmedium)ZcurrentSpaceKeyrrgrFr6r7r8r9)rr!rgr<r~rNra)r=rr;rrr:r>sgetr6rwrrrrrrrr)rrYrZrrr<r?rrgrrurbr r>r rrrr s/      z'ConfluenceAPIImport._convert_livesearchcsdtdtdtdtdtdtdtdtd }|jd d d id D]d}d}|dd}tdd|dD}d} |dddd} | r| d} tjjddd|j dgddd| d ggd!gd"} | r| j } nd#| krt |j j } nd$}n t |j j } |d%ddd} | sD| d&nd'd(gfd)d*| D} d}|d+ddd}t|d,krz&|j|dd-d.}|rt |j }Wn8tk r}z|jj|d/|d0d1W5d}~XYnXt|d2d3d4| | pd|d5d6|pd|d7ddd|d8d9|d:d4d; }tj|d4dd?}t|j|||d@dA}|dB}|r|jdB|id nd}|s|jdCd d id }|rX||jqXdS)Dut Конвертирует макрос "Recently Updated Macro" (Недавно обновлено) rcaW" class="macros-panel mceNonEditable wiki-recently-updated" contenteditable="false" data-macros-parameters="{params}" data-macro-parameters-original="{original_params}" data-macros="wikirecentlyupdated" cmf_converted="{cmf_converted}" >
, Макрос "Недавние обновления"
rrzrecently-updatedrr5rrcss.|]&}t|dddkr|ddVqdSr*r+rrrrr sz@ConfluenceAPIImport._convert_recently_updated..rNspacesrfrrrrrhrirrjrkrlr9r:z@selfr#typesrr/newscsg|]}|kr|qSrr)rrFZunsupported_typesrrr< szAConfluenceAPIImport._convert_recently_updated..rr}T)raise_on_errorzERR-0133ryrrr@maxFthemeZconciserrr hideHeading) rvZ maxTogglerqrurxrrrryr6r7r8r9)rr!r<r~rra)r=rr;rrrr:r>ror6rwrrurhrrrr,rDrrrrrrrr)rrrYrZrrr<r?rruZ space_keysrrurqrZauthorsrrIrbr r>r rrsrrh s'          z-ConfluenceAPIImport._convert_recently_updatedc" s,d}|d}t|D]}|dd|dd}qdddd d g}d d d dg}ddd ddddg}ddddd} ddd} dddddd d!d"d#d$d%d&d'} |jd(d)d*id+D]z} | d,} i}d-d.i}| d/D]R}|d)d0}|jr|jnd1}|||<||kr q| |p|}|d1k r||krRtd2|}|d krRd3d4|D}||krt |t rxd5d4|D}nt |}nh|dkrfd6d4|D}d |}n@|d7kr|}n*|d8kr| |}n|d9kr| |}t |t r|d:kr d.}n|d;krd<}|||<qg}d=d>d?d@dAd?dBdCd?dDdEd?dFdGd?dHdId?dJdKd?dL}t|dD]\}\}}||}|sqv|dMkr||dNdO|dN|d|dPn6td2|}|D]$}||dO|dN|d|dPqԐqvd1gt|}|d pg}t|D]\}}||||<q$|}||dQ<| r^|jdR| id+nd1}|sx|jdSd*id+}|rdTdUt|D}dVtdW|dX<tj|d
Фильтры таблиц
{content}
{data_id} {data_id_}r}rwcustomNoTableMsgTextcustomNoTableMsgZenabledInEditorZ hideFiltersorderZinverserZtotalRowZ fixedColsZ limitHeightZ rowsPerPageZignoreFirstNRowsZ heightValueZshowNRowsifNotFiltered iconFilterZthousandSeprator)ZtotalrowZ iconfilterZignoreFirstNrowsZthousandSeparatorr2rf) Point (.) Comma (,)sumZaverageZmuiltiplicationminrvr<Z nonemptyCount)ZSumZAverageZMultiplicationZMinZMaxZCountzCount not emptyZ dynamicAscZ dynamicDescZ staticAscZ staticDesc)zDynamic AscendingzDynamic DescendingzStatic AscendingzStatic Descendingac:structured-macroac:namez table-filterr ac:macro-idZ ddSeparatorsT ac:parameterrNu(?.cSsg|] }t|qSr)rrrrrr<mscsg|]}||qSr)r;rZ total_maprrr<qsZtotalcolrWZ numberingr5r#Fcolumnu!Выпадающий список)rwr userfilteruТекстовой список numberfilteruЧисловой фильтр datefilteruФильтр по датамZvisualu!Визуальный фильтрglobalu!Глобальный фильтрZhiddensuСкрыть столбцы)rrrrr globalFilter hideColumns)rrrr)Z columnNameZ columnIndexZ filterLabelZ filterTypefilterIdr>rrcSsi|]}d|tqSZdata_id_r=rrrrrrsz=ConfluenceAPIImport._convert_table_filter..z table-filter-rer>r6r7rJ'r!rrar_ztablefilter-table-wrappercss|]}t|VqdSrrGrDrrrrsz.rtr~)r<rrrr;rrnrrrrrrirr"rrrhrrget_random_strrrrrrrr)"rrYrr data_id_countrunknown_paramsZ list_params int_paramsZ params_map separator_mapZ numbering_mapZ table_filterr>r!rr param_name param_valuer>Z filter_typesZ filter_typeZ filter_dataZ filter_valueZ column_nameZordered_filtersrZ old_indexZ new_indexr rtablenew_htmlr rrrr s *                               z)ConfluenceAPIImport._convert_table_filtercCs,d}|d}t|D]}|dd|dd}qdddd d d d g}d dg}ddddd}|jdddidD]} | d} i} ddi} | dD]} | dd}| jr| jnd}|| |<||krq|dk r>|dkrd}n|d krd}t|t rd!|kr|d!d}||kr*t |}n|d"kr>||}|| |<q| r^|j d#| idnd}|sx|j d$did}|rld%d&t|D}d't d(|d)<t j| dd*d+dd,|d-<t j| dd*d+dd,|d.<|j d/d0d1id}dd2d3|jD|d4<|jf|}t|d5}||jqldS)6uW Конвертирует макрос 'Сводная таблица' ul
Сводные таблицы
{content}
rzr{r|r}rwr}r~rrsZ collapseAllZ cumulativeZdecimalsZnumberaccuracyr2rfrJr)rrzApostrophe (')z Space ( )rrz pivot-tablerrZ showrawdataFrrNr5Tr#u‚)ZdecimalseparatorrWrrcSsi|]}d|tqSrrrrrrr-sz.z pivot-table-rer>r6r7rr!rrar_zoriginal-tablecss|]}t|VqdSrrGrDrrrr;sz;ConfluenceAPIImport._convert_pivot_table..rtr~)r<rrrr;rrnr"rrrrrrrrirrrrr)rrYrrrrrrrZ pivot_tabler>r!rrrrr rrrr rrrrs*                z(ConfluenceAPIImport._convert_pivot_tablecCsdtdtdtdtdtdtdtdtd td }|jd d d idD]}|dd}tdd|dD}|d}g}t|jd d didD]\} } | dd} tdd| dD} | d} d| dddd| dk|dkrdnddd d! }| d"}|r0|jd"|idnd#}|sN|jd$d| d%d}|rt|jt j |dd& d'd(| d d)d|j Dd*d+}||jq|d"}|r|jd"|idnd#}|s|jd$d d id}|r`|r`||d|d}|d,d#D]}|||}qq`d#S)-uu Конвертирует макрос "Composition - deck of cards" (макрос "Вкладки") zr
Макрос "Вкладки" | {tab_name}
{content}
rrdeckrrrcss.|]&}t|dddkr|ddVqdSr*r+rrrrrmsz4ConfluenceAPIImport._convert_tabs..rZ tabLocationcardcss.|]&}t|dddkr|ddVqdSr*r+rrrrrwsrrOz#254dcbZDefaultFrleftZverticalZ horizontalZBasic) rZ tabsPageTitlecolorZ colorPalettesZ hasBorderZfixedZ primaryTab directionZ textAlignmentZ headerStylerNra)rrrgr8r9css|]}t|VqdSrrGrDrrrrs)rZtab_namertr~r})r=rr;rrrrrrrrrrirrhrarZ insert_after)rrYrZrrZdeck_macro_parametersZ deck_paramsZ tab_locationZtabsrrZcard_macro_parametersZ card_paramsZ card_lableZ tab_paramsZ card_macro_idZ card_macroZ tab_macroZ deck_macro_idZ deck_macrorlZtabrrrrAs&       z!ConfluenceAPIImport._convert_tabsc Csd}|jdddidD]}|d}|dd}td d |d D}|d d}|d |} t|j| | pnd|pxddd} t| } || j |r|j d|idnd} | s|j ddid} | r| | j qdS)uF Конвертирует макрос 'Статус' a {text_span} rrrmrrrrcss|]}|r|ddVqdSrrrrrrrsz6ConfluenceAPIImport._convert_status..rZcolourrpЗадать статусZneutral)r text_spanrr~N) rr;rrrrr"r)rrr) rrYrZrrr>r?rrrr  new_tag_viewr rrrrs0        z#ConfluenceAPIImport._convert_statusc Csd}|jdddidD]}|d}|dd}td d |d D}|d d}t|j||pbd dd} t| } || j|r|j d|idnd} | s|j ddid} | r| | jqdS)uF Конвертирует макрос 'Handy Status' a {text_span} rrz status-handyrrrrcss|]}|r|ddVqdSrrrrrrrsz.rZStatusr)rrr~N) rr;rrrrr)rrr) rrYrZrrr>r?rrr rr rrrrs,      z)ConfluenceAPIImport._convert_status_handyc Cs ddlm}t}t}t|d}z|D]}|dkrt|}t|} |dkrd| dg} n"|dkrdd | d d D} t} t} | D]} | dd d d} || ddd}z`t j j dddd| dgdd| gddd|dggddgd}|st j | d}|j ddWnBt k r`}z"td| d|WYqW5d}~XYnX|jj| kr| |jj| |jj|jj|jjddq| r|dd | g| |d<q.|d!kr.t|}t|} |dkr| dg}n$|dkrd"d | d d D}t}t}|D]}|d#kr<|r<|}n4t jj d$d%d&|d'gd(d%d)|dggddgd}|std*|d+q"|jj|kr"||jj||jj|jj|jjd,dq"|r.|d-d |g||d-<q.Wntk rYnX||fS).Nrtranslitrrz\=r8incSsg|]}|dqSr8rm)rrrrrr<sz5ConfluenceAPIImport._bql_from_cql..z()rfr;#rruTZ language_codereversedORaliasrjrlr}r0r:r|ru*Не удалось создать тег rr)r}r0rwZ classNamerINrucSsg|]}|dqSrrmrrrrr<;szcurrentSpace()rrrhrirrku.Не удалось найти проект «»r>r) transliteraterrriterrrrnrr:rr;rrr\rRrwrrhr}r0r> StopIteration)cqlr6rrZbql_listbql_dictZ cql_partsZcql_partoprrZtags_idsZ tags_listrZ label_aliasrr rpZ parent_idsZ parent_listrururrr _bql_from_cql s           z!ConfluenceAPIImport._bql_from_cqlcCsjd}|jddidD]N}|d}t|d}z|d}tdd |D} || d d |j\} } d d d | dddkt| dd| dddk| dddkd| | dgd } Wn.|jj d|d|d|dYqYnXt |j t|  dd dd  d d! d"d#d$d%} |r:|j d|idnd&}|sT|j ddid}|r|| jqd&S)'u` Конвертирует макрос "Содержимое по меткам" u
Содержимое по тегам
rZcontentbylabelrrrrcSsg|]}|ddqSrfr}rrprrrr<szAConfluenceAPIImport._convert_content_by_label..rrrOdefaultrFTr5Truervrw showLabelsT showSpacer%r) rZmodelrrrvrrr0bqlruiНе удалось конвертировать макрос «Содержимое по меткам»  с параметрами: zERR-0034rrJr9rz:Truez:truez:Falsez:falserbr~N)rr;rrrrr6rr,rDrrrrrr)rrrYrZrrr>r?all_parametersrrrrbr r rrrr[sb     z-ConfluenceAPIImport._convert_content_by_labelcCsdtdtdtdtdtdtdtdtd td }i}|jd d id D]}|d}t|d} t} z,| r| dkr| d} tdd| D} Wn*|jjd|d| d|dYnX| d| dddkd} t} tj | dd dd}d d!d|j D}t |j| | r>|nd || drPd"nd d#d$}| drx|jd%|jn|r|jd|id nd&}|s|jd d id }|rd d'd(|j D}t |j| | r|nd || drd"nd d#d$}||jt|tjrqbi}zt |d)d*}|s4td+|d,d%jd-d.id sd/d|d,d%jd-d0id D}d1d|d,d2jd-d.id D}tt||}ntd3d|d,D}t|tjs||| <Wqbtk r$}z,t|tjs|jjd|d4|W5d&}~XYqbXqb|rz`|j|jjd&krNi|_||jd <|j|jjd&krvi|_||jd <|j d5d6WnJtk r}z*|jjd|d7|d8|d9|d5d:W5d&}~XYnXd&S);u[ Конвертирует макрос "Свойства страницы" aS
Свойства страницы
{content}
rdetailsrrrNonercSsg|]}|ddqSrrrrrrr<sz8ConfluenceAPIImport._convert_details..udНе удалось конвертировать макрос «Свойства страницы» rzERR-0035rrwhiddenFr)rwrrgr8r9rcSsg|] }t|qSrrGrcrrrr<sz details-hidden) macro_data_idrbrtZdetails_hiddenr~rNcss|]}t|VqdSrrGrDrrrrsz7ConfluenceAPIImport._convert_details..rru5Отсутствует таблица свойств.trr_ confluenceTdcSsg|]}d|jdqS) key_details r)r)rthrrrr<s confluenceThcSs"g|]}ddd|jDqS)rcss|]}|dkrt|VqdSrNrGrrrrrsBConfluenceAPIImport._convert_details...)rir)rZtdrrrr<sr}c SsJg|]B}d|jddidjdddd|jddidjDfqS) rr_rrrrcss|]}|dkrt|VqdSrrGrrrrr&srr)rrri)rrrrrr<#s rTruE: не удалось сохранить значения macro_db «u»: zERR-0037rN)!r=rr;rrrr,rDrrrrirrrroinsertrrrrr:r>rziprrQrRZ macros_dbrrZmacros_db_draftr)rrrYrZrrrrr>r?rrrbrprmZ contents_strr r Z propertiesZcontents_tableZ first_rowZ second_rowr rrrrs'          .    z$ConfluenceAPIImport._convert_detailscCsdtdtdtdtdtdtdtdtd td td }|jd d idD]n}|d}t|d}z|d}tdd|D} || dd|j|j\} } dd| dddD} | dddkdd| dddkdd| dddkt | ddd | d!| d"d | | | d#} Wn*|j j d$|d%|d&|d'YnXt j| dd(d)d*}t|j|d+d,}|r|jd|idnd }|s|jd d id}|rf||jqfd S)-um Конвертирует макрос "Отчёт по свойствам страницы" a6
Отчёт по свойствам страницы
Якорь | {param_name} ranchorrrrH)rr~N) r=rr;rrrrrquoterrr) rrYrZrrr>Zmacro_param_namer r rrrrsB)  z#ConfluenceAPIImport._convert_anchorcCsdtdtdtdtdtdtdtd}|jd d id D]L}|d }|d }i}td|D]$} | dd\} } | || <qx|dsqN|ddd} tdd| } tdd| } | |d<||d} | |d<g}|dr||dd}|D]d}z t || d}| |Wn<t k rv}z|j j|d|W5d}~XYnXq|jd|}tjj|d d!gd"}|stj||j d#d$}|jr||_|jd#d%d&d'd(d)d*d+d,d-d.d/d0g }d1|p||d2d3dddt|jd#d4}tj|d1d5d6d7d8}tj|d1d5d6d7d8}t|j||d9d:}|rp|jd |id nd}|s|jd;d d id }|rN||jqNdS)
Результаты фильтра
rZjirarrrz (?r?rrrrZ jql_queryrhrZ column_idsZ column_idrrIZ tf_ext_idZtfZdefault_columnsrbr r rrrrs    .    z(ConfluenceAPIImport._convert_task_filterc Cs(tjjdd|gdddgdddggdddd gd D]}z|jd d d r|jd|jd d d idD]}ddd|jD}t|jdkrt |j d<t|j |j d<dg|j d<d|j d<d|j d<d|j d<n| ||_ |jddqfWq0|jjd|d|jd |d!Yq0Xq0dS)"NrrrKTrrrrm html_contextr:rtZinlinePropertiesZ markerRefzdata-refrrcSsg|] }t|qSrrGr:rrrr<ksz@ConfluenceAPIImport._convert_inline_comments..rzdata-idzdata-object-idzinline-highlightr_Z inlineCommentzdata-mark-annotation-typeZ annotationzdata-mark-typer<ruOНе удалось конвертировать inline комментарий rzERR-0020r)r:rOrrrrirprrmr=rrwunwraprrr,rDr)rrrYr0rZ tag_contextrrrrXs@       z,ConfluenceAPIImport._convert_inline_commentscCsddl}|jdddd|jjd|jjd|d|d|d gd d td d td d d}|j|jd|jd|jjd|d|d| |j |S)Nrz/usr/bin/python3z manage.pyshellzefrom modules.confluence.api_import import ConfluenceAPIImport; cmf_import = models.CmfImport.get(id='z%', fields=['*', 'plugin']); args = ('rIz', z]); ConfluenceAPIImport(cmf_import.plugin.confluence, cmf_import).run_threaded_process(*args);Tz"/var/log/eva-import-subprocess.logrz&/var/log/eva-import-subprocess.err.log)Z close_fdsZstart_new_sessionstdoutstderru0 Запущен новый процесс (PID: z ): project=z , item_type=z , queue_name=z , max_items=) subprocessPopenr,rwrurr1rpidr)r item_type queue_namerrr?rrr_start_process~s"*, z"ConfluenceAPIImport._start_processc Cst|dt|jd}d}||jd||jddD]}|j|}|dkrj|dd krjqF|dkrzP|j |d }t d d | d D}||j kr|j } n|} || 7}| |d<Wqt k rYqXn|d7}||qFW5QRX||fS)Nz_queue.r}Zdb_dirru% Наполнение очереди rrrsr8r)rcss|] }dVqdSr}Nrr:rrrrsz>ConfluenceAPIImport._build_processing_queue..zversion_*.jsonrr})r rgetpidrZrrrrsrrbrglobrYrr) rr item_namer item_countrrvrrrrrr_build_processing_queues0   z+ConfluenceAPIImport._build_processing_queuec Cs|}|}|dkrd}d}d}|D]B} | ddkr>q,| d} | r,|| d7}|| d7}|| d7}q,||d<||d<|||d <|dkr|d } | dkr|| } nt|} | |d <|||d <t|d d \} }t|d\}}|jj|jd|dt | ddt |dd|d |jj|jd|d|dd|dd|d  |jj|jd|d dd|d|jj|jd|d dddS)NrsrrmZ completedrkZ duration_secrrrZtotal_execution_time_secitems_per_secondZavg_execution_time_secrrru завершена за rrru Обработано u& (успешно/неуспешно): ru из u& Скорость обработки: .3fru/секuM Среднее время обработки одного элемента:  сек.) Z get_statsZget_all_resultsrfloatrr,rQrrr)rrrrrZ all_resultsZtotal_durationZcompleted_countZ failed_countZ item_resultrkZtotal_execution_timerrrrrrrr_log_processing_statssL       .,z)ConfluenceAPIImport._log_processing_statsc sddd}||}|j}tj}tj}tj}d}|||\} } |jj |j d| d|d|dg} | } zl| rt | dkr|jrqg}| D]\}}}|}|dkr||||fq|dkr`|d 7}|jj|j d |jd || |j}|dkr8|jj|j d|d} ||kr|jjd|dddtq|j|j d |jdtd|d }q|} | st | |kr|t | }| }|dkrd} nt t!fdd| D}td||}|dkr||}|dkrd }t"||}||}|||}|dkrB|}|||}t#|D]t}|dkrjq|||||krd nd}||}t"|||}||8}|$|| j%|}| ||t fqVt &d| s|| } q|W5t | dkrddl } | D]0\}}}z |Wntk r.YnXq| D]Z\}}}z|jd d Wn<| jk rz |Wntk rYnXYnXq8|| ||| XdS)Nдокументов!версий документовr)rsrrru с ограничением u, одновременных процессаrrr}u Процесс (PID: u&) завершился с кодом: u< В очередь возвращено элементов: FuXПревышен лимит аварийных завершений процессов (u`). Процессы стабильно падают. Проверьте код процесса.rru%) завершился успешноTc3s$|]\}}}|dkr|VqdS)ZNr)rr;rk start_timeZnowrrrAs z>ConfluenceAPIImport._run_parallel_processes..r)'r;r,rCrNIMPORT_THREADSZIMPORT_OBJ_CNTZIMPORT_PROCESS_RETRYrrQrrrrrZ terminaterwaitZTimeoutExpiredkillrZcleanuprZpollrhrRrZrecoverrD RuntimeErrorr1rvZqsizerrrrrr}sleep) rr item_typesrZ max_processesZthreads_per_processZmax_items_per_processZmax_allowed_crashesZconsecutive_crashesrrZactive_processesZis_queue_emptyrrr;Z still_activeZassigned_limitr Z return_codeZrestored_countZ slots_to_fillZ current_qsizeZstarting_bufferZuncovered_itemsZneeded_processesZprocesses_to_startZ base_limitrrZshareZ dynamic_limitrr r_run_parallel_processess                        z+ConfluenceAPIImport._run_parallel_processescs`iddd fdd jjdkr4d}njd }|rL|d nd}|d d S)NcSs*|dk r |n|}ddtdt|DS)NcSs$g|]}|rt|n|qSr)isdigitrr"rpartrrrr<szRConfluenceAPIImport._prepare_content_tree..natural_key..z(\d+))rrr)rqrpZsort_byrrr natural_keysz>ConfluenceAPIImport._prepare_content_tree..natural_key順Fc sg}|r|dfn|f}|D]<}j|gD](}j|}|k|d<||q,q|jfddd|}|D]"} |d} | | d<| d| }qt|r|d krdd i} n j|} |k| d<|| d<|| d <| |<|S) Nr{ is_selectedcs|d|dS)Nrqrpr)r )rrrrrzOConfluenceAPIImport._prepare_content_tree..build_tree..r rLordernorwr|Trp)rr;rsr)rhr) ruris_rootrpparentsrr  child_metaZcurrent_ordernor Z next_orderno parent_meta build_tree content_treerselected_content_idsrrrrs,    z=ConfluenceAPIImport._prepare_content_tree..build_treer'r|rrwT)r)rF)rrr*r;)rr rurrrr_prepare_content_trees   z)ConfluenceAPIImport._prepare_content_treec Csl|D]\\}}|dsq|d}|d}z|dksD|drL|j}nn|j|d}tt|}|jd|} |j| dd gd d }|s|jj|j d |d |jd|d|j}|D]} | dsq| d} |j| dd} tt| } |jd| }| j|ddddgd d }|sH|jj|j d| d|dd| dq|j r||_ | d|_ |j d dqdd|g}|ddd gg}tjj|dgd d}tjj|dgd d}t|p||_|jrd |_n4tjj|dgd}tjj|dgd}t|p||_|jdkr|jrd |_|j d dtWqtk rd|jj|j d |d!dd d"YqXqdS)#Nrr8rpr|rrr'rtree_node_is_branchhas_children_archivedT)rrinclude_archivedu! Не найден предок 'u>'. Потомки будут помещены в корень zERR-0120rr@rwrrXrru# Не найден потомок 'u' у предка 'rJzERR-0003rrfrr9)rrr$r:r>u7 Не получилось привязать ноду zERR-0024r)rr;rrrr:r6r,rDrrrXrrr'ror(rWr#r"rZ show_archiverr)rrrurZ parent_typerprXZparent_model_nameZ parent_modelZtree_parent_ext_idrr Zchild_model_nameZ child_modelZ child_ext_idr Ztree_parent_filterZarchived_filterZarchived_documentsZarchived_foldersrrrrr_process_content_trees        z)ConfluenceAPIImport._process_content_treecCsddddddddd d d d d ddg}|ddg}tjj||dD]L}|jr>g|_|D]}t||dqR|jjdkrvd|_|j |_ |j ddq>dS)u Сброс настроек правил схемы прав доступа Args: perm_scheme (CmfProjectPermScheme): Схема проектных прав доступа Zaccess_local_userZ access_ownerZaccess_owner_assistant access_authorZaccess_spectatorsZaccess_executorsZaccess_responsibleZaccess_list_ownerZaccess_project_owner_assistantZaccess_project_spectatorsZaccess_project_executorsZaccess_sdesk_clientaccess_anonymousZ access_guestZaccess_sharelink_anonymousproject_permissionaccess_members)rrF)PPP-DOC-DELETEzPPP-OBJ-DELETETrN) r:CmfProjectPermSchemeRulerrr*rr)r0r'r,r)r perm_schemeZrule_bool_fieldsZ rule_fieldsZruleZfieldrrr _reset_ruless4  z ConfluenceAPIImport._reset_rulesc Csdddddgdgddd gd gd gd gd gdggdgd }z0||dd}|dkrn|jjd|WdS|D]}tjj|dd}|s|jjd|d|d|dWdStjj||ddgd}|s|jjd|d|d|dWdS|jsWdS|dD]B}| |} | r,|j | n|jjd|d|d |dq |d!D]} | d"} |j j rd#|jd#| d$d#} nd#|jd#| d"d#} tjjd%d&d'| d'gd%gd(} | stjjd"d)| gd%gd(} | r(| js| | _n| | jkr| j| | _| jdd*|j | n|jjd+| d|d,|dqV|d-rZd|_|jdd*qrWn$|jjd.|d/|dYnXdS)0NzPPP-DOC-CREATEz PPP-DOC-EDITzPPP-DOC-PUBLISHzPPP-DOC-TREEMOVEz PPP-OBJ-ORDERr+z PPP-COM-ADDzPPP-COM-EDIT-OWNzPPP-COM-DELETE-OWNzPPP-COM-DELETE-ALLzPPP-ATT-CREATEzPPP-ATT-DELETE-ALLz PPP-PR-BROWSEzPPP-ATT-DELETE-OWNz PPP-PR-ADMIN) r#r$r%r&r'r(r)r*r+r,r3u8Не найдено соответствие права T)r0rhu Не найдено право "u " для zERR-0059rsr r*)r)rru2В схеме не найдено правило "ru)Не нашли пользователя u для прав zERR-0060r4r}rrwrrrr:rjruНе нашли группу zERR-0061r5u>Не удалось импортировать правило zERR-0063)r;r,rQrRr:ZCmfProjectPermPermissionrDr,rrr*rhr+r2r6rrrr()r perm_dictr-Z mapping_permrEr3rGZ scheme_rulerrrZ group_namerZ group_objrrr_process_permissions;s            z(ConfluenceAPIImport._process_permissionsc Cs|jd|jd}tjj|d}|s:tj|d|jd}|jdd|jd|_|jdd d}|j d }| r| d }t |}W5QRX|r|||d gD]}|||q||_|jdd |S) Nrrw)rT)rrr,ru?: Схема проектных прав доступа для r}rr9rKr=)r6r*r:ZCmfProjectPermSchemer;r,r}rrrbrrrrr.r0r)rZperm_scheme_ext_idr-Z perm_listrHrr/rrr_process_perm_schemes,     z(ConfluenceAPIImport._process_perm_schemec Csg}|}|}d}tjjdddgddd|gdd|gggd d ddgd }|D]L}|j|krp|d 7}|d |j|krH|d7}|dqH|rd }|jj dd |d|d|dt j d d|||fS)u8 Добавляет суффикс 'Wiki' к названию или коду импортируемого проекта, если есть существующие НЕ Wiki-проекты с аналогичными названиями или кодами Args: space_name (str): название проекта space_key (str): код проекта Returns: tuple[str, str, bool]: новые названия и код проекта и флаг добавления суффикса F logic_prefixr project.wikirr}rjtask_code_prefixTr9rrhrz WikiuназваниеZWIKIuкодuВ u и u9 проекта добавлен суффикс 'Wiki': 'rrrr) r:r>r=r}r"rhr4upperr,r1rir\r!) rrrupdatedZnew_space_nameZ new_space_key has_suffixZmatching_projectsZmatching_projectrrr_add_project_suffixs@   z'ConfluenceAPIImport._add_project_suffixc Cs dddd|dgdddgg}tjj|dd|ggd dd dgd }|rd }|jrfd |jjd|jd}|d|d7}|jjd|jd|d|dddd|}d}tjj|dd|ggdd gdr|d7}||}q||kr|jjd|d|dd dd||fS)!ue Проверяет унакальность названия и кода проекта Args: space_name (str): название проекта space_key (str): код проекта Returns: space_name, space_key (tuple[str, str]): новые названия и код проекта rrNOT LIKErrfNr}rjr9r,r:ru (импорт z , ext_id 'z')rruПроект с именем 'u' уже существуетuG. Импортируемый проект переименован в 'rJzERR-0131r>r%rr4Tr5r}uПроект с кодом 'ug' уже существует. Код импортируемого проекта изменен на 'zERR-0132)r:r>ror,r0rrDr}) rrrrZ ext_id_filterruZ from_importZoriginal_space_keyZcounterrrr_check_project_uniquenesssD     z-ConfluenceAPIImport._check_project_uniquenessc Cs2|jd}|d}t||_W5QRXdS)Nr#rK)rrbrrrr)rrrrrr_load_space_meta,s  z$ConfluenceAPIImport._load_space_metac Cs2|jd}|d}t||_W5QRXdS)Nr]rK)rrbrrrr*)rr^rrrr_load_space_data1s  z$ConfluenceAPIImport._load_space_datac Cs2|jd}|d}t||_W5QRXdS)NrrK)rrbrrrrs)rrrrrr_load_all_content_meta6s  z*ConfluenceAPIImport._load_all_content_metac Cs2|jd}|d}t||_W5QRXdS)NrrK)rrbrrrr)rrrrrr_load_parent_to_children;s  z,ConfluenceAPIImport._load_parent_to_childrenc Cs|jdr |jd}d|d<n|jj|jd|jdD]`}z||}|rZWqWq@tk r}z$|jj|jd|d|W5d}~XYq@Xq@tdd |d<|S) NrF from_rootu У пространсва не установлена домашняя страница. Сведения о создателе и дате создания пространства будут взяты из первой корневой страницы.ruB Не найден дамп корневой страницы [ID:z]. u>Не найдены дампы корневых страницT) r*r;r,rQrRrrrr)rrZ root_page_idrIrrr_get_space_homepage@s$      z'ConfluenceAPIImport._get_space_homepagecCsi}|j|jd||d<|jd}|jddkrD|d7}d|d<||d<|d d }|jj|jd ||dd krtj|d <n|||j |d <|d  d}|r|jj|jd||dd krtj|d<n|||j |d<n |d |d<|d dd}|jj|jd||dd krHtj|d<n|||j |d<|d d|d<|d dd|d<|S)Nrr4r}r8Zpersonalu( (Личное пространство)u%Личное пространство descriptionrru/ Автор домашней страницы: r5rSru5 Владелец домашней страницы: rPrru& Последний редактор: rTrErRrrU) r,Zget_correct_keyr*rQrrr{rQrr3r;)rproject_ext_idr project_datarrrrrrr_prepare_project_data^s<        z)ConfluenceAPIImport._prepare_project_datacCstjjddd|dgt|dddgd}|r|jdkrJd |}n |jd krjd |d |d d}|jj|jd|dd|S)Nrrrr2r4rr:r3uIНайден ранее импортированный Wiki-проект project.agileu Найден Agile-проект u_ с импортированным в раздел 'Документы' Wiki-проектом 'r}rJrTr5) r:r>r;rkeysr2r,r1r)rrCrDrulog_msgrrr_get_imported_projects     z)ConfluenceAPIImport._get_imported_projectcCs|jdkrltjjdd}tj||||jdd}|jdkrLd|_d|d }qd |_d |_d |_d |d }n|jdkrtjjdddgddd|gdd|gggdddgd}|r|j d||_ |j ddt nt dd|d|}nt d|j|jj |jd|dd|S)N) project_wikiZwikizproject.wiki:defaultr/T)rr}rr,rrKruu3Создание нового Wiki-проекта 'rJsectionz CmfWiki:Classu,Создание нового раздел 'u-' в портале 'Моя компания'r2rrFrr4rjr}rr:rruНе найден Agile-проект для объединения. Создайте или импортируйте одноименный Agile-проект и повторите импорт проектаu"Импорт Wiki-проекта 'u;'в раздел 'Документы' Agile-проекта u8Неизвестный тип опции импорта rrG)rr:Z CmfLogicTyper;r>r,Z project_typerutree_parent_idrrrrr1r)rrC project_key project_namerrurIrrr_create_projectsR    z#ConfluenceAPIImport._create_projectc Cs|jdkr"|jr|d}|d}|jjjd}t|joF|jjd}|sR|rn|||\}}}||j d<| |||\}}||d<||d<|j |d<| } | r| |d<|D]} t || || q|j jr||_||ds|||n"|jj|jd |d tjd d ||_nf|jd krtjjdd|jgdddggdgd} | sftd|| jr|j | _| jd d| |_|S)Nr3r}r4 add_suffixr8rZproject_perm_schemer@u# Настройки проекта u были изменены пользователем. Изменения из импорта не будут примененыTrrFrMrДокументыrr:uLНе найден раздел 'Документы' в Agile-проекте r)r2rr,r8rr;rWrr9r*r;r1rr}rZgen_coder0rrr1rr\r!rr:r'rwr) rrurDrC homepage_datarOr4rQr8r-r doc_folderrrr_update_projectsj         z#ConfluenceAPIImport._update_projectcCstjjdd|jgdddggd}|jdkr|tjj|dd}|rJ|jd d tjj|d d}|rj|jd d |r|jd d n*|jd krtjj|dd}|r|jd d dS) NrMrr}rRrr3uДокумент1)rXr}T)ZTEXKOM_db_deleteuДокумент2rF)r:r'r;rwr2r.)rrurTZdoc1Zdoc2rrr_delete_demo_data$s$     z%ConfluenceAPIImport._delete_demo_datacCsT|jdkrP|dg|jj}|ds<|jd|d|_|j|_|jdddS)Nr3rr@rrwTr)r2r;rrr6rr,r)rrurrrrr _link_homepage_to_descr_document<s  z4ConfluenceAPIImport._link_homepage_to_descr_documentcCsd|jd|jdd}|}|||}|d}|d}|||}|sb||||}d}nd}|||||}|r|||||t |S)Nrrwr4r}TF) r6r*rArErJrPrUrVrWr)rrCrSrDrNrOruZis_new_projectrrr_get_or_create_projectEs     z*ConfluenceAPIImport._get_or_create_projectc Csz|jrh|jj|jd|jdkr,d}nd|jd}||jd||dW5QRXn|jjddS) Nu Для настройки обработки количества версий документов, установите значение параметра IMPORT_CONFLUENCE_PROC_LAST_PAGE_VER в configru=Обработка всех версий документовu&Обработка последних u" версий документовrrsu{Обработка версий документов отключена в config: IMPORT_CONFLUENCE_PROC_LAST_PAGE_VER = 0)rYr,rQrRrrr)rZ log_num_verrrr_run_version_processing_s  z+ConfluenceAPIImport._run_version_processingc Cs|jddd|_|jD]}|jr0q||_|d}|d}|dpV|d}d|d|d |_z*|jj |jd |d |j ||_ |j d |_ |||||jd ||_W5QRX||jd|W5QRX||jd|dW5QRX||jd||dd}W5QRX||jd||W5QRX|Wqtk r}z*|jj|jd|d|ddddW5d}~XYqXqdS)Nrrrwrrr}rrru( Импорт пространства 'rJru5 Создание/Обновление проектаu) Создание тегов (меток)u( Обработка документовr)uM Подготовка данных для создания структурыrru9 Создание структуры документовu7 Ошибка импорта пространства 'rzERR-0032r>Tr)r9rrr,rrr;rrQrrcrbrrr=r>r?rrXru_process_project_tagsrr!r&rYrrD)rrrrrrrIrrr_process_spacesrsD   z#ConfluenceAPIImport._process_spacesc Csddlm}i}|D]B}|jr,dS|dddD]}|d|kr<|||d<q r}u+Пользователей с именем uQОбнаружена учетная запись с дублирующим email u, добавляем цифру+u1Создадим пользователя ext_id=)rrcr,r user_local).r,rQrr;warnZcmfrZCmfEmailZ max_lengthrrN ORG_DOMAINrZtranslit_striprrWr6r3rr:ryrrr<rRrrrrDrrrhr"r1r\r!rrrr;rZconfluence_group user_grouprbrer)rrr-rrZmax_lenZ user_dictr is_createdZ full_namerrZnot_source_hash_filterZpersonsrZ name_combonrcZ prefix_emaildomainrZ conf_grouprhrrr_process_persons "          $                   z#ConfluenceAPIImport._process_personc Cs|jjjdds(|jjdtjddSt}|dD]r}|j dd|j r\dS| |\}}|j r||j dd|r|jjtjs||jj|d gD]}d }|jjrd }d |jd ||d }tjjd dd|dgdgd}|stjjd d|d gdgd}|s:tj||j|d d|d}n|jrL|d |_|js\||_n||jkrx|j||_|j dd|j|q|j r|j ddtq8|r|jjjddr|jjdt |d|t!tj"j#t$|gddS)NrTuAНе грузим пользователей из-за опцийr rrrBrr4r}rwrrrrr r:rrr,r}rr send_invitesu,Отправляем приглашения u пользователям: )r)%r,r8rr;r1r\r!rSrrrrlrrrrVrNrgrXr+r2r6r:rrr}rrbrhrrQrrZschedule_deferred_jobryZregister_personsr) rrnrrrirrrrrrr_process_personssP       z$ConfluenceAPIImport._process_personscCs@|D]0}d}|jjrd}d|jd||d}tjjddd|dgdgd}|svtjjdd |dgdgd}|stj||j|dd |d }n|jr|d|_ |j s||_ n||j kr|j ||_ |j d d t | |jd ||D]:}||d\}}|sq|j||jr|j d d qt qdS)Nr}rwrrrrr r:rTrmrr4F)r]r+r2r6r:rr;r,rr}rrrr^r4rbrlrbrhr)rrrrrrrr;rrr_process_groupss:     z#ConfluenceAPIImport._process_groupsc Csttdd}|s"|jjddS|jjdt}t}t j j dddgd d dgd d dggdd ddgd}|D]@}d|j d|j d}|jjd}|sqr|jjdpi}|dpd} z|jd|jd|||| \} } | |_tj| dd|_|jdd|jd||jd| |jd| |jD]} |jj| qPWqrtk r} z*|jjd |d!|d"| d#d$dd%W5d} ~ XYqrXqrt|}|jjd&|d'd(dS))u Пост обработка JQL в фильтрах задач макроса "Результаты фильтра" ZIMPORT_CONVERT_JQLTuКонвертация JQL в фильтрах отключена. Для включения, измените значение параметра 'IMPORT_CONVERT_JQL'NujОбработка JQL в фильтрах задач макроса 'Результаты фильтра'rrz%"jqlQuery":"%r,rrrubqlrr}r:r8z" (rrrhr6r2--------------------------------------------------uФИЛЬТР: FrgrzJQL: zUBQL: zBQL: u Фильтр u0: ошибка преобразования JQL r~zERR-0066r)r@ruCОбработка JQL в фильтрах выполнена за rr)rMrNr,rQrRrrr process_timer:rrr}r0rrr;r1Z get_modifiedrqrrrrr4rrD)rZ convert_jqlZjqlt1Z task_filtersZ task_filterZ filter_msgrcrhr6rqrrrIt2rrr_process_jql_in_filterss\       z+ConfluenceAPIImport._process_jql_in_filtersc CsZt|j\}}}||d}|d}|d}|jjd|dd|dd|dddS)Ndi@u-Свободно места на диске: r0u GB из z GB (z%))r disk_usager4r,rQr)rrusedfreeZ free_percentZfree_gbZtotal_gbrrr_check_disk_spaces z%ConfluenceAPIImport._check_disk_spacecCs,tdd|dD}|jjd|ddS)Ncss|] }dVqdSrrr:rrrrsz3ConfluenceAPIImport._count_users..rrr)rrr,r)rr<rrr _count_userssz ConfluenceAPIImport._count_usersc Csr|jD]d}|d}|d}|dp,|d}d|d|d}zz|j|}|s^tdd |jd |d }tjj d d d |d gd gd}|std|j j |d|dWnJtk r} z*|j j |d|d| WYqW5d} ~ XYnXtjsqz|j j||j j dWqtk rj} z"|j j |d|d| W5d} ~ XYqXqdS)Nrwrrr}rrrusОтсутствует каталог дампа: вероятно, ошибки при создании дампаrrrrr9r:u%Проект не был созданu6 Импортировано пространство 'rJu= Импорт выбранного пространства 'u' не выполнен. )rQuD Не удалось создать отчет по проекту 'r)rr;rcrbrrr6r:r>ror,rQrrrNZIMPORT_COLLECT_STATSZ project_stats) rrurrrrrrCrurIrrr_check_import_selected_spacess<  z1ConfluenceAPIImport._check_import_selected_spacesc Cs||j&||||W5QRX|||| |j j j ddrx|j n|j jdt|j d|dS)u- Запуск импорта Z process_linksTu2Отключена обработка ссылокrrN)r{r+r(r+r,r@r|ror[rvr,r8rr;Zprocess_cross_linksrQrRrr1r}rrrrprocess_importFs   z"ConfluenceAPIImport.process_importcCs<|jdtdids*|jdks*|dr8|||S)uS Из документов MS создаем наши превью r.Z backgroundrr)rrcompiler}rZcreate_preview_tag)rrrdrrr_create_previewds*z#ConfluenceAPIImport._create_previewc! Cstj|jj}|ddD]}zF|jdr8Wq|drT|dd }n|dd }|slWqtj|}|j r|j |jjkr|j |j sWq|j r|j dsWq|j s|j rWq|jjd|jd |d} |j|d } |drX| d rX| rXtj| d dd } | rF|jjd |Wq|jd| } nd|kr|dddd} || } | s|jjd|Wq| j} nrd|krtd|}|r|d}|stj|d}|r||} | s|jjd|Wq| j} | r`| |jd<||jd<d|jd<|jjd|d| dWq| r| dr| ddkr| d|d<| d |d <| d |d <Wq|}tj|dddd}|}|jd!}|jd"kr>|r>||jd#dkr>t|j j!"d$}t|j j!"d%}|j#$d&|d'|d(}|j%d#|}t&j'j|d)gd*}|rt|}|(s|r|j#$d&t|j)j!d$d'|d(}|(s|jj*d+|d,|d-|d.|d/ d0|d1Wqt&j+j,d%d2|gd3d4|d5gd6d2dggd7d8d9gd:}|rt-|j (rt&j.j||d;}|st&j.|||jdd<}|j!r|j!d=r|j!d=}|d>|_/|d?r|d?d@dAkr||d?|j0|_1nt2j3|_1|j1|_4|j5ddBt6t-|j dC,}|j7|8ddDdEd|_9|j5ddBW5QRXn*|jj*dF|dG|dH|ddI|d1Wqt&j.j|dJdKdLg|dM}|r |dr@|jd|jdN<|jj:|jd<d|jd<|dOr|jdO|jdP<|jdO=t;<|jddd}|r|dr|d dQrdQ|_=dR|jdR<dS|jdT<dS|jdU<n,|r4|dr@|d dVs@|>|||dr|jd|jd<|jj:|jd<d|jd<t;<|jddd\}}|r| dQrdQ|_=dR|jdR<dS|jdT<dS|jdU<|?dW}|jd|jd<||jd@<|@|n |>|||jjdX|jWqn.|jddkrN|jj*dY|dZ|d1Wq|jjd|jd[|WqtAk r} z|jj*d\| d]|d1W5d} ~ XYqXqdS)^NcSs|dp|dSrrrrrrrorz4ConfluenceAPIImport._convert_links..r<rrrrz[CODE:u#] Обработка ссылки: )rrz data-anchoru1Не найден якорь для ссылки z##z/people/rrrru?Пользователь не найден для ссылки z /display/~rz data-usernamer}Z href_origTuЗаменили 'u' на 'rJdata-linked-resource-typer1zdata-linked-resource-idz!data-linked-resource-container-idr'rrr}r_rrzparent.import_raw_jsonrCuДокумент ID u) с каталогом вложений 'u<' не найден в дампе пространства 'rru~). Возможно он находится в пространстве, которое еще не импортированоzERR-0005rrfrrrirr9rrr:rrorsrrr8r5rrpFrquНе найден файл '' страницы ID r1zERR-0006rrnrm)r}rrZsrc_origZsrcsetZ srcset_origZvideoZcontrolsrrrZimagesourceuЗаменили на u%Не найдено вложение zERR-0007u*] Не обработана ссылка: u.Ошибка обработки ссылки: zERR-0008)Brrrr+rrrr;rrnhostnamerrrr,rQrr0rrlstriprRrrrrrrrrrrrrrr4rbr6r:r'rrrDrrorrirRr3rSr{rQrPrrrvrrrrrr}rr rhr)!rrrYrZZ make_previewrrrrZnew_urlZraw_tagZ anchor_nameZ account_idrrZ user_nameZ attach_parentr}r Zresource_container_idrrr^Zresource_ext_idZdoc_with_attachZdownloaded_fileZ attach_objrzrr rrrIrrrrWls                                             z"ConfluenceAPIImport._convert_linksc Csi}|dD]6}|jrd}t||j}|D]\}}|||<q.q|jdddidD]F}|d}||krX||} d| } |ddd | d |d<qXd S) ub Добавляет стиль цвета для текста в Confluence Cloud r.z5\[data-colorid=([^\]]+)\]\s*\{\s*color:\s*([^;\}\n]+)spanz data-coloridTrzcolor: r; ;N)rstringrfindallrnr;r) rrYZ color_rulesZ style_tagpatternmatchesZcoloridZ color_valuerrZ text_colorrrrr[s  z'ConfluenceAPIImport._convert_text_colorc8s8dddgddddddgddd d d d gdd d d gddddgddddgddddddddgdddddgddddddgdddd dd!gdd"d#d#gdd$d%d%gdd&d'd'gdd(d)d)d*d+gdd,d-d-d.gdd/d0d0gdd1d2d2gdd3d4d4gdd5d6d6gdd7d8d8d9gdd:d;d;gddd?d?gdd@dAdAdBgddCdDdDgddEdFdGdFdHdIgddJdKdKgddLdMdNdMdOdPgddQdRdRdSgddTdUdUdVdWdXgddYdZdZd[d\d]gdd^d_d_gdd`dadagddbdcdcddgddedfdgdfgddhdidigddjdkdkdldmgddndodogddpdqdqgddrdsdtdudsgddvdwdwdxdygddzd{d{gdd|d}d}d~gddddddddddddddg ddddgdddddgdddddgdddddgdddddgddddgdddddgdddddgdddddgdg5}|jdddidD],}|d}|r,|jdd|idnd}|sF|jddid}|sPqi}|dD]\}|d} |jr~|jnd| dkrtfdd|Dddi} | d|| <q^d} |d} | r| jrt| j} tdd} | j ddd|ddid}| d}| |_| || |qdS)uF Конвертирует "Фрагмент кода" ZABAPZabap)r}rrZ ActionScriptZ actionscriptZ actionscript3asZAdaZadaZada95Zada2005Z AppleScriptZ applescriptZArduinoZarduinoZAutoItZautoitZBashZbashrshZkshZzshCrZcppzC#Zcsharpzc#cszC++zc++ZclikeZCSSZcssZClojureZclojureZDiffZdiffZElixirZelixirexZexsZErlangZerlangZerlZFortranZfortranZGoZgoZGraphQLZgraphqlZGroovyZgroovyZHaskellZhaskellZhsZJavajavaZJSONrZKotlinZkotlinZ LiveScriptZ livescriptz live-scriptZLuaZluaz Objective-CZ objectivecz objective-czobj-cZobjcZOCamlZocamlZPascalZpascalZpasZ objectpascalZdelphiZPerlZperlplZPHPZphpZphp3Zphp4Zphp5Z PowerShellZ powershellZposhZps1Zpsm1ZPrologZprologZPuppetZpuppetPythonpythonpyZQMLZqmlZqbsRrKZRacketZracketZrktZlispZJSXZjsxZTSXZtsxZreSTrestZrestructuredtextZrstZRubyZrubyrpZdubyZRustZrustZSchemerZscmZSQLZsqlZ postgresqlZpostgresZplpgsqlZpsqlzpostgresql-consolezpostgres-consoleZtsqlzt-sqlZmysqlZsqliteZTclZtclZ TypescriptZ typescripttsZ JavaScriptZ javascriptZjsZValaZvalaZvapiZVerilogZverilogrZVHDLZvhdlz Visual Basicz visual-basicZ visualbasicZYAMLZyamlZymlzHTML/XMLZmarkuprMZxmlrrr0rrrarNrrlanguagec3s|]}|dkr|VqdS)rNr)rlangrrrrs z4ConfluenceAPIImport._convert_code..rr%rzac:plain-text-bodyr~Zfeaturesprer_z language-) rr;rrrnrrrrr rhr)rrYrZsupported_languagesZ code_macror>r rrrZsupported_languagertZ cdata_tagnew_soupZpre_tagZcode_tagrrrros              z!ConfluenceAPIImport._convert_codec' Cs6dddddd}dddd d d d d dddddddd d dddddddddd d dddddddddd d dddddddddd d d}ddd}d d!}||}|D]v}d"} d"} d"} |j} | d#krB|d$} || }|d%} |d&} i}|d'D].}|d$}|jr0|jnd"}|||<qnb| d(krd)} i}|d*D].}|d+}|jr||jnd"}|||<q\|d,} |d-}nq| r|jd.d/| id0} | s| r|jd.d1| id0} | s|jd2| id0} | sqtd3d4}|jd.d5d6|d7d0}|jd.d8d6d9d0}|jd.d:d;id0}|dkr<|d<}|r|d=r|t d=d"}|||}||}|jd>|d?d0}|jd@|dAd0}| || |n,| dB}dCdD|D} dE | }| ||dF}!|!r*dG|!}"|dHdEdI|" dJ|dH<| jd:dKid0}#n|dLd6kr||}|jd>|d?d0}|jd@|dAd0}| || || d#kr| jd:dMid0}#n| d(kr| jd:dKid0}#|dN}$|$r|dO}%|dP}&t|$|&_|% |&| |%||#j| || || |qd"S)Qu9 Конвертирует "Панель" rsuccessrRrZcustomrZtipnoterRpanelZ20z 0 0 24 24)rrviewboxzM12,24A12,12,0,1,0,0,12,12.013,12.013,0,0,0,12,24ZM12,5a1.5,1.5,0,1,1-1.5,1.5A1.5,1.5,0,0,1,12,5Zm-1,5h1a2,2,0,0,1,2,2v6a1,1,0,0,1-2,0V12H11a1,1,0,0,1,0-2Zz rgb(1,82,204))dfill) svg_attrs path_attrszLayer 1)rrrz data-nameam19 3.022c0-.008 0-.014 0-.022v-2a1 1 0 0 0 -2 0v1.1a5 5 0 0 0 -1-.1h-1v-1a1 1 0 0 0 -2 0v1h-2v-1a1 1 0 0 0 -2 0v1h-1a5 5 0 0 0 -1 .1v-1.1a1 1 0 0 0 -2 0v2 .022a4.979 4.979 0 0 0 -2 3.978v12a5.006 5.006 0 0 0 5 5h8a5.006 5.006 0 0 0 5-5v-12a4.979 4.979 0 0 0 -2-3.978zm-7 13.978h-4a1 1 0 0 1 0-2h4a1 1 0 0 1 0 2zm4-4h-8a1 1 0 0 1 0-2h8a1 1 0 0 1 0 2zm0-4h-8a1 1 0 0 1 0-2h8a1 1 0 0 1 0 2zz#5243aaz 0 0 1000 1000Z0pxZpreserve)rrrrIyz xml:spacea9M500,990c270.6,0,490-219.4,490-490S770.6,10,500,10S10,229.4,10,500S229.4,990,500,990z M483.7,678c-0.4,0.4-0.7,0.8-1.1,1.2c-19.1,19.1-50.2,19.1-69.3,0L239.9,505.9c-19.1-19.1-19.1-50.1,0-69.3c19.1-19.1,50.2-19.1,69.3,0l138.7,138.7L695,328.1c19.1-19.1,50.2-19.1,69.3,0c19.1,19.1,19.1,50.2,0,69.3L483.7,678L483.7,678zz#01875az0 0 554.2 554.199a!M538.5,386.199L356.5,70.8c-16.4-28.4-46.7-45.9-79.501-45.9c-32.8,0-63.1,17.5-79.5,45.9L12.3,391.6 c-16.4,28.4-16.4,63.4,0,91.8C28.7,511.8,59,529.3,91.8,529.3H462.2c0.101,0,0.2,0,0.2,0c50.7,0,91.8-41.101,91.8-91.8 C554.2,418.5,548.4,400.8,538.5,386.199z M316.3,416.899c0,21.7-16.7,38.3-39.2,38.3s-39.2-16.6-39.2-38.3V416 c0-21.601,16.7-38.301,39.2-38.301S316.3,394.3,316.3,416V416.899z M317.2,158.7L297.8,328.1c-1.3,12.2-9.4,19.8-20.7,19.8 s-19.4-7.7-20.7-19.8L237,158.6c-1.3-13.1,5.801-23,18-23H299.1C311.3,135.7,318.5,145.6,317.2,158.7zzrgb(255,153,32)z0 0 208.891 208.891zM0,170l65.555-65.555L0,38.891L38.891,0l65.555,65.555L170,0l38.891,38.891l-65.555,65.555L208.891,170L170,208.891 l-65.555-65.555l-65.555,65.555L0,170zzrgb(216, 64, 64))rrrrRr)Z check_markZ cross_markcSs8d}|jdkr|d|kS|jdkr4|ddkSdS)Nrrr ac:adf-noder8rF)r}r;)rZ panel_namesrrr find_panelss   z7ConfluenceAPIImport._convert_panel..find_panelsNrrz ac:local-idrrrrzac:adf-attributerzlocal-idz panel-typera data-local-idrrrr~rzak-editor-panel eva_convertedr#)r_contentEditablezdata-panel-typezak-editor-panel__icon)r_rr_z$ak-editor-panel__content mceEditableZ panelIconIdz atlassian-r rrr-cSsg|]}|rtt|dqS))chrrrrrrr<Nsz6ConfluenceAPIImport._convert_panel..rZbgColorzbackground-color: r.rrZ panelContenticonz!confluence-information-macro-bodyrprZstrong)rr}r;rrnrrr rrrhrrirrrr rr)'rrYrZ panel_typesZ panel_iconsZicon_maprZ panel_macrosZ panel_macror Zlocal_idr>Z panel_elementZ panel_nameZ panel_typerrrrattrZattr_keyZ attr_valuerZ panel_tagZpanel_icon_tagZpanel_content_tagZicon_idZ icon_typerZsvg_tagZpath_tagpartsZ icon_charsZ panel_colorZbg_colorZ content_tagZ panel_titleZp_tagZ strong_tagrrrrs8     D                                         z"ConfluenceAPIImport._convert_panelc Cs|jdkrd}nd}|jjd|jddidD]}z|drR||d}ntd t|j t |j t |j t |j t |jd d }t|}||j|jd |d d} | r| |jWq2tk r} z|jjd|d|dW5d} ~ XYq2Xq2dS)u] Упоминания пользователей confluence-userlink rOz @{person_name} u @Упоминания | {person_login} uHКонвертируем упоминания пользователейruserinforZuserkeyu]Не найдены аттрибуты для определения пользователя)Z person_idZ person_loginZ person_hrefZ person_namer~z user-mentionr)class_ruZНе удалось преобразовать ссылку на пользователя zERR-0009rN)rr,rQrrr;rrrrrrwrcrr}r)rrrrD) rrrYrZrrrr rr r rrrrVss4    z%ConfluenceAPIImport._convert_mentionsc s|dkr dSz^|||dd\}}|shtjr:}n ddd|jh}fdd|D}td |Wnbtk r}zD|rn8|j}|jrd |nd } |jj |d | d |ddW5d}~XYnX|S)u Возвращает пользователя по какому-либо идентификатору (id, имя, логин, email и др.). Args: user_id (str): Идентификатор пользователя для поиска. obj (optional): Объект в контексте которого был поиск пользователя. Defaults to None. raise_on_error (bool, optional): Вызвать исключение при ошибке поиска или вернуть резервного пользователя ('Система' или пользователь по умолчанию). Defaults to False. Raises: Exception: Исключение при ошибке поиска пользователя. Returns: CmfPerson: Объект пользователя. unknownNFr!rrcsi|]}|kr||qSrr)rrrrrrsz3ConfluenceAPIImport._get_person..u>Пользователь не найден в системе: uпо умолчанию u'Система'u;. Будет установлен пользователь zERR-0023ryru) rrlrNDEBUGr3rrzrxr,rD) rrrrtrr;Z user_datarHrIZ person_msgrrrrs.  zConfluenceAPIImport._get_personc CszT|ddddd}tjj||d}|s>td|d|||||Wntk r}znd |dd d |jd |jd d} t|tj r| d|j d7} | d|7} |j j | d|p|dW5d}~XYnXdS)u_ Конвертирует макрос Word или Excel через atlas_doc разметку rrb macroParamsr}rrrrJr extensionKeyrrrrwrrr~rrN) r:rir;rrrr}rrrrr,rD) rrelemrr rr rdrIr"rrr_convert_msoviewer_in_atlas_docs"& z3ConfluenceAPIImport._convert_msoviewer_in_atlas_doc)rrc0 Cs> t|D ].}|ddkr|jdddddd}d d |jd d idD}g}|jD]} | d krfqX|| qXt|dD]\\} } | dd} |jd| ddd| ddd} | dd || jD|| q~|| n.|ddk rVd}|d drX|j d|ddid}|s|j j d|ddd|ddqnNd|ddkr|ddd dr|j d|dddddid}|ddd krd!}|j d|ddid}| rT|ddd"d#d}d$|kr|d$d%\}}n2t|tjr,|jd&}n|jjd&}|}|ddd" d'}| rTt|d d#j|dt|d(d)t|d(d)d*d+}||j q|ddd,krd-}|j d|ddid}| rT|ddd"d#d}| rTd$|kr|d$d%\}}n2t|tjr6|jd&}n|jjd&}|}t|d d#jt|d(d)t|d(d)d.d+}||j q|ddd/rF|ddd"d0d}|}tjj ||d1}d2}|sX|ddd"d3d}|jd4|}tjjd'd5|gd6d7|d8gd9d5d:ggd;d}|r t |j!"r tj|||j d:d?}|jr|j d@r|jd@}| dA|_#| dBr|dBddCkr|$|dB|j%|_&nt'j(|_&|j&|_)|j*d:dDt+t |j!dE,}|j,|-d:dFdGd:|_.|j*d:dDW5QRXtjjd'd7|dHgd6d7|d8gd9d5d:ggd;d'd}|rXt |j!"rX|j/}tjj d'd5|gdIdJ|ggdK}|stj|||j#|j&|j&|j d:dL}|j*d:dDt+t |j!dE,}|j,|-d:dFdGd:|_.|j*d:dDW5QRXnL|j01dMt2|j3jd&dN|dO} |j j4dP|dQ|dR| dSdT|dUq|}tjj dIdJ|gd'd7|dHggdVgd>}dW} dW}!|ddd" dr|ddd"dd} |ddd" dXr|ddd"dXd}!|j/j5|j6j5| |!dY}"|r|j7|"dZ<nd#|"dZ<t|d d#jf|"d+}||j q|ddd[k r\d\}#t2|j6}$t2|j/}%dF|$|$d]d#d^dFd_}&|ddd"}'|' r |' d`rt89|'d`d:|&da<|' dbr6|'dbd}tj;j |j<|d1}(|(stjj |dc}(|(rt2|(j6|&dd<t2|(j/}%n|j j de|d|' dfrR|'dfd|&dg<|' dhrn|'dhd|&di<|' djr|'djd|&dk<|' dlrd^dddm})|) |'dld|&dn<|' dord'dpdqdr}*|* |'dod|&ds<|' dt r t89|'dtd:|&du<dv=dwdx|'>D}+t|#j|$|%t8j?|&dFdy|+dzd d#d+},||,jn|ddd{k r|jdd{dd|d}-|jd}d d~id}.|.|ddd"d~d|-|.|jdddddd}/|/|ddd"dd|-|/||-nN|dddk r.|j@|||d|dn&|dddk r|j@|||d|dn|ddk r|dddk r|ddd" d' r|ddd"d'd}d}|j d|ddid}| rt|d d#j|d#=dd |jDdd+}||jn|j j d|| dr|jA||d||dqdS)Nr8Z layoutSectionrar#r5zmceNonEditable selected)contenteditablezdata-layout-sectionr_rcSs,g|]$}d|jdkrd|jdkr|qS)z fixed-widthr_rrrrrrrr<sz:ConfluenceAPIImport._convert_atlas_doc..r_Z columnLayoutrrtrrrz flex-basis: )zdata-column-widthzdata-layout-columnr.cSsg|]}t|qSr)r)rrrrr<s extensionZlocalIdru&Не удалось найти тег u для rZ macroMetadatarbZmacroIdrrrGuU
Макрос Include. "Вставить выборку" | Имя = {excerpt_name}
rrrr}rr}rIrJrKr~rPu
Макрос Include. "Вставить страницу" | Имя = {page_label}
rQrZ diagramNameru
Диаграмма: "{name}"
ZpageIdrrfrrrirTr9rrr:rorsrrr5rrpFrqrrrr)r}rrRrSrPr,rr_rru7Не найден файл Draw.io диаграммы 'rr1rJzERR-0010rrrrrrrpu
Макрос "Отображение дочерних" | {doc_name}
r$r%)r&rr4r'r]r(r)rr&r)r|r4uEНе удалось обработать тег оглавления r,r'r-r]r.r/r0r1r(rrRrUr2r3rr)rcss$|]\}}|d|dVqdS)rfrNrrrrrrcsz9ConfluenceAPIImport._convert_atlas_doc..rg)r:r;rr!zpaste-code-macro)r_r<rrprzlanguage-markupr`)r_rzdata-mce-selectedZ __bodyContentrrrZbodiedExtensionrBu
Макрос Include. 'Создать выборку' | name = {name}
{content}
cSsg|] }t|qSrrGrrrrr<srEuНе нашли тег для )Brr rpoprrhrr rr;rr,rQrRrrr:r>rrrrrrrMrNrrVrir6rrorrrrRrr3rSr{rQrPrrrvrrr}r4rbrrrDrrwrrrr"r'rurirrrr)0rrrrrrZtag_layout_sectionrrrrcolrZtag_layout_colrZ macro_paramsrrLrFrrRr}r rdrZ doc_ext_idrrzrZ drawio_imgZ file_name_imgrrrrrrur;rr!Z parent_pager@rAZoriginal_params_strrZ code_blockrprrrrrs        **%  #        '                     *!. z&ConfluenceAPIImport._convert_atlas_docc CsZ|jjr dnd|jdd|jdd}||}|d}|d}dtd } ttt |j j | d t jj|d d d dgd|_|jjdkrt jjdd|gdddggd gd|_n|j|_|jjj} |j| d|_|jd|_tj} |j j | d|d| dt||jd|_t |_!t"|_#d|_$zg} t&| D]R} tj'||j(d| d|id}|)| *||j j +| d|d qb|j j | d!|d"| D](}|,|j j +| d|d#qW5|j%X|j j | d$|d%|j$t-.d&W5QRXW5QRXW5QRXdS)'Nuдокументов/папокr)r}funcrrr}rz[PID:ru Процесс запущенr2rrz#scheme_wf.default_document_workflowr.rFrMrrRr:rru! Запуск обработки u с u потоками ...rrr;rr8u Поток u запущенu% Ожидание обработки z...u завершенu' Завершена обработка rr)/r+r2rrrrrrZdisable_notifyZensure_recursion_limitr,rQrr:r>r;rur2r'rrrrcrbrrrNr r rZrrDrrrrrrrrrrrhryrirr)rZ project_idrrrrrrZ item_funcZ log_processruZ num_threadsrrrrrrrun_threaded_processs         " z(ConfluenceAPIImport.run_threaded_process)N)F)N)rlrL)TNN)N)N)N)N)N)TT)T)NF)N)NN)r)rrrrrWrr r:Z CmfImportrGr=r>r?r@rArBrrrrrrr staticmethodrrr7rrrrrrrrrJr\r_rcrirorrrrrrrrrrrrrrrrrrrr"r$r%r&r'r(r+r,r6r@rAr\r_rerlr}rrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrrr!r&r.r0r1r9r;r<r=r>r?rArErJrPrUrVrWrXrYr[rZr]r^rlrorprvr{r|r}r~rrWrrrrVrrrrrrrrr"3sR #=   A G # 9-^ 0! 90>-9 l18( >?G  h M  4 8 U"7*Y06a |>LCWn S~i1/PL  T<& 23^$g58+<I    0 =  # )  =  '  p  6 QD.-r")-r)rrMrrrrrDrr contextlibrenumr itertoolsrpathlibrtypingrrZbs4rZcmf.apprZ cmf.includeZ%common.models.cmf_plugin_import_mixinr Zmodules.confluence.apir Z%modules.confluence.utils.queue_brokerr r Zmodules.jira.jql.parserrrrrrrr:r'rr=r"rrrrs8