U g!@sXddlmZddlTddlZddlZddlZddlZddlZddlZddl Z ddl m Z ddl Z ddl mZddlZddlmZmZmZmZmZmZmZddlmZddlmZdd lmZdd lmZmZdd l m!Z!dd l"m#Z#dd l$m%Z%ddl&m'Z'ddl(m)Z)eee*j+ee*j,ee*j-fZ.ej/GdddZ0ddZ1Gddde'Z2dS)) cmf_context)*N)Path)TemporaryDirectory)DictOptionalListCallableUnionTypeIterator) BeautifulSoup) permutations)cached_property) commit_all_dsinit_ds) BaseModel)CmfPluginImportMixin)JiraApi)JiraBaseImport) JQLNormalizerc@s:eZdZUdZeed<eed<eed<ddZddZd S) EpicDatauD Данные используемые при создании epic namekey project_keycCs t|jSN)hashrselfr./modules/jira/api_import.py__hash__%szEpicData.__hash__cCs |j|jkSr)r)rotherrrr __eq__(szEpicData.__eq__N)__name__ __module__ __qualname____doc__str__annotations__r!r#rrrr rs rcsfdd}|S)Ncsfdd}|S)NcszD|jd|jr$WdS|f||}|jj|WStk r|jj|jd7_|jdYdSXdS)Nz================== ru Ошибка ) cmf_importlog is_canceldpcommit Exceptionrollback has_errors log_error)objargskwargsres)funcrrr wrapper.s   z3catch_exception..decorator..wrapperr)r8r9r)r8r decorator-sz"catch_exception..decoratorr)rr;rr:r catch_exception,s r<cs(eZdZUdZeed<eeefed<e ddfdd Z e eeefdd d Z d d Z d dZddZeeeeeedddZddZeeeefdddZeddZeddZddZeddd Zeedd!d"Zeedd#d$Zeeed%d&d'Zdd*d+Zed,d-d.Z ed/d0d1Z!ed2eed3d4d5Z"d6d7Z#ed8dee$d9d:d;Z%ddd?d@Z'edAdBdCZ(edDdEdFZ)e*j+ddGdHZ,dIdJZ-dKdLZ.dMdNZ/edOdPdQZ0edRdSdTZ1edUdVdWZ2eedXdYdZZ3d[d\Z4d]d^Z5ed_d`daZ6ed_dbdcZ7edddedfZ8edgdhdiZ9djdkZ:d dldmZ;eedsedtdudvZ?dwdxZ@edyedtdzd{ZAed|d}d~ZBddZCedddZDddZEedd!ddZFedddZGedddZHededddZIedddZJedddZKedddZLedddZMedddZNedddZOddZPededddZQedddZRddZSddZTddZUddZVddZWddZXddZYddZZddZ[ddZ\dd„Z]d"ddƄZ^ddȄZ_ddʄZ`dd̄Zadd΄ZbedtddЄZcedtdd҄ZdedtddԄZeedtddքZfedtdd؄ZgddڄZhdd܄ZiddބZjed߃ee update_fields)rr?r5r6rV __class__rr rFFs(    zJiraAPIImport.__init__)r@c Cs|jr |jS|jd}|rL|jsLt|}t||_W5QRXn6|j |_t|d}t |j|W5QRXd|_|jS)N fields.jsonw+F) r>r+get_download_pathjoinpathexistsrYopenjsonloadr?Z get_fieldsdump)r file_pathfrrr jira_fields^s   zJiraAPIImport.jira_fieldsc Cslddl}||_|jd}|jdt}t|d}t |j|W5QRX| ||dS)Nrr\z fields.json.r]) shutilr>r+r^r_osgetpidrarbrdmove)rfieldsrhre file_path_tmprfrrr update_jira_fieldsns z JiraAPIImport.update_jira_fieldscCs(|jD]}|d|kr |Sq dS)Nr)rgvalues)rrfieldrrr _get_field_by_namews z JiraAPIImport._get_field_by_namecs"ttfdd|jd}|S)Ncs|didkS)NschemacustomrLrf field_typerr z2JiraAPIImport._get_field_by_type..)nextfilterrgro)rrwrprrvr _get_field_by_type|s z JiraAPIImport._get_field_by_type)model field_namer@cCs&|sdS|j|gd}|r"|dSdS)N)Z fields_namer)import_shop_fields)r}r~r7rrr _get_field_nameszJiraAPIImport._get_field_namecCsddl}ddl}ddl}ddl}||_||_tj|_tj|_| d|_ |j j d|j ddddtj r~ttj |j |_ |j j dtj dd|j}|j j dt|d d ddtt|d |j |_ |j std dS) Nrr*z cpu_count=u%, надо не менее 2 ядерT) anonymouszconfig.IMPORT_PROCESS=zavailable_memory=i@u-Гб, по 2 Гигабайта на ядроluРесурсов системы недостаточно для импорта, обратитесь в техподдержку для дополнительной информации.) threadingqueuemultiprocessingpsutilconfigZIMPORT_THREADSZthreading_max_forksZIMPORT_DOWNLOAD_THREADSdownload_threading_max_forks cpu_count max_processesr+r,ZIMPORT_PROCESSminZvirtual_memoryZ availableintr0)rrrrrZavailable_memoryrrr rXs   z&JiraAPIImport._prepare_multiprocessingc Cspg}ddddddddd d }d d d d}|jD]8\}}d|||d}|||d||dq2|S)uO Сопоставление настроек для модели models.CmfTaskrtextprioritystatusZ alarm_dateZdeadlinecmf_modified_atcmf_created_atstatus_closed_at) summary descriptionrrZcustomfield_10015Zduedateupdatedcreatedresolutiondatez.namez .watchCountz.votes)rZwatchesZvoteszfields.N) model_field json_path ext_field)rgitemsrLappend)rZissue_settingsZdefault_local_attrs_mappingZadditional_json_pathZcustom_field_keyZ custom_fieldrrrr _get_issue_import_settingss.  z(JiraAPIImport._get_issue_import_settingscCs dddddddddg}|S)Nr displayNamerremail emailAddress does_not_workactiver)Z user_settingsrrr _get_user_import_settingss z'JiraAPIImport._get_user_import_settingscCs dddddddddg}|S)Nrrr cmf_authorauthorr renderedBodyr)Zcomment_settingsrrr _get_comment_import_settingss z*JiraAPIImport._get_comment_import_settingscCsXdddddddd}||kr$||S|d }t|d kr>d S|j|d id d S) NИмяZEmailuАктивныйuСозданоu Автор ТекстuКлюч)rrrrrbodyr.r*rr)splitlenrgrL)rZjsonpathmappingrrr _get_setting_title_from_jsonpaths   z.JiraAPIImport._get_setting_title_from_jsonpathTcCs|sdS|dD](}t|ts&dS||}|sdSq|rvt|trvdddg}|D]}||krX||SqXdS|rt|trg}|D]f}d|kr||ddqd|kr||ddqd|kr||dq|r|t|qd|S|S) Nrrrrr inwardIssue outwardIssue,)r isinstancedictrLlistrr(join)r4rto_strr~Z str_fieldsZ str_fieldresultZ related_objrrr _get_file_vals6    zJiraAPIImport._get_file_valc svgttttftgttfttdfdd }jdgj d}d}d}| r D]$} |dD]}qq~|rlqql dD]}qq|sd d jjd d D}|r|d }|sdd jjjjd dD}|r|d }|s tdd_||jtj|s.td||jtjddddddg}||jtjdgdS)u- Инициализация настроек )objs settings_funcr}r@csz|D]p}|}|D]H}||d|d<||d|d<|d|d<|j|d<q|j|d|SdS)NrZfile_valrtitleicon)rrl)rrrrr verbose_name)rrr}r4Z obj_settingssettingrrrr _get_settingss z:JiraAPIImport.tmplt_import_settings.._get_settingszplugin.plugin.*projectsNiduserscSsg|]}|qSrr.0r4rrr +sz7JiraAPIImport.tmplt_import_settings..r*limitrcSsg|]}|qSrrrrrr r/s)usernameZ limit_enduSНе найдено ни одной задачи, импорт невозможенTuaНе найдено ни одного пользователя, импорт невозможенz2022-05-22T15:22:22.593+0300ru!Электронная почта)rrr)rrrselectedObjects)rvalue)r rr rr TypeModelr+ load_fieldsr^r_r` _get_projectsget_project_tasks _simple_getr? get_issues get_usersloginr0rYrrJCmfTaskr CmfPersonr CmfCommentr) rrZdump_dirtaskuserprojecttasksrZcomment_examplerrr tmplt_import_settings sT  z#JiraAPIImport.tmplt_import_settingscCs||jjd}ddgggdg}|jjddD]}t|tjjdD]f\}}|ds\qJ| ||d }| |dd |}|d d  |dd |d dd  |qJq2|S)Nimport_settingsu Задачиzcalendar-today)rrtitlesrowsrrlrrr~rrcaptionr) Z_normalize_settingsr+ json_settingsr?r enumeraterJrrr_normalize_jira_valuer)rsettingsrissueZnumrrrrr previewKszJiraAPIImport.preview)rr@cCs\i}|D]N}|dsq|j||ddd}||dd||d}|||dd<q|S)uC Преобразование настроек для модели rrF)rr~r)rrrL)rr4rZnormalized_objrrrrr _normalize_objZszJiraAPIImport._normalize_objsprintkanbanc Csdd|jgg}|dr*|dddgn|dd|gtjj|d}|jjjjd|d}tj |jtj |d ||||d |d |d d d|gd\}} | r|d |_ |j dd|S)NZtree_parent_id== completeDatesys_typearchiver{::rr startDateendDate)rparent tree_parent list_typeplan_start_date plan_end_dateext_idrZ filter_objTZ save_import) rrLrrJ CmfFolderr+plugin source_hashrprocess_any_table_fieldsCmfListrsave) rrrZparent_sys_typer_filterrrZlist_objnewrrr _process_listfs*     zJiraAPIImport._process_listu8Обработка наблюдателей задачиcCsd|dd|ddd}||D]r}|jjjrJ|j|d|d}n|j|d|d}|sntd |||jks(||jks(||jkrq(|j |q(t d S) u;Добавляем наблюдателей в задачуu$Наблюдатели задачи r: "rlr"rAr4uI_process_watchers: Не найден наблюдатель задачи N) _get_issue_watchersr?rHrI _get_personCmfError responsibler cmf_owner spectatorsrcommit_with_event)r issue_objrr4watcherpersonrrr _process_watcherss zJiraAPIImport._process_watchersu#Обработка вложенийc Cs6ddlm}ddl}d|dd|ddd}t|d d }d}|r8||}|D]} zz*| d rWWqh|dd D]} | d| krqqt j | } t j j| |ddddgd} | st j |j|d| d} | jr| r(| dr|j| d|j|d| _| d| _|| d} | jdd| | | jdd| r| j| dkstd| jd| dd| jW5QRXWnxtk r|jjd| dd |d| j|d!7}Yn8|jjd"| d#|d|jj|d!7}YnXW5|jd d XqhW5QRX||D]}zzt j |d$} t j j| |d%} | st j |j|d| d} | jr| jdd| t |d&| j!t j"jj#$}|%| j&}|'| jWn8|jjd"| d#|d|jj|d!7}YnXW5|jd d XqB|S)'Nr)RDiskuВложения задачи rrrlrr issue_pathz /attachments/all_attachments.zip attachment processed/filenameimport_originalurlZurl_preview_imgZ url_previewrrrlT)r+rrrrrrrsizeuТекущий размер z != u из метыu7Обранужена проблема вложения uI, размер файла не совпадает с метой из JIRAzERR-0034r*:Не удалось обработать вложение zERR-0035 file_namerrre)(Z rdisk.rdiskrzipfilerr`ZipFileZnamelistr+inc_statendswithrJ CmfDocument _get_filename CmfAttachmentrLrr rGrrrarZupload_stream_filest_sizeAssertionErrorr.r/r3r1_get_issue_attachmentsZ upload_dirrhcopyZfull_path_fileZCmfRFileZ data_driverZget_rdZ get_rfileZ _file_name make_preview)rr jira_issuerr r4Zall_attach_zip_patherrorsZmyzipZzip_attach_name attach_infoZ attach_namerZattach_fattachment_infordiskZrfilerrr _process_attachmentss              ,      z"JiraAPIImport._process_attachmentsuBОбработка упоминаний пользователей)rr@c Cstddlm}m}|sdSt|d}|jddidD]6}z|jdrX||jd}n||jd r||jd }|jd |jd <|jd |jd <n>||jd }||j} | | dd } || |j }|jd |jd<|j |jd <d|jd<|j j|jd <|jj|jd <Wq2tk rh} z0|jd7_|jjd|d| d|dW5d} ~ XYq2Xq2t|S)u] Упоминания пользователей confluence-userlink r)urlparseparse_qsN html.parserclass user-hoverattrsdata-account-id data-usernamezdata-linked-resource-idzdata-linked-resource-id_origzdata-username_orighrefr href_origT cmf_convertedr*u)Ошибка обработки тега : zERR-0036r) urllib.parser2r3r find_allr8rLr query_get_user_info_from_dumplowerrGr;rrrr0r2r+r3r() rrrr2r3doc_souptagr parsed_urlrA user_infoerrr _process_mentionss8      zJiraAPIImport._process_mentionscCstjj}||jjd|}|dk r2t|S|dD]\}||j |krX|S|dd | krx|S|dd | kr<|Sq.r=uУже обработали r;#uЭто якорь u&Обрабатываем ссылку rSr?r(/attachment(?:/content)?/(\d+)(?:/)?(.*)r*rlrcs|dkSNrrtitemZ attach_idrr rx$ryrr)rrlrZsrc_origTZvideoZcontrolsz100%widthZheightr<uЗаменили на z/people/r)r r@r8rLr+rVinforU startswithurllibparseunquoterresearchrzr{rJr$r%r&sgetr mimetypes guess_typerr r;r()rrrr,r+Z text_souprErr url_match attachmentsattachZ attach_obj mime_type account_idrrr^r _process_links sd                    zJiraAPIImport._process_linksc Cs0|rd|dnd}|jjd||jjjrV|ddkrV|jjd|d|||jt j j d}d |jj j j d ||jd }|d d d }d } |D]} t| | krt| } qtt j jjt j jjt j jj} | | krzt|dkr|d |d<d|d<d|d<nbt|d krF|d|d<|d |d<d|d<n2t|dkr|d |d<|d|d<|d |d<n2|jd7_|jjd|d d| ddddddg} t j jddd|dg| d} | r| jjd |jj j j d dkr|rT|jjd| d | jtd |jj j j d!d| jj| _| jd"d#d} n0|jd7_|jjd$| d%| jd&d'd(d)| sd*dd+d,|jj j j d-gdd.dgg}t j jd/d0|d1g|g| d} | st j jd1d0|d1g|g| d}t|dkr>|jjd2|d1d3t|d |d4dd|jd7_g}|sJ|jjd5|d1d |d d0|d g|g}t j j|| d}|sJd*g}t |t|D]}t|dkrdd0|d g}nnt|d kr|!dd0|d gdd0|dggn\}}|d?|d>|}|d7}qt j |||jd"d@} nd|fS|r(| j'r|D]}t(| |||q| jr|| jkr| j|| _n|| _t j)*}t j)+}| j,!|| j,!|d"| _-|dAdBD]}|jjjr2d |dCd }nd |d d }d |jj j j |}t j)jddd|dgdgd}|st j)jd d.|d gdgd}|st j)||jd"|d |dD}|j'r|d |_.|js||_n||jkr|j||_|jd"d#| j,!|q| j/r(| jd"d#| |fS)EN()ru0Импортируем пользователя Z accountTypeZ atlassianuНеизвестный тип rlrr rr* last_name first_name second_nameu?Часть полного имени пользователя "u" длиннее u_ символов. Фамилия, Имя и Отчество не были заполнены.zERR-0110robj_typer rg_member_ofrLIKE%r{rlu ext_id пользователя N содержит несколько ID из одного источника: z::.+?::TruPВозможно найден некорректный пользователь ud,так как ext_id содержит несколько ID из одного источника: 'uq'.Необходимо повторно импортировать локальных пользователей.zERR-0004r)Z error_coderyORzNOT LIKE%::::%rrILIKEru+Пользователей с почтой z > zERR-0037uHНе удалось найти пользователя с почтой u+Пользователей с именем  (z) > uMНе нашли пользователя среди существующих z) FuQОбнаружена учетная запись с дублирующим email u, добавляем цифру@+)rrr+rgroupsrgroupId)rr+rrimport_raw_json)0r+rVr`r?rHrIwarningrrrJrrrrrGrrrruZ max_lengthrtrvr2r3rLrrcountresubrrrrr,rUINFOrCWARNINGrsetattrCmfPersonGroup jira_group user_grouprzZ user_localr is_changed)rrcreateupdater4Zobj_msgZ user_dictrZ full_nameZcurrent_length_namerZmax_length_namerlrZnot_source_hash_filterZpersonsrZ name_combo is_creatednrZ prefix_emaildomainrrrZ group_infogrouprrr _process_personFsh           *   "      &             zJiraAPIImport._process_personuОбработка группc Cs:|dD](}z|jr$WdSd|jjjjd|dd}tjjddd|dgdgd}|stjjdd |dgdgd}|stj|d||jd |d }|jr|d|_ |j s||_ n||j kr|j ||_ |j d d |j |jjd 7_Wq |jd 7_|jjd|dddYq Xq dS)Nrrrrr{r|rr}rT)rrr+rrrr*u4Не удалось загрузить группу ERR-0038rrx)rr+r-rrrJrrLrrrrr.r/imported_object_countr2r3)rZ group_datarrrrr _process_groupss>      zJiraAPIImport._process_groupsu-Обработка пользователейc Cs|jjjdds(|jjdtjddSt}|dD]}z^|j rPWdS| |\}}|jj d7_ |j r|j s|j ds|r||j jWq8|jd7_|jjd|d d d Yq8Xq8|r|jjjd drttjjt|gd dS)N load_usersTuAНе грузим пользователей из-за опцийrWrr*z .evateam.ruu@Не удалось загрузить пользователя rrrxZ send_invites)r5)r+rrrLr,rUrsetrr-rrrrr#addr2r3Zschedule_deferred_jobrJrZregister_personsr)rZnew_user_emailsrrrrrr _process_users?s, zJiraAPIImport._process_usersu#Обработка статусовcCs|dD]}|jrdS|jjjr2|d}n |dd}|jjjjd|d}tj j |d}|sdd|dgd ddgg}tj j |d }|stj |d|jd }||_ t ||_|d|_|jd d |jj|jjd7_q dS)uc Грузим статусы из Jira и сопостовляем с нашими statusesNstatusCategoryrrrrrrr)rr+Trr*)rr+r-r?rHrIrrrJ CmfStatusCoderLrrget_status_type status_typerrr.r/r)rrrrZcmf_status_coderrrr _process_statusesYs*         zJiraAPIImport._process_statusesc si}d}d}|d}dd||D}tjjdd}||}|D]} |jjjjd| d} tjjdd| gd } | stj|| |jd d } | jr|d d | d| _ | dd| _ | | _ | j d d| ddd} | D]f} || }|s|ddkr| }|s |ddkr | }d|jjjjd|d| d}| ||<q| dD]}| || qRtjjdd| gdddggdgdD]@}tjjdd|jgdd| gdddggd sq|jd dq|jjjjd| j| dD]}d|d}|d }tjj| |d!}|s4tj| ||jd"}|d|_ |d|_ fd#d$|d%D}tjjdd&|gd |_d|d'}tjj|d(}|d)kr|rd |_|j d d*||_|j d dqqD|d+}|jjjjd,|d}tjj|d(}|s$tjjd-d}tj|||jd.}|d|_ ||_||_|j d dtjj|d/D]}|jd d0qT|D]b\}} |jrqtjjdd1d2|d2gd }||| |jd3d4}tjf|}|j d dqp|S)5NrcSsi|]}|d|qSrrr issue_typerrr {szEJiraAPIImport._create_schemewf_for_simple_project..default.system:defaultrCrr=rTtemplaterr+rrr>rrrrZassociatedWithr issueTypeshierarchyLevelrX:rworkflowrrr}!=force transitionstype)rr)rrr+cs(g|] }|drd|dqS)ZfromStatusReferencerrtrsworkflow_hash_idrr rs zEJiraAPIImport._create_schemewf_for_simple_project..ZlinksINZtoStatusReferencerglobalZ only_dataworkflow_scheme ::SIMPLE::softdev:default)rrr+) scheme_wfZTEXKOM_db_deleter{r|r)r logic_typetarget_workflowr+cmf_model_name)_get_issue_types_for_projectrJ CmfWorkflowrL!_get_simplified_project_workflowsr+rrrrrrr_create_status CmfStatusrrdeleterrCCmfTrans status_fromallow_empty_transition status_to CmfSchemeWfdefault_task_workflowdefault_subtask_workflowCmfSchemeWfRulerr- CmfLogicType) rZjira_project_info issue_mapZdefault_workflow_for_taskZdefault_workflow_for_subtask project_id issue_types wf_templateworkflows_data workflow_dataworkflow_ext_idrissue_type_ids issue_type_idrissue_type_ext_idrZworkflow_transitiontransition_ext_idtransition_type transitionstatus_from_ext_id_liststatus_to_ext_idrZworkflow_scheme_dataZscheme_wf_ext_idrZ template_wfrulelogic_type_ext_idr rule_dictrrr #_create_schemewf_for_simple_projectus                     z1JiraAPIImport._create_schemewf_for_simple_projectc CsZ|jjjjd|jd|d}|jjjjd|d}tjj|d}t|d}|srtj||d|jd}||_ |j ddtj jd d |gd }|stj jd d |gd d |gd d dggd }|stj jdd |dgd d |gd d dggd }|stj ||j|d}||_ |d|_ |d|_d|_||_ddddd}||d|_|j dd|S)Nrrrrr)rrr+Trrrrr status_code)rr+rrF#a0a0a0z#3f82d8z#e36b51z#23a055)OPEN IN_PROGRESSZ IN_REVIEWCLOSED)r+rrrrJrrLrrrrrrrrrrcolor) rZjira_status_datar status_ext_idrrrrZstatus_type_colorrrr rsH"     zJiraAPIImport._create_statusc2 sddlm}ddl}i}d}d}i}t|dd}tjjdd} |dd} | D]} || d } |j j j j d | } tjjd d | gd }|stj| | |j d}| d |_ | dd|_ |jdd|s| dr|}| d}|j|ddD]}|d|kr q|s |dr |}||ks@|drf||krfd|j j j j d|dd}|||<|dD]*}|dd|d<|||||d<qnqtjjdd|gd ddggdgdD]@}tjjdd|jgdd|gd d dggd sq|jdd!qz|d"|j d#}|s4td$|j d%t|d&}|}W5QRXt|d'}|sjtd(ti}|d)D]}|jd d*id+jdd,}|||d<|d-D]}|d}|j d.kr|jd/|d0}|s|j jd1|j d2|d3|d4q|jd d5id+}| |||d |r6|jdd,ndg|d6dd7d8}|d9!|d|jd d:id+}|r|jdd,|d;<qq~std|d?D]}|d6dd7} | }!|!rd|!_#|!jdd@|d}|jd d5id+}||d |r*|jdd,ndg| d8}|jd d:id+}|r\|jdd,|d;<|||<q|j $dAt"|dBt%j&|'D]H}"|j j j j d|j(}#|#d|"d}$tj)j|$|dC}%|%stj)||$|j ddD}%|%j*s|j j+,dE|%j dF|j dGq|"d |%_ |"d|%_ fdHdI|"d9D|%_-|"dJ|%_.|"d;r|"d;t/t0fdKdL|1dMd}&z|2|&|%_3Wn8|j jdNdO|%j dP|j dQdRdS|dTYnX|%jddqWqTtk r}'z$|j jdU|j dV|'dW|d4W5d}'~'XYqTXqT|j j j j d|dd}(tj4j|(dX})|ddY}*|)stj4jdZd}+tj4|+|(|j dd[})|)j*rH|*d |)_ |*dd|)_ ||)_5||)_6g},|dd}|D]j}d|j j j j d|dd}tj7jd d\d]|d]gd }-|,!|-|d^r|-|)_8|d_r|-|)_9q|,|)_:|*|)_;|)jddn|j j+,d`|)j dag}.|<D]0\}/}tj7jd d\d]|/d]gd }-tj=jdbd |-gdcd |)ggd }0|0r|0j*s|j j+,dd|)j de|0j>df|-j dg|.!|0j>ql|0s~tj=jdbd |-gdcd |)gdhd dgdid dggddj}0|0rj|j j+,dd|)j de|0j>df|-j dk|.!|0j>qltj=dl|-|)|j dm}0||0_?|0jdd|.!|0j>qltj=jdndo|.gdcd |)gdid dggddj}1|1D]}0|0jddpqt@|)S)qNr) cmf_hashlib project_dir workflowsrrCjira_workflow_schememappingsrrrrrrrr+rrTrdefaultrrrsubtaskrrrrrrrr}rr workflow_.xmlu,XML файл бизнес-процесса 'u' не найденrxmlurНе удалось получить список переходов между статусами в виде XMLz steps > stepzjira.status.idr7)stripz)actions > action, actions > common-actionz common-actionactionru7В XML разметке бизнес-процесса 'u%' не найден common-action ID zERR-0121rzjira.descriptionzresults > unconditional-resultstep)rrrfromtorzjira.fieldscreen.idZ fieldscreenuИз XML получено u статусов и u' переходов между нимиzglobal-actions > actionruНастраиваем u1 переходов между статусамиrrrrr+rПереход '$' в бизнес-процессе ';' был изменен и не будет обновленcsg|] }|qSrr)rr) jira_stepsrr rsz4JiraAPIImport._process_wf_scheme..rcst|dtkSr[r(rLscreen screen_idrr rxryz2JiraAPIImport._process_wf_scheme..screens7Не удалось установить экран ID  для перехода '!' бизнес-процесса ''ERR-0122 CmfUiFormryr4uНе удалось импортировать переходы между статусами для бизнес-процесса «u»: ERR-0067rr`rrr{r|ZdefaultIssueTypeZsubTask*Схема бизнес-процесса '[' была изменена после импорта и не будет обновленаrr-В схеме бизнес-процесса '' правило ) для логического типа 'j' было изменено или добавлено вручную и не будет обновлено cmf_deletedr+r{include_deletedV' было удалено вручную и не будет восстановленоrrrrr+rDNOT INr)AZcmf.utilrrequestsrr_rJrrLZ short_str_encr+rrrrr_get_statuses_for_projectrrrrrr`FileNotFoundErrorrareadr r0rselectfindZget_textr3 setdefaultrrrr,rUrrorrrrVrrrrzr{r_process_screen cmf_ui_formrrrrZdefault_task_logic_typeZdefault_subtask_logic_typestrict_task_logic_typerrrrDr cmf_commit)2r project_inforr$rZdefault_wf_for_taskZdefault_wf_for_subtaskZ all_statuses workflows_dirrrrZworkflow_name_hashrrrrr jira_statusr workflow_filerf workflow_xmlrZjira_transitionsrZjira_status_idrZ action_idZaction_descriptionZtransition_dataZaction_screen_idZ action_steprjira_transitionrrr screen_datarHr wf_schemeZwf_scheme_inforr-r current_rulesrrrules_for_deletionr)r rr _process_wf_scheme5s                                  z JiraAPIImport._process_wf_schemec CsVd}tdd4|jrq>|}|dkr.q>|||7}qW5QRX||dS)NrFZinit_views_and_dsDONE)rr+r-rL_process_issueput)rZ issue_queueZissue_queue_errorsr-rrrr _process_issue_threadKs  z#JiraAPIImport._process_issue_threaduОбработка теговc Cs,ddlm}t}|j|d||ddD]4}|jrBdS|ddr.||dd}q.|D]}| dd d d }||d d d }z\dddd|dgdd|gddd|dgg}t j j|d}|st j |d}|j d dWqht k r$} ztd|d| W5d} ~ XYqhXqhdS)Nr)translitrrrllabelsrr_rWrruT)Z language_codereversedraliasrrz"%rrr:ru*Не удалось создать тег r>)Z transliterater?rr_count_project_tasksr+r-rLunionreplacerJZCmfTagrr0rUr) rr/r?tagsrZtag_nameZ name_aliasrZtag_objrHrrr _process_tagsWs,    zJiraAPIImport._process_tagsu)Обработка приоритетовc Cs|jjjjd|d}tjjdd|dgd}d}dd d d d d d}|dD]F}|d|dkrjqT|dD]"}|d|krqr|d||d<qrqqT|D]@}tjjd|d} | stjddd||jd} || _ | j ddqdS)Nrrrrr|r)ZLowestZLowZMediumZHighZHighestuОтложеноМинимальныйuСамый низкийu Низший НизкийuСреднийОбычныйВысокийu ВысшийuНаивысшийКритичныйuКритическийrJrKrLrMrNuБлокирующий)rXrr*rsrwpriority_schemesrZ projectKeys prioritiesrrruПриоритет)rrZ orig_captionrr+Tr) r+rrrJCmfCustFieldConfrrCmfCustFieldConfFieldrLchoicesr) rr/cust_field_conf_ext_idZcust_field_confsZpriority_namesrTZpriority_schemercust_field_confcust_field_conf_fieldrrr _process_prioritiesps<   z!JiraAPIImport._process_prioritiesu5Обработка решений(резолюций)cCs|dD]}|jrdS|jjjjd|d}tjj|d}|s^tj||j|dd}|jr|d|_ |d|_ |j dd |jj d 7_ q t dS) N resolutionsrrrT)rr+rrrrrr*)rr+r-rrrJ CmfResolutionrLrrrrrr.)r resolutionresolution_ext_idZresolution_objrrr _process_resolutionss$    z"JiraAPIImport._process_resolutions)project_structr/c Cstjjdd|dgddgd}|r|jj|dksF|jr|d|jkr|dd|dd|d<|jjd|j d |dn|js|d|_| d |d <| ||d <tjjdd d|ddg| d}|stj|j|d|dd d}|j r<|D]$}|dkrqt||||q|dr|jjd"| d#| dd| d$dd%|d&d} YnX| r| j | n|jjd'| q`| dd(kr |jjjrBd| d)d*d}nd| dd}d|jjjj|}tj!jdd d|dgdgd} | stj!jdd+| dgdgd} | r| js|| _n|| jkr| j|| _| j d d| j | n(|jjd,|d-d.|d&|j"d/7_"nt#d0q`| j d dq|$|%||&||$|j'|d1|(||_)|*||_+|,||_-|.||j d d|/||j0rdSt1|2||$|3||jj4d/7_4|$|S)2Nrrrrr}rrquПроект с именем u8 уже существует! Переименуем в TZtask_allow_multiple_sprintsui_form_schemer{r|)r+rrr isPrivateprivaterrrrrr)rr+rrr)r project_role)rrcr+actorsratlassian-user-role-actorrGrAuXНе удалось найти и добавить пользователя в роль u проекта: rzERR-0039ruRНе удалось привязать пользователя к проекту zatlassian-group-role-actorZ actorGrouprru<Не найдена группа пользователей u# для проектной ролиzERR-0040r*u&Неизвестный тип ролиr/)5rJ CmfProjectrLrrrr+rVrrr_process_screen_schemekeysrrZ perm_policyis_newrrr_get_project_rolesrrCmfProjectRolerZCmfProjectRoleAssignmembersr?rHrIr r3rrr2r0_calc_progress_process_versions_process_componentsrI_process_permissionsZproject_perm_scheme_process_security_levelssecurity_level_scheme_process_field_conf_schemecust_field_conf_schemerX_process_tasksr-r_process_boards_process_sprintsr)rr^r/ project_objrrjr role_inforroleZ role_assignactorrZ sub_grouprrr _process_projects "   "                       zJiraAPIImport._process_projectcCsddl}|jdddd|jjjd|jjd|dd |d tjd gd d td dtddd}|jd|j |j |S)Nr/usr/bin/python3 manage.pyshellz&plugin = models.CmfPluginJira.get(id="z(");retcode = plugin.process_issue_fork("", "r", , );T"/var/log/eva-import-subprocess.loga+&/var/log/eva-import-subprocess.err.logZ close_fdsZstart_new_sessionstdoutstderrЗапустили ) subprocessPopenr+rrrIMPORT_OBJ_CNTrar,pid log_detail)rr/donerprocrrr _execute_taskJs 2 zJiraAPIImport._execute_taskc Cs|jjd|jd}||d}g}t|jD]0}|||}|tj7}| |||kr6qhq6||krt dt |D]L}| }|dk r|j|7_|||||}|tj7}| |qqht |D]"}||jr|j|j7_q|jjddS)NuDГрузим задачи в несколько процессов: rrr*u0Закончили обработку задач)r+rVr`rrErangerrrrtimesleeprpollr2remove communicate returncode) rr/rZtask_cntprocessrArrnew_procrrr rvUs2         zJiraAPIImport._process_tasksu#Обработка проектовc Cstjjddjj}|D]}zv|ddd|jDkr@Wqd}|jr\t WdS|di}|r~| ||j }n ddd }|d d krtj jd d}nL|d d krtj jdd}n0|d dkrtj jdd}nt d|d d|jjjjd|d|d<|d|jj|d||d||d|d}|d}|rZ||} | |d<n0|jjjjd|dd} tjj| d|d<|||}Wqt k rt|jd7_|jjd|dd d!YqXqdS)"NrBrCrcSsg|] }|dqSrrrrrr r}sz3JiraAPIImport._process_projects..leaddefault_import_jira@evateam.comdefault_import_jirarrprojectTypeKeybusinessproject.base:defaultsoftwareproject.agile:default service_deskproject.servicedesk:defaultu$ERROR! Проекты с типом 3 временно не поддерживаютсяrrrrrrrractivityZtask_code_prefixr rr simplifiedrrrr*<Не удалось импортировать проект ERR-0041rgrx)rJrKrLrrrrTr+r-rr rGrr0rrrrr}Zrollback_purge_eventr2r3) rrr/ry project_leadr rr^Zproject_simplifiedschemerrrr _process_projectsxs`        zJiraAPIImport._process_projectsc Csd}tjjddjj}|D]r}z(|jr:WdS|ddd|jDkrVWq|jj j j d|d|d<|di}|r| ||j }n d d d }|d d krtj jdd}nL|d dkrtj jdd}n0|d dkrtj jdd}ntd|d d|d|jj|d||d||d|d}|||d<|||}Wqtk rt|jd7_|jjd|dddYqXqdS)NrBrCrcSsg|] }|dqSrrrrrr rsz7JiraAPIImport._process_projects_box..rrrrrrrrrrrrru$ERROR! Поректы с типом rrrrrrr*rrrgrx)rJrKrLrrrr+r-rTrrr rGrr0r9r}rr2r3)rryrr/rr rr^rrr _process_projects_boxsT      z#JiraAPIImport._process_projects_boxuОбработка досокc0 Csddd}dddddd d }d d d dd}tjjddd|ddgd}tjjd|dgd}|sxtjd||d|jd}|jsd|_|||dD]f}z.|jrWdS|d}|d} |jj d|d| |dd} d} |dd } | r| d} | d}|jj j j d!| }tj j|dd"d#gd$} | sVtj |j|dd%} | jrx|| _| | _| jdd&n"|jj d'| d(| d|d)g}| d*}|d+ddd,D]}|d}|d}|jj j j d!|}tj j|dd"d#gd$}|stj |j|dd%}|jr2||_||_|jdd&n"|jj d-|d(|d|d.||qg}| d/d0ddd,D]}|d}|d}|jj j j d!|}tj j|dd"d#gd$}|stj |j|dd%}|jr|d|_||_|jdd&n"|jj d1|d(|d|d)||q||jj j j d!||d<tjj|dd2d3d4d5d6d7d8d#gd$}|stj|d|jdd9}|jr|d|_||_||_||d:|_| |_||_||_||d;d |_|| d<d|_|d|_|jdd&tn"|jj d=|d(|d| d.ttd>d?| d@dAd}ttdBd?| d@dAddd,d}|rxdC|dD<|rdE|dD<d} tjj |dFd#gdG}!|!D]X}"|"jj!pi}#|#dH}$|"jr|$r|$|"j"kr|jj dI|dJdK} qqg}%dL}$| d@dAD]J}&z|&d}'|&d}(|jj j j d!|'})tjjddM|)ggd#gddN}"|"stj||)|jddO}"|"jdd&|%|"j#|"j$r|jj dP|"d(|'d|(dQWq|"jj!pi}#|"jr|(|"_|&dR|"_%|&dS|"_&g}*|&dTD]l}+|jj j j d!|+d},tj'j|,dU}-|-sZ|jj(dV|"d(|'d|(dW|+dX|dYq|*|-q|*|"_)|&dZrd[|"_*n |&dTsd\|"_*n|&dDd]|"_*|#+|&n"|jj dP|"d(|'d|(d.| r|$|"_"|"j"|#dH<|#|"_|"jdd&t|$dL7}$WnRt,k rX}.z2|"j-.|jj(d^|'d|(d|.d_|dYW5d}.~.XYnXqtjj d`da|%gd2dM|gdFdbdggddc}/|/D]}&|&j/dddq|/r|jj de|/t|jj0df7_0Wq|jj-.|jj(dg|dh|dYYqXqdS)iz https://bcrm.carbonsoft.ru/desk/favorites/Document/DOC-007367#spec-006348-b https://developer.atlassian.com/cloud/jira/software/rest/api-group-board/#api-rest-agile-1-0-board-boardid-quickfilter-get zboard.scrum:defaultzboard.kanban:default)scrumrz 1 queriesz 2 userstoryz 3 assigneez4 epicz 5 projectz7 none)rsZ parentChildassigneeepicrZnonez1 -1wz2 -2wz3 -4wz6 none)z-1wz-2wz-4wZNONErr{r|ru Доскиtree_node_is_branchrN)rrrrr+Trru!Обработка доски ID r>r`rr{rrrrrl)r+rrruОсновной фильтр z (ID u;) был изменен и не будет обновленZswimlanesConfigZ swimlanesrXuДорожка uA) была изменена и не будет обновленаquickFilterConfig quickFiltersuБыстрый фильтр rr kanban_filterswimlane_filters quick_filters limit_daysZkanban_board_columnsrr+rrZswimlaneStrategyZoldDoneIssuesCutoff Доска cSs|do|d SNmappedStatusesisKanPlanColumnrcolumnrrr rxryz/JiraAPIImport._process_boards..ZrapidListConfigZ mappedColumnscSs|do|d Srrrrrr rxryz#00875arz#42526er+rrlordernou.Порядок колонок на доске up был изменен и не будет обновлен. Упорядочите колонки вручнуюFr)r{rlr rrr+ruКолонка uG) была удалена и не будет восстановленаrmaxrruДля колонки u!) не найден статус zERR-0124rrrz#6b778cz#0052ccu5Не удалось создать колонку ID zERR-0042rDr#rrruCУдалены колонки, отсутствующие в Jira: r*u:Не удалось импортировать доску zERR-0043)1rJrgrLrr+rr_get_project_boardsr-rVr`rr CmfTaskFilterrrrrrZCmfKanbanBoardrrrrrrZ swimlane_typerr.rzr{ZCmfKanbanBoardColumnrrrrDrZmin_sizeZmax_sizerr3mapped_status_codesrrr0r.r1rr)0rr/Z board_typeZswimlane_type_mappingZlimit_days_mappingrZ board_folderboardboard_idZ board_nameZ board_configrZ board_filterZboard_filter_idZboard_filter_nameZkanban_filter_ext_idrZswimlanes_configZswimlaneZ swimlane_idZ swimlane_nameZswimlane_ext_idZswimlane_filterrZ quickfilterZquickfilter_idZquickfilter_nameZquick_filter_ext_idZ quick_filterZ board_objZfirst_column_with_statusesZlast_column_with_statusesZupdate_column_orderZ board_columnsZ board_columnZ column_dataZcolumn_ordernoZcurrent_columnsrZ column_idZ column_nameZ column_ext_idrrrZ status_globalexcZcolumns_for_deletionrrr rws6                             zJiraAPIImport._process_boardsu#Обработка спринтовc Cstjjddd|ddgd}tjjdd|gdddggd gd }tjjdd|gddd ggd gd }tjjd d }||dD]"}|jrdS|jjjj d|d}tj j|ddddddddddg d}|stj |d|j|d}|j r||_ |d|_ |d|_|d|_|jr0|jdd|ddkrT||_|jd |_n"||_|dd!krv|jd"|_|jjsd|j_|jjdd|jr|jddt|jjd#|j d$t|d%|d%D]4} |jjjj d| } tjj| d&dd'd(d)d*d+gd} | r|d,r|jjjj d-| j} tjj| d.d/d0gd} | sltj| |jd1} d2| _d3|jd4|j d5| _ | | _!| jr| j| j" d6| j#d krt| j$d7kr|j%&| n |j%&| n0|j'd77_'|jj(d8| d9|dd:|d;q|jdd|dd!kr|j"sFtj)j*|d<s|jd=|_|jdd|jjd>|j d?|+t|jj,d77_,|j-dd@qdS)ANrr{r|rrrrrrr}rzlist.agile_sprint:defaultrCrrrrrrmrrrrrT)rrr+rrrrstateclosedrrru0Добавляем задачи в спринт r>issueslistscache_status_typeagile_story_pointszop_gantt_task.sched_durationzop_gantt_task.sched_workzop_gantt_task.actual_workrz::comment-sprint: log_levelrrrr+rsuBЗадача была в архивном спринте rr*u-Неизвестная задача issue_id=u в спринте zERR-0044r)Z task_listruЗапуск спринта "rr).rJrgrLrr_get_all_sprintsr+r-rrrrrrrrrrrrZget_default_statusrrrrVr`rrrrrr;rrrjrrrmrr2r3ZCmfListHistoryOTRrZdo_startrr")rr/rZ sprint_folderarchive_folderZsprint_logic_typerrZ sprint_objZissue_idZ issue_ext_idrcomment_ext_idcommentrrr rxHs         $       zJiraAPIImport._process_sprintscCs$|sd}|sd}|d|d|S)NuНе указаноr>u ➔ r)rr old_valueZ new_valuerrr _simple_html_diffs zJiraAPIImport._simple_html_diffcCs|dkr dSz||}Wn,|jjd|ddddtjYSX|j|dd|d\}}|s|jjjd rt j j|jjd d }|jj d|d |t j d n.|jjd|d dddtj}|jd7_|S)Nunknownu6Не найден пользователь user_id = "u9", в дампе, указываем системногоzERR-0045ZCmfUserrxFrZdefault_user_idruA", ставим пользователя по умолчанию ruc", указываем системного , в дампе, указываем системногоr*)rBr+r3gZ system_userrrrrLrJrr,rUrr2)rrPr4rrrArrr r s,  zJiraAPIImport._get_person) dump_pathc Cs|d}|r`t|d>}|D]2}t|}|d|dkr"|W5QRSq"W5QRXt|d}|t|dW5QRX|S)N groups.jsonrrr )r_r`rarbrOwritedumps)rrrZ groups_pathrfrowr4rrr _dump_groupss     zJiraAPIImport._dump_groupsc Csz ||WStk rz|d}|rt|dB}|D]6}t|}|||jkr@|W5QRWYSq@W5QRX|j |}|rt|d}| t |dW5QRX|WYSWn$|j j d|tjdYnXYnXdS)N users.jsonrrruMНеудалось сдампить пользователя по ключу r)rBr0r_r`rarbrOrGr?Z get_user_inforrr+r,rUr)rrPrZ users_pathrfrr4rGrrr _get_user_infos$    &  zJiraAPIImport._get_user_infou,Обработка журнала работ)rcCsp|jjdd|dd|ddd}||D]2}t}d|d <|j|d <|d i|jr|j|d |j|d |d <|d |d<|di|jr|j|d|j|d |d<||d<|d|d<|dd|d<|dd|d<|jjjj d|d|d<||d<d|d<t j j|dd }|s6t j f|}|j j tj|jj d!|_|jd"d#q6dS)$Nu*Загружаем журнал работu%Журнал работ задачи rrrlrrrrr+rrrr  updateAuthorcmf_modified_byrstarted start_dateZtimeSpentSeconds< time_spentrrrrrrrrZremaining_estimater)ZminutesTr)r+rVr`_get_issue_worklogsrrLrGr rrrJZCmfTimeTrackerHistoryrrdatetimeZ timedeltarend_dater)rrrr4worklogZtimetracker_historyhistoryrrr _process_issue_worklogs2      z$JiraAPIImport._process_issue_worklogc Cs|s|St|d}|dD]}|d}||j||||dg}dd|D}|sv|dg|d<q|dd d d }|d |g|d<qt |S) uF Конвертирует "Фрагмент кода" r4ZprerDr5cSsg|]}|dr|qS)zcode-)ra)rclass_rrr r s z/JiraAPIImport._convert_code..z language-noner-r*z language-) r r@new_tagextendcontentsclearrrLrr() rr4rsouprEZcode_tagZ class_tagZ code_classrDrrr _convert_code s     zJiraAPIImport._convert_codeu8Обработка комментариев задачиc Cs"d|dd|ddd}d}d}||D]}|d7}|jjjjd |d }tjj|d }|r|js|jjd |d |dq0|stj|||jdd}n | dg|di|j r|j |d|j |d|_ |j |_ |di|j r|j |d|j |d|_|d|_|d|_||_|||d|_||jj|||_|||jj|_||_|dr|d7}|dddkrtjj|ddd} |j| d|_n,|jjd|dd|d|jd7_q0|jdd|jdd q0|jd!|d"|dS)#Nu$Комментарий задачи rrrlrrrr*rrruNКомментарий уже есть, и правился в системе zERR-0046rTrz**rrrrrZ visibilityrr{rr:uLОшибка обработки приватного комментария zERR-0047rrruОбработано u: комментариев, из них приватных ) _get_issue_commentsr+rrrJrrLrr3rrGr rr rrrrrIrrorrrrlr rrar2rr"r,) rrrr4cntZ private_cntrrZ cmf_commentr{rrr _process_issue_comments sV       z%JiraAPIImport._process_issue_commentsu0Обработка плагинов задачиc Cs|jjp d}||D]}|ddkr|drt|d}|jdddid }|dd D]N}|sbqX|d rx|d }n|jd dd id }||dd||qX||t||j_q|j r|j dddS)Nrrz&com.railsware.SmartChecklist.checklistrr4Zulr5z tox-checklistr7rrliztox-checklist--checkedr*Tr) rr_get_issue_propertiesr rrrarr(rr) rrrrZissue_propertyrZ checklistvalrrrr _process_propertiesJ s"      z!JiraAPIImport._process_propertiesc Csd|dd|ddd}dd|jtjjdD}|d d D]8}|jjjjd |d }d}|d r|j|d |j |d}n|jj d||d|d|d}|dD]j} | d} || d} | r| drd} | | | d| d} d|kr| |d<q|dd| |d<qtj j|ddddddgd } | s\tj |jd!|d"} |D]}t| |||q`| qFdS)#NuИстория задачи rrrlrrcSsi|]}|d|qS)rr)rrprrr rb sz2JiraAPIImport._process_history.. changelog historiesz ::historyrrruАудит без автора rr*)rrrrrrprrZ fromStringZtoStringrz
r+rrrrrT)r+rr)rrJrrr+rrrLr rGrVrrrrr)rrrr4Zjira_map_fieldsrrrrr]rrpZdiffZhistory_commentrrrr _process_history` s0     zJiraAPIImport._process_historyu]Обработка связей с документами Wiki и веб-страницамиc Csg}|dgD]}|jjjjd|d}|d}|d}|stjj|d}|shtj|||jdd}|jr|d |_|d |_||_ |j dd q|d d kr|ddkrt d|d } | r| d} tjjddd| gd} | sq|| d|d<q|jr||_dS)N remotelinksrrobjectZ applicationrTrrrrrzcom.atlassian.confluenceZ relationshipz Wiki Pagez$/pages/viewpage.action\?pageId=(\d+)r*rr{rrr)rLr+rrrJZCmfLinkrrrrrrerfrr$r local_links) rrrr Z remotelinkZremotelink_ext_idZremotelink_objZremotelink_applinkmatchZpage_iddocrrr _process_remotelinks} sB       z"JiraAPIImport._process_remotelinksc Csi}|d}|r:|d|dr:|d|d|d<|d}|rp|d|drp|d|d|d<|sxdSzN|dd|D|D]}t|jj|||q|jjjr|jjd d WnDtk r |j j d |d |d ddd|j d7_ YnXdS)Nz1com.atlassian.jpo:jpo-custom-field-baseline-startrlrZsched_start_datez/com.atlassian.jpo:jpo-custom-field-baseline-endZsched_finish_datecSsg|]}d|qS)zop_gantt_task.rrrfrrr r sz0JiraAPIImport._process_gantt..Tru8Не удалось импортировать Гант u для задачи 'rzERR-0112Z CmfGanttTaskrxr*) r|rLrrZ op_gantt_taskrrrr0r+r3r2)rrrZganttZbaseline_start_fieldZbaseline_end_fieldrprrr _process_gantt s4 zJiraAPIImport._process_ganttuОбработка задачиcCsLd}|jjjjd|ddd}tjjddd|dgd }|s`td |ddd |ddd }d |d d|ddd}|||jtj j d}tj jdd|jjjjd|dddgdgd|d<|dj |d<|j |d<d|d<|jjjjd|d|d<|d |d<|ddr|jjjjd|ddd} tjj| d|d<|ds|jjd|ddddd |jd!7_|d"} | r|d| d|d#<|dd$rp|j|dd$|j|d%|d&<|d&sp|jd!7_|jjd'|dd$d(dd |jjd'|dd$|jtjddd)|dd*r |j|dd*|j|d%|d+<|d+s |jd!7_|jjd,|dd*d(dd |jjd,|dd*|jtjddd)|dd-r|j|dd-|j|d%|d.<|d.s|jd!7_|jjd/|dd-d(dd |jjd/|dd-|jtjddd)nd0|d.<||d1<|d2r|d3d4|d2<||d1<|pg}|r|dddd5|dd6d} n|dd6d} d|jjjjd| d} tjjddd| dgd |d7<|dd8r|jjjjd|dd8d} tjj| d|d8<|d8s|jjd9|dd8d:dd |jd!7_|jjd;|tj|jtj |dd<|dgd=\}}||||7}|||jj |_|!|jj |||_|"||jj |_|dd>d?rz|#|||j$d@r|%|||D]}|j&'|q|(dAdBg|ddCg|ddDgD]h}|jjjjdE|d} tj)j| d}|s4|jjdF|dGdHd |jd!7_n |j*'|q|ddIgD]h}|jjjjd|d} tj+j| d}|s|jjdJ|dKdLd |jd!7_n |j,'|qT|-|||.|||j/dMkrtj0j|dNddOgdP}||_1|j2sd|_2|j3ddQ|ddR|_4||_5|j6r@|j3ddQt7|8|||ddSg}|rzt9|j||Wn|jj:dTYnX|;|||<|||jjjjdU|d}tj=j|d}|stj=||jdV}||_>|j?j@dW|d }dX|dY|dZ|_d[|_A|j3ddQ|jBC|jDd\d]|S)^u Общая логика обработки которая потом разделяется на задачи и эпики rrrlrrrr{r|ru$Не проекта с ключем rru Задача rrrrrrr}rrTZapprovedrDsecurityrZperm_security_levelu:Не найден уровень безопасности zERR-0048rrxr*z Story Pointsrreporterrr uBНе найден автор(постановщик) задачи zERR-0049)rexc_infocreatorru>Не найден создатель(автор) задачи rr u6Не найден исполнитель задачи NrrrenderedFieldsrrZ issuetyperr[u'Не найдена резолюция zERR-0116u2Пытаемся создать задачу из rrrtotaltimeTrackingEnabled fix_versions logic_prefixZ fixVersionsZversions ::version:u!Не найдена версия zERR-0050r componentsu%Не найден компонент zERR-0051 CmfComponentz task.epicrrrrZinclude_systemrlrrr@u/Не удалось привязать тегиz ::comment:rzbrowse/u<Задача импортирована из Jira: |jj j j d|d8d}| |d8d9}|rtjj |d} ntjj |d+} | stjj d9d|d8d9gd } | s6tj||j|d8d9d:} |d8d;| _%|d8d<| _&| jd"d#tjj |d ddgd}|s|jjd=|d d d>|d dd?WqXtjj |d ddgd}|s|jjd@|d d d>|d dd?WqX|jj j j d|d}tjj |dgd}|stj| ||jdA}|jj'dkr|j|ksD|j|krtjj d!d|_|j|krj|} |}n|j|kr~|} |}|jjd$| d%|d&||_(||_)|jd"d#Wnp|jd37_|jjdB|d8dC|d d d>|d ddD|d d d>|d ddE dFd1d2YnXqX|jj !dS)GuD Постобработка связей задач cSs|diddkS)Nrrrsz'com.pyxis.greenhopper.jira:gh-epic-linkrtrurrr rx ryz2JiraAPIImport._process_relations..NrrrlrrZ issuelinksrr)rrrruПодзадачи: zsystem.additional_parentrCrrrDrr}uPНе удалось связать задачи, возможно задача 'u#' не попала в импорт parent_taskrzrelation_type.coderzsystem.finish:finishin_linkout_linkrz system.linkTru,Тип связи родительской 'u$' и дочерней задачи 'ud' изменен с 'Блокируется/Блокирует (ОО)' на 'Относится к'.uУ задачи 'u3' эпик(родительская задача) 'uo' из другого проекта. Создана связь 'Дополнительный родитель'z:additional_parent:r)r$r% relation_typerr+u<Не удалось создать связь задачи 'u&' с дочерней задачей 'rzERR-0114rrxr*zsystem.duplicatez system.clone)ZBlocksZ DuplicateZRelatesZClonersu Связи: rr)rr+rZinwardZoutwardu=Не удалось найти входящую задачу ru). Возможно задача не попала в импорт или находится в проекте, который еще не импортирован.u?Не удалось найти исходящую задачу )r&rr+u.Не удалось создать связь z . in_link: z ), out_link: rqzERR-0052)*rzr{rgrorrrEr+r-rLrrrRrrQr,rrJZCmfRelationTyperrVrrZCmfRelationOptionrr&rr#rr0r3r2r.r/r`rirZ in_type_nameZ out_type_namerDr$r%)rZepic_link_fieldrrZ issue_parentZissue_epic_keyrZ parent_ext_idZ sub_tasksZ issue_linksZ issue_linkZ link_ext_idr&r#Z child_ext_idZ child_taskZ relationsZrelation_optionZrelation_ext_idrZ map_namesZissue_relationZ relation_coder$r%Z rel_ext_idrrr _process_relations sl"      &  &     (            Fz JiraAPIImport._process_relationsu)Обработка компонентовrfc Cs:tjjddd|ddgddgd}tjj|ddd gd }|sNtd |||d D]}z|jszd|_||j rWd S|jj j j d|d }tj j|ddddddgd}|stj ||jdd}||_ |d|_||_|dr |j|d|jd|dd|_nd |_|ddkr>|j|_nD|ddkrV|j|_n,|ddkrn|j|_n|ddkrd |_|jr|jr|jdd |d!d"r|js|d|j_|jjr|d!d"|j_|jjjdd |jjd#7_Wq\|jd#7_|jjd$|d%d&d'Yq\Xq\d S)(uGhttps://docs.atlassian.com/software/jira/docs/api/REST/1000.824.0/#api/2/project-getProjectComponents Пока грузим как списки, после доработки будут отдельные обекты Args: project_info (dict): проект из джиры как есть rr{r|r r r}rTrruVДанный тип проекта не поддерживает компоненты rNrdescr_document default_ownerdefault_responsiblerrrrrrruКомпонент rZ assigneeTypeZPROJECT_DEFAULTZ PROJECT_LEADZCOMPONENT_LEADZ UNASSIGNEDrrrr*u3Ошибка загрузки компонента ERR-0053rrx)rJrgrLrr(_get_project_componentsrrr+r-rrrrrrr rGr)r r*r rrr(Zcreate_descr_documentZ text_draftrrr2r3)rr/ryrr!rZcomponents_listrrr rp} sl           z!JiraAPIImport._process_componentsuОбработка версийc Cstjjddd|ddgdgd}tjjd|dgd}tjjd |dgd}|j|d d D]x}z>|jrxWdS|jjjjd |d }tj j|d }|stj ||jdd}tj jdd|_ ||_ |d|_ |dd|_|jj|_|jr |jr |jdd|dr||_n||_|jjsBd|j_|jjdd|jrt|ds^|drj|dn |d|jr|jr|jdd|jjd7_Wq\|jd7_|jjd|dddYq\Xq\dS)Nrr{r|z"scheme_wf.default_release_workflowr}releaser)rrrlrrrrrTrzlist.release:defaultrCrrrrZarchivedZreleasedrrr*u+Ошибка загрузки версии r+rrx)rJrgrLr_get_project_versionsr+r-rrrrrrrrrZdefault_release_workflowrrrrrrZset_default_statusrr2r3)rr/ryZrelease_folderrr rZ version_listrrr ro s^         zJiraAPIImport._process_versionsu*Обработка JQL в фильтрахc Cst|}t|jjjj}t}tjj dddgdddggddd d gd }|D]"}d |j d |j d}|j spqL|j j d}|s|j j d}|s|j j d}tj|jjjjj }|j j didd} |r|j| krqL|sqLz^|||\} } | |_tj| dd|_|jdd|jjd|d|d| d| d WqL|jjd|d|ddd YqLXqLt|} |jjd!| d"d#dS)$uP Пост обработка JQL в фильтрах задач r+rNrrTrubql2bqlrr}r" (rqjqlrAZjqlQueryZapplinkZrpcUrlrFZ ensure_asciiru Фильтр z: JQL u% переобразован в UBQL2 z (BQL: "z")u0: ошибка преобразования JQL zERR-0066rrxuCОбработка JQL в фильтрах выполнена за .3f сек.)rr(r+rrr process_timerJrrrrDrrrLrbrcr2Zext_urlnetlocZ get_modifiedr/rbrr0rrVr`r3) rr2rt1Z task_filtersZ task_filterZ filter_msgrArFZ applink_urlr/r0t2rrr _process_jql_in_filters sP    z%JiraAPIImport._process_jql_in_filtersuОбработка аудитаcCsdS)u) Грузим аудит Nrrrrr _process_audit' szJiraAPIImport._process_auditu2Обработка логических типовc Cstdddddddddddddddd}|dD]>}|jjd||jrXd S|d r|d d d d |d }n|d }|jjjjd|}tj jddd|dgdgd}d|jjjjd}|r6t t ||j jdkr6|jjd|d|j t |dt|j |_ |jddd }|r>q.|d|d}|d}|jjd|dtj jdd |gdd!gd}|r~|j r@|d rd|jjjjd|d d} |j j| d|_ d||j } t t || dkr8|jjd"|d#|jjjjdd$|d%d&|jd7_n| |_ nd|d|_ ||krp||jkrp|j||jddq.|jjd'|d(||} | s||d} |jjjr|d)d*krd} n|d)dkrd} n|d+rd} tj jd,d-| gd.gd} tj ||d/d0| t| jd|d|jd1}||krP|g|_|t|jjd7_q.d S)2u$Маппим issueType в logic_typeztask.sub:defaultztask.userstory:defaulttask.agile:defaultztask.bug:defaultztask.epic:default)zsub-taskruподзадачаz user storyZ userstoryZstoryuисторияru задачаZbuguбагu ошибкаZdefectuэпикrru-Обрабатываем тип задачи NZscoperrrrrr{rrr}rpz::\d+)::r*uext_id типа задачи r~rTrZuntranslatedNameru2Поиск типа задачи по имени 'rrrDuWОшибка объединения одноименных типов с именем 'u*': одинаковый источник 'zERR-0118r)r4ryuТип задачи 'u2' не найден. Создание новогоrrXrrDrui_colorrr)rrrrr=rr+) rr+rVr`r-rLrrrJrrrefindallrrrrr(rrrGr3r2rDrrCr?rHrIr=rr) rZ name2coderrrrZext_id_patternZissue_type_nameZissue_type_aliasZlogic_type_ext_id_oldZlogic_type_ext_id_mergedZ template_coderrrr _process_issue_type/ s              z!JiraAPIImport._process_issue_typeu2Обработка бизнес-процессовc sbi}dD]}|||d<qdD]0}jr@dSjj|ddjjjjd|ddd|dd}tjj |dstjj d d }tj||jd |d _ |dd_ j d d|dD]} ||dqtjjddgdddggdgdD]@}tjj dd|jgddgdddggdsPq|jd dq|dD]}jrdSjjjjdjd|d}tjj |d} | stj|jd d} | jsjjd| j dj dqh|d| _ |d | _ fdd|dD} tjjdd | gd| _t| jt| ksXtd!jjjjdjd|d"} tjj | d} |d#} | d$kr| rd | _| j d d%| | _| d&r<|d&dttfd'd(d)d}z|| _Wn8jj d*d+| j d,j d-d.d/d0YnX| j d dqhjj!d17_!q*dS)2uИмпортируем workflowrrrNrrZentityIdrr<rCrrTrrrrrr}rrrrrrrrrcs*g|]"}jjjjdjd|qS)r)r+rrr)rst)rrrr r sz3JiraAPIImport._process_workflow..rruNDEV: Fatal Вероятно, сломали создание статусов!rrrrr cst|dtkSr[r r r rr rx ryz1JiraAPIImport._process_workflow..rrrrrrrrr*)"rr+r-rVr`rrrJrrLrrrrrrrrrrrrrrr(rCrrrzr{r+r,r3r)rZ jira_statusesr1Z jira_workflowZ workflow_idZtemplate_workflowrr4rrrrrrr5r)rrrr _process_workflow s ,      "  "      zJiraAPIImport._process_workflowu Обработка схем БПc Cs|dD]}|jr dS|jjjjd|d}tjjdd|dgd}|sjtd|d|jjjjd|d }tj j|d }|stj jd d }tj |||jd d}|j r|d|_ |dd|_ ||_ ||_||_|jd dn|jjd|j dg}|dD]v\}} |jjjjd|} tjjddd| dgd} tjjdd| gdd|ggd} | r| j s|jjd|j d| jd| j d|| jq| sFtjjdd| gdd|gddd gdd dggd d!} | r2|jjd|j d| jd| j d"|| jqtjd#| ||jd$} |jjjjd| } tjjdd| dgd}|| _| jd d|| jqtjjd%d&|gdd|gdd dggd d!}|D]} | jd d'q|jjd(7_q dS))NrrZdefaultWorkflowrr{rru+Не импортировался workflow rrrrCTrrrrrrrZissueTypeMappingsrrrrrrrrrr+rrr!rr"rDr#rr*)rr+r-rrrJrrLr(rrrrrrrrrVrrrrrDrrrrr)rrZdefault_task_workflow_ext_idrZwf_scheme_ext_idr6rr7 logic_type_id workflow_namerrrrrr8rrr _process_workflow_scheme s       z&JiraAPIImport._process_workflow_schemecCsHtjj}|dD]0}||j}||jjd|t |qdS)NrrJ) rKrLrMrrLrGrr+rrNr)rrQrGrrrr _cache_all_usersx s zJiraAPIImport._cache_all_usersuПростой дампr:c Cs|j|d}|j|d}|r>t|t|d6}|D](}|jjd7_|t |dqPW5QRXt |||jj ddtdS)N.jsonz .json.dirtyrr*rTr)r+r^r_r`rirrajson_object_countrrbrrhrkrr)rZapi_funcrrermrfrrrr _simple_dump~ s     zJiraAPIImport._simple_dumpc csN|j|d}|rJt|d}|D]}t|Vq.W5QRXdS)NrFr+)r+r^r_r`rarbrO)rrrerfrrrr r s  zJiraAPIImport._simple_getc cs|jd}|rt|D]d}|dr2q"|drX|jjd|d|q"t |d|dd}t |VW5QRXq"dS)Nr.dirty.metau(Пропускается каталог r /info.jsonrI) r+r^r_r`rilistdirr#rVrrarbrc)rrrrfrrr r s  zJiraAPIImport._get_projectscCs&|D]}||dkr|SqdSr[)Z get_projects)rrr/rrr get_project s  zJiraAPIImport.get_projectc Cs@|jd|d}t|d}t|W5QRSQRXdS)Nrworkflows.jsonrI)r+r^r_rarbrc)rrworkflows_filerfrrr r s  z/JiraAPIImport._get_simplified_project_workflowsc csH|jd|}t|dd}|D]}t|Vq(W5QRXdS)Nr/issue_types.jsonrIr+r^r_rarbrOrrrrfrrrr r sz*JiraAPIImport._get_issue_types_for_projectc csH|jd|}t|dd}|D]}t|Vq(W5QRXdS)Nr/statuses.jsonrIrRrSrrr r% sz'JiraAPIImport._get_statuses_for_projectc csH|jd|}t|dd}|D]}t|Vq(W5QRXdS)Nr /roles.jsonrIrRrSrrr rk sz JiraAPIImport._get_project_rolesc csV|jd|d}t|D]2}t|d|dd}t|VW5QRXqdS)NrrSrrLrIr+r^r_rirMrarbrc)rr board_dirrrfrrr r sz!JiraAPIImport._get_project_boardsc csV|jd|d}t|D]2}t|d|dd}t|VW5QRXqdS)NrrrrLrIrV)rr sprints_dirZ sprint_idrfrrr r szJiraAPIImport._get_all_sprintsc csH|jd|}t|dd}|D]}t|Vq(W5QRXdS)Nr/versions.jsonrIrRrSrrr r. sz#JiraAPIImport._get_project_versionsc csH|jd|}t|dd}|D]}t|Vq(W5QRXdS)Nr/components.jsonrIrRrSrrr r, sz%JiraAPIImport._get_project_componentscCs<d}|jd|d}|r8tddt|D}|S)Nrrrcss|]}|d VqdS)rJrKN)r#)rentryrrr sz5JiraAPIImport._count_project_tasks..)r+r^r_r`sumrirM)rrr tasks_dirrrr rE s z"JiraAPIImport._count_project_tasksrrc cs|jd|d}|s:|jjd|d|dStt|D]\\}}||krZqH| drfqH|||krvqt |d|dd}t |VW5QRXqHdS) NrruКаталог u отсутствует. Возможно он был удален или еще не создан. Необходимо повторно запустить импорт проекта r[rrLrI) r+r^r_r`rVrrrirMr#rarbrc)rrstartrr_iZtask_idrfrrr r s  zJiraAPIImport.get_project_tasksc Cs$|dd}i}|dD]f}|ddkr*q|dD]F\}}||d|i}|di}||ds6t|d ||d<q6q|D]}i} |dD] \}} | | t} | |qi|d<| D]8\} }t|d kr| |dd <q|D]}| |d|<qqqd d |D|d<|S)u Создает структуру схемы экранов проекта из данных плагина "Smart Jira Configuration" schemesZissueTypeScreenScheme globalActionsr)BROWSEPROJECTS CREATEISSUES EDITISSUESr issueTypeIdactionsr r*rcSsg|]}|qSrr)rvrrr rsz.r)rr*rLrrorrr) r smart_config screen_schemerrrrrrhZissue_type_screensrr Zissue_type_screenrrr _get_project_screen_scheme s0        z(JiraAPIImport._get_project_screen_schemec Cst|dd}|r$t|||dd}|D]}|d}z`|jjd|d|j t j |}|d|d }t|d }||W5QRXWq<tk r} z$|jjd |d | d dddW5d} ~ XYqJiraAPIImport._get_field_config_issue_type..rT)Z is_defaultrr)rgfieldConfigurationIdcSs$g|]}|ddkrt|dqS)rgrrr)rfield_configurationrrr r@s rgrs)rcontextisHidden isRequired)Z issuetypeIdrvrwru)r?get_issue_for_projectZ"get_field_configuration_issue_typeZget_field_configrr(Zget_field_config_fieldsr*)rfield_configuration_scheme_idrZissue_types_projectZfield_configuration_mappingZfield_config_defaultZissue_types_scheme fields_usedrtrZfield_configuration_idrp field_usedrrrr _get_field_config_issue_type+sN    z*JiraAPIImport._get_field_config_issue_typec Cs|j|}|||}|D]X}|d}|ds:q |j||}|sNq |j||}z|j||}Wnztk r} z\i}|j d7_ d|d|d| } t | dr| d| j j 7} |j j| d d d d W5d } ~ XYnX|j||} |dr:|dD]&\} } | ||d k r|| d<qq | D]:} |d| } | sZq>| ||d k r>|| d<q>q |S)u Возвращает список используемых полей в проекте в виде сруктуры как через плагин "Smart Jira Configuration" в box версии r customfield_r*u9Не удалось получить опции поля u в контексте r>responsez HTTP: Response text -> zERR-0109rSrdrmNisAnyIssueTyperuoptions)r?Z&get_project_field_configuration_schemer|roraZ!get_field_context_project_mappingZget_field_contextZget_field_context_optionr0r2hasattrr~rr+r3Z#get_field_context_issuetype_mappingrLrr)rrryrzr{Z field_used_idZ context_idruZcontext_optionrZ error_textZcontext_issuetypesrZcontext_issue_typerrr _get_project_fields_usedgsL         z&JiraAPIImport._get_project_fields_usedccsB|dd}t|D]$}|dkr&q||d|dVqdS)Nrz /attachmentsall_attachments.zipr)rre)rirM)rrZattachments_pathrrrr r)s z$JiraAPIImport._get_issue_attachmentsc cs>|dd}t|d}|D]}t|VqW5QRXdS)Nrz/comments.jsonrI)rarbrO)rrcomments_file_pathrfrrrr rs z!JiraAPIImport._get_issue_commentsc Cs6|dd}t|d}t|}W5QRX|p4gS)Nrz /worklog.jsonrIrarbrc)rrrrfr7rrr rs z!JiraAPIImport._get_issue_worklogsc Cs:|dd}t|d}t|W5QRSQRXdS)Nrz/properties.jsonrIr)rrZproperties_file_pathrfrrr rs z#JiraAPIImport._get_issue_propertiesc Cs:|dd}t|d}t|W5QRSQRXdS)Nrz/watchers.jsonrIr)rrZwatchers_file_pathrfrrr rs z!JiraAPIImport._get_issue_watchersc CsD|jd}|r@t|d}t|W5QRSQRXiS)Nglobal_settings.jsonrI)r+r^r_r`rarbrc)rglobal_settings_file_pathrfrrr rOs  z'JiraAPIImport._get_jira_global_settingsc CsJ|j}|jd}t|d}t||W5QRX|d|_dS)Nz cloud_id.jsonr]ZcloudId) r?Z get_cloud_idr+r^r_rarbrdrN)rdata data_filerfrrr _get_cloud_ids   zJiraAPIImport._get_cloud_idc Cs@|j}|jd}t|d}t||W5QRXdS)Nrr])r?Zget_jira_global_settingsr+r^r_rarbrd)rZglobal_settings_datarrfrrr _dump_jira_global_settingss  z(JiraAPIImport._dump_jira_global_settingsu/Обработка ссылок в тексте)rattachments_dirrc sd}|s |St|dddD]2}d}|dr8d}|j|}z|drh|jjd|Wq |d stj |j j |}||j j s|jjd |Wq t |d d\}} |s|jjd |Wq td tj |} | r`| d| ddd} | dkr`|dd} ttfdd| d} | r`|jjd|Wq tj |ddd d}tj|}||}tjj||d|jjjjd}|stj|j||d|jjjjd}||_||_d|_| |j!"Wq t#k rR}z2|jj!$|jjd|d||d7}W5d}~XYq Xq t|d}|jddid D]}|jd!r|%|jd!|d"nb|jd#r|%|jd#|d"n.rSr;zmailto:uЭто почта: httpuHЭто внешняя ссылка, оставляем как есть: rYuЭто не файл: rZr*rsrArlrcs|dkSr[rtr\r^rr rxryuEЭтот файл уже обработан во вложениях: rrXrr; obj_ext_idrr+r;rrFu0Не удалось скачать ссылку r>r4r5r6r7r9rr:r)*r r@rUr8rar+rVrrbrcurljoinr?rrhrirrerfrdrzr{rJr$r%r_CmfImportDownloadrLrrpathr downloadedrr.r/r0r1rr2r3rArC)rrrrr2rErrrmencodingrjZattach_filenamerkrlrre download_jobrHrDrFrArr^r _dump_linkss~             zJiraAPIImport._dump_linkscCs|jD]}|j|dsq||s&q||di}|D]z}|dsNq>|d|d|d|dd}|drd d |dD|d<|j|dg}||kr||qq>q||jd S) u В box версии, контексты полей получаем из плагина "Smart Jira Configuration" rsrurrisGlobalContextr)rrrrrcSsg|]}|qSrr)roptionrrr r'sz5JiraAPIImport._get_field_contexts..N)rgrLror*rrn)rrzr~ZcontextsruZ context_dataZ field_contextrrr _get_field_contextss*      z!JiraAPIImport._get_field_contextsc CsL|j|d}|jD]"}|j|ds,q|d|sNFr:ruЗадачи с u до r)r`rrrr*uЗадача 'rrrJTexist_okrrkrlru%Обработка вложений: zsecure/attachmentzip/z.zipzsecure/issueAttachments/rrrrrr>zERR-0054rrdrmrrz worklog.jsonr]rrrrrrrrz comments.jsonu#Дампим комментарииrrrrrzproperties.jsonz watchers.json info.jsonrru0Не удалось скачать задачу zERR-0111u2Не получить задачи проекта ru с сервера)7rr?r+rVr`Zget_all_project_issues_duringr.r/r-r_r(r`rhrkrorrrirrrrHrIrrrJrrLrrrr0r3r/rrGrPrraZissue_get_worklogrbrdr2rZ get_commentsrrrGr"Zget_issue_remotelinksZget_issue_propertiesZ get_watchersrG exceptionr=)"rr`rr_r/r?tasks_that_are_donerrr-rZtask_dirZ task_dir_tmprr;rZattach_file_pathrrrHr.Zworklog_file_namerfZworklogsrrZcomments_file_namerZ propertiesZproperties_fileZwatchersrZ watchers_fileZ info_pathrrr _dump_task_partys                          *         zJiraAPIImport._dump_task_partr/rrrcCstjj}t|dd}|jdd|j}d}t||jd} | sNd} d} g} d} || kr| | | } | |kr||} |j j |j d| | | | ||t |j j|j j|j j|j j|j j|j jjd |||d d } | | | |jjd | | d7} qZ| d }|jjd| d| D]8} | j|d| r(|jjdddddtdq(|jjd|s||7}qp|jjd||j |d|!|ddD]}|j"r|St|d#d}|j$#d}|j$#d}|%rt&'||t(|d}t(|dx}t(|db}|D]V}||krD|)|t*+|}||j,}|rD|-|jj.d |t/0|qDW5QRXW5QRXW5QRX|1t&2||t|d#d!}|j$#d!}|j$#d"}|%rt(|d#3t&'||t(|dR}t(|d<}t(|d&}|D]}||krL|)|qLW5QRXW5QRXW5QRX|1t&2||q|S)$Nr/tasksTrrr*rZ dump_tasks)rrtokenpassword verify_sslrI)r`rr_r/r?rrrtargetrr6u$Форкаем _dump_task_part proc=ru%Таймаут дампа задач u минут)timeoutu$Возможно завис дампzERR-0055rrdrmu"Ошибка дампа задачuKЗакончили параллельное скачивание задачuОшибок: rrrrzusers.json.newrrrJrzgroups.json.newa)4rKrLrMrrorQueuerrrThreadrrr?rrrrrrHrIrr`r+rVr`ris_aliver3 TimeoutErroremptyrLrrEr-r_r^r`rhr*rarrbrOrGrrrNrunlinkrkclose)rr/rrrrQr_rr-rrarZ max_limitrrrZissue_users_pathZall_users_pathZall_users_path_newf1f2Zf3linerGrZissue_groups_pathZall_groups_pathZall_groups_path_newrrr _dump_taskss          "          B       ,zJiraAPIImport._dump_tasksc CsJ|jjd|dd|dd|j|d}|r|dsi}|jjjrb|j|d}n<|dgD].}|dd krn|d D]}|d ||d<qqn|d gD]R}g|d <||dgD]4}|d  ||d dkr| |d|j qqt |dd} | r$t| t| d} t|| W5QRXdS)NuHДамп схемы безопасности задач проекта "rr1rrqrrrcZBROWSE_PROJECTSrrmlevelsrrrr/issue_security_scheme.jsonr])r+rVr`r?Z!get_project_issue_security_schemerLrHrIZ get_issue_security_level_membersrrr^rr`rirrarbrd) rr/rjZsecurity_schemeZsecurity_level_membersrsecurity_levelrWmember dump_filerfrrr #_dump_project_issue_security_schemeTs.       z1JiraAPIImport._dump_project_issue_security_schemec Cs|jjdt|dd}|r2t|t|d}i}z"d}|jj |dd |d}Wn:t k r}z|jj t |d d d d W5d}~XYnXt|||W5QRSQRXdS) NugДампим конфигурацию проекта через плагин "Smart Jira Configuration"rz/smart_config.jsonr) ZprojectInformationZprojectSchemesZprojectIssuetypesZprojectVersionsZprojectComponentsZprojectMembersZprojectCustomfieldsZprojectGlobalActionsZprojectWorkflowActionsrr)rERR-0056rgrdrm)r+rVr`rr`rirrar?Zget_project_smart_configrr0r3r(rbrd)rr/Zsmart_config_filerfrjrrrrr _dump_smart_configqs$    z JiraAPIImport._dump_smart_configEtc/UTC%Y-%m-%d %H:%M)dttzformatr@cCsN|ptjtjj|}t|}tjtj|||}||}|Sr) rnowtimezoneutcstrftimepytzZlocalizestrptimeZ astimezone)rrrZdt_tzZdt_strrrr _datetime_in_user_tzs   z"JiraAPIImport._datetime_in_user_tzc;Csddl}|jddd}|ds*tddd|dD|_|jd }|jd d t|j}t d |}|jD]`}|d }|d}z|j rWdS|jj d7_ |jj d|d||} ||d} | d} |jjjr|jjj|jjd} n|jjj|jjd} | r4| ddnd} d}| rt| d}t|}|d}W5QRX|r||| }tjtjjd}||| }| rt| | nt j!| d d t"#}|jj$|d}t%| |d<d}|jjjs |&|}|jj dt'|dd}|r>t (|t|d}|j)|d }zx|d D]j}|d!d"d#krd|jjjr|d!dr|*|d!d|jn|*|d!d$|jqdWn(|jj+d%|d&d'd(d)YnXt,||W5QRX|j-||d*|jjjr:|d+s~|j.|d gdd,|d-<|j/|d g|d.<|0|d |d/<n|jj d0t'|dd1}|rt (|g}t|dR}|jj1|d d2D]8}|2|d |jj d7_ |3t4|d3qW5QRX|j5|d|d4<|6||n|j7|jj8d5|d|d-<d |d-kr|d-d|d-d6|d-<n.|j7|jj8d7|d-d |d-d8<|d9i|d-d9<|9||d:r|:||d.<|d;i|d/<|;|d/|d<}|rp|j}|=||d<<|*|d<|j>|j|jj d?t'|dd@}|rt (|t|dD}|jj?|d d2D]*} |jj d7_ |3t4| d3qW5QRX|jj dAt'|ddB}!|!r,t (|!t|!d}|jjj@|ddCAD]}"|j rxW5QRWdS|jj d7_ |j7|"}#g}$|#dDgD]}%|%d"dEkrzT|jjjr|jjjB|%dFd|%dFdGdH|%dI<n|jjjB|%dd|%dI<Wnn|jCjDk r~}&zJ|&jEjFdJkrl|$2|%|jj GdK|#ddL|&dMWY qnW5d}&~&XYnX|%dIr|*|%dI|j>|jq|#dDr|$D]}'|#dD(|'q|3t4|#d3qRW5QRX|jj dNt'|ddO}(|(r(tH|(|(t'|ddP})|)rVtH|)|)z:|jjI|d dCD] }*|j rWWdS|jj d7_ |jj dQ|*d|jjJ|*d |*d8<|j7|*d8dRd>|*d8dR<|jK|*d }+|jjj r|j|jj d7_ |3t4|7d3 qW5QRXdjt jTdk<|jjU|7_U|jjVd dl|jjWXdmt jTdk<t|d| t%| |d<|ddn} t| dX}t,||W5QRXt"#|}8|jj do|dp|8dqdrt'|dds}9|r~|9sH|jj Gdt|du|ddv|9dw|dx d}n6|Y|d s~|jj Gdy|du|9dz|dxd}t"#}|jjZ|d ||d{}d||}:|s|r|:d}7}:|r|:d~|7}:|r|:d|7}:|:d| d7}:|j<|:|jQ|j[||||d7_Qt"#|}8|jj d|dp|8dqdr|jQsv||d<t| dX}t,||W5QRXWqv|jQd7_Q|dr|jj+d|ddd'd(d)n|jj+d|dd'd(d)YqvXqv|j.rrTrPrrr*uДампим "rrJr)rA)rZtimeZonerrZ dump_daterrruДампим права/permissions.jsonr permissionsholderrr parameteru0Не удалось сдампить права rrgrdrm)rjrZworkflowSchemerjira_screen_schemerzu/Дампим типы задач проектаrQrrrz$rest/projectconfig/1/workflowscheme/)rr`zrest/api/2/workflowscheme/r`rrbZ fieldsUsedru1Ищем руководителя проекта ru*Дампим статусы проектаrTu$Дампим роли проектаrU)rrdreZ actorUserrA)rrnrGiu&Пользователь к роли "u" не найден. u+. Возможно он был удаленu&Дампим доски проектаz/boards/z /sprints/rr{rrcSsg|]}|qSrr)rZqfrrr rpsrrr])rZsimpleu&Дампим спринты доскиu Спринт u уже скачанrriz"The board does not support sprintsuDДанная доска не поддерживает спринтыu4Не удалось сдампить спринты zERR-0057ruНе удалось сдампить доски, возможно проект не поддерживает доски или у вас нет прав project_info=u(Дампим версии проектаrYu!Дампим компонентыrZrNO_CACHEr1rLu&Дамп данных проекта "u" выполнен за r4r5ru$В каталоге проекта "r1u5), отсутствует каталог задач (u@). Дата последнего успешного дампа (u) будет сброшена.u/В каталоге задач проекта "ud) отсутствуют задачи. Дата последнего успешного дампа ()rru*Дампим задачи проекта: u (в периодu с u по u4 включительно, часовой пояс: rqru$Дамп задач проекта "r`uПроект "u" является приватным и не может быть импортирован, отключите приватность в Jira или предоставьте пользователю праваzERR-0058u2Не удалось получить проект u0Закончили дампить проекты)\r$rr0rTr+r^r_rorrr-rGrVr`r?rHrIZuser_find_by_user_stringrr`rarbrcrLrrrrrrrhrkrimakedirsrr6rNr(rrrZget_project_permission_schemerr3rdrZget_project_schemeZget_project_screen_schemerrxrrrZget_project_workflow_schemer jira_requestrrqrlrr,raise_for_statusrG get_statusesZget_project_rolesror exceptionsZ HTTPErrorr~rrrnZget_all_agile_boardsZget_agile_board_configurationZget_advanced_board_settingsZget_board_quick_filtersrZ get_sprintsZget_sprint_issuesr"r2Zget_project_versions_paginatedZget_project_componentsenvironprogressrr.r/rEZget_project_issues_count_duringr);rr$rootZ projects_dirrrrrZ project_namerZproject_tmp_dirrrGZuser_tzrrfZ current_dumpZlast_dump_date_utcZnew_dump_date_utcrr8r/rjpermission_fileZperm_sch perm_dictZ types_filerrrr7Z statuses_filerZ role_fileZrole_urirzZunfound_actorsr|rZ unfound_actorZ boards_dirrXrZadvanced_settingsrrWZboard_info_filerZ sprint_pathZsprint_file_pathrrHZversion_list_filenamer Zcomponents_list_filenamer!r9r_Zinfo_msgrrr _dump_projectssr                      "     "        "          "      $              *      "      "                 zJiraAPIImport._dump_projectscCs|j}t|\}}}||d}|jd|d|jjd|jjj rZ| |jjd| | |_ |jjjddr|jjd||jjd n|jjd tjd ||jjd ||jjd |jjd||jjd||jjd|jjj rZ|jjd||jjd|jjd||jjd|jd||jjd||jjd|jd||jjd||jjd|jd||jjjddt j!d<d|j_"|j#t$d t j!d<|jjd!|%d"S)#u_ Загружаем все данные из апи, кроме аттачей duСвободно места: r|u$Скачаем данные из APIu9Дампим глобальные настройки JirarTu'Дампим пользователейruAНе дампим пользователей из-за опцийruДампим статусыru Дампим типы задачrZissue_security_schemesu*Дампим бизнес процессыru7Дампим схемы бизнес процессовruДампим экраныrrku!Дампим приоритетыrQrPu+Дамп решений(резолюций)rYrrruДампим проектыN)&r+r^rh disk_usager,rVr`r?rHrIrrrOrPrrrLrHrrUrrErZget_issue_typesZget_issue_security_schemesZ get_workflowsZget_workflow_schemeZget_all_screensZget_screen_schemeZget_all_prioritiesZget_priority_schemesZget_all_resolutionsrirrrrr)rZ download_pathrusedfreeZ free_percentrrr download_datasP           zJiraAPIImport.download_datacCs`dtjd<tjj|jjdddgd}|jrRt|j |jd|_ |j dd t d tjd<dS) NrrrrGr)rrlrTrr) rirrJZ CmfImportrLr+rrGrrrrr)rr+rrr rn7s   zJiraAPIImport._calc_progresscCstddl}|jdddd|jjd|jjjd|d|d tjd gd d t d d t dd d}|j d|j |S)Nrr~rrz&cmf_import = models.CmfImport.get(id="z#");cmf_import.process_cross_links("rrrrTrrrrr) rrr+rr?rHrrrrar,r)r model_namerrrrrr _execute_cross_linksBs .z"JiraAPIImport._execute_cross_linksc Csfdddgdddgg}dD]8}|jjd|d |jd }tt|}|j|d }|s\qtg}t|jD]0}| ||}|t j 7}| |||krpqqp|j ||kr"td t|D]V}|} | dk r|j| 7_||| ||} |t j 7}| | |j qqt|D]&}||jr*|j|j7_q*q|jjd dS)uU Заменим ссылки на задачи и документы r+rNrrT)r$rrgruОбрабатываем u+ в несколько процессов: rrr*u2Закончили обработку ссылок)r+rVr`rvarsrJrr.rrrrrrrrrrr2rrr) rrrrr}Zobj_cntrrArrrrrr _process_cross_linksLsB               z"JiraAPIImport._process_cross_linksc Csddlm}t|dd}|}dd|dD}t|d}t|}W5QRX|jjjjd |d }t j j |d } | st j |d |jd } |d| _ | j d dddg} ddddddddddddddd d!g} | | } d"g| } t jj| | d#D]@}| D]}t||gq| D]}t||d$q|j d dq|d%D]\}z d |jjjjd |d d }| |d&rt jj ||d&d d'}n|jjd(|WqBd)d*d+|d+g}t jj || d,}|s:t jj || | d-}|s|jjd.|d/| d0|jd17_WqB|jr4|j||_n||_|d2d3d4kr|jjjjd |d2d4d }t jj |d }|j||j d dn|d2d3d5krd |_|j d dn|d2d3d6krd |_|j d dn|d2d3d7krd |_|j d dnX|d2d3d8kr>d |_d |_|j d dn*|d2d3d9krfd |_|j d dn|d2d3d:kr|j j!j"r|d2 d;r|#|d2d;}n|#|d2d<}|r|j$||j d dn&|jjd=|d>|d0|jd17_nd|d2d3d?kr:|j j!j"rFd |jjjjd |d2d;d }n&d |jjjjd |d2d?dd }t j%j d)d*d+|d+gd)gd,}|s|d2d?d}t j%j dd@|gd)gd,}|r|js||_n||jkr|j||_|j d d|j$||j d dn&|jjdA|dB|d0|jd17_n.|jjdC|d2d3dD|d0|jd17_Wn2|jjdE|dFdGdH|jd17_YnXqBdIdJdKdLdMdNgdOgdPdQgdR}|&D]\}}zzt jj dSdT|gdUdT| gg| d,}|D]P}t jj dSdT|gdUdT| gg| d,}| D]}t||t'||q|j d dqWn@|jjdV| dW|dX|dYdZd[dH|jd17_YnXq| S)\Nr)get_datarrcSs"i|]}|dr|d|dqS)Z jira_coderDrrrrr r}sz6JiraAPIImport._process_permissions..Zproject_perm_permissionrrrrTrrr+rraccess_project_roleaccess_membersaccess_local_user access_ownerZaccess_owner_assistant access_authorZaccess_spectatorsZaccess_executorsaccess_responsibleZaccess_list_owneraccess_project_ownerZaccess_project_owner_assistantZaccess_project_spectatorsZaccess_project_executorsaccess_sdesk_clientZaccess_anonymousZ access_guestZaccess_sharelink_anonymousrrFrZ permission)rDr u4Не нашли соответствия права rr{r|r})Zproject_permissionrrlu*Не найдено правило для zERR-0059rr*rr projectRole)applicationRoleZanyone projectLeadrrsd.customer.portal.onlyrrru9Не нашли пользователя для прав zERR-0060rru-Не нашли группу для прав zERR-0061u'Неизвестный тип прав zERR-0062u6Не удалось загрузить правило zERR-0063CmfProjectPermPermissionrxzPPP-RELEASE-EDITzPPP-OBJ-CREATEz PPP-OBJ-EDITzPPP-OBJ-DELETEzPPP-OBJ-TREEMOVEz PPP-OBJ-ORDERzPPP-TSK-ASSIGN-EXECUTORSzPPP-TSK-DEADLINEz PPP-TSK-ORDER)z PPP-PR-ADMINzPPP-TSK-ASSIGNzPPP-TSK-SCHEDULEzproject_permission.coderruВ схеме uR не удалось скопировать разрешения из права 'u' в 'rzERR-0113CmfProjectPermSchemeRule)(Zcmf.system_datarrrarbrcr+rrrJZCmfProjectPermSchemerLrrrrrrrVrr3r2rrlrrrrrrrrr?rHrIr rrrgetattr) rr/rrZ system_dataZmap_permrfZperm_scheme_dictrZ perm_schemeZrule_list_access_fieldsZrule_bool_access_fieldsZrule_access_fieldsZ rule_fieldsZ scheme_ruleZ list_fieldZ bool_fieldrZpermr role_ext_idr{rr group_nameZcopy_access_rulesZfrom_rule_codeZto_rulesZ from_ruleZ to_rule_codeZto_ruleZrule_access_fieldrrr rqys^      "    $&     z"JiraAPIImport._process_permissionsc CsdtddNd}|}|dkr&qL|jr4qL|jjd|d|jj|ddtj d}z| t |d }t |d "}|j d d D]}||qW5QRX|jjd |d tjj|dd} d| _| |jdWnJtk r>} z*|d7}|jjd|dd|W5d} ~ XYnXW5QRXq||W5QRXdS)NFr:rr;u Пытаемся скачать r;T)streamrrzwb+i )Z chunk_sizeuСохранили в rrrr*u+Неудалось скачать файл r>)rrLr+r-rVr`r?rrZIMPORT_DOWNLOAD_TIMEOUTrrraZ iter_contentrrJrrrr"r0rr=) rdownload_queue error_queuer-rr7Z save_pathrfchunkZdownload_job_objrHrrr _download_file_worker=s0   <z#JiraAPIImport._download_file_workerc Cs|jjd|j}|j}d}|jdgdd|jjjjgdddgg}tj j |dsp|jjd |Sg}t |j D]J}|j j|jd |||d d }||||jjd |q~tj j|ddgdD],}|jrq ||j|j|jdq|D]}|dq|s@|D]}|q0|jrP|S|jjd|s|jrx|S||7}q^|S)Nu=Скачиваем все найденные вложенияrzplugin.plugin.source_hashrrrFruВложений нетr )rrru Запустили задачу r;rr})rr;rr;u%Закончили скачивать)r+rVr`rrrrrrJrrrrrrr rr`Zslistr-r=rr;rrrrL) rrrr7rZprocsrarrrrr download_filesZsD         zJiraAPIImport.download_filesc Cs4|jrdS|jjd|dd|ddd}t|dd}t|}t|}W5QRX|r0|jjjj d|d }t j j |d }|st j ||jd d }|j r|d|_| d |_||_|jd d|dD]B}|dd|d d}|jjjj d|d } t jj | d } | s@t j|| |jd d} | j r|d| _| d | _t jj| dD]} | jd dql| dgD]H} zt j| d} | d} | d}| dkrt jj dd| _n| dkr,|jjjj d|}t jj |d }|rt jj |d | _ntd|n>| dkrJt jj dd| _n | dkrht jj dd| _n| d krt jj d!d| _n| d"krn|r\d|jjjj d|d}t jj d#d$d%|d%gd#gd&}|s|jjjr| d'n|}t jj dd(|gd#gd&}|rL|js||_n||jkr8|j||_|jd d|| _ntd)|nt jj d*d| _n| d+krz||}Wn2tk r}zt|d,W5d}~XYnX|j |d-d-d.\}}|r|| _ntd/|n~| d0kr@|jjjj d|}t j!j |d }|r0t"|jg| _#ntd1|n*| d2kr\t jj d3d| _ntd4| | jd d| j$%WnPtk r}z0|j&d57_&|jj'd6|d7|d8| d9W5d}~XYnXq| jd d| j$%| d:rt(| d:t(|d kr| |_)|jd dq|j$%|S);NuVИмпортируем схему безопасности задач проекта "rr1rrqrrrrrTrrrrrrrbrrmrrrzvar:current_userrCru0Не найдена проектная роль rzvar:project_ownerrz var:authorrzvar:responsiblerrr{r|r}rru!Не найдена группа ZUsersruH. Возможно пользователь был удален в Jira.F)rru+Не найден пользователь )ZgroupCustomFieldZuserCustomFieldu>Не найдено пользовательское поле rzsdesk-client:defaultu-Неизвестный тип правила r*uFНе удалось создать правило для уровня z. zERR-0070rZdefaultSecurityLevelId)*r+r-rVr`rrarbrcrrrJZCmfSecurityLevelSchemerLrrrrrrZCmfSecurityLevelRulerrrZ access_memberrlr0rr?rHrIrrBr CmfCustFieldr(Zaccess_task_fieldsr.r/r2r3rZdefault_task_security_level)rr/rsrrfrZ scheme_ext_idrWZ level_msgZ level_ext_idrZ level_ruler member_type member_valuerr{rrrrGrrrAcust_field_ext_id cust_fieldrrr rr~s                         $ z&JiraAPIImport._process_security_levels)rpcCs|dddd}|d|jjjj7}|dd|ggggdd d d }|dd d d dd}|dkr~d|d<n>|dkrd|d<n*|dkrd|d<n|dkrd|d<n|dkrd|d<dd|ddD|d<n|dkrd|d<dd|ddD|d<n|d kr8d!|d<|dd|d<n|d"krTd#|d<i|d<nh|d$krhd%|d<nT|d&kr|d&|d<n@|d'krd(|d<n,|d)krd*|d<n|d+krd,|d<nd}|S)-Nrr customfieldcfrArT)rHrrrF)rrs class_nameZvisible_filterrequiredZrequiredChangedrrrsrr*rXZtextarearfield_custom_typeZ textfieldr(floatr)r(Z radiobuttons choice_strcSsi|]}|d|dqSrrrroptrrr r*sz,JiraAPIImport._map_field..rrT)Z multiselectZmulticheckboxes choice_multicSsi|]}|d|dqSrrrrrr r.sr@rHZcascadingselectchoice_cascade_multiZ datepickerdaterrrrr)rrr)rGr+rrrCr)rrprr7rrrr _map_fieldsP                    zJiraAPIImport._map_fieldc s6d|_|jD]Z}|jtjjdD]B}d|krF|jdtj dS|dd|kr"|j||d<q"q |jj j j }tj j |dgd}|stj d|d|jd }d |_|tjj d d |d }|jjj dds|jjddS|jdddtjD}g}g}|jtjjdD]}| dr<|ddsV|jd|dq||} |dddd} | d|jj j j 7} | |d<| s|jjd|dddd|jd7_q| d d!kr|||jj j j d"|dd}tjj |d#d$d%d&gd} | sDtj|d|d| d d||jdd'} | |kr|| d#| jjkr|jjd|dd(| jd)|| d#d*ddq|jd+| d,|dd-|| |d.<n(|jd/| d,|dd0||| jr|d| _| d d1kri} g} |dd2D]V}|d3s4q"| d4gD].}|d5| |d<|d6r@| |dq@qzq"| | _ | | _!| j"rd| _#||| jdd7| j$%tj&j | | ||d8}|stj&| | ||d8jdd7q|j$%|'|rdtj(t)j)*+d9d dd:tj,d;d id |D]D}tjj-|d.d?}t.t|j/|dd4D]}|qqx|jjj}|d@D].}|dtjjkr|jtjjd|d<q||j_dAt0j1dB<|j|jj$%dCt0j1dB<dS)ENrlrujТекущая настройка не поддерживает импорт кастомных полейrrru8Экран проектов Jira по умолчаниюTrrrr+rZ_customr)rrrZimport_custom_fieldsFuIОтключен импорт пользовательских полейu8Импорт пользовательских полейcSsi|]}|d|qSr~rrrrr rqsz8JiraAPIImport._process_custom_fields..rsu!Поле не кастомное rrrrAru+Неудалось смапить поле zERR-0064rrxr*r)rrHrrwidgetrTrdisabled_choices)rrrdirtyrr+ru, widget поля u5 не совпадает с существующим zERR-0065uПоле с именем ru4) есть в таблице, мапим в негоru(Создаем поле с именем u), и мапим в негоrrurrrdisabledrrrr ui_form_groupz %Y%m%d%H%M%S)Z meta_versionrrrcSsi|]}|d|qSrrrrrr rscst|tr4j|d}|s$|d}|jr|npt|trj|dd}|s`|dd}|dd|_|rz|j|_|jr||dgD]}||qdS)Nr:rr#Fr) rr(rLrrrZ cmf_hiddenrZchoice_parent_id)rZ parent_optrchildZ choice_model create_optionrr r(s"     z;JiraAPIImport._process_custom_fields..create_optionr~rrrr)N)2r>rgrrJrrr+r,rUrrrrrLrrCmfUiFormGrouprrrVrrrrGrCr3r2rr r rrrTr!rr"r.r/CmfUiFormFieldinvalidate_cacheZcustom_fields_gen_metarrrZcustom_field_sync_update_modelsrlrr}rir)rZext_field_namerpr ui_view_formr% shop_fieldsZ new_fieldsZ m2m_fieldsZui_fieldrrrTr!rur ui_form_fieldZ field_classrrrr'r _process_custom_fieldsOs       "               z$JiraAPIImport._process_custom_fieldsc CsddtjD}|jjjjd|d}tjj|dgd}|sx|jd|dd |dd tj|d |jd }|j rl|d|_ |d d|_ d|_ | |dD]}|jjjjd|dd|d}tjj|d}|s*|jd|dd |dd|dtjd||d |jd}|j r|d|_ |j d d|dD]}|ddshqN|ddd} | d|jjjj7} | |krqN|jtjjdD]} | dsƐq| dd|dkr|jjjjd| dd} tjj| d} tjj| | ||d} | s\|jd| d |d!|dtj| | ||dj d dqNqqNq||j|S)"NcSsi|]}|d|qSrrrrrr rsz1JiraAPIImport._process_screen..rrrruСоздаем экран "rr1rqTrrrrZtabsruСоздаем вкладку "u) экрана "rtab)rrrrr+rrlr}rrrArr$uДобавляем поле "u" на экран "u" во вкладку ")rJrrr+rrrrLr,rrrrrr)rarGrCrrr r*r+r.r/)rr r-Z screen_ext_idui_formr0Z tab_ext_idr%Z jira_fieldrrprrr.rrr r+s $     zJiraAPIImport._process_screenu,Обработка схемы экрановc Cs|dr>|d}|d}|jjjjd|}tjj|dgd}|sZtj||jdd}|jrdd |d D}|d |_|j dd |j stj j |d D] }| q|dD]}|d} d} | dkr$|jjjjd| } tjjddd| dgd} | s$|jjd| dddq|dD]\} } || }|sl|jjd| d| dddq0z||}Wn0|jjd| d| dddYq0YnXdd d!d"d d!d"d#}|jrdS||d$|| d|jd%}tj jf|d&d'gi}|stj f|}| r*|j| |j dd q0qn|jjjjd|d}tjj|dgd}|stj|d(d)|d ||jdd*}|j dd tjj|jjjjdgd}|jrtj j|dgd}|stj |d|jd+}|jr||_||_d$|_|j dd t|S),NrrrrrTrcSsi|]}|d|qSrrrrrr rcsz8JiraAPIImport._process_screen_scheme..rrr)r_rrgrrr{rrr;Не удалось найти логический тип rCmfUiFormSchemerxrhu8Не удалось найти в дампе экран u для zERR-0069u:Не удалось импортировать экран zERR-0068rrr')rrZeditviewrerfrdr)r_rrZ crud_choicer+rl logic_typesru+: Схема экранов проекта rrr+rr)rLr+rrrJr3rrrrrjZCmfUiFormSchemeRulerrrr3rr+r-r5rrr_rrr)rr/Zscreen_scheme_dataZscreen_scheme_idrr_rrZissue_type_datarrrrrr r1Zaction_mappingrr,rrr rhRs             z$JiraAPIImport._process_screen_schemecCs6i}t}|ds|SddtjD}|dD]}|ddsLq8|ddd}|d|jj j j  7}||krq8|j tjj d D]}|d sq|d|d dkr|d D]\\}} | dsq|} | | d <||i} | | | d<| d r|d i} | | | d<qqq8|D]\}} d} |jj j j d|d} |dd|d}|d krd|jj j j d|d}tjjddd|dgd} | s|jjd|dddq,| d|7} |d| d7}n|d7}tjj| dgd}|s.tj|| d|jd }|jdd!|| |f| D]\}} | d } |jj j j d|}tjj|d"gd}tjj||d#}|stj|||jd$}| d%d&|_| d'd& |_|jd(kr"i}g}| d)iD].}|d*||d<|d+r||dq||_||_|qDq,|S),u1 Импорт конфигураций полейrzcSsi|]}|d|qSrrrrrr rsz5JiraAPIImport._process_field_conf..rr}rrrArlrruranyNrr5: Конфигурация полей проекта rrr{r|rr2rCmfCustFieldConfSchemerxu для типа  по умолчаниюrrTrrr)rr)rrr+rwFrvrrrr#)rrLrJrrrorarGr+rrrCrrrr*r*rr3rRrrr rSrZvisiblerrrTr!)rr/Zlogic_type_fieldslogic_type_field_confr-r{r~Z task_fieldrBrurprlrrUrrrVZfield_idZ field_ext_idrrWrTr!rrrr _process_field_confs          z!JiraAPIImport._process_field_confuAОбработка схемы конфигурации полейc CsJ|jjjjd|d}tjj|dgd}|sbtj|dd|d||jdd }|jdd tjj|dgd}|stj|dd |dd |d|jd }|jdd ||}| d|f|j r>tj j |dD]}|j ddq|D]L\}}|||r|gngd|jd} |s$d| d<tj f| }|jdd q||S)Nrrrrru@: Схема конфигурации полей проекта rTr6rr8r:rrbr)rrVr5rr+r*r)r+rrrJr9rLrrRr<rrZCmfCustFieldConfSchemeRulerrr+) rr/rrurVr;rrZ field_confrrrr rt8sJ     z(JiraAPIImport._process_field_conf_schemecCstdD]}||jsq qtdD]}|}|s(q>q(|j|7_|||||||||| || |j j j r|||||n||||||jrdSd|j_|jt|D]>}|ddd|jDkrZq8|jjd|ddq8|jd |jj |j S) NrwrrcSsg|] }|dqSrrrrrr rsz0JiraAPIImport.process_import..u'Импортирован проект 'rru-Импортировано объектов: )!rrr2r rnrrrr?r/r]r?rHrIrArDrrrr'r:r;r+r-rrrrrTrVr`r,r)rrAr7rrrr process_importfsV       zJiraAPIImport.process_import)T)rr)T)TTN)N)N)rr)NN)NN)N)Nrr)r$r%r&r'rr)rr(rrrFpropertyrgrnrqr| staticmethodrrrrrXrrrrrrrrrr<rr1rIrBrrorrrrrJrrrr9r>rIrXr]r}rrvrrrwrxrr rrrrrrrrrrr<r"r'rpror:r;r?rArDrErHrrrNrrr%rkrrr.r,rErrlrqr|rr)rrrrrOrrrrrrrrrrrrrrrnrrrqr r rrrr/r+rhr<rtr= __classcell__rrrZr r=Asd   !  #>    J!9 W "  2   7   # > , e _  -  (#;  q> 3 6    Z a   #<7C=  U " m/ - E  $ = 6 Nx m-r=)3Zcmf.apprZ cmf.includeZ dataclassesrrrrNrerhpathlibrrhZtempfilerrbtypingrrrr r r r Zbs4r itertoolsrrZcmf.data_providers.baserrZ cmf.modelsrZ%common.models.cmf_plugin_import_mixinrZmodules.jira.apirZmodules.jira.base_importrZmodules.jira.jql.parserrrJrrrrZ dataclassrr<r=rrrr s6   $