ki6uddlmZddlmZddlddlZddlmZGddejjjjZ y))cached_property)Path)*N)JiraApiceZdZejj j jjdzZdZ ejj j jjddgzZ e dZdZ dZ dZd Zed Zd efd Zd ZdZdZedZfdZfdZddZddZ ddZdZdZdZdZ dZ!dZ"xZ#S) CmfPluginJira)jiraNtestget_all_projectsc|js|jgdt|jjj |jj j |jjj|jjj|jjj |jjj |_|jS)N)pluginplugin.ext_urlzplugin.ext_loginzplugin.ext_tokenzplugin.ext_passwordz plugin.cloudzplugin.verify_ssl)urlusernametokenpassword verify_sslcloud) _CmfPluginJira__jira load_fieldsrr ext_urlvalue ext_login ext_tokendecrypt ext_passwordrr)selfs (./modules/jira/models/cmf_plugin_jira.pyr zCmfPluginJira.jiras{{   X Y!dkk&9&9&?&?$++J_J_JeJe"kk33;;= H`H`HhHhHj#';;#9#9#?#?t{{GXGXG^G^`DK{{cddlm}ddlm}|j5}|||j cdddS#1swYyxYw)Nr JiraAPIImport JiraCSVImport)modules.jira.api_importr"modules.jira.csv_importr$r tmplt_import_settingsr cmf_importr"r$r s rr'z#CmfPluginJira.tmplt_import_settingss=99 YY K$ z2HHJ K K Ks :Acddlm}ddlm}|jdk(r-|j 5}|||j cdddS||j S#1swYxYw)Nrr!r#api)r%r"r&r$typer previewr(s rr-zCmfPluginJira.preview!sc99 ??e # Ad$T:6>>@ A AZ(0022 A As AA(cddlm}ddlm}d|_|j 5}|||j cdddS#1swYyxYw)Nrr!r#u#Импорт данных из Jira)r%r"r&r$namer process_importr(s rr0zCmfPluginJira.process_import)sD99?  YY D$ z2AAC D D Ds AA cddlm}||j|}t||rt ||}|y|j j d|dy)Nrr!zMethod 'z' does not exist)r%r"r hasattrgetattrloggererror)rr)process_methodr" jira_importmethods rprocess_entityzCmfPluginJira.process_entity0sO9#DIIz: ; /[.9F H    # #h~.>>N$O Prc g}|S)uRСобственный магазин при выборе импорта из Jira)ress rcalc_models_settingsz"CmfPluginJira.calc_models_settings:s   r cmf_import_idc ddlm}g} g}|j5}|jD];}|d|d|dd}|j dr|d|d<|j |= ddd|S#1swY|SxYw#t $rz} tj| tjj |dd g } ||j| jD cgc]} | ncc} w}} |sYd} ~ |Sd} ~ wwxYw) Nrr!idkeyr/)r@rAr/ isPrivaterzplugin.plugin.*r@fields) r%r"r get_projectsgetappend Exceptiongdebugmodels CmfImport _get_projects) rr>argskwargsr"r<r project project_dataer)objs rr zCmfPluginJira.get_all_projectsJs9 C -d#002 -G&dm&u~ '$L {{;/4;K4H [1JJ|, - -& ' -&   GGAJ))--M^G_-`J"/ :"F"T"T"VW33WWCW  sBA?AA2(A?2A<7A?<A?? DAC=# C-, C==Dc|j5}t|jDcgc]}|c}cdddScc}w#1swYyxYw)uE Проверяем подключение к апи N)r boolrE)rrNrOr rSs rr zCmfPluginJira.testdsFYY >$(9(9(;<<= > >< > >sA > AAA cddlm}|j5}|||jcdddS#1swYyxYwNrr!)r%r"r download_datarr)r"r s rrXzCmfPluginJira.download_dataks:9 YY C$ z2@@B C C C4=cddlm}|j5}|||jcdddS#1swYyxYwrW)r%r"r download_filesrYs rr\zCmfPluginJira.download_filesps:9 YY D$ z2AAC D D DrZc ddlm}ddlm}ddl}d}t j 5t j5tjj|ddg}||jj|} |jjjd|} tjjdd d | d gd d g} | std| | j | _| j#| j | j$tj&j(dD cic]} | d|  c} | _g} | j,j/}| j,j/}t1| j2|}|j4j7d||jj9}t;|D]z}| j<j?| j@d|||| d}| jC||jE| jFj4j7d||d}| jI|||tJjLD]7}| jFjOrn|dz }|jQ|d9| D]}|jQd| jFj4j7d| D]}|jS|jj9|z }| jFj4j7d||jUz dd}|jWs$||jz }|jWs$| jFj4j7d|||z }dddddd|Scc} w#1swYxYw#1swY|SxYw)Nrr!) cmf_contextrzplugin.plugin.source_hashrC::ext_idLIKEz%::z::%cust_field_conf_schemeimport_raw_json)filterrDu)Не найден проект с ext_id rDtitleu@Грузим задачи в несколько потоков: _process_issue_thread) issue_queueissue_queue_errorsrP)targetr/rOu.Параллельный обработчик )only_processing issue_pathDONEu&Ждем обработки задачu*------------------------ скорость u задач в секундуu?Закончили обработку задач, ошибок ),r%r"cmf.appr^datetimecmfutil disable_acldisable_notifyrKrLrFr r source_hash CmfProjectCmfErrorrb_cache_prioritiessettingsCmfTask verbose_namejira_map_fieldsqueueQueueminthreading_max_forksr4infonowrange threadingThreadrfrGstartr)get_project_tasksconfigIMPORT_ONLY_NEW_OR_UPDATED is_cancelputjoin total_secondsempty)r> project_idrlimitr"r^roerrorsr) api_importproject_ext_idrPfield issue_processrgrh thread_countsiproccntissuediff has_errorss rprocess_issue_forkz CmfPluginJira.process_issue_forkus9'  "D !G$:$:$<D !))--LgGh-iJ&z'8'8'='=zJJ * 1 1 8 8 D DER |TN''++ &C/?s*CD,%,G!J>JZ[\\070N0NJ -  ( ()G)G H(001L1LMhW*g%*J & M$**002K!+!1!1!7!7!9 z==uEL    " "%efres#t u!!%%'A<( k!++22%;;04'2.@#*3$$T* %%,,114bcgbh2ij kC#55 & A A 6 5 ((224ql 34 5& (' (  ! ! ( ( - -0V X%   $$((*Q.D  ! ! ( ( - -0Z[^aeasasau[uZvwT/U VJ(..004466 )..0  ! ! ( ( - -0opzo{.| } j FID !D !J g*%D !D !D !J s<O%C8O4 OIO-OO%OO" O%%O/c|jddg|jr[|jdk(rLtjj |j jjd|jdSt|)|S)NrcrrxbrowserA) rrc class_nameospathrr rrsuper calc_ext_hrefrrS __class__s rrzCmfPluginJira.calc_ext_hrefsm *,<=>   3>>Y#>77<< 3 3 9 9(3CVCVW\C]^ ^w$S))rc|jdg|jdk(r|jr|jdSt||S)Nrcrxrl)rrrcrcalc_dump_pathrs rrzCmfPluginJira.calc_dump_pathsH *+, >>Y &3+>+>&&|4 4w%c**rc ddl}dtgd}dtd}d}t}t|jjj d} | j |} | jr[t| d5} | D]>} tj| } |jt| d| |f|dz }@ dddnJ| jr9| jD]%}|js|j d }|js7t|d5} tj!| } |jt| d| |f|dz }ddd|d k(s d d }|Dchc]}t|d}}|j d }|jr|jD]}|js|j"j%s/|j"|j&k(sI|j&|vsX|dj| ||j&f|dxxdz cc<|j)|j&|r(|dj+| |dj-|f|j d}t|d5} | D]I} tj| }|dj| |t|df|dxxdz cc<K ddd(||d}|d k(r ||d <||d<|S#1swYxYw#1swYxYwcc}w#1swYgxYw)u Возвращает информацию о дампе сущности, общее количество объектов и множество объектов с кортежами вида (id, name/key). Для задач дополнительно добавляется информация об их вложениях и комментариях с множеством кортежей вида (task_key, id/name) Args: project (object): объект CmfProject entity (str): название сущности (название каталога или файла) field (str, optional): дополнительное поле сущности для добавления в кортеж объекта вместе c id. Defaults to "name". Returns: dict: _description_ rN)countobjs undownloadedrr project_dirzr+r@rkz info.jsontasksrD attachment attachmentsrrrz, z comments.jsoncomments)zipfilesetrrcrrFjoinpathis_fileopenjsonloadsaddstris_diriterdirexistsloadstemisdigitr/removerGr)rrPentityrrattachment_stats comment_stats dumped_count dumped_objsr objs_pathfrowobj_dataobj_dir obj_data_filerrattachment_idsattachments_diritemcomment_data_file comment_datastatss r_get_dump_stats_by_entityz'CmfPluginJira._get_dump_stats_by_entitysi" E  E  e 72288<<]KL ((0    i& &!&C#zz#HOOS$%8(5/$JK A%L& & &    $,,.' 8~~' ' 0 0 = $++--.&!#yy|HOOS$%8(5/$JK A%L&W$"*8"4\"BKNY%Z c*T*:&;%ZN%Z&-&6&6}&EO&--/$3$;$;$= AD#'<<> (!% 1 1 3$(II$:$(II$? 0 8 < 9 . 5 5dii @ A&(8??$UOTYY~-FA)0(8(8(I%/68!#$8C+/::c?L)&155xLY]L^H_6`a)'2a72888G' 8T"  W #3E- -E*  o & &&&&[,88s,AL6:=MMAM6L?M M c@dd|ggdg}|r|j|tj|}|j|d}t }d} t d|| D]7} |j |gd| | | zgd } | D]} | jr-| jjd d jd nd } |r t| |d nd }| jr3t| jd} | jj|}|dk(r*| r(|j| jj | f|dk(r(|j| jj | f|r|j| |f|j| :||d}|S)u Возвращает информацию об обработанных объектах сущности Args: project (object): объект CmfProject entity (str): название cmf модели filter_by (list, optional): дополнительный фильтр. Defaults to None. field (str, optional): дополнительное поле сущности для добавления в кортеж объекта вида (id, name/key). Defaults to None. Returns: dict: _description_ rP=)r)!=NT)rdinclude_archiveddr)z--r`r/z parent.coderc)rdrDslicerr_rkzversion:Nr@ CmfAttachment CmfCommentr)rGrpget_model_by_namerrrslistr`splitlstripr3rcrrFrparentcode)rrPr filter_byrfilter_modelprocessed_countprocessed_objssteprrrSobj_id obj_fieldrs r_get_process_stats_by_entityz*CmfPluginJira._get_process_stats_by_entity+s W % &   NN9 %))&1++Wt+L1ot4 /E;;Qedl+!% D  /IL))$/299*EY]9>GC5D && !4!4T!:;F # 3 3 7 7 >I_,"&& '@A|+"&& '@A"&& ':;"&&v. / /.%"  rc|r|Dcic] }|d|d }}|Dcic] }|d|d }}t|jjt|j}t|j|z } | D chc] } | || f } } n|j|}||z } | s|rdndt| d} | Scc}wcc}wcc} w)u Возвращает результат проверки сдампленных и обработанных объектов в виде статуса и множества кортежей необработанных объектов Args: dump_objs (set): сдампленные объекты process_objs (set): обработанные объекты has_undownloaded (bool, optional): есть незагруженные вложения check_by_id (bool, optional): осуществлять проверку только по id. Defaults to False. rrkuНЕКОРРЕКТНОOK)status unprocessed)rkeys intersectionlist) r dump_objs process_objshas_undownloaded check_by_idr dump_dict process_dictrdiff_idsid_rresults r_check_consistencyz CmfPluginJira._check_consistencybs" -671qt7I70<=1AaD!A$J=L=y~~/0==c,BSBSBU>VWL9>>+,|;H?@&!rc*|jjd|j|d}|jjd|d|jjd|j|dgdd }|jjd |dd |d|dd }|jjd |j |d|d}|jjd|d|j ||S)u Возвращает статистику по релизам (версиям) проекта Args: project (object): объект CmfProject Returns: dict: данные статистики uTСбор информации о сдампенных релизах(версиях)z versions.jsonu1Сдамплено релизов(версий): ruZСбор информации об обработанных релизах(версиях)r)rrzlist.release:defaultr/ru3Обработано релизов(версий): u РелизыruПроверка консистентности между сдампленными и обработанными релизами(версиями)ruРелизы(версии): rrrs r_get_project_version_statsz(CmfPluginJira._get_project_version_statss* pq33G_M  MjY`NaMbcd vw99  F : OP]^ePfOghi% )&w/  c ((F);]6=RS 89I8JKL&!rc$|jjd|j|d}|jjd|d|jjd|j|dd}|jjd |dd |d|dd }|jjd |j |d |d }|jjd|d|j ||S)u Возвращает статистику по компонентам проекта Args: project (object): объект CmfProject Returns: dict: данные статистики uLСбор информации о сдампенных компонентахzcomponents.jsonu+Сдамплено компонентов: ruRСбор информации об обработанных компонентах CmfComponentr/ru-Обработано компонентов: uКомпонентыruПроверка консистентности между сдампленными и обработанными компонентамиruКомпоненты: rrrs r_get_project_component_statsz*CmfPluginJira._get_project_component_statss' hi33G=NO  G SZH[G\]^ no99  : I-X_J`Iabc- )&w/  Y ((F);]6=RS 26(3C2DEF&!rc$|jjd|j|d}|jjd|d|jjd|j|dd}|jjd |dd |d|dd }|jjd |j |d |d }|jjd|d|j ||S)u Возвращает статистику по доскам проекта Args: project (object): объект CmfProject Returns: dict: данные статистики uBСбор информации о сдампенных доскахboardsuСдамплено досок: ruHСбор информации об обработанных доскахCmfKanbanBoardr/ru!Обработано досок: u ДоскиruПроверка консистентности между сдампленными и обработанными доскамиru Доски: rrrs r_get_project_board_statsz&CmfPluginJira._get_project_board_statss# ^_33GXF  ;JwT=UVW# )&w/  O ((F);]6=RS L)9(:;<&!rc"|jjd|j|dd}|jjd|d|jjd|dd|jjd |d d|jjd |j|d d}|jjd |dd|d|dd}gd}|jjd|j|dgd|g}|jjd|dd|dd|dd|dd}|jjd|j|dgd|g}|jjd|dd|d d|dd} |jjd|j |d|d} |jjd | d!|j | |jjd"|j |dd|dt |dd#} |jjd$| d!|j | |jjd%|j |d d|d} |jjd&| d!| j | ||| gS)'u Возвращает статистику по задачам проекта, их вложениям и комментариям Args: project (object): объект CmfProject Returns: dict: данные статистики utСбор информации о сдампенных задачах, вложениях и комментарияхrrAruСдамплено задач: ru%Сдамплено вложений: ru-Сдамплено комментариев: ruJСбор информации об обработанных задачахrxu!Обработано задач: u Задачиr) parent_idraz CmfTask:%uNСбор информации об обработанных вложенияхr)rcrN)ru'Обработано вложений: uВложенияr)rrrruTСбор информации об обработанных комментарияхr) log_levelrru/Обработано комментариев: uКомментарииuПроверка консистентности между сдампленными и обработанными задачамиruЗадачи: ruПроверка консистентности между сдампленными и обработанными вложениями)ruВложения: uПроверка консистентности между сдампленными и обработанными комментариямиuКомментарии: )r4rJrrrrrU) rrPrrtask_stats_data parent_filterattach_process_statsattachment_stats_datacomment_process_statscomment_stats_data task_resultattachment_resultcomment_results r_get_project_task_statsz%CmfPluginJira._get_project_task_statss Q R33GWE3R  ;JwT=UVW$ )&w/ ;  jk#@@  / A  CDXY`DaCbcd( /8&}5nE-g6 !  pq $ A A  %!B!  KLabiLjKklm. ,W5.w7   Q -- v  & !  N;x+@*ABC{+  U !33 } %f -  (!*]";N"KL4  ./@/J.KLM$$%67  [ 00 z "6 * !& )  4^H5M4NOP!!.1!68JKKrclg}|j|}|j||j|}|j||j|}|j||j |}|j||j |}|D]}|j||S)u Возвращает отчет сдампленных и обработанных объектов Args: project (object): объект CmfProject )r rGr rrr!) rrPrsprint_stats_dataversion_stats_datacomponent_stats_databoard_stats_datarr s r project_statszCmfPluginJira.project_statsys!::7C &'!<C D JJX* + [z5v @'R#J"H"H_LBrr) rpathlibr cmf.include#modules.jira.fields.cmf_plugin_jirar+modules.jira.apirr rDr,rr;rrr6s8+*$K GLL''77EEK r