j#jBZUddlmZ ddlZddlZddlZddlZddlZddlmZmZm Z ddl m Z ddl m Z mZddlmZddlmZejdZejd d Zejd d d vZddgZdZdZGddZdaded<ddZddZ dS)) annotationsN)datedatetime timedelta)Any)format_vn_clockformat_vn_time)BrevoEmailService)InvoiceProcessingServicezdscons.invoice.auto_syncINVOICE_SYNC_ALERT_EMAILzcontact@dinhsonconstruction.comINVOICE_AUTO_SYNC_ENABLEDfalsetrue1yes uTài khoản Cổng Tổng Cục Thuế (hoadondientu.gdt.gov.vn) bị tạm khóa do nhập sai nhiều lần. Cron job tự đồng bộ đang tạm ngưng chờ mở tài khoản.ceZdZdZdedddedfd8dZed9dZed:dZ ed;dZ ed;dZ ed9dZ ddZed?dZd:dZ d@dAd&Z dBdCd,Z dDdEd5Z dFdGd6ZdHd7ZdS)IInvoiceAutoSyncSchedulerServiceuService điều phối tự động quét và đồng bộ hóa đơn theo khung giờ định kỳ (01:00 và 13:00) kèm biên độ ngẫu nhiên ±30 phút để chống spam và tránh WAF chặn IP.NFTinvoice_serviceInvoiceProcessingService | None alert_emailstr is_pausedbool pause_reason str | Nonemax_consecutive_auth_failuresintjitter_minutes enable_jitterreturnNonec|p t|_||_g|_d|_d|_d|_||_|p|jrtnd|_ ||_ td||_ ||_ d|_dS)NFr)r _invoice_service _alert_email_execution_history _is_running_last_run_time_last_run_status _is_pausedDEFAULT_LOCKED_PAUSE_REASON _pause_reason_max_consecutive_auth_failuresmax_jitter_minutes_enable_jitter_last_scheduled_slot)selfrrrrr!r#r$s ]C:\Projects\DSCons\app\modules\invoices\application\invoice_processing\auto_sync_scheduler.py__init__z(InvoiceAutoSyncSchedulerService.__init__-s!0 M3K3M3M'8:!&/3,0 )".# +/? B ' ' 4Q+$'>$:$:$1=A!!!c|jSN)r/r7s r8rz)InvoiceAutoSyncSchedulerService.is_pausedGs r:c|jSr<)r1r=s r8rz,InvoiceAutoSyncSchedulerService.pause_reasonKs !!r:c|jSr<)r2r=s r8r!z=InvoiceAutoSyncSchedulerService.max_consecutive_auth_failuresOs 22r:c|jSr<)r4r=s r8r#z.InvoiceAutoSyncSchedulerService.jitter_minutesSs ##r:c|jSr<)r5r=s r8r$z-InvoiceAutoSyncSchedulerService.enable_jitterWs ""r:reasoncpd|_|pt|_td|jdS)uYTạm ngưng tiến trình chạy định kỳ (không kích hoạt quét Cổng Thuế).TuV⏸️ [AUTO-SYNC] Đã tạm ngưng cron job tự đồng bộ hóa đơn. Lý do: %sN)r/r0r1loggerwarning)r7rBs r8pausez%InvoiceAutoSyncSchedulerService.pause[s@#B'B d       r:cd|_d|_ t|jdr|jddt|jdr|jddt|jdr|jddn#t$rYnwxYwt dd S) ukKhôi phục lại tiến trình tự động quét Cổng Thuế sau khi tài khoản được mở lại.Fr(clear_auth_cooldown gdt_portal 0202111150reset_auth_failuresactivate_sync_configu▶️ [AUTO-SYNC] Đã khôi phục hoạt động cho cron job tự đồng bộ hóa đơn định kỳ (Reset failure counter & clear cooldown).N) r/r1hasattrr)rHrKrL ExceptionrDinfor=s r8resumez&InvoiceAutoSyncSchedulerService.resumeds t,.CDD V%99, UUUt,.CDD V%99, UUUt,.DEE W%::<VVV    D   c     sBB!! B.-B. list[int]c*ttSr<)listSCHEDULED_HOURSr=s r8scheduled_hoursz/InvoiceAutoSyncSchedulerService.scheduled_hoursusO$$$r:cvtjdfd|jDS)u"Danh sách khung giờ chạy quy đổi sang giờ VN để hiển thị cho người dùng. SCHEDULED_HOURS được tính theo giờ hệ thống của máy chạy (container Cloud = UTC), nên [1, 13] trên Cloud tương ứng 08:00 và 20:00 giờ Việt Nam. z, c 3xK|]4}ttjjj|ddV5dS)rN)rryearmonthday).0htodays r8 zKInvoiceAutoSyncSchedulerService.scheduled_slots_vn_label..sW   HUZeiAqQQ R R      r:)rr]joinrU)r7r]s @r8scheduled_slots_vn_labelz8InvoiceAutoSyncSchedulerService.scheduled_slots_vn_labelysO  yy    )      r: current_timedatetime | None with_jitter bool | None update_statetuple[datetime, float]c |ptj||jn|}|jdz}|r|dkrfd|jD}|r |d}nAt dz}t|j|j|j |jddd}td|z } || fSg} t dzfD]o} |jD]e} t| j| j| j | dd} | t |z }| t |z}| | | | ||ffpd}| D].\} } } }}|r|j r| | f|j kr|kr | | | ||f}n/|spt d z}|jd} t|j|j|j | dd} | t |z }| t |z}|| | ||f}|\} } } }}|kr*tj| |}| t |z}n`td |z }t!d |d z }tj||}t |z}td|z } |r | | f|_ || fS) uTính toán thời điểm và số giây chờ đến khung giờ chạy kế tiếp (01:00 hoặc 13:00). Hỗ trợ biên độ thời gian ngẫu nhiên (jitter ±30 phút) nhằm chống các bộ lọc spam và WAF Cổng Thuế. N<rc g|]L}tjjj|ddk)tjjj|ddMS)r)rrXrYrZ)r[r\nowr]s r8 zFInvoiceAutoSyncSchedulerService.calculate_next_run..s^EJ UY1aHH3NNU[%)Q1EENNNr:rdaysg)secondsrg?g@)rrjrr5r4rUrrXrYrZr3 total_secondsappendr6randomrandintminuniform)r7rarcre use_jitter jitter_sec candidatesnext_runtomorrow delay_secondsslot_candidatesdr\base_dt win_startwin_end chosen_slotafter_tomorrowoffsettarget remainingmin_lead rand_deltarjr]s @@r8calculate_next_runz2InvoiceAutoSyncSchedulerService.calculate_next_runs,hlnn ,7,?T(([ )B.  +Z1__-J  %a= 9!#4#4#44#M8>8<AUVWAXZ[]^ hn%C%C%E%EFFM]* *QS!2!2!223 L LA) L L"1617AE1aCC#i &C&C&CC !Ij$A$A$AA&&1gy''JKKKK  L  1@   -Aq'9g  9 q!fHa>a>a}} !WiA  K"YA%6%6%66N$Q'A#^%9>;MqRSUVG )J"?"?"??I * = = ==G)1gy'JK,7)1gy' ??^ZK<!>!@!@AAI3 A ..H)<|"|d <||_d=|_ ||d?|#|!@d{V}||d8<Yd}!~!nd}!~!wwxYw|j d|t|j d kr|j dd |_ |S)AuhThực thi tiến trình đồng bộ hóa đơn định kỳ và gửi email thông báo khi có lỗi.uk🚀 [AUTO-SYNC] Bắt đầu phiên đồng bộ hóa đơn tự động định kỳ (Khung giờ: %s)...runningrNF)execution_timerrstatus new_imported duplicates error_details alert_sentuX⏸️ [AUTO-SYNC] Bỏ qua phiên đồng bộ %s vì cron job đang TẠM NGƯNG (%s).pausedrr2z%Y-%m-%drrl) from_dateto_datererror total_newtotal_duplicates connectorsc@g|]}|ddv|S)r)successcooldown_activegetr[cs r8rkzJInvoiceAutoSyncSchedulerService.execute_scheduled_sync.. s4!!!x@^)^)^)^)^)^r:rc3HK|]}|ddkVdS)rrNrrs r8r^zIInvoiceAutoSyncSchedulerService.execute_scheduled_sync..s3+e+eUVAEE(OO?P,P+e+e+e+e+e+er:)rnot_configuredrr raw_responsemessageuaĐang trong thời gian giãn cách 3 giờ để bảo vệ an toàn tài khoản Cổng Thuế.uc⏳ [AUTO-SYNC] Phiên đồng bộ %s tạm bỏ qua (đang kích hoạt cooldown 3h an toàn): %su0Lỗi kết nối Cổng Thuế / Hòm thư IMAPuF⚠️ [AUTO-SYNC] Phát hiện lỗi trong phiên đồng bộ %s: %scDg|]}|ddk|S)r auth_errorrrs r8rkzJInvoiceAutoSyncSchedulerService.execute_scheduled_sync..:s3***QUU8__ -L-LA-L-L-Lr:rr(rIrJ)servicetax_coderrrincrement_auth_failuresu+Lỗi khi gọi increment_auth_failures: %su[⚠️ [AUTO-SYNC] Cảnh báo xác thực thất bại lần thứ %d/%d cho %s (MST: %s).TuHệ thống phát hiện uC lần đăng nhập Cổng Thuế thất bại liên tiếp (MST: u). Đã tự động ngắt mạch (Circuit Breaker) và tạm ngưng toàn bộ tiến trình để bảo vệ tài khoản không bị khóa.deactivate_sync_configCIRCUIT_BREAKER_SUSPENDED) service_typerrBru*Lỗi khi gọi deactivate_sync_config: %s)rBcircuit_breaker_trippedcircuit_breaker_suspended) slot_label error_messager sync_responserrKu'Lỗi khi gọi reset_auth_failures: %su_✅ [AUTO-SYNC] Phiên đồng bộ %s thành công: %d hóa đơn mới, %d hóa đơn trùng.uP❌ [AUTO-SYNC] Ngoại lệ bất ngờ khi đồng bộ tự động %s: %s %s exception u Lỗi hệ thống bất ngờ: )rrr)$rrjrrDrO isoformatr/r1r-r.r+insertlenstrftimerr)run_gdt_tax_syncrrrErrMr isinstancer"rNrr2rrFsend_circuit_breaker_alertsend_sync_failure_alertrK traceback format_excr)$r7rrrrr history_entry to_date_str from_date_strsync_resrr total_duprfailed_connectors is_cooldown has_error cooldown_msg error_msgauth_failed_connectors is_auth_errorrcircuit_breaker_reason target_listrsvctcfailuresres_cntcnt_err deact_err alert_successrst_errexcstackerr_strs$ r8execute_scheduled_syncz6InvoiceAutoSyncSchedulerService.execute_scheduled_syncs"!D_^%D%D  y    -6688&! ) )  ? !5 ! KKj"    '/M( #-1-?M/ *"0D $,D !  # * *1m < < <4*++b00*.*A#2#*F' n 8(11*==K+iR.@.@.@@JJ:VVM,=='##>H \\(G44F [!44I %7;;I!lB77J!!%!!! "%66J!#e+e+eZd+e+e+e(e(e )<<]#FWBXBX[\B\  o. y  h LL++a/a2; o.\**)***& 5?\D/000V|E[+0')+& $j,UU:..>,#$"4#8:STTee*.*?*W*WX[]_*`*`#-gs#;#;!7/6H#,eee & -Z\c d d d d d d d dey$ ? $t'JJJ6:3!pX!p!pKM!p!p!p3 't'<>VWW j!j$($9$P$P5813/E/J %Q%&%&%&%& (1!j!j!j$*LL1]_h$i$i$i$i$i$i$i$i!j+@JJ&">%JJJ#?##M +8M, ' ' ' ' ' ') 8. &&q-888 t& ' '" , ,&*&=crc&BD #s0H)U'2M  U' M<M72U'7M< za | , 5 zNoneType: None u

Chi tiết lỗi hệ thống (Stack Trace):

z&
u4

🚨 [DSCons ERP Alert] Sự Cố Đồng Bộ Hóa Đơn Định Kỳ (u)

Thời điểm ghi nhận: u

Khung giờ chạy tự động: u (Lịch: u hàng ngày (GMT+7), biên độ ngẫu nhiên ±30 phút)

Mã Số Thuế Đơn Vị: 0202111150 (Công ty TNHH Xây Dựng Định Sơn)

Chi Tiết Trạng Thái Kết Nối Đồng Bộ

zW
Dịch vụ Trạng thái Thông báo
u

📌 Khuyến Nghị Hành Động Cho Kế Toán / Quản Trị Viên:

  • Kiểm tra lại thông tin tài khoản, mật khẩu Cổng HĐĐT Tổng Cục Thuế trên hệ thống DSCons ERP.
  • Đảm bảo dịch vụ mạng và hòm thư nhận hóa đơn (IMAP) không bị khóa hoặc đổi mật khẩu ứng dụng.
  • Truy cập mục Quản lý Hóa Đơn → Cấu hình Kết nối trên DSCons ERP để kiểm tra trực tiếp.

Hệ Thống Lập Lịch Tự Động & Giám Sát Hóa Đơn - Công Ty TNHH Xây Dựng Định Sơn (MST: 0202111150).

uQ🚨 [DSCons ERP Alert] Lỗi Đồng Bộ Hóa Đơn Tự Động Định Kỳ () - $Ban Quản Trị & Kế Toán DSCons DSCons Auto Invoice Sync Monitorrecipient_emailsubject html_contentrecipient_name sender_nameNrFuM📧 [AUTO-SYNC] Đã gửi email cảnh báo sự cố thành công tới %suE⚠️ [AUTO-SYNC] Không thể gửi email cảnh báo qua Brevo: %srrget_telegram_serviceuS🚨 *[DSCons ERP - Lỗi Đồng Bộ Hóa Đơn Định Kỳ]* ⏰ Khung giờ: `` (u) ⚠️ Chi tiết: `u.` 📧 Đã gửi báo cáo chi tiết về: ``#Telegram alert skipped or error: %su5❌ [AUTO-SYNC] Lỗi khi gửi email cảnh báo: %s)r rrrrupperr`r send_emailr*rDrOrE5app.modules.integrations.application.telegram_servicer is_configured send_messagerNdebugr)r7rrrrrtime_str stack_traceconnector_rowsrsrvstmsgcolor stack_sectionrrres is_successrtgtg_msgtg_errmail_errs r8rz7InvoiceAutoSyncSchedulerService.send_sync_failure_alerts'"##09Ai*,,,r     !%% 95566<<>>x3344::<<!%% 51122%'9__ )#y|##]b##z|##x{ ### #N  ;*<<<VaM4 ^h 4 4 \d4 4 pz4 4 MQMjMjMlMl4 4 >(?4 4 HI4 4 4 lAfpAAv~AA' )4 $ 1)E> CE22J  c% [GGG$$ Lffffff))++2"**,,2\-7\\= 2 lần đăng nhập sai liên tiếp.r(rrrrrrrz~ rrrruM

🚨 [KHẨN CẤP - TỰ ĐỘNG DỪNG] Ngắt Mạch Đồng Bộ Hóa Đơn Cổng Thuế (Circuit Breaker)

Hệ thống phát hiện sai thông tin xác thực từ 2 lần liên tiếp. ĐÃ TỰ ĐỘNG DỪNG NGAY TIẾN TRÌNH để bảo vệ tài khoản Cổng Thuế không bị khóa tiếp.

Thời điểm ngắt mạch: u

Mã Số Thuế: 0202111150 (Công ty TNHH Xây Dựng Định Sơn)

Khung giờ chạy: u|

Lý do tự động ngắt mạch an toàn:

u

Chi Tiết Phản Hồi Từ Cổng Dịch Vụ

u
Dịch vụ Trạng thái Thông báo

🛠️ Hướng Dẫn Xử Lý Cho Quản Trị Viên / Kế Toán:

  1. Không thử đăng nhập dồn dập để tránh bị máy chủ Cục Thuế kích hoạt khóa tài khoản.
  2. Đăng nhập thủ công vào hoadondientu.gdt.gov.vn bằng trình duyệt để xác thực chính xác mật khẩu của MST 0202111150.
  3. Sau khi kiểm tra đúng, truy cập vào giao diện Hóa Đơn → Cấu hình kết nối trên DSCons ERP để cập nhật lại mật khẩu và bấm nút Khôi phục đồng bộ (Resume).

Hệ Thống Tự Động Ngắt Mạch Bảo Vệ An Toàn - DSCons ERP (MST: 0202111150).

u🚨 [KHẨN CẤP - TỰ ĐỘNG DỪNG] Ngắt Mạch Đồng Bộ Hóa Đơn: 2 Lần Đăng Nhập Thất Bại Liên Tiếp (rrrrNrFu^📧 [AUTO-SYNC] Đã gửi email cảnh báo ngắt mạch khẩn cấp thành công tới %suS⚠️ [AUTO-SYNC] Không thể gửi email cảnh báo ngắt mạch qua Brevo: %srrruV🚨 *[DSCons ERP - KHẨN CẤP TỰ ĐỘNG DỪNG ĐỒNG BỘ]* ⏰ Khung giờ: `ru) 🛑 Cơ chế ngắt mạch: Đã phát hiện 2 lần đăng nhập Cổng Thuế thất bại liên tiếp. ⚠️ Hệ thống đã tự động TẠM NGƯNG tiến trình để bảo vệ tài khoản không bị khóa. 📧 Đã gửi hướng dẫn chi tiết về: `rruC❌ [AUTO-SYNC] Lỗi khi gửi email cảnh báo ngắt mạch: %s)r rrrr rr*rDrOrErrrrrNrr)r7rrrrrrrrrrrrrrrrrrr s r8rz:InvoiceAutoSyncSchedulerService.send_circuit_breaker_alert@sq"##    !%% 95566<<>>x3344::<<!%% 51122#y|##z|##x{ ### #N: _g: : $cm%: : .[h/: : N(O: : : xrXbrrhprr( )4 $ 1)E> CE22J  t% iGGG$$  Lffffff))++2"**,,2a-7aaGG(G##G(( H2HHc|d\}}|j|j|j|jt dt D|j|j|j|js| nd|jst|dnd|j r|j nd|j t|j|jdddS)uaLấy thông tin trạng thái lập lịch hiện tại và lịch sử các lần đồng bộ.F)rccg|]}|dd S)02dz:00)r[r\s r8rkz>InvoiceAutoSyncSchedulerService.get_status..s GGG!1 GGGr:Nr ) is_runningrrr!rUscheduled_slotsr#r$alert_recipient_email next_run_atseconds_until_next_run last_run_atlast_run_status history_countrecent_history)rr,r/r1r2rTr4r5r*rroundr-r.rr+)r7rxrzs r8 get_statusz*InvoiceAutoSyncSchedulerService.get_statuss"&"9"9e"9"L"L-* .-1-P.GGGGG"2!0%)%67;P8--///DEI_&^eM1&=&=&=Z^"4.88:::#4 !899"5crc:#   r:)rrrrrrrr r!r"r#r"r$rr%r&)r%r)r%r)r%r"r<)rBr r%r&r%r&)r%rQ)NNF)rarbrcrdrerr%rf)NFr)rr rrrrr%r)NNN) rrrrrrrrrrr%r)NN) rrrrrrrrr%r)r%r)__name__ __module__ __qualname____doc__INVOICE_SYNC_ALERT_RECIPIENTDEFAULT_JITTER_MINUTESr9propertyrrr!r#r$rFrPrUr`rrrrrrr:r8rr)s^^ <@7#'-.4"BBBBB4X"""X"333X3$$$X$###X#         "%%%X%     )-#'" K%K%K%K%K%^$( ^^^^^H37/3&* LLLLLd37/3 FFFFFP      r:rz&InvoiceAutoSyncSchedulerService | None_invoice_auto_sync_instancer%ctr8s""""""" ..........<<<<<<<<HHHHHH  5 6 6(ry A  BI)73399;;?SSb'M t  t  t  t  t  t  t  t  nGKJJJJ ' ' ' ':$:$:$:$:$:$r: