From 01c972771b33da77596fb3b41b08559b941d20c6 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?G=C3=B6rz=2C=20Friedrich?= Date: Tue, 13 Sep 2022 08:23:23 +0000 Subject: [PATCH] Rollout main=>qa 13.09.2022 --- .gitlab-ci.yml | 1 + group_vars/all/plain.yml | 5 + group_vars/stage_dev/vault.yml | 1030 ++++++++--------- group_vars/stage_prodnso/postgres.yml | 3 + group_vars/stage_prodnso/prometheus.yml | 5 + patchday.yml | 65 +- roles/kubernetes/awx/tasks/awx-config.yml | 1 + roles/lvm_with_hetzner_volumes/tasks/main.yml | 80 ++ roles/postgres/defaults/main.yml | 4 + roles/postgres/tasks/base-requirements.yml | 8 + roles/postgres/tasks/main.yml | 9 + roles/prometheus/defaults/main.yml | 5 + roles/prometheus/tasks/main.yml | 28 + .../hetzner_unattached_volumes.py.j2 | 53 + roles/prometheus/vars/main.yml | 5 +- roles/selfsigned_ca/tasks/_create_cert.yml | 2 - stage-dev | 2 +- stage-prodwork01 | 26 - stage-qa | 2 +- .../config/prometheus/alert.rules.j2 | 60 + .../config/prometheus/prometheus.yml.j2 | 15 + 21 files changed, 859 insertions(+), 550 deletions(-) create mode 100644 group_vars/stage_prodnso/prometheus.yml create mode 100644 roles/lvm_with_hetzner_volumes/tasks/main.yml create mode 100644 roles/prometheus/templates/hetzner_unattached_volumes.py.j2 diff --git a/.gitlab-ci.yml b/.gitlab-ci.yml index 327ff92..f3f714e 100644 --- a/.gitlab-ci.yml +++ b/.gitlab-ci.yml @@ -306,6 +306,7 @@ run-patchday-dev: - if: $CI_PIPELINE_SOURCE == "schedule" && $CI_COMMIT_BRANCH == "main" run-patchday-dev-digitalocean: + extends: .run-ansible stage: run-patchday before_script: - echo "${ANSIBLE_VAULT_PASS_DEV}" > /tmp/vault-pass diff --git a/group_vars/all/plain.yml b/group_vars/all/plain.yml index 3317955..7d9f174 100644 --- a/group_vars/all/plain.yml +++ b/group_vars/all/plain.yml @@ -63,6 +63,9 @@ awx_ansible_user_name: "awx" awx_ansible_user_ssh_key_private: "{{ ansible_ssh_key_private_vault }}" awx_credential_machine_hetzner_name: hetzner-ansible-ssh +awx_ansible_username: ansible +awx_ansible_password: ansible + gitlab_ansible_user_name: "gitlabci" backupuser_user_name: backupuser @@ -225,3 +228,5 @@ prometheus_alert_pg_replication_lag: 120 upstream_dns_servers: - 185.12.64.1 - 185.12.64.2 + + diff --git a/group_vars/stage_dev/vault.yml b/group_vars/stage_dev/vault.yml index 746cfb8..0b2eb77 100644 --- a/group_vars/stage_dev/vault.yml +++ b/group_vars/stage_dev/vault.yml @@ -1,516 +1,516 @@ $ANSIBLE_VAULT;1.1;AES256 -31343235363139633137386366396330626261346334323131633337336430326236336432383065 -3136663535313863396266643038346537396538303838370a313763383130663830323234373166 -34326166363566363639646636336137633334393762383263373338613161393231303566633261 -3264633937613634380a306362363561363232323439626432316334333232663137656133663236 -39323331323562616332653638336561306636636237626635353936363837643237653264626166 -30303438353238333666363365306232366435666235636664313333653361643135643136333636 -36356538363962363036626463626330326335343339626439306136633063346364623130646566 -37303539616565336437303234613162656565653634643138303237313730623338383732346336 -36613835326335646637616262613362353439363934643031306664653337623230383632626331 -66646464626134393436363933636134656465366437366431326437656264356663383465353239 -33353563633039353137356436353364316234376663646161366163393033633038653635343639 -34373765636532626662396430646464313936386666613731656261373563666561306132633735 -62363563343263346162353363336330663666646333373261343338663033623461343766343837 -64396561356661333237373239313334323465616330393036663439396435623737356666393536 -32626266323739323962373138333939666636666139656339346334653837623836316261633961 -66323064633332656335626632353931383037396261366165613162616230633562626237626161 -65373464386235393435623639313832353536643234646133313561653963653530333735393664 -62623432613065626636303239366564653536643839613562346563633838353837613231666463 -63616231303164626461353731643461316134613336316565313464393938353365626636623063 -33393639323539623137333130666532393136356236353531303661636135343766396365316438 -32623434356331393639613837323130613962346261356466323237643666613038643861373930 -66353130643337343337303861353365363936663939613138613333643866643637303831643633 -30633233653930323032623963353834396538653037653738323134633638646338323865333934 -66326435393838383065323732373163613066353531653062633134666437373761396563303032 -35633436613530303937343630623634393330336565343338386239346462356239353735623866 -65346331623432303432316237323239376438623338633435353131373630383532333465383261 -33613331623864323163663865353261326461306164363130663931333266313166653138613861 -62343839623737346131646265623237613232613830333330356333376264313934343634343463 -62653731343139393130363439323331623635626235346137643433626638653131333838336363 -37383363313733363833333532356364393935393563393137396631643733663864303462636565 -64616338646634336233333766363363333932313466633061376364366531643237323134363234 -30316437393263333865303663393864633863303837323632393666626461623765396566333137 -37303262633537663861306431613965393563353335373331363239306531643532623864313130 -35303866363431393433303162663035373265356634626166353764306335646666303437656366 -37363564326661646165613139626131393830353537313734653465633363346161623031663536 -63303762663163366538316237346335303732333365666533303839386134363937316265313330 -62333265366161353530383435353163376364303536323166336434373461636366333032306463 -61623664663333373039346633313265623563633038353835313934303862306561383538356638 -30633238633631636366353636333937313631653332303566353734313564333432633162363339 -33313837656232316665336332653565363132353836373731343366663963376662323264663337 -65383865643764643034623465323130363931653764343030663331656339626131373632343438 -65376364306532396136366636353530393930666236646634366332383631663830623130623931 -64623033616465386237393164353465323562653838653565336463386235343632353465393834 -37663063376236393334616337333834396532366466623132356366303632616237613766306438 -64373139353033623162663830316539373263373764666566616331623662333164643335343563 -35366331323365373230366364326466333964306236646339373466613861613531393739343236 -37363134633333623835383865626436653737633332333730656633343866326132363362343931 -61356262396130643566383738363134316464366536643166343138623335376136616335643438 -36623961303736346131376233313133383330333761343936653531326233366163383736643662 -33393531316230323666313337666363613332333837316434383237396665663833393330303661 -65396137633231306435643766643231363638383031393939393963623363326362643939323136 -32643333633639363831333436616263663838306534303435376532336637653364616166613866 -39373062633434303733663062653563386364646166373332343338383566356332373261316266 -30343432383230643066363338323239633633396232333939666638353630663861336433653430 -65616638646532313535336465303933616635626430643438326266613833326465626364316431 -34653733613935633535623964343032616535633733623866323764323364326433303533343231 -62323965303538386230616337396332313839636235303363663931636334303430653664376662 -62303532316363616536343637623338663533656137663939313363323639353661313533333531 -38656639623736666638643464353463333037653761386662353066656665633539383764316532 -38323865623032323066633333373832343736353263343265666236393132353634383332353361 -31636263323731356464363866363831353931306662333766623464333664653234356139623566 -65636434333333373733653639663335376262666564353630643861613861663962666530643130 -33306162373635613262353839353366646137336533373331373136656663363435353034616130 -30613161323032373262616134343633306137616336356663663131343133636238656536643330 -66353362303232336565613362316438333133313363373937666362326462663536613763636564 -30373733613763383232323837383930386130353434343162366166353662313231656265326538 -37333965666665626165633837356135343534613265313162393864373465346331343664313264 -37653733306566666336353866636136333930666331626261663466626234613832643732623363 -34666236636166383161386366393733356234366338336639653038633036303637643864343337 -39353333643238343136313837373535333738353336303961373038343337353864316465356635 -32386533643961376133623266303233626531636437303165306330663566393834653336626333 -37363730393835626635363737306561396538386131343436306666346430623532626362353235 -64336437356634343133653938353663666530306639313935623734386134373264343533623531 -39643262636164313532333233626464333937323532336565316233393830343465653262663038 -66613435666332346231386234613466306234393831346261613664373237383035376262363838 -62366130393231653262666234656238386261343438303661646133316339363434633031393637 -36656261366230396630633963316363343461356137663232666362613965353335336537323034 -36313264626439643030646636343434616437663231376332343137353266386331633835313039 -35623664316432653036356435393164303235363061353563356131643634366561333464336634 -63363331336566326331306164663763343632356338653165313536376462646135636331306365 -32356463326437323263323266666237386430303662653864663330316437643861646165633762 -62633665396439353966383835643534366236663965316634623665613331643935623535356362 -64393835346338363164333666396138383432636137326161343739313564343365326539623766 -65656462376135656365633239393462313165653436636537363862393761623930313736663766 -64663531343261313236386164353832393361643335313534613731636239633664306332633061 -38393537613762343236653234376161383961653333356133646263343330663532383438623336 -62396236396362633631336435616161646438333261313665383162646634643062633761306664 -36633739356639333732356164356262303533613032326164623232633836313434663036333635 -36303834303038383931646464643438363263303666356131613264666565386465336335613562 -34323462643232313038336339623762336531366335396166623032356530633762623036383663 -34333139623665303066613239646465653236326536623665353837343736633066343561636339 -38663434653432626562316165356365366338653364656164663232376665616137666437363330 -38643461323863663661616237306132343730613433333930656235616334363830316638663635 -65383035623335313666333663656630646634363634383736396463656536383561633834393935 -61376636313130333835353734356131613963623966353365303766343837643034336564663766 -37353236333165663862333139623565636366643036653732326235363266323864396232383430 -64306436656266666366363566323336363238383262393530303133343336393765353864316534 -31636166656231343333383532306331376564643763653764393637383865346133356264336532 -39666364616235646137353566333034366263373232396462346665646266646532633430353966 -30323032353237633239626365663430303239616637363137366338656238626634656661343362 -66646436373431363438646538323830353139393962623265376363356631343830363634303931 -62663939613362643862373562343433623965633636386461653035623136633464633466303337 -35383162356639663039333932303233383931666436373965323933623731313934383062393931 -64383862643936666665663939343963326563393738316234646539633261633865393737656561 -64653137306531626461663264363261383730623466393637383037393465323834353035333334 -37336437396461643434393036306630363135376263656436373064643865626330313361356132 -39643830393533313338323031333162626665346233306131613032323762623261663561663062 -35346663323166383963653831386264316437383932316161383562616331663636653432333062 -61663830643530343436653063383935643632383862323166623462646565353337636262656639 -66326363376132663131653339383966663136666137323033306562636564336562653465363735 -62343164656561363861323438623436356534613966633839653936616163633037613166306530 -63323537313737346364393763343066613434326237363832393737656535376166613732303835 -38636339353336633233393466663530636633353932306237383930373035376466316562623162 -64336161313137306366366134363233666462613432653039666563313033376235653138303033 -32326661333934633939323863353833613862653737373966313263653035353534326638333938 -30363139313034633131646538633036316539393535316261396135306364626364336366643864 -38656536323365366136363130646265306135366439393763613832343030386365386334363635 -34383832336465316631663063383931323532393635643330646563666262393737333133363735 -37663434343866383363303839656331393136333462643837353134356362633437326465363864 -37306163656465373165366632306466323965376262653039383039323961636164363630353764 -36623463383761393833353032313336343834356335323139653062306433313839653734653739 -62396533663364323333313436383265383466353566353135666236313937396363303638373534 -64363562366138313538376464356561383763323330333334306634393730653634306434333638 -66643430633033326432346337613233303631383635653365626563333161646234663332393130 -63643735393237323834316531646537373939313763383136396462333738623034636135336330 -38383530393535666263363163336332646633383362616165393936336433353533643662303930 -66643839663566326233376535393336313435633336656235613438656662393065306538383262 -32303439346639613833376638333438313638363632646137353630393738326139616133313336 -32353965643437383162393033373535363361623538646266376434663162393133383365363738 -62613539393230626663373462306134663265613862346239633464653661656335663734393338 -62656230353662353332323565376163343835396235386564396662333934663333363033303131 -66353261363033643365646663313235363535326630333134366230623537316433343963613339 -30653831633436363763373333626133636632326463336161313330636265353465393831313135 -39373233376630346539306666616637616538333338363962363362373031613737333865326339 -37646165373232636562303032323032363666373831373263373761613166306130636331303162 -30396635663665313362383937373264323461376234616236626130643439336364333761646638 -63343636616636323266303234366638613038386238626662666633616236313430396331646433 -32613161323533663430343530383435313332343862376633383933663832646132356231333838 -30373362383561633565313330313938616363313765323937316631666435376463613034633234 -64653831303632343764336363343965396161306439346562613931356161366339366433656266 -31353533636239646462626437663966323830353539623231313661343437313234353334613736 -31353461356531656138663761633665376635303437643662653439646561323532383837343466 -61343237646230653334343262383233386363343464623662386463313539343162613863346561 -36613634373863386661366665383233323766636665316136653965663335356535356234343562 -33343137366135396566303031383337653732396563306130666466643563376334653665663364 -36633566393265306462653437323334643963356236323434666566353130376337626530653432 -30323135373236343961663538333933636531353230613766333334636365363030333763396331 -37333462373532383037653866313366363332383435653534353938666263356237623630626533 -39633964306265306434366161363731356439613838633537373863373738303430386238663063 -63633734376361613132316630356333336136333438663039616363323337663362376235373939 -39303131376433366336386138333965306639663165336562653034363961393066326565363835 -37646163393737653434623565356363613136373530393031636336373635343462663530346535 -30303563313534313031333336393830306533336466356665653438626231663035653963633830 -36326265623636313938613666646330616639343135386365353665343839643064386632366361 -36386464666437333764346266343931626431326565613333633761333833616231663631393364 -63336338343037633135623433303465383638306661356339313137366538613735666538366261 -62386137383134326266393031626665346132663237396163663865373332643632616163383031 -36636635386666313535336262613039373035626137616630343266313436646264616161346531 -31656332616162373065363566386362653536663566366363313164623637636538353434313362 -33343165326661316539326530636334326132373236663431653661396639393139656365323563 -32343833613362366430663065386139646464376431363063393536653366356665653361376330 -32373466346363363937646166626262343565653534383134656336393837326232333564316136 -64346634376565643039303234363766666432643837383336353735636638366134306634373839 -39663638306564666430346466393437643737326664633739376161653563626332323364616530 -30336130373533633131613835633566616562613533396234613762643337616633366561626631 -32393738353432633939356439613631363639326365373237303963306361316464333838333262 -39336635613934623265303362623330343237303934663333636333386662323831363431386463 -61366163313434646332616137366436336532653665383437623436333261363330343439336539 -33366434323666623764323264376166313932326464343435343632636166333966353163313563 -32363131373362373734323830336465643034323034313166313965323633643230666537653236 -65623730333237626531396263656263376638656464633461326233656664653431313939316530 -63363964346262343737353462393537343136363538323030656136323532373139326536623638 -61626264636361376163663036386162303439643864373531663665653461666363373234393835 -39336466656463646665643665386632656661393266643364346362303864623039376166326366 -33623434646365333935316230613162346434396664613234653134366162636638613234393433 -65636437656561313663363937363430313436313535663063393836613837383230343364363834 -66323234323665303165383566383434393038313735383339326662613862333064323630356464 -63343137633862326361313131613830343438646436653832633933353866336666353163373565 -62656263393631396565636438366230636263323862643639306435356464386266346235643164 -63353535343265633536333764653838386433333364613734376136626136623664396462636236 -36303265353862613665663365393962353938633338363566613732653737613036306539623834 -35316633613761326161666133333438373862333664303732376465613433326639393061303237 -33343464386661656230383136656139363766353666303034313834333332393133653931646633 -65353030636530316132356230333963396339616134666234396236313430643232663834366264 -37303331376136386332633036383835343239613630666336333439653664346365316636343137 -34633963336231313331356236626433626333353563636333393666303937303939366331613135 -61633435366238386163643863366337646334383865323038366331636364343966306238363866 -65306438653234376632343264626536393765636433363838623338373835343434323632396465 -32666338653639626336363665623461316166626663613333303163313937343163393534393362 -38306162636431653666393633336533356461666462346536306136643633393938353132366564 -36396264366161646632636236386562613239626266663930613666396465623063643331313236 -65386534666635333362623435623465643131633736633231613263343534383965346665336431 -31636336646330623663373236326335623266666563383033363564666334353230366461373865 -32333761396636363563613831653438343564363164663463613963356531636464363639343665 -33303337653039623761313535366332356333376438623831326538386331393433373063653037 -36616566373665353666343963386135623761333230333731336237363063353063396430356561 -61363563383566346536306438333065663530313766656639363063363565313933353863323966 -64313664623331323936666238633661393539393637383130323235346533316465353233353436 -63386363663431346463383231313432353333663265326238373565643866333930333333303461 -62633531396263366662333833623239393365376439306533646261653364613466343536616436 -30393165323864633262373230623238613866653131303066616366343930306462323030303933 -63316263346639303837316437623834353036643263313566613630386231633539313532323635 -38386461326335323536333832626163626565643665633262646130646136393735653463643166 -34306632396533373338663364363530363936313731343839613062616632396237613863356663 -30373836623230326538383031666537336633393832366334353963626130653964663432626166 -31336131383538353934653664646333316334393331653230353561396263396135383764393432 -30633435393330633435343264353963333032663065616139666164633635383635316262393030 -39636239656436373030656131353630376265353535366132343839363864316261313338653630 -64616262653462663434396330626438363862376538346632666261356238393432343532643138 -30303465306532306530343537613736366539373063393364613265376236313166313863623333 -36633138373437636434386238373835373262613832366530396631346332366435653034383362 -38633936353830303132373235666631343330663731366566396330313134303030376532383966 -37376232353434656363323364633037643132623531303261336437666235633833373666366131 -37356634663432396236313933313038653361653732343730646336653837346462393132326639 -33323133383030386633646461626262653865353734626265353963663963333162346666346132 -35323562383037633562356461396164623666366533306231316430633131303963323837386436 -30353633666337613933633534353462663931383562623661396433306666656239616634306563 -33383639353131346265623966306365356361323661343435643466396635316661643632386266 -36373136393338383265353562363639623565373530663032333236343939343538633763366435 -30636538373263363266383035396337343664363135316264363033313937373461343531623730 -38373932646137386662386333626639626664646561376231623836643036663961633636613931 -63363762323664646134326432333737333164383739316634333436633732613062313761616132 -33636466666136353134306131356466326335343965343835343033303162616337383166383737 -39373135333737613732336439656563366366623230306363303838303934363531333438363063 -33326533336332646137323338313562306339376132346530326438663966393134373731643939 -33356139333333363135633163363664653439353365343662653263633265373536613134303835 -34303232316139386430633466366439653832376233383734653165323834366532363630623761 -39376638323330623235306366366333313763353133643632303864616466306431346331386466 -62326364633838633533643664356631366639626366303333633530356264306335613363396365 -30303137656661623237346661353235353435363361353136356563626134663539393734356630 -66356366343235316330393237376165343335386566333762363730343164633038633536626433 -30316336313339333931633762303033353132343963616233663530623565623230653239653232 -61336131393162376533356465393064363535383864623038653961666634633466303263613861 -65663164313635643537653039613534623763333466653437363466633839353133343931336562 -37343566633636626336373738366262383834646462656661356464303539343366373539343362 -39356438323463303963396465366131383265396663623630653131646461613737353163613836 -38363565623434333531343539643438336335343132636435366537363537356335663162383030 -62616136333964316430323939373931636136316666306564396339626632663164643131343531 -65396439386434336166306165653835666234313464343065646666666162383638316566623563 -61316436336332346262396662616338666465363266393930623338316633323739646335333636 -33343863666434376166303233383735326565316537653866653763643764653866303566343232 -63336366376632653238656233313331316233646461333430303163313964313531393235623136 -34363163646633306430356336626339333739356639306565326561653831343132306439656134 -64633033303430393634643137316139643737646231306336313834303934666531633332303466 -63663163653266363438636635366265306639393965393162643238323230623064373337396466 -31373563373464336362303130316536363034366539306433353564663737623436393437373037 -36613839663765346537303831656637653561666437376638383635303238646231356535356439 -35623934616132393138346531346466303333323062363338353333396334346432323230333339 -64396166353263346234626532613838653936346530653463613264343832663537623535346638 -39666532396535646136646161313934356330343164363331663063636333323133323036346130 -31356161356235346266326438623436643766343766313438626362366363613862353266313137 -36633763383733346630626637353034396165633639623861383562373465313636303133383134 -34623137636135656362623733356466656137386230333933323831333338353833343735333965 -39626333663335373436303434633337663034623336323936326430343933303635623733356665 -66643733643630326132623430643830656533623735663334326638663333376238656163623638 -63623935306635393935363731393464643032323633353732633362353233613233383164396334 -36373464623061316533316536653161653761613533336664633835346336643136336366383165 -36656433636263663830666161303262343665633864383366383037616338306361643163343232 -66376163643435653137313431373265633062303038306334613563636136393032356535306461 -30373131356134383833376134643537326638653634396131656537626662343435663932616163 -65393338363230306434613364303739303636356435363536643661363236656434326163333362 -30616532333439656166636239633833656363343935376362316364356332626466376662363930 -61363934643063623931613932633664306164353632346563346366666532333962363461643261 -33363561636564346434656361313138353165313133363535656134336537316664396366323461 -64363931383166613238653865363738393034623161356435626138656339376330373935643935 -34333661386264646564313933663137336265663436366461386130343130623839366630303935 -32353136393136336637366337663137363533636434363265666438383939616364643036373564 -33663264386133333962663233366231646636306466363532333937323633663834643736316636 -32643633353632643262363734383764313163386161666134613334646434653963393164326234 -64633732363564303736326162383634366662396362303430646135623739626431663465633465 -61666134636162643035326362663035636363386538626136653131633362393934636466633734 -64643536636366643136353865653139373163373766663361323230613138383332666439343736 -65316661343832643739653765626464306234666536396635343938666438666436303962336434 -38363762343865373437393538333531663062393233366464336263663838623533656661626336 -65383836353361316438643938633935383138396162356666306336303362656534663933373361 -38663930383162626131646339653933666433333033363738666464316531326465336563623664 -31376466383537363531303963653434663035346530613133356561386239333732356463333938 -33643932303563313931366265363137633531393634383661316133323539326230633236643462 -62363065636634303964646639336634353238653633666263346361663735373031613865373063 -62643365626637363232633763306362663435643264306161396537306663363935313763326331 -33616138653837346430323237303961316639393266313034663061326236633831646638613336 -36636132653431393766323437396637303134353535616666663966343032646362323735613433 -31643062373235616336363430373363333766306235356534313639636232616163663465376565 -35633835643139336331636635616561666335383763613438626465323631633932386464623530 -32313737643339373866363735613332323432353737393033666465336239383765656231613834 -61333633373266386239383238643632306166366462333039373936386634393632376338396335 -62343364386462616334333766363962613839666364343466343364613037363466653866663739 -61343833663135373836343634353934346366316665336431323965373536346363626134383239 -39643163373861633331333035653539626430313138613162393764326334353331346633383434 -66653637333161323761663330646364316633386566636631336261393638623834313065636332 -36336636323734653662643339303137373330393039323739383164353035666663613838396365 -61376538383562303866313263663766363634623436623835326438306234336539316139636534 -30613234303133383636343534643662306534393936323630643366616630616232303132623166 -63623738326436626131363464326563373633336230396237363162336231326138386337653537 -38663531613361383230353061336535663433623534396437333366323765306161613961646533 -62386339643339383533623435633633653332653539636531613466663638393937383437363565 -61623765623938326635316665326239303336623636326139336437366161333362323639353564 -61383366633265623861306531343962323935656133626534653134323939386465386566616463 -33643633343636646436613437663630663430343838313238353961373864363264663035636138 -63323661653331316333393265616366353537386432613937393538373233393138666631343932 -64366238643734633336626366323163363833343136643830613239616632313735346330346362 -66396534316235326434636231656438666539346137613135333361343335353032616236633162 -38326461643761343461346332336637353230346430656136363530633038306263383333613633 -38613161643530626238306664663035346462633966386230336166613635386566393735623338 -31623539393734343634333035343566386262643532306639653261393761323133313835626234 -39356261623465663833343631396336653431633164383038663036313264333731373633356664 -62623733653861343137306133376164636665383239366664376235316134336533373039663238 -31383831313763626664356566646435623466316336623264373930616438313836636430326562 -66363063383834393731333638316664613966386663336635323037633039343861653630396466 -34633135366166616630616437313334353837303230626638396461373135663266313531633738 -37316633643137393666306134383330343937646638326262356163666465393765633262646534 -63643564323830313264636632336331303831326533316537333663643630356462343265623130 -30636466666164373935633964633438633161363336373133316538653434373562636566633761 -38663637323765613865663763336230376166333035333265343934383736316265326164323766 -31366330653263383534353932663932376439313330373131333035663536396634633861303336 -65616462353566336334626565663363633531313161616634306165313137666637353138656636 -35396465326131663733643936336536323265666631653965346565383639373830363665383938 -38353565663539393765373164356162386138366137373933346236386232333134626539383131 -37323933346131316166353966643365306330643266363662656661313437376138623434316439 -37343964613764353634373530653336373638353161313531636434323565326331313237383163 -64373732356238356661336562323966303136373335613361613066393331643539313661353439 -64333132663265303832323665643463353363623236646531396333633036663164306433326330 -66303038616135326238343237303661626361326564376166313037363233343631333735626161 -64343964396439386263306536653439623564323463333733373866373537633561383339626334 -36653337623233366564656638393230393933366338353431633161333965623363623730383432 -30386430616562303139646334623863353435653661346131383333616534636235313261333631 -31623762356531623964313332633131356634643030626333393236393439396234323163313035 -39663037393933366662356331373437336630336330636537303932386237313238623038623431 -36633037346336386335383434636533613435353965306232653261666139386331643937326162 -35626132373230306665646232613161663863396338373033393430356137386334383133383730 -35393439623438633965653934326666313732353137613437633766323539373665326238323836 -39313864333365626137313633333733373536356339653635376634656263646132626437353932 -35393439363736353735313536333830366436353466356436623934336436656564383532613264 -64306265396638613531376237626535303834313038333563636332383735386338343061633030 -61313730643537373165313064623034393162353263333831396437653638373464653161653931 -30636433663861656537316132306364653236376665383633663265613230363838306536366132 -30333131643263383765623933383634363362626532313263643938313766653163353333323238 -64666233666264313235333861303131373034326539643137326538646630623633653261353265 -62313232323834633566633939613564383331656537373237663961343639316131613531623636 -37636338663930373361393636373433626332643633653564376466383130333261383430626332 -30666230313332656137366365333038313262343363623766666536343231386230663931313966 -38623065616361363564613164663931656163663433343435363630613932313466383830613261 -66633165333234633766383933643939373032383261376538383466333438613565353935383935 -31323631643065306161383036353333373237343966643932356635666164346461353463633632 -35393332626339666330626531373962363161653332303034326435633661656439393836383132 -66623839353964306466393837363438363639353566396632356531636237366166623133313534 -64366265353135316537623930363337363530643636366338346336396232306636363334303364 -34383765383565616430343431393337363065316363633861336436303530383033393434336435 -65313036323566643737373935373335633332646431363461343739356235653564613262343636 -34306661366163626663626666326136373034393662383630306239616165613435613761663732 -61336365656130346361343632313939303230623434656339323938346635626661306431303238 -64313531616561306561663538353262383939343035643438356131613739666665336230353136 -32316266653639636234363334336231373166313364646363383530363134643565383763353766 -36313638666634646638363633353161356436623133393661333361363865633230363531386463 -64366338353536396639356231643133323133343363646432656439633139633935313665363034 -31613732653532326330653739333331633065373731346439353864616436653534343034663231 -62656331613439623531616234346164396565363963336166643934383261343730653138333431 -34623136376366623934643030363434303966393034646231396336613931383533626265366261 -38323539333736366338646264376363313833623662383438336533623535643166363038636139 -66393239366633393138616534653339666661353635363636663639343065353036613936623837 -30373837383161633538653938613735653263643532646337316438386439613832313962643766 -63636466313162643831363434643738336134633832333166663133343633373135376639643232 -39323235343636323635383365333134646331623133316566613566333837383537363230643736 -63653533386333633433633432393663363163363062336464306331636533303337666137626263 -36326432666138376432653666626338663463356361353766386339636431666665346138353162 -37353433326564386138366430316630643333626232666432356566383236653863343964386661 -64343562626538656662306632323665376438323831323037333234666663353261363364343134 -33623434326365313266326562363164666464303032326236326265316633316564663434666433 -37343765666636306431323332633265313962636430333166343664643632333037373463313962 -65346231656230303330653865623233373263313366353935633833356466373835613835323231 -37363831363136306230633132316634396130366434356335643031396530313532646431393336 -32666231393034623136633562656132616564313336666130613463636565316364366665363036 -65353365636262376330636235653366383239366537333430323439343936386464663261376233 -31643931336133623365636133376632393662323831303935376139326339316633643335306339 -36616435353861336463313165333439613631333531333435303864313362313435363934303134 -66386164316431623531373239316135353366326130323666393739646662363637326561323233 -37346466313961346632396533316364636366313434316630343339323263656661613534333561 -35306439353931333062613839316635626666633333616533643562323235653465656635316633 -63316539306236626439646634313636363664656437383261336161393933353632396166633766 -62643166396462353365633964316365373964353038303662643136396637616264663364613261 -34643363326338666661303764636339633363323638326666383062303236326232653234326539 -31646137313063633363663531613563343633326336366163646535336432396433313165373233 -33353766316331316564626165626661663866656532313636346361663463323333616538376430 -33313832356232653836633936303434363639643633663738336365376130663430623732663530 -33386134663734663437326537383331373865356165613063636637393536313731363436646332 -61313861653062636338343230636339353434383131653633313765613435373936366130643261 -32653030316339373237393232396131663835376331323661623963363935393335363734316664 -36653162616166313232346163623930366363353939363333653138656436353364326230346633 -62636364633531353638336263396638616336313766316635356433313135306539643530346563 -61353337613030653466353936333136613565343634626462636538643135303838353534343939 -64313039393730636239626430363865633236393937306636316332346331383761663830383031 -39363136656632383531386238306539663739363163363531366462333966323136326636353038 -39616439376238663130356531343237356538386132326538383133643033353066386134373237 -30623261346638323066623834633964353030303235353261313438646136353561323333643037 -38663930396563383739313761613338323364313633303336653463613536653237306330316466 -37646533313961386138393238663531383130666135303761376263363864366361646636313639 -36313637613062373464383662363366376131663336643730343136313935666237623864306264 -32326661616436316263383933303033383930323739636664613365393831646636343739383537 -65633563353334373239386161373261623136613034323235363838323533346232393166656564 -35336236623561323966356430626466303663616231343866363332353766666234636665313835 -39623261393834333131616632333364623932386163663438333164666133383231313264333430 -63643539656164613665666662393934333131363139343231313962323933656462303162646363 -64323638653832373833326130373463336137356565343861313264366334386362376637623539 -63346466656434333431636231323462373138643734656262386636313362633933656561353536 -36633066646161663534366566316465643932306430326337353933303262656136643338306635 -39636136633763386262376339383636613934323733623065616336353962393330653065363537 -63386365643730653434643937303832343139393630646138653965646237323535313063616661 -39653338363037356533656536326431386264653233633036326462373835343164373764333738 -30306231373661336265613330663733636336343262316537336633656466346439626637366264 -31356363663531303230616136646266616263333038623561633233373831636436666631343938 -35366239643066323737666438313466646232663339323536366666663034393562393531316534 -34366331393732376536313265653234646430636232303737363538383739346536626130306335 -33363665306331646363313365393066373664663637303230643631663262653139373836313336 -62363932393031396438303837396166623537353562653132623839333437353334633665356431 -39303763393337353932303234336464396531613264616665616430363631366437313435353365 -64653333626437633837363432626562353936393532363230353630346134303165623265353866 -66663234316562346530663131373466656336343235393966326532616236343135373239326330 -63343833643366646363383236653336656662366130636130333362376164366235373135393439 -39346638616437393961303862343062393331323635353434316137376661396130303030366433 -33373364633738326138376233363361353861353932343161393764373934306534376161383232 -30366438306261393738353966313639343830386135666466366135333434366337306461303836 -31326233643661363839663739373035626431386166346538313430363234323537666636616563 -64396563643164613762656261356539303339303062633137633430663436393262303962373964 -61343263376431643863303838396331353636313434323235666535663562366365306365663565 -31373036343130613336383232646664373664653437353235316338633538613538376233336630 -30346262323462333438316261313338353564653265376161373965343231663430323563636161 -61373737303162333466346238333161653134653934393836623932386539643666323362363639 -66366461383635373137363766633265363466383431643163363238316564313264373633656137 -36623463323535313631666565613261643633356335343031373930363835333464653563613836 -32636638623366323164666463333764643237633935643735633135386636326662613764343830 -35653234656631316631343962633635366435343631663536353062323965333537343236303365 -39303536616131333235636532356366636237383930633561663361353261376334386436623430 -62333732656661353462663262326563353664653566376131393661636638613139656264356336 -38363734616138643261326138343538663337333138363635303930396163376438626631643834 -30323034373865653831323536393761656363366565653734616264336231373435383032636532 -61353362366338393730623430613666323963616634343238333164303733616130306334396665 -39623664323238306363393661313134396366633461623061306639653136326366393037376639 -37373330356263373436613638363263336661356132646438333235376130306535346162643836 -35653561633566376366626433353434636437613137303863643838663263626233313938613339 -34363630623339313365373833613765366635626464306335396338353765356163383662363363 -32326337366236393637313763363535343835323332646335373738353635396566353464353737 -35663337356163646561643364303164396635663435633634646166383135653964646333623139 -61396433306138333535336639636461313234333466643865363564353933643530383833343532 -65386133306632643563396535633265656161393862363631346261643962656637326438363366 -35623766656337653432323838613838616164333138653734326165363266386662613633363037 -63613861663335363661396132653566393765393037326238323466383861646165376632373837 -64663439663633643237383037346534373335393231366239386164643733613433366633363563 -31653339363262393432656133383333633834393866336330633863336130333734313936613132 -62336430363338393731613238613431646161326137316337613237363266666162346236386661 -63666366303339373265666231336338376366613064343237366230613232373865383339353765 -30396562303535316231623330346135393935396563313330366166353338343764356533393038 -30656439656565306161316363646130336234376338623162313837313562313563303864336661 -64303865663234653332353339386663343632666233366138343636363830333765393731386365 -39653932653331613864373830613437383438656636643734376536346430616431326261333461 -31656437663466643735656533646537316638613435396339343739346530303966376361653665 -61336538383533663463636234363466653232316261626335376139373036363130393038393137 -39653033343739383334663236653936613536633366353738613762346436323232646134633966 -34393061353231383735353766383232386166376233306161666264396165383430303433393530 -36313735396663663232363362323139326163393736313537336364306466633464343530623636 -63363935313830626638646665656230663936353233393532666263356130613863663065636335 -34386263356464623063323532636431386666666165663431363231376532316566333433376238 -64363063346232623764336563646161666663333661613139663233636366323931393562383833 -31383236666635643763353061643039373430613731636561613334303662343232643863323262 -36356361626434333936613331306266303561663763613166376563643965333333666538333863 -63613033393465303165643631336665623833303931366431633836616430646464633638336435 -34323335646363346333313033303430653237303963303430376535653535653862313733373235 -30643735353333373636623737343537373133643731306561353631663064323130363762353462 -62396130666136353835366230326332613439343831363939313562643430376539663134663366 -36643138633065383534623733363338306362663765353665353635656563643730303238393634 -34393339656439353366643139666238636635303936343337356263633737306536346131353164 -36396263343763656530343834656561346361316462646535336534633636306130353737346635 -64626137306163346530333438646165386235303930343263303238343430316531333738393136 -31633561386335363738393063333262636338353932393162383030393935373939353332373136 -35313962383532633332343165393133373238366261616632643666616237663332616433623133 -62623239663533376635346261663862353465383536366235333538633863366662643761666434 -61646531636634316163306634383935363836306336663433626437383837393533613665633235 -38656461393032306233306435626130653566393662623039633131343064633038613839303363 -34343138393136363761353436643963363937326438633266366566626332393037343963643364 -38383136633631663263643466386230313865343731643430376234646330613563626236653630 -63376231363435653833343163316339353062383337346531626436643063346662613736643834 -37653166346265646434363161303765373934656134383133306165636637376464396436633665 -39356164626637656236646333316332343062306432333933613230633631313231353030363161 -62383036333365633037343561613839323533656232303435613333386666666566353939623434 -35626631313163376437373366366465633439346434363264613530623633663163636438333063 -38653561653762326535353135626236623735646161643566326437383863613437386239303062 -30363061633531653761353962653837313164326661383064363530303730613534336536353039 -36373033383831663864613133356630336339353861613032396566316436316336623362633838 -35323235323065626265353763363463336261376166383261326365373965616263323933636537 -38363331646130646563393061386539386139343761323563386165613766383633366135613963 -62373437623466326665643239613761366264646131633339353138396233643065383439376434 -64383938386263393139363033323437643631636433333864343361353039363665343136303233 -38316561396261353661623066356637633631663335303931663461303262336632663761376530 -34313737393530626534396533653566383738646265393531663533393938393863623434653533 -34656331333432646362353133373034393333653734653032376136613034326335643130376661 -64373261616430313465663837373461663030313734313337623162396436383739303438323434 -39343431306264316266336130616561623866613562356233646133616462623934333133353031 -33363166353135623239363066336436366232396364663432623337396231323830663364303463 -37356366313365653334333963376163353037343330336665656236663937396338306561613037 -61343561353434343730663833323165663331643436363033336437393731383038346236353561 -35633232643866353264323632353261316135333636353463386666616335343935653730623534 -32346133383230663537326434323536363236343735356230383433383366323234663539343465 -37306562333037636532353837333833343837366438346234633338366437616439386562643964 -31326339326365393765663765656236313434313564616561663062356539343563306339663465 -32306632373962353962363130343365636366343937663165323634383164346466383533623234 -61326134356662626563383663333964373934333663323461326637643036363766666266633466 -33633261636136366632346135653535393934306365656666363935633365646232383738656630 -37333930383736353264666363383131356134623735343439356162323165386639663431353631 -38626564653032396438633336623764333266663836386231333564376534386536623834383533 -31303962666265376562386235316162343663343535343438313162656266336338643537373934 -33623432396532633332303237653630346638653035306439363235343062646361663632663830 -62306632656465313535363637623037653764623439343636303565393232353930363764643133 -39396433356436626261613439313463663035363934396561323631373032323163613037343866 -34343237633266343537383866623034633638623939393365653566356331643661353738343532 -65336530306238623164363935373135363532353033393930353264333337356263323961623233 -396265326362646466343631666432383134 +62653133323936633332346539303362623738363134646661336436613266393665386361633035 +6661633338336536623632363762303636376266623166300a346638346232363233363439663136 +32386265363436616139356337356235643665336466343264303365336637303165636536643836 +6539356636303464320a396339653338393664383536623131316532663537353938346161346431 +31343364656133643763373863636330656163383739343437623863393864313536353861633464 +63353632613533356631383839336433636436313766636163373266363930646137663363386665 +37623338643438376634393134653563626233366163666636646635343030626262346135363735 +66636462373464326434306533343761366434646531396461316338633861353031313263346663 +37613962383034333465363264656334626332343932336235653063333164323636376335333939 +39643738396164313437313934373238333861623531303839653037393735313835616231366363 +38626665313636336536323330636431663731666362316439386363346666323733393362366337 +36323763383337633537303234373465323465343031396262336638643932616234653736316563 +36376336666564666531366162373135663066613566623938386338386433396630303735376137 +30643965643966316331643738623262663864616161643261633465653930373236613534393266 +37383631656433646539363937363261613562633764633762336235323965313430363861636465 +35373436663035316466613431316365373637366435303835396466353964353966663534323165 +66333732633532356635346539643732356139346662356239393666396363363033323331366433 +35303630323837316562636230326463376462373734656139343234633038636230333665653261 +65303638306565626164656339383133653638646534353064393235663530343332613464313461 +63303839353539313363336166326632366165396233333063386562396165366631386134643031 +37326237386365313363666232626637393833353033623661636633613264623136396464373330 +30653862326537366661326232313835303733643766363562323635323431613462626131613135 +36383164376139633862376662643037346364643033626235363131663865393038663832333233 +34333164313530323534343034323362386662363033353531323232343037323933323231346461 +61663064386439393266343566626264396131343138663062303736393130646339666233303162 +39326365613664663562306465386338383934326466333233343964663231383061313562333661 +62353236366336663532326365363831373361393961306232363938326538383461353931386536 +64336236323663623931366365313639623431323162646538636435363463623835353934653237 +37376639326333393262333761313833623561633939376164323338656330366437383530656438 +38663635616639326337616337653437626435343238623063363336303961393838633432323334 +33396438663035643137366634306437633132656665626663396362623934643965313861316135 +65643732313761326138626336373438336536646366313762353363393565346239613463646632 +64626364376438303130393434346465363564663961633664323338356331316236396565613464 +37663138636264303866386135316338646330646431663861633666373638363265666666653464 +62383038636332613733336633346330353136626234313132633965306661626663636566613061 +35663564623463663962373334303833336530333766633432353762663434303063393561326464 +37666261616263333663363763386232366530326364336565643164623939373062633865393436 +33373437316434653132323763356539613966646263323366663738646439346462633962333663 +63386437356232656335323331383161653832373666626239343432306339623565653766323930 +39313061313265653361383566303338386636616164326130623266306636336465333166333665 +66393532336361376637663533633963356639666530623939333533383862353266396434623439 +36626633363363636264646539633433653139316532386134653036363166653165383131386438 +31396464323035613765303630376634303336393637333232323162343565326134386338646462 +65333631323766616233636637653963393264376633323934653761643163333330303138663939 +38663566613031363936333566316337326231313864393565626361316166393066313232663466 +31623638643862663063623964386437323337643463613364393363313534646131656663373135 +61306235363863643462353262373165386338313738353863336636303936343663616435386165 +37613361383961623037376664336465396464326562393831386565393838653831666464663837 +35333339666337383930353862336162306230666530616331653131626362366566653761323430 +32366163346538313637303835323234333161636633623237333333353137366532656634656366 +39343833666265363233356538663835316535326338326238666532386461393765396432663133 +34373262626436393461666139363733393431323238653763646231626333633236353238643233 +32663366336230373432343064366166373962353031633163643839316339316538666235613333 +33343264376431376335383430333234373336653231616539396562623237346433343631613561 +33633430306335346463366564636331343432626662383733616566636364323364306536656234 +34653331313135313736616663653738623339303266366437653930373339663965323931616332 +34323136613939313337356234313336353561316664656665646261356636316664343666336630 +63333165663666616464356132623030613039356365383539623666623561303435306438313732 +34366236626537396666616434333533663631333565643166633934346632653830306335656564 +64656131643832333934383030633135393963666461373432653730663864626637373762643265 +30633464626239306130646134353264363363383637353134623363373964623565316439363665 +39616139303132356334653636323531346463636630343766306462653438366563613539636537 +32313234356138626565636339326439346361343933336235626133613336646363343064323661 +32376234653131343162363337643232323166356133323130343334663132333262303561663166 +37633836363835326238633936613262346539376664636332636131303063373766353033363466 +30613536393339393466316136363136306130636161333732623462636335373834633565353266 +63333366323330366335326461316236616231313331656566353438316136343139613039346163 +39343339353430663961656337346262656235643662353035306439396366356333333663323137 +31353336373036323030633739373964346131313761343037653332633362356566646531303764 +35386264363430656661326339623536343263636262613132343138643931613135363063303065 +63313363383834343131393365653939323065303835363531383362366464303634326162396332 +38326233393538363232653331323131656133613639376438636634666363656137313736376461 +37393935663239363238363831633739343136643434323563376331333364306662306164356265 +33363535316330396364303430383534386564303933323830313236643832346531633662366164 +31636333386634393631383062306334613834323564306337396538343232613836393533393439 +36303138343766383331316635373034343037306134623161336236383737346566383165633963 +66623336316335633865643733376233336433356430363766653361373766623766366137333039 +35613931343231333566313561323034386338656266393631366336316637303335653562616663 +63396233363234343463333164346661323830343132386130623061613239373237303439306336 +63613335346334326133303762353238633032633837613536306564343563316632663037303738 +38373031393962323563633735386261396362633835623038353135336430323532343864643638 +63373264333131633939656337656531316134343661643437646632313930663664333935336261 +35393565363865326664663161626230326164653362386262363465303837326535376131663766 +33353630633633336531393635303738303561303430306237383264623363613964343232363334 +36633466363938626138633764393539386335313663633561623561656137613037333065356237 +32643431393362373833353536366332383132303034613931393031326632386534663238623662 +39316433663435393233616539613236616234326362393961336465643530633734386566643461 +38313464373639326336646161353064643434353532636464353065363132346333363233373262 +61636134353936626666373666663030636634353966343437313330383862663061646336323566 +30366239336234333463373163643236363238343364613138343863386565663565333838653837 +64326535306438353033613637323032376136623330356533613962333461356462313332323135 +35386132313531323037396434633363643337346231623764636464376438616533393431383463 +30363935336237666366326335323735346461343232366532643939643236346335323665313838 +33316335366363643938303562313466613839336661653631343430646162353034306366333730 +37613439366264636338656632663536356561643564643266333735363562616464306332653734 +64353831643832333162353233326265653962326239666630336631646435356131346534666636 +33653333373335376338643564373438636234343336316461613438663730663032623830613262 +66656133646663343963363437346665653461613038393661663364623232353839366439373861 +35313462383763376162313361313563656230623065393235653565393032363034323332333765 +37333133326537323132353761356232666165363434336261373138623764643636613431346536 +33303538613866336532626135626330336162356330356337656236363765316635396630653138 +36363032613862633831353839336537383239303331303666666461613635666239643631323937 +39613539363761363461333535353831373361633536336262626536323730633364666637623033 +64633537303833626365636463363734656232666235616663616633366531336235663535393365 +63386266636338386166303033316138383363323466386338646632663939353630393431316336 +65366433376439643130623239633065313366363030613833626566613433643231653631613335 +32393834653933613232643662643431343235356236373739663635396261393638313539643035 +32326538663035613163613834383764336133376439343834336361383536373735333564326634 +63323361626432663463396166633263323164333432663633393662633832326163366432383932 +62326636623036393737633435333530636262323139313831383564303733366637376637663265 +64656563373634643933366262623633376236346431376537323238373538386238623631623834 +61633631326461626265383831666462663262333931643730633864326539663430656536353832 +33383139343262366563626533383365353733306534313062326664333662653966396238313661 +36353064636339633564363230643632653335613363316261633438396533343433376534326237 +66613462353231336336366233363737316565666261303966663235663430323230373364346438 +65356665636133386138396261373130373863656230303565613863653065336636373866383930 +38323262323935643636613733376461633333383930336137306435653865343961323834623739 +32623235343337336661303739333462306363383665313036623136366333373336636439663132 +38393164386235653134386166623462613132303436323861373138663264616232633764616539 +61346539336163613936363331636232373136616235383162636137333336393265313038333962 +62613930373136313534393738313966356535353032663333633366616363643133616336323530 +65326163363664393936643865316237616138336230633461383832396264316561653438346639 +65316433316463623764333465323333356633613766316538613962316338646639643061333765 +36663238323564396466316435306161396334343336646262633661343961373166623335656563 +30343233666263363331653236633134303861343765636364623361346238316462316664346162 +39366231386565343461626665393261303732363632303631396633303131313939616433396561 +30386636363734316132333737646564646431316233383037343064353364616539376166393636 +64643537373961623334333839666438356361646163656132336166396463616661663233343735 +39376438623262393930316432363334633938646265363637376335626339633466316233393663 +31323163613033613665666566656238623537316335653736376666343865323737633432396236 +32343733393335376336343934346265303137663239656463393035323263653637653432643666 +34663730613838306439646133376161663535663237653338336564373430656531303535373535 +36373435623934633061303738346564623338356566333864303330653636613563313234663130 +64383638623931636431646539313931396461643136353537333238633362326363646665356261 +62313165633230323934643532343361383066323064663462666164616632613863656634366334 +36613065343661366663666565306365303036303064623438363636363732653466626230363438 +33636164393239316339353761393064666566303139623536646362386137353834616635626231 +65613732383034316462383762613538613862316435353161386639643164643738376633636232 +64316636346638376433303633376435656165326362396566316238386336393333393737306235 +33316530653632613738336661313861656234303565646566396134326462356235383338636361 +66383835616433386638343663386431306330333031373964316437323533323532343034393761 +63343534346635306539396530393738306636343665303034356365643530656462633063663434 +39326531393239613161373263336362343637353430333539373134323064313733383663393365 +65666435303433633431653762643532326636663861646638306437313737663336333839353933 +66636137373037356665636537373233656464303866643130663838323164646137373861366536 +66666233383166386634306261303234653362313962646236633334663934306561333731336333 +38343337386364333165353338626236666562613737633864366630323434383335386466353234 +61633637373739396438613263643932616161326565666239616235646263613161313466643466 +62383738656334646538373561653430653266313362386566663737373937633661666566653464 +31373030363332303162346563316534336432366133656634643934653762343763313264316539 +33393731626463323438323432306133356262303737386365326362316435353234393138613061 +35306662363631656133326130616333306639316338393666616630373635646565663630326135 +37306136336662336665643863363834653030316166346130613333316232393663353161376363 +32323939313166363139373566663264633861643533366464323838373862656665346331663865 +63343161666232663766613061336130396161616233616363303832333764303937616364666662 +64313439393466343332313336366264383364333361346466303633306337386162383631653939 +37623264383231393035336338356666366331643763396636393965383637653532363963383362 +64616166353965653035623330313630353130306631393332373432333664383634633938336131 +39336531313432633334663830313264636165333638623264373430666638613434643663613336 +38316630323031666161353363343036396433663135646562346363653332313633633839343432 +62666237356134376639653866343537396531393764313036336537346636343266633537313830 +37323436643538653434633235303435663962626336393263363962356436393065656633653331 +36386634336631346362666433396639656464626638353731316463353935623665373835626561 +34333633653165383733323232346432363637613931653561663464396462303032366238363436 +35356466386431373733313863663863303663323230653864316131376231393730666638613265 +33656566656161663362653661646536393735393862386566643037313033626565383366363337 +32313362346431616562663835363862303463383634613432623636303635653733343061643064 +34323638376133393062306433333237346436316133383263623065383835666634666633616163 +66633130613039313031316234313939363836613463633933616363666531666537623639373663 +62346132366638613164363136336430376330323961323564333362393133646361643837356331 +65623066373937336531663366643337383331383131383135313962393739663261613433373163 +32393039366435383564666338336335346130646635623831326262383265653963386161653535 +32653465643363383630636535656666656565376664663934373638326566353032353634393766 +64376265343461383133326234303432313236633234356431666132346165343132323736373430 +39656165343463393731323035336132643031313931336330353232373231383761303736306333 +31396165373836626432353533666639376266303530343332313434616664383232323635653163 +62643132346438396530633037663662646164396362343931373533336166363131383630333331 +35613339346437623465316438373631373037663935633061373130653232346635376137613862 +38333833396632326639663361393330376438306661306265626336656139306632303236396636 +30366331613635323664376537306538353731623136613034336131383964353231326666303839 +61343839353335636533653064613731303234643765636232313839636536386530363738656362 +32323432313539353964386531363432386633393735613364313531653261303566316363386462 +31393630373663323734636638616265663630303364396434623735623539306432623432383961 +33633362373661633233613932373861393539393534646135323631353139363530373764636631 +61393232653862393039383033383563313433336166333166373634653232613733343337363135 +36306237326362643239343437373232346634356536636338356365396231386137353736373061 +36313036376233346365363065333461626666313636363662303835663065613761303566343464 +37326533623733303933303161653431643431346530353337313334613630356534356565613461 +38633534393562633138663931393635616537626639343335613563303535633432636465303534 +39633638663534663964396462306633646266343562623839643630613739643633636139373561 +33363365356663323034336565633733313261383465656238366461643331636561346133653430 +36376464383334306533383763383262343033623466613638343565343833643361613632326533 +39376432353534343262366338623331626438643261663332303563353833643537386363626563 +37623264386561303335373063333963613561373733353130323934333530333131396335353064 +38373935316135323636376634366530346464666664393063323732386430383564653433303962 +66373664373061383666346539303532623862326363373864646261623931393237613633653264 +63623639363138663161376238613539633630643337303763376438323461393735353337353639 +62393038376363626436643532623038353336303335643830306463363939646433363933346638 +36383630366238343831313734356434636465653166366635353766396562366265396661346639 +63666236653134343636646331383039643339623164393833353861623434396263363838646339 +66306361376635353633326464343761373034353033316363373634663834626236653136373539 +36316435626634613735393730626436363230663231623064323565653562393664343438623733 +66663332653965636464653962306165353562326635366433373234353033303938383366646532 +65396534656566396662633964643862353562646539303832623264633261386265323239383662 +30633061363332363766376137333937393838613738383662326236326134363964623839653239 +61353431396533326633643431376539316664356135636638316538626264333635333461373466 +65663063656433623962613632366464633435393864663737366133333239656235626336373462 +39373736623631343330313533323764386438313431646562373632343431646531343936333463 +64666566383633333832386261356438356461346339306434653566346365653638333164613133 +64613663663162343763396437313962623235643933313630663634623934613830363638653262 +37643037346437396164346465333139633231643464313637626435616365623238313131386432 +64393237633361346163643763643330623862313861636161393732353662353130646561383565 +66636231396662666165356233313662636464383332613332383032376162376431366233363366 +61316230633932613036346363356336376635633461316336343331643839353161653132393962 +61333965303762363038636339303539353262653165353533326636356462633737613466626663 +62653861663234316165623534373361633838373435313561383166616533353433386266653036 +38326232306464613036346335623566613436643762666335613863323838373965383864333961 +65313665623931393832353065616166393331656163616432613438373135333432346566376162 +32383334306133323561366464363435306663353236316235326635383136336664306139356163 +39373232636464643238333062643432633232613763363737336532366231363561636330353964 +34336530376336393765343436656338626561613239646535366434613863313836653461616537 +31633733326166643538393633383962383338636335613138393837663936316365333762616162 +65386335396461303263313433653164393533303433643735646633663765363531343234343030 +30613436643332323262666134666330656236306137653832346339333539666463303634313033 +32313331346136323234616431376565306331666332313832616363393732363563616234646562 +66663438653166356363306635646632333161633837366537666136636233643932656534343634 +36353136313766623266643639656366386566326338306138343132613832323335343131316434 +63643136643039653536363637393431366338383933393266356464386431376231343664383135 +33396166386266306431323465633463343034346561373063663031303563613236393763323162 +33393839303035336466623465306134613565353735343335636531366666376336393433646236 +31383235653662386430653931336563393838343363356238376466313537363238663139333961 +31646536633136666332306164613730336334336266316434386365346563666439373261626432 +31313732373334396634366237353932643066346465376236633764303430346332353466366434 +63663731623532656664636263633565623338313565326534346231363533376463333934663735 +64633364366666383962643333343132646166336438663264306230366663613437653362343533 +61633536636434336132653966346635313139643661316464633730343932333564396235356333 +61343365643334323932323135393161323539656563616235323634633231376434356662373539 +65626331353136393739333733376633613130383465633432613666313633646264323765613231 +33303637363061343039353436636633356330353730323736626536323434616331333564653437 +63366662383262666637623066393135626330633164333933616261626535373835323965346533 +33633664376235613236353766303165363366386364306461316663623434333131663363303336 +61373735633166373661613864363239343136653638383464396662656437323134383034346638 +34376434313763613437636265383562376130613765646362366630323330666466376633376432 +64393263633466616631623963336465336466366236356337666164313130643261303730353165 +38613231396462383463336534336336326334613931616430326530613236626461366165636137 +36383261653534376637643164343263326336653234316235663962303239633765336638393836 +30373738666466363339653032653763336634306561356531313032303437396532353430383737 +63353265383131313739653830633061376131643739663734613732353461343337626231653765 +30653834373432363861663236303933323530343562356532383833626362313530306435323537 +36396536383331633465653334656665393163636439343632613838326564616363613435613762 +63613564333962656464376231353637663438366136303632636538363833623465363333643439 +34373430656265343065373733623030386432666662646433613835363332333435383265613761 +33353835623832613364666461333061363766303834333335663530343366393061306331363430 +62373736623232303637653236626163313538386563326564343237653639346237313731623037 +63656362663466326263663230333836373938333936373734306136373832646431336463396263 +32393930663530396266393031353439366536316331633838373665306436373231323132646364 +30623061643031386534636437326539323738363034376339343730643063393733643562373764 +64383065373662323934666661336237323666636639393739636132333461346639653661643937 +64303466356539323131326636303434396132373439393830343131323063356266643164373866 +62643765613935396166343333643733333465666233393735313663343166623038653333316638 +63333030326235373466643935646230356137383939383031346532646433333165396166363061 +65373133663130333839376364323561623961356633343938316134366165396661306364613435 +31373862383935643865373663383063313737316335323735663839373331353434386263343133 +31346363323134303935343530396166313936383831316434376265386535643131616162306261 +36386131643235366262613631653437643936383430343236613134336136633262663230633261 +64363239656237366534356337356162356534653732373634316336616463353831363037396236 +61343532626637356338653131343264346632373633306661623030326534633438393837316166 +63353263323135393939653961336638626531633364646562653837313166666438323161373135 +39613732383530383865653930613734643165366465356665393136303431356265396234633139 +61646261373036623136353730633062326232663934663565333937663366396363656662646431 +34613665366137366533623239333961306534383831326133303030386630373464303332383434 +39663033306163346361313364323537343231653031643837313230343065646232343331373662 +61613866353734613330383765613232346464323464613963326338313139623131303935316539 +38343939666533623964363962316238333338343662373733353733346163623166653934353132 +30626536333962366465313465633430363463323463366637356134616464353238356563656232 +66316639643566353037616334363934393136353236636333333533306665356464666465393832 +63313337313661323139653761356339353232383536326636303238346536366336393433383161 +66306561333533663538313934353236666536663765633238333336303937333132386433376331 +36373736643338633032646439373237343938323163636239656163346131333763363136656530 +30383038373561303564636333626261376435343938396262373239376331663561393165633738 +32663664623536396562333134333732633932653364636564613837366539646664373437396534 +39373563653031363032646530656461663266323364333939653561313931626461353930363663 +34373930346665306363393730666230613165663764376430313133373632616137313137663239 +34623263396363633663663731623932663737633564356237656430386535313233393630386637 +64393137643865393138663739656133343331316461363332633663386233383939343065656330 +36336333343033363339653862343235356261616139313365323735633837643737323364303065 +32353533613365363239656236333738386137646533313231653165313039616362303731356531 +62613537336230666534363330633139303666396530636638393630353235353332326462666463 +31386637333237653632636463333061306162643765363733616363666232373266623334633330 +62616334626531643331353336303933616236623764336261353038323662643531623534636132 +62623966303430356439376363316566636230363338396664333265653536643161333962333061 +38383864373861336137383731623266336337643136323366396237393234623666323462356561 +65366237313138336232643161316266383630323535393664346662346330353330626436323531 +33656561633133396665376230646138306663666664306434613865663230303132323931363437 +63363036623966663463373762383033323732656430613939373663366336623263633431626235 +30386335363831346563346337346638333961336563636465383539396462343563393164623237 +63366263386462626364356565626664386534386335643461663066616430643863633664383733 +30643638353936386531613034633530356437383437323337663030656364653831613335663635 +34663663383562356133366534613835343034353163656665613634363263326362303130333439 +34386166373231343637326337376139373239323930633262626531613535373932326331383430 +34356563343338656337663337663638396236333833343234323334613639373866633363373433 +35636135613265376665353866633464346530666534396132393361333331303230613730313438 +30366332626430373831316265396165303930636263326336366639633035306130366164363566 +38653839616137646331333464326236346665333331623635663165623230303665366661353632 +64623538653330656333636162333830623761663331393964316464313732613362623962343030 +34356466376232323065656164613564653334333438623032613738616539333436636365326232 +32613031306332656363656534376430623262313130626433633261333131666461666432636439 +36393032313937626134376563353332356636646136326137306366373063353566393636643866 +62313038303839353134346166626361633632313537636266353933303664636533653330636532 +39623332623665336165636233393330343761646566646165633336363535646537353465636165 +34343730383731663132303663353965366164663165636262666435356665353062663361333333 +36626366386438303363613330383430663838656134313930376636353133663131616564353630 +62663439353365636536316538666465353936613834323639333664373334373964396233323838 +64363133663030633465343931383439646131663930346433373739613033303231636637653037 +64316535393863623235376431656634306431306362326366383636393937333937613661303161 +62316163306138663838343437383637366436326462313762313831373935396538646664383933 +33326334633539356364663864353365636131633264373363386363626536613365323637383065 +64616237303830653834356131343936613666383739646435636539373830383232616333373763 +64363431663262363235333637356336303839363036313163333636363333366633323031653537 +30343339396436653763336262666533333136333138366434363630353037333633383366653133 +35366562656437393234393965393335656462653030653532336363613737643132346266323239 +36353632656661366631613630343361336639366566336163626464373134333731356161633962 +36356330333037633134343164613131333938656330653735356433356532393536663432373038 +64356330323764386162393532386534613834623731316133303434323434356136613735656166 +32656338346334656465653663366438346435356661376564616366303961373931633939326434 +63333634363934363565663964663266333938393664363639666636636337393763616562656330 +37636666646664303138303764323565353932346461373934326364336364623161656130373839 +61656236346232626235306334366431313464326565663839656137383431326437613236393635 +62353230656639653765373438316335356563366537633031356463383437313466626531616536 +63363036386361656461646664633563323462396137646430376466656664376637633333303963 +39323162653635326163663430616464666265366164663532363931323935353739633332313665 +64333639343636386232336633323334633031356462623635356663633265653131323237336438 +65386265386231396136306532383735343363386638396133623534393666616565613336383839 +36623134363333333334653432666632633661303263656137386231343035636164656134336434 +36636461636233323133313232653638323539343761333765613630383030396539613639633530 +32303132303962646135636262363232613331313734346433613132346462616236616233363033 +64643933303239616362643562343736616462333431633936626231323539383731323836323530 +37376238616234613033356465306630633463656264333832633331346364353638343931316138 +65393263333962373731386336323936326339383539386236363431663234646564306165303164 +33396363653631616338653138363430643662653063626439313133633030626239303666313561 +36343163393064653437363665643931613164396662376565303033306236313439333163306332 +34643534643336643732633935353335663837326130323036363335656364333961633166303137 +39633263393336346434313864646434353437636631366336366431396536643661613261353431 +31303233636162666138336463303365373661306439623237306532356266366461633332386539 +62383431323765663438616234633430333532313032643963366562393161356135373266316531 +63666334636635303866396630623332393434313065313061643430613266336638316432613039 +30613431313038353435393066363830373830303531373032363733313933363831373231343562 +31306432666564633635663537303065383633343764613538386532653538376536323763343239 +63346465633636626234613631353039626136656531653330663931366232663864383832356337 +61633766323334373534333136316231393339623534306238346165653366393662363662386462 +64663830366439316131383865373365653664626663376165376131393935393631306236333666 +32333830366230373561363732653233623136613639343562346130666530303238396338656165 +35336630633735643135386264613636373438313639383634623436306363396636303835363164 +34633838363731653033653064653166633063383434373762323035653337646362373937656537 +31383031336362376430646536626263333763376335646463313135613039326137326535346630 +34626165653862653833623162633233326236353466343236636136326164303432373038313462 +37313961623731376662633131363735633562666433383365313234343834306134356464356563 +36323731323464366638386664653964643436396130323930393761366338663037316439306361 +30643736373437376536616566396665366331646538653834303261353366366462653533653262 +39313736343230323337356539366536396235326562393934626332313833623466643661333064 +33396361326335363764613235666463643937323464396538356466313231303866396530626139 +63333163656434323737373534323765333534396535353831336535373331613966663037383966 +65383137353131386436356562333666353966636266383261376439663762653666623937663664 +32623965356262633131356561306461613233626636386338356166646532346539613537343533 +33303635383335383030366533323666666135356133383564383263383134626465623730626466 +66363438343463383363613061363636333831353362613533323061633864323930316565373464 +65323237346564623830613230336533353232613535393665663963393831613763343830613536 +62623838343665626162336233316239623161383465333136643334663536326463656663623166 +65326632353330323335623662356661353631356131373639313836333630633136346461346263 +63373732643762396334396630303865386133356335396634613737373330653564323863336330 +32643030383731353938633734616163636437313034333932643263663062393265653864393061 +61666234653936623636356337396135616238326365396363353364316264343165353733373432 +64383234663361303765326130323566323839316365306164303738343262373335623563653134 +66623736313935306130343838633763373431336137313937643939303966373438346636396136 +63376639666639663033653564343763646464313033386138626163356532623165356230653933 +39393731376234366135353163386634396363346264333438383131643834653939316635656536 +32396138663663383731373838363735306463373135653237343961396262613135373762373537 +31613133336437653765656239336638326665666239663238643035346464363238376332626465 +39376534316332313132356337386633323761376231313861353839656162336232323062623033 +66666163653234613961393832366439396533653738646564353034653266653862366137316431 +32303731633133303965616434326561353939626136656466666134393336366332376131323433 +63303334643831326131323032323334363639373061346638626435316262366463313863633538 +35316462613537643164366538383561353865386634383964313339663066666631663830633934 +35613066623439396335393239303662343330663235346430643135663033633835363530383730 +31393661623465633563623533623030323735666136393531623261633539336130313236646364 +64653336333832343138616166656635303732336435656334333633393633393965326563303830 +33323566623835613135373737623938663335316632313764653366373036316462346537333833 +39386561616535346663616330326639656666663265373262373830663666643165356534383462 +31376465616431653333643033333933386537326437336332653433393064376531633534303330 +39646239316538636462303336636430383135346339633130663162313033303836363636313461 +32646461633763613031333430643835313536363734613766643430323065316365373737353936 +65366262643165643332333336663463363566643661656430323030386231376664363531303632 +39326536633636303365626465653634396130626631373935363230343134356137306165366662 +31396563626639633362383936383430646133383365613036313534306166336263383063393136 +36376165313164353832366166303338656632313166323939656164646162646561653936336166 +62663737363030373933323832393966666437636365386138663130333365393730653638623432 +32363935653230393634366439393934396437633038373634656135326263346331393436396235 +39353935336664393337343164653236613033643865356361333632363036666362333361623039 +30333839656139613333333233663862656563663636666363613833656264333839663137326439 +37613966653664656165313539393566396531303464663263646234366634636334383832386334 +65393134303035643461326466653233666234366263316134616334333239376130643838363062 +63633262616436383734373639323032303930393235666236363862663537353838363764383566 +65333830316365336537636361623237386363303337666431613862653732633862376438393636 +30623336306162636638346630396439353032363431666132363038663938643838626263633835 +61383438653136663832306265663036636330633430363665313763646663626635336166333463 +38666130646538336635346539643335626638343166373932313065613463353931316164663061 +65313435333137623031303563373837363665363963393135643063636136653136323130613663 +34636330353166643965653962663138336665643863363562636661383464323964643139316633 +63376261326264366263646539333762623862636262336164373832353538313932626630323461 +64306164343866616536643533373336363365303036343531623038373131373030363635616631 +34636164613738306462306637623961396239386630333065386230346162333962303030666531 +36353065323035653031626161376132353466383863373838663864316639663937656561643239 +64373138393238373765653663643733343231396637623636303031383265623466636236353463 +63643862373532633464646233383330646466316537633634656165613138313939336264313333 +36373566396538363161376562383663363964343661636332636164663961316666633236363731 +37646163353634646665653636643338613037306661316139613730363932666533383736316564 +37653335626366643732613334396166313339373432643666656466663063373734613765323266 +66393563336137333664363436333165306464636239616336636665663361386464323263343238 +65636636636139613762383733366234316561313065333438616333623863313561333838636137 +39376163393765663833663439633361656139363631396134666563333733626261363065373365 +64343134306637393939663235626364633633646561336362333138643037336265336534353738 +37333264646563386262326266333932653863343638326666363636386361616332376637373930 +37643733333131646433653030313938333265656335373437396265343734346562373531306561 +30373562643832663039343939363431636364326232323239363361393162306331316137636161 +38313839626333366164343738633265376335313164306439653030623537366466313535613064 +34613235623564656162336435363965623764306339333661633335306230663363393539633038 +36323261333430666463656334646338373132623464326164363639353438333464653762383265 +61363264353531396264306236626430616564616461613436383136346531396631366438643834 +33363632323462383630373266313935376630343138313666313933306532326630343066376637 +66313061616264636435343661323164326338396333356332653837353038393138646436363435 +61333062373130323165383666366561646662663463633131313930653837373664623365373033 +62333736636234366632316330663430636330336663633038643538643361393236373338396366 +62386666343166356236316534313636626331663065393661393134646131663639646233656239 +38366238313237646233316439303966383164633365393366316535303030396235326631373566 +38393835623366373037343761626137383266666337643963663064386139376436643664373032 +39343730653534323666333035313638316633633133623761373638376239646439363139326438 +33306439656262363439613030666535373263343239306466666466646534323035363463643830 +37383836353137363537316564343135353864363537643733393339396231616461336533623738 +62663038363636616637313931373635323439323261393664356365616639356664336664613264 +36616138663766646334316537613563346132363265373965373836323638353765323535316235 +66343664346161663861313939663832313465626336356638353039613066373931643561343439 +64346666346535346132383866353335386565383736653463663663366562653961393937306163 +65343333666533663663373432613435633464666437393737386365303264346633353631313639 +65616266383030646363313036366661326339356230636664326438653461653066353530336262 +66353462653463313731356235376662633666346563356263333462633730643532306266316539 +34393531636635343564623137313636643262633631366539333932303130653137633831613962 +64663565303936393630323832353965636135336532373130636137633765333565663361656131 +38343663336136613435343164616263623338633236353665336632373033636363363065353338 +30343234363136393837313263613865643438383462376230333338306335393335653965643163 +30393734666438336163613138326334386339656561393234633938323032653738663863666231 +32623430633433303165373630353532653833616363373230643139313930623131613137353036 +30663536653439366534636135393939613966326538373262623963393537623537636365646339 +61353139623165623039646638356134326164363030643230383831376261303735326264303166 +64303161666465626166346365666435356665653035323862313430663032313065656566363232 +65393365636237613961396465363036353666326531363466666361643861623935396563623032 +38383531336430376263323232346633373134323231326531353536646365303235306238363631 +30393064383533343964633065323364303635306366313737643461326463653534653466343334 +61653432336330313634306162363165666330316432313365313630626564623737653362386334 +39663636336638383962393339393063623035656532613031336266643763653162353631363739 +65633364386466326266616134316633383533633866323335656137646564366430306663373730 +30303431313539373564306533306436626232303636303163653865646639613334613834356562 +38663938663234323261383365376537306533363537316533323932316364306537383639616233 +38626131636431316565346261376162653566636361626562393630636166323839636264663963 +32393563323237633438623838343838396465616664373261633861653832336464653833626565 +63663337666265353865613130656464633666303363656162653135626463346165386535306536 +61373632383865363730343532376461643631343861386535306435656162656564376133613231 +63316536323238323934613761373834353063343330303139363965613665373139353561666438 +32633564656165366137323764373731333164393563663232383366356132646231393562353537 +38396538333765363864653036386535336661623533636530366235653936666539633266613966 +33313963336234313235633965613030323162333133316239373731306534623561636130663366 +30353236356230333062333534376133306565393731363265353132306261613863346164326631 +35303539393830353839366631343263363263373235356236373961363238363031636166323836 +34303165373230663133333331653665373333623963353565343763303334316565343165306636 +34333962386237383664333337626530326666643264646535356333633465653762353031323462 +62353266303962353432653131343434353439343161393337353934383366313763656136396365 +62383061303766376365316264316534376166343163626131336538626665386433303165613731 +31666562623335353732373564383131306366616466396238353164643136336561376564666536 +31666261353731376436303865643862336362366566333265383563386333656532343166333861 +38373637616635323263393064306262643339303233613238663137663465663230376531636434 +37343237626631356138643432633735343363613866646530333737343230666238303732366536 +63333338393934613830336437363966633034663462343034623134353564313365376465323830 +32633739363564653066636566386336386366613662623635323531623466663738313966653232 +36353836383136613765343866636132323235396563356530306639653862613030373030663938 +36373864656330646235323565633233633336663033366434626538343532383733343661306131 +34663664663561343161323661626164646335353664386432356631643166346531663266666164 +37356537633565646536396639646231346462653033336239343164326563386238373937666165 +32313766356264653961636230383635376264643837356432633738633566366466303232343030 +35623563306561663463383131663162383930383264643666626538306232663730313064313161 +62346235313636336331323430376437343464613733623835353664653466376534653862316531 +37373266306633646131346666303334353866343130386166616634353937396366333261333332 +37333663316262656430646161643436636562663236643062313131636361373533333038643438 +61663538626636303037353130366463373432666664646564636633663132633635636361313234 +66343061363162303332326261306265313330623232373332663835303566313732626162396632 +37356437386437623663353036353431653131303362373733393536623134643537383135313133 +31323561393634643335303864356264626161353330623731353761396331633362376237363931 +61653739376264323364373637336164343364356364643630373330653961396664393566303664 +64343131643632376462613266306330373639616262356465353337636433336666353164316264 +37613661663836623237383138363436636530633666633836303161386661633465323836303261 +66326461666630363337633935313833616634373230376330646262333334383062383337333336 +33323136626161356139333134383735396664613639326130346239626563636362386339396130 +37383634376266643662336433303862653565663130323433323330336163646466346232326438 +33616336646639396435623635643733343764613861303465323536373864303937653435393566 +39383930313632623133316433393838333463316134653339363933663536356463333466396662 +39356135613036613462653561646266326333653236666331346432326537613464363265313331 +39383131366639336234646137336436303362323535623561623162326639323932616638666361 +62326431363532613965303035313938643731366338303264346439323462363766643638343536 +34336232323638343931636362616536636634653037396538383164636436656565656161373339 +64663036656162316531383130353865633662313035376538656162383430346665313036303439 +30633937343632633365663465373733633231373965653231303465613438636436303631343265 +37646330623865343663666237386139333231336538663863626631393561616463646332613633 +64636133343261353930386434313135353136306262386430633038313839393239303838316135 +61303633313430303830613864346134383730363433326164383761666132666338376634636532 +39396530336563623762363338313563383937306430643933613561623865373062353063336431 +61363932393533666462643366363030323031633463326665663932383235346637353037663063 +343162353861373333343264343734376631 diff --git a/group_vars/stage_prodnso/postgres.yml b/group_vars/stage_prodnso/postgres.yml index a92131f..a3ccba5 100644 --- a/group_vars/stage_prodnso/postgres.yml +++ b/group_vars/stage_prodnso/postgres.yml @@ -2,3 +2,6 @@ postgres_backup_volume_count: 4 postgres_backup_volume_size: 20 + +postgres_pgdatadir_lvm_hcloudvol_size: 20 +postgres_pgdatadir_lvm_hcloudvol_count: 4 diff --git a/group_vars/stage_prodnso/prometheus.yml b/group_vars/stage_prodnso/prometheus.yml new file mode 100644 index 0000000..bbd90e1 --- /dev/null +++ b/group_vars/stage_prodnso/prometheus.yml @@ -0,0 +1,5 @@ +--- +prometheus_lvm_hcloudvol_size: 30 +prometheus_lvm_hcloudvol_count: 2 + +prometheus_tsdb_rentention_time: '90d' diff --git a/patchday.yml b/patchday.yml index 224d23f..ad154e8 100644 --- a/patchday.yml +++ b/patchday.yml @@ -188,7 +188,54 @@ when: - not check_postgres.is_available -- hosts: all,!elastic,!postgres,!k8s_cluster +# due to bloody dependencies in SMA application startup, iam must be available during startup +# => patching IAM service outsourced in separate part to make sure that is up and running +- hosts: iam + serial: 10 + become: yes + tasks: + - name: "Smardigo Patchday: update pkgs" + ansible.builtin.apt: + upgrade: yes + update_cache: yes + autoremove: yes + autoclean: yes + + - name: "Smardigo Patchday: find docker_compose.yml files" + ansible.builtin.find: + paths: '{{ service_base_path }}' + pattern: 'docker*.yml' + recurse: yes + register: docker_compose_services + + - name: "Smardigo Patchday: shutdown services" + community.docker.docker_compose: + project_src: '{{ item.path | dirname }}' + state: absent + loop: '{{ docker_compose_services.files }}' + + - name: "Smardigo Patchday: rebooting <{{ inventory_hostname }}>" + ansible.builtin.reboot: + post_reboot_delay: 30 + reboot_timeout: 300 + + - name: "Smardigo Patchday: wait_for host after reboot" + become: no + delegate_to: localhost + ansible.builtin.wait_for: + delay: 15 + timeout: 180 + port: 22 + host: '{{ stage_server_ip }}' + search_regex: OpenSSH + + - name: "Smardigo Patchday: start services" + community.docker.docker_compose: + project_src: '{{ item.path | dirname }}' + state: present + loop: '{{ docker_compose_services.files }}' + +- hosts: all,!elastic,!postgres,!k8s_cluster,!iam serial: 10 become: yes tasks: @@ -259,6 +306,22 @@ until: sma_portal_avail.status in [200] rescue: + - name: "Check SMA-portal dependency << iam-instance >>is reachable" + become: no + uri: + url: "https://{{ stage }}-iam-01.{{ domain }}/api/v1/roles" + method: GET + status_code: [403] + register: iam_avail + delay: 10 + retries: 10 + no_log: true + until: iam.status in [403] + ignore_errors: yes # noqa ignore-errors + # patchday continues ion case of failed request towards iam service; + # iam service is hard dependency for SMA-portal-instance but not for + # patchday itself - it;s just a work around + - name: "Smardigo Patchday: SMA-portal not reachable - shutdown services" community.docker.docker_compose: project_src: '{{ item.path | dirname }}' diff --git a/roles/kubernetes/awx/tasks/awx-config.yml b/roles/kubernetes/awx/tasks/awx-config.yml index 9b25113..df94fc2 100644 --- a/roles/kubernetes/awx/tasks/awx-config.yml +++ b/roles/kubernetes/awx/tasks/awx-config.yml @@ -23,6 +23,7 @@ vars: username: "{{ awx_ansible_username }}" password: "{{ awx_ansible_password }}" + is_system_auditor: "true" uri: url: "{{ awx_base_url }}/api/v2/users/" method: POST diff --git a/roles/lvm_with_hetzner_volumes/tasks/main.yml b/roles/lvm_with_hetzner_volumes/tasks/main.yml new file mode 100644 index 0000000..ea82e72 --- /dev/null +++ b/roles/lvm_with_hetzner_volumes/tasks/main.yml @@ -0,0 +1,80 @@ +--- +- name: "Creating some hcloud volumes for LVM purpose" + hcloud_volume: + api_token: "{{ hetzner_authentication_ansible }}" + name: "{{ lvm_with_hetzner_volumes__volprefix }}-{{ inventory_hostname }}--vol{{ item }}" + server: "{{ inventory_hostname }}" + labels: + stage: "{{ stage }}" + used_for: "{{ lvm_with_hetzner_volumes__volprefix }}" + bound_on: "{{ inventory_hostname }}" + vol_no: "{{ item | string }}" + size: "{{ lvm_with_hetzner_volumes__volsize }}" + state: present + delete_protection: yes + loop: "{{ range(1, lvm_with_hetzner_volumes__volcount+1) | list }}" + register: created_volume + delegate_to: localhost + become: false + +- name: "Getting all hcloud volumes for {{ inventory_hostname }}" + hcloud_volume_info: + api_token: "{{ hetzner_authentication_ansible }}" + label_selector: "stage={{ stage }},used_for={{ lvm_with_hetzner_volumes__volprefix }},bound_on={{ inventory_hostname }}" + register: hcloud_volumes_found + delegate_to: localhost + become: false + +- name: "Getting all hcloud volumes for {{ inventory_hostname }}" + debug: + msg: "{{ hcloud_volumes_found }}" + +- name: "Setting LVM related VARs" + set_fact: + pvs: "{{ hcloud_volumes_found.hcloud_volume_info | json_query(jmesquery) }}" + vg_name: "vg.{{ lvm_with_hetzner_volumes__volprefix }}" + lv_name: "lv.{{ lvm_with_hetzner_volumes__volprefix }}" + vars: + jmesquery: "[*].linux_device" + +- name: "Creating a volume group on top of all found hcloud volumes" + community.general.lvg: + vg: "{{ vg_name }}" + pvs: "{{ pvs }}" + pvresize: yes + register: create_vg + +- name: "Create logical volume" # noqa no-handler + community.general.lvol: + vg: "{{ vg_name }}" + lv: "{{ lv_name }}" + size: '100%PVS' + when: + - create_vg.changed + +- name: "Format volume" + filesystem: + fstype: ext4 + dev: "/dev/{{ vg_name }}/{{ lv_name }}" + +- name: "Resize volume" # noqa no-handler + filesystem: + fstype: ext4 + dev: "/dev/{{ vg_name }}/{{ lv_name }}" + resizefs: yes + when: + - create_vg.changed + +# set noqa linter 'tag' due to unknown file permissions/ownership for mount path ; +# must be set in role etc in which this role will be called!!! +- name: "Ensure mountpath exists without setting permission/ownership" # noqa risky-file-permissions + file: + path: "{{ lvm_with_hetzner_volumes__mountpath }}" + state: directory + +- name: "Mount created LVM volume" + mount: + path: "{{ lvm_with_hetzner_volumes__mountpath }}" + src: "/dev/{{ vg_name }}/{{ lv_name }}" + fstype: ext4 + state: mounted diff --git a/roles/postgres/defaults/main.yml b/roles/postgres/defaults/main.yml index 47c0a41..06e06fc 100644 --- a/roles/postgres/defaults/main.yml +++ b/roles/postgres/defaults/main.yml @@ -24,6 +24,10 @@ database_state: present postgres_homedir: '/var/lib/postgresql' +postgres_pgdatadir_lvm_hcloudvol_size: 10 +postgres_pgdatadir_lvm_hcloudvol_count: 1 +postgres_pgdatadir_lvm_hcloudvol_mountpath: '{{ postgres_homedir }}' + postgres_listen_addresses: "listen_addresses = 'localhost,{{ stage_private_server_ip }}'" postgres_base_config: diff --git a/roles/postgres/tasks/base-requirements.yml b/roles/postgres/tasks/base-requirements.yml index d3ea5bf..5d520d8 100644 --- a/roles/postgres/tasks/base-requirements.yml +++ b/roles/postgres/tasks/base-requirements.yml @@ -12,6 +12,14 @@ system: true shell: /bin/bash +- name: "Ensure postgres_homedir exists" + file: + path: "{{ postgres_homedir }}" + state: directory + owner: postgres + group: postgres + mode: "0755" + - name: "Ensuring repository meta is installed" apt: name: ["debian-keyring", "debian-archive-keyring", "apt-transport-https"] diff --git a/roles/postgres/tasks/main.yml b/roles/postgres/tasks/main.yml index c806b74..8c8c135 100644 --- a/roles/postgres/tasks/main.yml +++ b/roles/postgres/tasks/main.yml @@ -2,6 +2,15 @@ ### tags: +- name: "Create/Resize LVM for datadir" + include_role: + name: lvm_with_hetzner_volumes + vars: + lvm_with_hetzner_volumes__volprefix: postgres_datadir + lvm_with_hetzner_volumes__volsize: "{{ postgres_pgdatadir_lvm_hcloudvol_size }}" + lvm_with_hetzner_volumes__volcount: "{{ postgres_pgdatadir_lvm_hcloudvol_count }}" + lvm_with_hetzner_volumes__mountpath: "{{ postgres_pgdatadir_lvm_hcloudvol_mountpath }}" + # Minimal requirements for postgres - name: Include Base Requirements include_tasks: base-requirements.yml diff --git a/roles/prometheus/defaults/main.yml b/roles/prometheus/defaults/main.yml index 3f76007..1b49d8d 100644 --- a/roles/prometheus/defaults/main.yml +++ b/roles/prometheus/defaults/main.yml @@ -1,4 +1,9 @@ --- +prometheus_lvm_hcloudvol_size: 30 +prometheus_lvm_hcloudvol_count: 1 +prometheus_lvm_hcloudvol_mountpath: '/prometheus_datadir' + +prometheus_datadir: "{{ prometheus_lvm_hcloudvol_mountpath }}" # https://github.com/prometheus/prometheus prometheus_image_name: "prom/prometheus" diff --git a/roles/prometheus/tasks/main.yml b/roles/prometheus/tasks/main.yml index c845bc7..9f1d77c 100644 --- a/roles/prometheus/tasks/main.yml +++ b/roles/prometheus/tasks/main.yml @@ -4,6 +4,15 @@ ### update_config ### update_deployment +- name: "Create/Resize LVM for datadir" + include_role: + name: lvm_with_hetzner_volumes + vars: + lvm_with_hetzner_volumes__volprefix: prometheus_datadir + lvm_with_hetzner_volumes__volsize: "{{ prometheus_lvm_hcloudvol_size }}" + lvm_with_hetzner_volumes__volcount: "{{ prometheus_lvm_hcloudvol_count }}" + lvm_with_hetzner_volumes__mountpath: "{{ prometheus_lvm_hcloudvol_mountpath }}" + - name: "Setup DNS configuration for <{{ inventory_hostname }}>" include_role: name: sma_digitalocean @@ -141,3 +150,22 @@ job: /root/do_too_many_req_metrics.sh tags: - update-do-metrics + +- name: "Create hetzner-metrics script from template" + template: + src: hetzner_unattached_volumes.py.j2 + dest: /root/hetzner_unattached_volumes.py + mode: 0700 + owner: root + group: root + tags: + - update-hetzner-metrics + +- name: "Create cronjob to exec hetzner-metrics script" + ansible.builtin.cron: + name: "update hetzner metrics" + minute: "*" + job: /root/hetzner_unattached_volumes.py + tags: + - update-hetzner-metrics + diff --git a/roles/prometheus/templates/hetzner_unattached_volumes.py.j2 b/roles/prometheus/templates/hetzner_unattached_volumes.py.j2 new file mode 100644 index 0000000..3261b38 --- /dev/null +++ b/roles/prometheus/templates/hetzner_unattached_volumes.py.j2 @@ -0,0 +1,53 @@ +#!/usr/bin/env python3 +import requests + + +access_token = '{{ hetzner_authentication_ansible_vault }}' + +node_exporter_txt_dir = '/var/lib/prometheus/node-exporter' +metrics_file = node_exporter_txt_dir + "/hetzner_metrics.prom" + +query= {'per_page': '1000'} +headers = {'Authorization': 'Bearer ' + access_token} + +try: + response_volumes = requests.get("https://api.hetzner.cloud/v1/volumes", headers=headers, params=query) + response_servers = requests.get("https://api.hetzner.cloud/v1/servers", headers=headers, params=query) +except requests.exceptions.RequestException as e: # This is the correct syntax + f = open(metrics_file, "w") + f.write("\n") + f.close() + raise SystemExit(e) + + +if response_volumes.ok and response_servers.ok: + + + volume_json = response_volumes.json()["volumes"] + unattached_volume_count = 0 + for x in range(len(volume_json)): + if volume_json[x]["server"] == None: + unattached_volume_count+=1 + + locked_servers_count = 0 + servers_json = response_servers.json()["servers"] + for x in range(len(servers_json)): + if servers_json[x]["locked"] == "true": + locked_servers_count+=1 + + ratelimit_limit = response_servers.headers['ratelimit-limit'] + ratelimit_remaining = response_servers.headers['ratelimit-remaining'] + + + f = open(metrics_file, "w") + f.write( + "hetzner_api_ratelimit_remaining " + str(ratelimit_remaining) + "\n" + + "hetzner_api_ratelimit_limit " + str(ratelimit_limit) + "\n" + + "hetzner_api_unattached_volumes " + str(unattached_volume_count) + "\n" + + "hetzner_api_locked_servers " + str(locked_servers_count) + "\n" + ) + f.close() +else: + f = open(metrics_file, "w") + f.write("\n") + f.close() \ No newline at end of file diff --git a/roles/prometheus/vars/main.yml b/roles/prometheus/vars/main.yml index 1f4140e..5caa4c6 100644 --- a/roles/prometheus/vars/main.yml +++ b/roles/prometheus/vars/main.yml @@ -21,9 +21,6 @@ prometheus_docker: { }, ], volumes: [ - { - name: "{{ prometheus_id }}-data" - }, { name: "{{ alertmanager_id }}-data" }, @@ -56,7 +53,7 @@ prometheus_docker: { ], volumes: [ '"./config/prometheus/:/etc/prometheus/:ro"', - '"{{ prometheus_id }}-data:/prometheus"', + '"{{ prometheus_datadir + "/" +"_data" | default(prometheus_id + "-data") }}:/prometheus"', ], networks: [ '"back-tier"', diff --git a/roles/selfsigned_ca/tasks/_create_cert.yml b/roles/selfsigned_ca/tasks/_create_cert.yml index 791129d..f5e8932 100644 --- a/roles/selfsigned_ca/tasks/_create_cert.yml +++ b/roles/selfsigned_ca/tasks/_create_cert.yml @@ -4,8 +4,6 @@ path: '{{ selfsigned_ca_cert_private_key | dirname }}' state: directory mode: '0755' - owner: root - group: root - name: "Generate an OpenSSL private key" community.crypto.openssl_privatekey: diff --git a/stage-dev b/stage-dev index 6380fc9..6e001ef 100644 --- a/stage-dev +++ b/stage-dev @@ -5,7 +5,7 @@ dev-backup-01 dev-management-01 [pdns] -dev-pdns-01 +#dev-pdns-01 [elastic] dev-elastic-stack-elastic-01 diff --git a/stage-prodwork01 b/stage-prodwork01 index 0649162..5991f15 100644 --- a/stage-prodwork01 +++ b/stage-prodwork01 @@ -1,23 +1,3 @@ -[backup] -prodwork01-backup-01 - -[elastic] -prodwork01-elastic-stack-elastic-01 -prodwork01-elastic-stack-elastic-02 -prodwork01-elastic-stack-elastic-03 - -[kibana] -prodwork01-elastic-stack-kibana-01 - -[logstash] -prodwork01-elastic-stack-logstash-01 -[maria] -prodwork01-maria-01 - -[postgres] -prodwork01-postgres-01 -prodwork01-postgres-02 - [kube_control_plane] prodwork01-kube-cpl-01 prodwork01-kube-cpl-02 @@ -38,13 +18,7 @@ kube_control_plane kube_node [stage_prodwork01:children] -backup -elastic k8s_cluster -kibana -logstash -maria -postgres [all:children] stage_prodwork01 diff --git a/stage-qa b/stage-qa index 633f3d5..9230544 100644 --- a/stage-qa +++ b/stage-qa @@ -5,7 +5,7 @@ qa-backup-01 qa-management-01 [pdns] -qa-pdns-01 +#qa-pdns-01 [elastic] qa-elastic-stack-elastic-01 diff --git a/templates/prometheus/config/prometheus/alert.rules.j2 b/templates/prometheus/config/prometheus/alert.rules.j2 index 40a74e0..4dbc5cb 100644 --- a/templates/prometheus/config/prometheus/alert.rules.j2 +++ b/templates/prometheus/config/prometheus/alert.rules.j2 @@ -350,3 +350,63 @@ groups: summary: "Elasticsearch health status is not green. Please Check" description: "Alert for Elasticsearch health status" + - alert: awx job failed with status error + expr: changes(awx_status_total{status="error"}[2m]) > 0 + for: 2m + labels: + severity: critical + annotations: + summary: "awx job failed with status error" + description: "Alert awx jobs has an error" + + - alert: awx job failed with status failed + expr: changes(awx_status_total{status="failed"}[2m]) > 0 + for: 2m + labels: + severity: critical + annotations: + summary: "awx job failed with status failed" + description: "Alert awx jobs failed" + + - alert: postgres backup zombies + expr: 100 - ((node_filesystem_avail_bytes{instance=~"{{ stage }}-postgres-01.smardigo.digital",job=~"node-exporter",device='/dev/mapper/vg.postgres_backup-lv.postgres_backup'} * 100) / node_filesystem_size_bytes{instance=~"{{ stage }}-postgres-01.smardigo.digital",job=~"node-exporter",device='/dev/mapper/vg.postgres_backup-lv.postgres_backup'}) > 10 + for: 2h + labels: + severity: critical + annotations: + identifier: '{{ '{{' }} $labels.instance {{ '}}' }}' + summary: "postgres backup zombies, have not been deleted" + description: "postgres backup zombies, have not been deleted" + + - alert: hetzner unattached volumes + expr: hetzner_api_unattached_volumes > 0 or absent(hetzner_api_unattached_volumes) + for: 2h + labels: + severity: critical + annotations: + identifier: '{{ '{{' }} $labels.instance {{ '}}' }}' + summary: "unattached volumes in hetzner" + description: "unattached volumes in hetzner" + + + - alert: hetzner ratelimit_remaining low + expr: hetzner_api_ratelimit_remaining < 720 or absent(hetzner_api_ratelimit_remaining) + for: 1h + labels: + severity: critical + annotations: + identifier: '{{ '{{' }} $labels.instance {{ '}}' }}' + summary: "hetzner ratelimit_remaining below 720" + description: "hetzner ratelimit_remaining below 720" + + - alert: hetzner locked server exists + expr: hetzner_api_locked_servers > 0 or absent(hetzner_api_locked_servers) + for: 1h + labels: + severity: critical + annotations: + identifier: '{{ '{{' }} $labels.instance {{ '}}' }}' + summary: "hetzner locked server exists" + description: "hetzner locked server exists" + + diff --git a/templates/prometheus/config/prometheus/prometheus.yml.j2 b/templates/prometheus/config/prometheus/prometheus.yml.j2 index 7760573..cd0ee0b 100644 --- a/templates/prometheus/config/prometheus/prometheus.yml.j2 +++ b/templates/prometheus/config/prometheus/prometheus.yml.j2 @@ -452,3 +452,18 @@ scrape_configs: static_configs: - targets: ['{{ kubernetes_prometheus_endpoint }}'] {% endif %} + + +############################################## +### awx #### +############################################## + + - job_name: 'awx' + metrics_path: '/api/v2/metrics' + scrape_interval: 5s + scheme: https + basic_auth: + username: '{{ awx_ansible_username }}' + password: '{{ awx_ansible_password }}' + static_configs: + - targets: ['{{ shared_service_kube_awx_hostname }}']