From mboxrd@z Thu Jan 1 00:00:00 1970 Return-Path: Received: from [87.239.111.99] (localhost [127.0.0.1]) by dev.tarantool.org (Postfix) with ESMTP id 9D5036EC55; Tue, 13 Jul 2021 22:32:11 +0300 (MSK) DKIM-Filter: OpenDKIM Filter v2.11.0 dev.tarantool.org 9D5036EC55 DKIM-Signature: v=1; a=rsa-sha256; c=relaxed/simple; d=tarantool.org; s=dev; t=1626204731; bh=W2FhgdL71kZmcpbZ9vq4Kxo3xy9j3r8oHr6VQEnyfCs=; h=To:Cc:References:Date:In-Reply-To:Subject:List-Id: List-Unsubscribe:List-Archive:List-Post:List-Help:List-Subscribe: From:Reply-To:From; b=D5g9IDklGINHAjDjTB0bnU6ZLctMRHDQ/kotGJEL5xDvmRcNzpG8m0CocT+96Dw/z ofJVfbzvOdGkLC7uzPLf2GUopEHoj67SuWVlgvhmnHBKXBBNlq8kPIg7qZxXI9hOxI jJIxYMleGfxH9g9+w3pN7RI6ZbRIhdRk500ZJ8WU= Received: from smtpng3.i.mail.ru (smtpng3.i.mail.ru [94.100.177.149]) (using TLSv1.2 with cipher ECDHE-RSA-AES256-GCM-SHA384 (256/256 bits)) (No client certificate requested) by dev.tarantool.org (Postfix) with ESMTPS id EFA076EC55 for ; Tue, 13 Jul 2021 22:32:09 +0300 (MSK) DKIM-Filter: OpenDKIM Filter v2.11.0 dev.tarantool.org EFA076EC55 Received: by smtpng3.m.smailru.net with esmtpa (envelope-from ) id 1m3O8X-0000UM-8F; Tue, 13 Jul 2021 22:32:09 +0300 To: Cyrill Gorcunov Cc: tml References: <20210710222803.253251-1-gorcunov@gmail.com> <4965b115-dd42-0129-0086-a0ff711fa648@tarantool.org> <51e97609-c593-0693-1133-ae09dfbc78cc@tarantool.org> Message-ID: <909b2b22-f9e9-bad0-5f76-7d8d73a41e5e@tarantool.org> Date: Tue, 13 Jul 2021 21:32:08 +0200 User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.15; rv:78.0) Gecko/20100101 Thunderbird/78.11.0 MIME-Version: 1.0 In-Reply-To: Content-Type: text/plain; charset=utf-8 Content-Language: en-US Content-Transfer-Encoding: 8bit X-7564579A: 646B95376F6C166E X-77F55803: 4F1203BC0FB41BD97BB0EF39AD2B33D5391930EFB6A35F20EC172CEE85ECBD22182A05F53808504098E4BB0E014B428AFE799E897057680818C51468BB56223DF7634B27A18B9F60 X-7FA49CB5: FF5795518A3D127A4AD6D5ED66289B5278DA827A17800CE7CCB2BF7EAE70380AEA1F7E6F0F101C67BD4B6F7A4D31EC0BCC500DACC3FED6E28638F802B75D45FF8AA50765F79006377EC9BDDC32C0C0498638F802B75D45FF36EB9D2243A4F8B5A6FCA7DBDB1FC311F39EFFDF887939037866D6147AF826D871F4517EEC5A0265EE09ACF67E94FBAC117882F4460429724CE54428C33FAD305F5C1EE8F4F765FCF1175FABE1C0F9B6A471835C12D1D9774AD6D5ED66289B52BA9C0B312567BB23117882F446042972877693876707352026055571C92BF10FF6B57BC7E6449061A352F6E88A58FB86F5D81C698A659EA7E827F84554CEF5019E625A9149C048EE9ECD01F8117BC8BEE2021AF6380DFAD18AA50765F790063735872C767BF85DA227C277FBC8AE2E8BAEB924C2B054B06E75ECD9A6C639B01B4E70A05D1297E1BBCB5012B2E24CD356 X-C1DE0DAB: 0D63561A33F958A5F958E3B1ECC2C29C3B51C9BC459EFCEC9B204323BABF1CF6D59269BC5F550898D99A6476B3ADF6B47008B74DF8BB9EF7333BD3B22AA88B938A852937E12ACA753753CEE10E4ED4A7410CA545F18667F91A7EA1CDA0B5A7A0 X-C8649E89: 4E36BF7865823D7055A7F0CF078B5EC49A30900B95165D34103A2CD2CFC42C674F03377C4571C27DADB279B06F8E03F7FFDFA1119F08F0A39D8D881B07CCC4211D7E09C32AA3244C164B3023530227F1CC5AF5B4D055E1F835DA7DC5AF9B58C0729B2BEF169E0186 X-D57D3AED: 3ZO7eAau8CL7WIMRKs4sN3D3tLDjz0dLbV79QFUyzQ2Ujvy7cMT6pYYqY16iZVKkSc3dCLJ7zSJH7+u4VD18S7Vl4ZUrpaVfd2+vE6kuoey4m4VkSEu530nj6fImhcD4MUrOEAnl0W826KZ9Q+tr5ycPtXkTV4k65bRjmOUUP8cvGozZ33TWg5HZplvhhXbhDGzqmQDTd6OAevLeAnq3Ra9uf7zvY2zzsIhlcp/Y7m53TZgf2aB4JOg4gkr2biojDdSFIg49M1RzEqj43KKKlQ== X-Mailru-Sender: 689FA8AB762F7393C37E3C1AEC41BA5D4F4FBD19B52E7A01927340A123931FE33841015FED1DE5223CC9A89AB576DD93FB559BB5D741EB963CF37A108A312F5C27E8A8C3839CE0E267EA787935ED9F1B X-Mras: Ok Subject: Re: [Tarantool-patches] [PATCH] limbo: introduce request processing hooks X-BeenThere: tarantool-patches@dev.tarantool.org X-Mailman-Version: 2.1.34 Precedence: list List-Id: Tarantool development patches List-Unsubscribe: , List-Archive: List-Post: List-Help: List-Subscribe: , From: Vladislav Shpilevoy via Tarantool-patches Reply-To: Vladislav Shpilevoy Errors-To: tarantool-patches-bounces@dev.tarantool.org Sender: "Tarantool-patches" >>>> And you should not do that. Before WAL write there should no be any >>>> changes. **Zero changes before WAL write**. Before you write to WAL, >>>> you can only validate requests. Using `const struct txn_limbo *`. With >>>> zero changes. >>> >>> If we write screwed PROMOTEs request into our WAL then this patch is not >>> needed at all. >> >> Я не говорил, что надо писать плохие PROMOTE. Я говорю, что ты можешь >> их отсеивать с ошибкой не делая никаких изменений состояния лимба до >> записи в WAL. > > Да вот похоже, что не могу (если без локов). > >> Я так понимаю, ты пытаешься как-то защититься от того, что одновременно >> пришло несколько PROMOTE, и пока один пишется, надо остальные сразу >> отлупить? Так делает для обычных данных аплаер - он двигает vclock >> кластера до записи в WAL, и копирует его в replicaset.vclock если >> запись удалась. При этом если во время записи придут еще такие же >> транзакции от других инстансов, то они сразу отфильтруются. >> >> Но в лимбе нет такой проблемы, что все надо делать параллельно. При >> любых "паралеллельных" промоутах, конфирмах и прочих изменениях >> состояния лимба лучше просто брать на него лок и все. Эти вещи >> параллельно от разных инстансов приходить не должны во время нормальной >> работы, так что это по перфу самого частого случая не ударит нисколько, >> а код упростит значительно. > > Ну технически да, можно лок\латч взять, для модификаций промота и > вклок термов. Это уберет необходимость infly модификаций, что я > сделал для filter phase. Я наоборот, хотел избежать локов, но давай > действительно попробуем с локами. Если вдруг будет жесткая просадка, > то вернемся на схему с inlfy переменными и их обновлениями после > записи в вал. Я пока бранч старый удалять не буду. Сейчас стабильность превыше всего. Если патч с локами будет гораздо проще, то надо идти с ним. Иначе мы еще ревью будем проходить и баги находить месяц - столько времени нет.