Рефакторирање за сигурност: Совладајте ја вашата база на податоци за врвни перформанси на заднинскиот систем
Заднинскиот систем може да издржи изненадувачки многу неуреден код. Помалку простува кога секое барање ѝ задава непотребна работа на базата на податоци, чека на заклучување или презема повеќе податоци отколку што апликацијата може безбедно да обработи. Тие проблеми често се кријат зад API-крајна точка што изгледала сосема разумно кога табелата содржела неколку стотици редови.
Доверливоста и перформансите на базата на податоци се тесно поврзани, но ниту едното ниту другото не се постигнува со случајно додавање индекси. Корисниот пристап е да се разбере како податоците се движат низ системот, да се утврди кои прашања се важни и рефакторирањето да се спроведува во чекори што ја зачувуваат исправноста при оптоварување и откажувања.
Започнете од барањето, а не од базата на податоци
Изберете важно корисничко сценарио и проследете го од API-крајната точка до одговорот. Забележете кои прашања се извршуваат, колку често, колку податоци враќаат и каде се троши времето. Бавниот одговор може да ја вклучува базата на податоци, но можно е и поголемиот дел од времето да се троши на повикување друга услуга или на чекање работен процес.
Разгледајте го вообичаениот сообраќај и потешките случаи: клиент со невообичаено многу записи, широк опсег на датуми или неколку барања што ја ажурираат истата сметка. Просеците можат да сокријат мала група барања што зафаќаат конекции и го принудуваат остатокот од системот да чека.
Користете ги заедно алатките за анализа на прашања на базата на податоци и податоците за времето на извршување на апликацијата. Прашање што се извршува брзо еднаш сепак може да биде скапо кога крајната точка го извршува стотици пати. Обратно, прашање што често се појавува во дневниците можеби не заслужува внимание ако неговиот вкупен трошок е занемарлив.
Направете апликацијата да поставува подобри прашања
Чест извор на непотребна работа е шаблонот со N+1 прашања. Крајната точка вчитува листа на нарачки, а потоа го презема клиентот за секоја нарачка одделно. За 50 нарачки, тоа може да значи едно прашање за нарачките и уште 50 за нивните клиенти.
Преземете ги потребните клиенти во група или користете ја можноста за однапред вчитување што ја обезбедува вашиот слој за пристап до податоци. Потоа проверете ги генерираниот SQL и големината на одговорот. Однапред вчитување на сите релации може да замени многу мали прашања со голем резултат што троши многу меморија.
Применете ја истата дисциплина и кај колоните и редовите. Изберете ги полињата што му се потребни на одговорот, поставете разумна големина на страницата и избегнувајте вчитување цела табела во PHP само за потоа да ја филтрирате. За големи збирки податоци што се менуваат, разгледајте страничење со курсор и стабилен, индексиран редослед. Вклучете единствен дополнителен критериум за подредување кога главната вредност за сортирање може да се повторува, за записите да не исчезнуваат или да се повторуваат меѓу страниците.
Дизајнирајте ги индексите според реалните начини на пристап
Индексот помага кога неговата структура одговара на начинот на кој прашањата ги филтрираат, спојуваат или сортираат податоците. Да претпоставиме дека крајна точка за нарачки често ги презема неодамнешните нарачки на еден клиент. Индекс што започнува со идентификаторот на клиентот и продолжува со колоните за подредување може да ѝ помогне на базата на податоци да ги пронајде редовите на тој клиент по потребниот редослед.
Потврдете го резултатот со планот за извршување и репрезентативни податоци. Најдобриот индекс зависи од механизмот на базата на податоци, структурата на прашањето, распределбата на податоците и другите работни оптоварувања. Индекс што ѝ помага на една крајна точка може да ги зголеми трошоците за складирање и да ги забави вметнувањата или ажурирањата затоа што мора да се одржува при секоја промена на индексираните податоци.
Прегледајте ги постојните индекси пред да додадете нови. Излишните или ретко корисните индекси имаат своја цена, но и за отстранување индекс се потребни докази: прашање што се користи за месечен извештај можеби нема да се појави во краток период на набљудување.
Зачувајте ја исправноста додека го намалувате натпреварувањето за ресурси
Брз систем што повремено губи ажурирање не е доверлив. Користете трансакции за да ги групирате промените што мора заедно да успеат или да не успеат. Нека тие трансакции бидат насочени: однапред проверете го она што можете, извршете ја потребната работа со базата на податоци и веднаш потврдете ја трансакцијата. Чекањето оддалечен API во рамките на трансакција може да ги задржи заклучувањата и конекциите за време на непредвидлив мрежен повик.
Внимателно избирајте ги механизмите за контрола на истовременоста. Условно ажурирање може да спречи две барања да го потрошат истото салдо ако условот и промената се извршуваат атомски. За посложени работни текови, соодветни може да бидат заклучувања на редови или оптимистички проверки на верзии. Вистинскиот избор зависи од правилото што мора да остане исполнето и од однесувањето што го гарантира вашата база на податоци.
И повторните обиди треба да имаат граници. Меѓусебно блокирање или привремен прекин на конекцијата може да го оправдаат повторното извршување на трансакција, но само кога операцијата е безбедна за повторување. На пример, барањето за плаќање бара стратегија за идемпотентност што спречува повтореното барање да создаде второ задолжување. Користете ограничен број повторни обиди со постепено зголемување на интервалот и направете го конечното откажување видливо за повикувачот или за операторот.
Рефакторирајте го слојот околу базата на податоци
Логиката за базата на податоци расфрлана низ контролерите тешко се мери и менува. Дајте му на секое прашање јасно место, без разлика дали тоа е репозиториум, објект за прашање или мала услуга со добро дефинирана одговорност. Апстракцијата треба да го олесни пронаоѓањето и тестирањето на важните прашања; не треба да ја крие секоја можност на базата на податоци зад генерички интерфејс.
При оптимизацијата имајте ги предвид API-договорите. Додавањето страничење, менувањето на редоследот на сортирање или изоставувањето полиња може да ги наруши клиентските апликации дури и кога го намалува трошокот на прашањето. Воведувајте ги промените во договорот промислено, документирајте ги и обезбедете им на корисниците начин да мигрираат.
Кеширањето може да ги намали повторените читања, но воведува уште една копија од податоците и едно прашање: кога таа копија станува застарена? Започнете со податоци за кои се познати барањата за ажурност, дефинирајте како ќе се поништуваат или истекуваат кешираните податоци и осигурете се дека системот останува употреблив кога кешот е недостапен.
Воведувајте ги промените во базата на податоци во безбедни фази
Промените на шемата влијаат и врз верзиите на апликацијата што се извршуваат и врз зачуваните податоци. При преименување или додавање ново задолжително поле, испланирајте преоден период во кој стариот и новиот код можат да коегзистираат. Вообичаениот редослед е да се додаде новата структура, да се пушти код што може да работи за време на преодот, постојните редови да се пополнат во групи со големина погодна за обработка, да се проверат резултатите и дури потоа да се наметне конечното ограничување или да се отстрани старата структура.
Точните чекори зависат од базата на податоци и начинот на пуштање во работа. Проверете дали миграцијата може да ги блокира читањата или запишувањата, колку време може да потрае врз податоци со продукциска големина и што подразбира обновувањето ако запре на половина пат. Миграција што е брза во мала развојна база на податоци во Docker може да се однесува сосема поинаку врз зафатена продукциска збирка податоци.
Измерете го резултатот и продолжете со следење
По секоја значајна промена, споредете го истото работно оптоварување пред и по промената. Проверете ги времињата на одговор, бројот на прашања, користењето ресурси на базата на податоци, грешките и оптовареноста на конекциите. Успешното рефакторирање треба да го подобри утврдениот проблем без да го премести тесното грло на помалку видливо место.
Највредната оптимизација на базата на податоци често е појасен договор меѓу апликацијата и нејзините податоци: барајте го она што е потребно, заштитете ги правилата што мора да важат и предвидете ги откажувањата како составен дел од дизајнот. Така заднинскиот систем станува побрз на начин што следниот развивач може да го одржува.