New Relic tillÄter företag att övervaka ML-modellens prestanda

New Relic tillÄter företag att övervaka ML-modellens prestanda


San Francisco-baserade New Relic, ett företag som erbjuder en molnbaserad observerbarhetsplattform för att hjÀlpa företag att visualisera, analysera och optimera hela sin mjukvarustapel, har annonserat en lösning för att övervaka prestanda och noggrannhet hos maskininlÀrningsmodeller i realtid.

I dagens datadrivna landskap lutar organisationer starkt Ät AI och maskininlÀrning för att förbÀttra företagets motstÄndskraft och fÄ en konkurrensfördel. En nyligen genomförd undersökning gjord av IBM avslöjade att nÀstan en tredjedel av företagen nu anvÀnder artificiell intelligens, och sÄ mÄnga som 43 % har pÄskyndat utbyggnaden av AI som ett resultat av COVID-19.

Men eftersom adoptionen fortsÀtter att öka ökar klyftan mellan datavetenskapsteam som utvecklar ML-modeller och DevOps-team som anvÀnder dessa modeller ocksÄ. Anledningen? De flesta ingenjörer bygger och trÀnar modeller i silade miljöer, vilket resulterar i minskat samarbete för att övervaka och styra modellerna i produktionen. SÄdana situationer innebÀr att team inte kan lÀgga mÀrke till modeller som kan bli irrelevanta med tiden, sÀrskilt modeller baserade pÄ statisk data, och följaktligen förlora pÄ miljoner.

New Relic integrerar modellprestandaövervakning

För att förhindra detta utökar New Relic funktionerna för sin flaggskeppsplattform för observerbarhet – New Relic One. Företaget sa pĂ„ onsdagen att lösningen nu kan förbĂ€ttras med modellprestandaövervakningsintegrationer, vilket ger datavetenskap och DevOps-team en enda plats att övervaka och visualisera modellprestandatelemetridata, inklusive kritiska signaler som Ă„terkallelse, precision och noggrannhet.

Plattformen, som New Relics General Manager för AIOps Guy Fighel förklarade i ett blogginlĂ€gg, fĂ„r stöd för att integrera populĂ€ra MLOps-ramverk som AWS SageMaker, DataRobot (Algorithmia), Aporia, Superwise, Comet, Dagshub, Mona och TruEra. Var och en av dessa skulle dyka upp i New Relic Instant Observability (I/O) – ett ekosystem med öppen kĂ€llkod av snabbstarter, integrationer och resurser i New Relic One – och skulle kunna integreras pĂ„ nĂ„gra minuter, komplett med anpassade prestandainstrumentpaneler och andra byggstenar för observerbarhet .

Detta kommer i slutĂ€ndan att göra det möjligt för företag att övervaka sina ML-modeller och ömsesidiga beroenden med resten av applikationskomponenterna och göra nödvĂ€ndiga Ă€ndringar för att sĂ€kerstĂ€lla att algoritmerna förblir relevanta i det lĂ„nga loppet – för maximal affĂ€rseffekt.

New Relic noterar ocksÄ att datavetenskap och DevOps-team kan anvÀnda erbjudandet för att möjliggöra prediktiva varningar för ovanliga modellrelaterade förÀndringar i förvÀg. PÄ sÄ sÀtt kan de, nÀr problemet upptÀcks, samarbeta i produktionsmiljön för att kontextualisera situationen och fatta beslut för att lösa problemet.

“Vi Ă€r fast beslutna att göra observerbarhet till en daglig bĂ€sta praxis för alla ingenjörer, och med lanseringen av New Relic Model Performance Monitoring levererar vi den enda enhetliga dataobservationsplattformen som ger Data Science- och DevOps-team oövertrĂ€ffad insyn i prestandan för deras maskin- lĂ€rande-baserade applikationer”, sa Fighel.

VĂ€xande utrymme

Utvecklingen kommer som det senaste steget frÄn New Relic för att stÀrka sitt fotavtryck i företagets observerbarhetsutrymme och ta sig an spelare som Dynatrace och DataDog. Redan i februari hade företaget lagt till ett visualiseringsverktyg kallat Explorer för att göra det enklare för IT-proffs att upptÀcka grundorsaken till problem.

Globalt uppskattas marknaden för IT-övervakning och observerbarhet vara en marknadsmöjlighet pÄ 17 miljarder USD.

VentureBeats uppdrag ska vara ett digitalt stadstorg för tekniska beslutsfattare att fÄ kunskap om transformativ företagsteknik och handla. LÀs mer om medlemskap.