Vuosi 2023 oli työntäyteinen vuosi Amazon OpenSearch-palvelu! Lue lisää julkaisuista, jotka OpenSearch Service julkaisi alkupuoliskolla 2023.

Vuoden 2023 toisella puoliskolla OpenSearch Service lisäsi kahden uuden tuen opensearch versiot: 2.9 ja 2.11 Nämä kaksi versiota tuovat uusia ominaisuuksia hakutilaan, koneoppimisen (ML) hakutilaan, migraatioihin ja palvelun toiminnalliseen puoleen.

Nolla-ETL-integraation julkaisun kanssa Amazonin yksinkertainen tallennuspalvelu (Amazon S3), voit analysoida tietosi datajärvessäsi käyttämällä OpenSearch Serviceä rakentaaksesi kojetauluja ja tehdäksesi tiedoista kyselyitä ilman, että sinun tarvitsee siirtää tietojasi Amazon S3:sta.

OpenSearch Service ilmoitti myös uudesta nolla-ETL-integraatiosta Amazon DynamoDB DynamoDB-laajennuksen kautta Amazon OpenSearchin käsittely. OpenSearch Ingestion huolehtii käynnistysvaiheesta ja suoratoistaa tietoja jatkuvasti DynamoDB-lähteestäsi.

OpenSearch Serverless ilmoitti yleisestä saatavuudesta Vector Engine Amazon OpenSearch Serverless -sovellukselle sekä muita ominaisuuksia, jotka parantavat kokemustasi aikasarjakokoelmista, hallitset kehitysympäristöjen kustannuksia ja skaalaat resurssit nopeasti vastaamaan työkuormitusvaatimuksiasi.

Tässä viestissä keskustelemme OpenSearch Servicen uusista julkaisuista, joiden avulla voit tehostaa yrityksesi hakua, havainnointia, tietoturvaanalytiikkaa ja migraatioita.

Rakenna kustannustehokkaita ratkaisuja OpenSearch-palvelun avulla

Amazon S3:n nolla-ETL-integraation ansiosta OpenSearch Service mahdollistaa nyt kyselyn tiedoistasi, mikä säästää tallennuskustannuksia. Tietojen siirtäminen on kallis toimenpide, koska sinun on kopioitava tietoja eri tietovarastoissa. Tämä lisää tietojalanjälkeäsi ja lisää kustannuksia. Tietojen siirtäminen lisää myös putkilinjojen hallintakustannuksia tietojen siirtämiseksi yhdestä lähteestä uuteen kohteeseen.

OpenSearch Service lisäsi myös uusia ilmentymätyyppejä datasolmuille – Im4gn ja OR1 – auttaakseen sinua optimoimaan infrastruktuurikustannuksiasi. Enintään 30 Tt:n haihtumattoman muistin (NVMe) SSD-levyillä (SSD) Im4gn-instanssi tarjoaa tiheän tallennustilan ja paremman suorituskyvyn. OR1-instanssit käyttävät segmentin replikointia ja etätukena olevaa tallennustilaa lisätäkseen suorituskykyä huomattavasti raskaassa indeksointia vaativissa työkuormissa.

Nolla-ETL DynamoDB:stä OpenSearch-palveluun

Marraskuussa 2023 DynamoDB ja OpenSearch Ingestion esittelivät nolla-ETL-integraation OpenSearch Servicelle. OpenSearch Service -toimialueet ja OpenSearch Serverless -kokoelmat tarjoavat edistyneitä hakuominaisuuksia, kuten kokoteksti- ja vektorihakua DynamoDB-tiedoissasi. Muutamalla napsautuksella AWS-hallintakonsoli, voit nyt ladata ja synkronoida tietosi saumattomasti DynamoDB:stä OpenSearch-palveluun, jolloin sinun ei tarvitse kirjoittaa mukautettua koodia tietojen purkamiseksi, muuntamiseksi ja lataamiseksi.

Suora kysely (nolla-ETL Amazon S3 -tiedoille, esikatselussa)

OpenSearch Service julkisti uuden tavan, jolla voit hakea toiminnallisia lokeja Amazon S3- ja S3-pohjaisissa datajärvissä ilman, että sinun tarvitsee vaihtaa työkalujen välillä operatiivisten tietojen analysoimiseksi. Aiemmin sinun piti kopioida tiedot Amazon S3:sta OpenSearch-palveluun hyödyntääksesi OpenSearchin monipuolisia analytiikka- ja visualisointiominaisuuksia tietosi ymmärtämiseksi, poikkeamien tunnistamiseksi ja mahdollisten uhkien havaitsemiseksi.

Tietojen jatkuva replikointi palveluiden välillä voi kuitenkin olla kallista ja vaatii operatiivista työtä. OpenSearch-palvelun suorakyselyominaisuuden avulla voit käyttää Amazon S3:een tallennettuja toiminnallisia lokitietoja ilman, että sinun tarvitsee siirtää tietoja itse. Nyt voit suorittaa monimutkaisia ​​kyselyitä ja visualisointeja tiedoillesi ilman tiedonsiirtoa.

Im4gn-tuki OpenSearch-palvelun kanssa

Im4gn-esiintymät on optimoitu työkuormille, jotka hallitsevat suuria tietojoukkoja ja vaativat suurta tallennustiheyttä vCPU:ta kohden. Im4gn-esiintymiä on saatavana suurista 16xlarge-kokoisiin, ja NVMe SSD -levyn koko on jopa 30 Tt. Im4gn-esiintymät on rakennettu AWS Nitro -järjestelmä SSD-levyt, jotka tarjoavat korkean suorituskyvyn ja alhaisen latenssin levykäytön parhaan suorituskyvyn saavuttamiseksi. OpenSearch Service Im4gn -esiintymät tukevat kaikkia OpenSearch-versioita ja Elasticsearch-versioita 7.9 ja uudempia. Katso lisätietoja osoitteesta Tuetut ilmentymätyypit Amazon OpenSearch Servicessä.

Esittelyssä OR1, OpenSearchin optimoitu ilmentymäperhe raskaiden työkuormien indeksointiin

Marraskuussa 2023 OpenSearch Service julkaistiin OR1, OpenSearchin optimoitu ilmentymäperhe, joka tarjoaa jopa 30 % paremman hinta-suorituskyvyn verrattuna olemassa oleviin esiintymiin sisäisissä vertailuissa ja käyttää Amazon S3:a 11 9s kestävyyden takaamiseksi. Toimialue, jossa on OR1-esiintymiä, käyttää Amazonin elastisten lohkojen myymälä (Amazon EBS) -taltiot ensisijaiseen tallennustilaan, ja tiedot kopioidaan synkronisesti Amazon S3:lle sitä mukaa, kun ne saapuvat. OR1-esiintymät käyttävät OpenSearchia segmentin replikointiominaisuus jotta replikasirut voivat lukea tietoja suoraan Amazon S3:sta, jolloin vältetään indeksoinnin resurssikustannukset sekä ensisijaisessa että replikassa. OR1-ilmentymäperhe tukee myös automaattista tietojen palautusta epäonnistumisen sattuessa. Lisätietoja OR1-ilmentymän tyypin vaihtoehdoista on kohdassa Nykyisen sukupolven ilmentymätyypit OpenSearch-palvelussa.

Ota yrityksesi käyttöön tietoturva-analytiikkaominaisuuksien avulla

OpenSearch-palvelun Security Analytics -laajennus tukee käyttövalmiutta valmiiksi pakatut tukkityypit ja tarjoaa suojauksen havaitsemissäännöt (SIGMA-säännöt) mahdollisten tietoturvahäiriöiden havaitsemiseksi.

OpenSearch 2.9:ssä Security Analytics -laajennus lisäsi tuen asiakaslokityypeille ja alkuperäisen tuen Open Cybersecurity Schema Framework (OCSF) datamuoto. Tämän uuden tuen avulla voit rakentaa ilmaisimia, joihin on tallennettu OCSF-tietoja Amazon Security Lake analysoida turvallisuushavaintoja ja lieventää mahdollisia vaaratilanteita. Security Analytics -laajennus on myös lisännyt mahdollisuuden luoda omia mukautettuja lokityyppejä ja luoda mukautettuja tunnistussääntöjä.

Rakenna ML-pohjaisia ​​hakuratkaisuja

Vuonna 2023 OpenSearch Service investoi seuraavan sukupolven hakusovellusten rakentamiseen tarvittavan raskaan noston poistamiseen. Ominaisuuksien, kuten hakuputkien, hakuprosessoreiden ja AI/ML-liittimien, ansiosta OpenSearch Service mahdollisti hermohaulla, hybridihaulla ja personoiduilla tuloksilla toimivien hakusovellusten nopean kehityksen. Lisäksi kNN-laajennuksen parannukset paransivat vektoritietojen tallennusta ja hakua. Äskettäin lanseeratut valinnaiset OpenSearch Service -laajennukset mahdollistavat saumattoman integroinnin lisäkielianalysaattoreihin ja Amazon Muokkaa.

Hakuputket

Hakuputket tarjota uusia tapoja parantaa hakukyselyitä ja parantaa hakutuloksia. Määrität hakuputken ja lähetät sitten kyselysi siihen. Kun määrität hakuputken, määrität prosessorit jotka muuttavat ja täydentävät kyselyjäsi ja luokittelevat tulokset uudelleen. Valmiit kyselyprosessorit sisältävät päivämäärän muuntamisen, yhdistämisen, merkkijonojen käsittelyn ja tietotyyppien muuntamisen. Hakuputken tulosprosessori sieppaa ja mukauttaa tulokset lennossa ennen renderöimistä seuraavaan vaiheeseen. Sekä liukuhihnan pyyntö- että vastauskäsittely suoritetaan koordinaattorisolmussa, joten sirpaletason käsittelyä ei ole.

Valinnaiset laajennukset

OpenSearch-palvelun avulla voit liittää esiasennettuja valinnaiset OpenSearch-laajennukset käytettäväksi verkkotunnuksesi kanssa. Valinnainen laajennuspaketti on yhteensopiva tietyn OpenSearch-version kanssa, ja se voidaan liittää vain kyseisen version verkkotunnuksiin. Käytettävissä olevat laajennukset on lueteltu sivulla Jäsenyydet -sivulla OpenSearch Service -konsolissa. Valinnainen laajennus sisältää Amazon Personalize -laajennuksen, joka integroi OpenSearch-palvelun Amazon Personalizeen, sekä uusia kielianalysaattoreita, kuten Nori, Sudachi, STConvert ja Pinyin.

Tuki uusille kielianalysaattoreille

OpenSearch Service lisäsi tuen neljälle uudelle kielen analysointilaajennukset: Nori (korea), Sudachi (japani), pinyin (kiina) ja STConvert Analysis (kiina). Nämä ovat saatavilla kaikilla AWS-alueilla valinnaisina laajennuksina, jotka voit liittää verkkotunnuksiin, joissa on käytössä mitä tahansa OpenSearch-versiota. Voit käyttää Jäsenyydet -sivua OpenSearch Service -konsolissa liittääksesi nämä laajennukset verkkotunnukseesi tai käytä Associate Package API -sovellusliittymää.

Hermohakuominaisuus

Hermohaku on yleensä saatavana OpenSearch Servicen versiolla 2.9 ja uudemmilla. Neurohaun avulla voit integroida ML-malleihin, joita isännöidään etänä mallinkäyttökehyksen avulla. Kun käytät hermokyselyä haun aikana, hermohaku muuntaa kyselyn tekstin vektoriupotuksiksi, käyttää vektorihakua kyselyn ja asiakirjan upotuksen vertaamiseen ja palauttaa lähimmät tulokset. Käsittelyn aikana hermohaku muuntaa asiakirjan tekstin vektoriupotukseksi ja indeksoi sekä tekstin että sen vektoriupotukset vektorihakemistoon.

Integrointi Amazon Personalize -sovellukseen

OpenSearch Service esitteli valinnaisen laajennuksen, joka integroidaan Amazon Personalizeen OpenSearch-versiossa 2.9 tai uudemmissa. Amazon Personalize Search Rankingin OpenSearch Service -laajennuksen avulla voit parantaa loppukäyttäjien sitoutumista ja konversioita verkkosivustollasi ja sovellushaustasi hyödyntämällä Amazon Personalize -palvelun tarjoamia syvällisiä oppimisominaisuuksia. Valinnaisena laajennuksena paketti on yhteensopiva OpenSearch-version 2.9 tai uudemman kanssa, ja ne voidaan liittää vain verkkotunnuksiin, joissa on kyseinen versio.

Tehokas kyselysuodatus OpenSearchin k-NN FAISS:lla

OpenSearch Service esitteli tehokkaan kyselysuodatuksen OpenSearchin k-NN FAISS:n kanssa versiossa 2.9 ja uudemmissa. OpenSearchin tehokkaat vektorikyselysuodattimet ominaisuus arvioi älykkäästi optimaaliset suodatusstrategiat – esisuodatus likimääräisellä lähin naapuri (ANN) tai suodatus tarkalla k-lähimmällä naapurilla (k-NN) – määrittääkseen parhaan strategian tarkkojen ja matalan viiveen vektorihakukyselyiden toimittamiseksi. Aiemmissa OpenSearch-versioissa FAISS-moottorin vektorikyselyt käyttivät jälkisuodatustekniikoita, jotka mahdollistivat suodatetut kyselyt mittakaavassa, mutta saattoivat palauttaa pyydetyn k-tulosten määrän. Tehokkaat vektorikyselysuodattimet tuottaa alhaisen latenssin ja tarkkoja tuloksia, jonka avulla voit käyttää hybridihakua vektori- ja leksikaalisten tekniikoiden välillä.

Tavukvantisoidut vektorit OpenSearch-palvelussa

Uuden kanssa tavukvantisoitu vektori 2.9:n myötä voit vähentää muistivaatimuksia kertoimella 4 ja vähentää merkittävästi haun viivettä minimaalisella laadun heikkenemisellä (palautus). Tämän ominaisuuden avulla tavalliset 32-bittiset kellukkeet, joita käytetään vektoreissa, kvantisoidaan tai muunnetaan 8-bittisiksi etumerkillisiksi kokonaisluvuiksi. Monissa sovelluksissa olemassa oleva floatvektoridata voidaan kvantisoida ilman, että laatu heikkenee. Vertailuarvoja vertaamalla huomaat, että tavuvektoreiden käyttäminen 32-bittisten kellukkeiden sijaan vähentää merkittävästi tallennustilaa ja muistin käyttöä samalla, kun se parantaa indeksoinnin suorituskykyä ja vähentää kyselyn latenssia. Sisäinen benchmark osoitti, että tallennustilan käyttö väheni jopa 78 % ja RAM:n käyttö jopa 59 % (käsine-200 kulman tietojoukolle). Kulmatietojoukkojen palautusarvot olivat alhaisemmat kuin euklidisten aineistojen.

AI/ML liittimet

OpenSearch 2.9 ja uudemmat tuet integraatiot ML-malleihin isännöi AWS-palveluissa tai kolmannen osapuolen alustoilla. Näin järjestelmänvalvojat ja datatieteilijät voivat suorittaa ML-työkuormia OpenSearch-palvelualueensa ulkopuolella. ML-liittimien mukana tulee tuettu joukko ML-piirustuksia – malleja, jotka määrittelevät joukon parametreja, jotka sinun on annettava, kun lähetät API-pyyntöjä tiettyyn liittimeen. OpenSearch Service tarjoaa liittimiä useille alustoille, kuten Amazon SageMaker, Amazonin kallioperä, OpenAI Chat GPTja Yhtenäinen.

OpenSearch Service -konsoliintegraatiot

OpenSearch 2.9 ja uudemmat lisäsi uuden integrointiominaisuuden konsoliin. Integraatiot tarjoavat sinulle AWS-pilven muodostuminen mallin rakentamiseen semanttinen haku käyttötapaus muodostamalla yhteyden SageMakerissa tai Amazon Bedrockissa isännöityihin ML-malleihisi. CloudFormation-malli luo mallin päätepisteen ja rekisteröi mallin tunnuksen OpenSearch-palvelun toimialueeseen, jonka annat mallin syötteeksi.

Hybridihaku ja etäisyyden normalisointi

- normalisointiprosessori ja hybridikysely perustuu kahden aiemmin vuonna 2023 julkaistun ominaisuuden päälle –hermohaku ja hakuputkia. Koska leksikaaliset ja semanttiset kyselyt palauttavat osuvuuspisteitä eri asteikoilla, hybridihakukyselyiden hienosäätö oli vaikeaa.

OpenSearch Service 2.11 tukee nyt yhdistelmä- ja normalisointiprosessoria hybridihakuun. Voit nyt suorittaa hybridihakukyselyitä yhdistämällä leksikaalisen ja luonnollisen kielen k-NN-vektorihakukyselyt. OpenSearch-palvelun avulla voit myös virittää hybridihakutulokset mahdollisimman osuviksi käyttämällä useita pisteytys- ja normalisointitekniikoita.

Multimodaalinen haku Amazon Bedrockilla

OpenSearch Service 2.11 käynnistää multimodaalihaun tuen, jonka avulla voit etsiä teksti- ja kuvatietoja käyttämällä multimodaalisia upotusmalleja. Vektoriupotusten luomiseksi sinun on luotava käsittelyputki, joka sisältää a text_image_embedding prosessori, joka muuntaa asiakirjakentän teksti- tai kuvabinaarit vektori upotuksiksi. Voit käyttää hermokyselylausetta joko k-NN-laajennuksen API or Kysele DSL:stä kyselyitä, tehdäksesi teksti- ja kuvahakuja. Voit käyttää uusia OpenSearch-palvelun integrointiominaisuuksia aloittaaksesi nopeasti multimodaalihaun.

Hermoston harvat haku

Neuraalinen harvahaku, uusi tehokas semanttisen haun menetelmä, on saatavilla OpenSearch Service 2.11:ssä. Neuraalinen harvahaku toimii kahdessa tilassa: bi-enkooderissa ja vain asiakirjassa. Bi-encoder-tilassa sekä asiakirjat että hakukyselyt välitetään syväkooderien kautta. Vain asiakirja -tilassa vain asiakirjat välitetään syväkooderien läpi, kun taas hakukyselyt on tokenoitu. Vain asiakirjoille harvalukuinen enkooderi luo indeksin, joka on 10.4 % tiheän koodausindeksin koosta. Bi-enkooderin indeksin koko on 7.2 % tiheän koodausindeksin koosta. Harva neurohaku mahdollistaa harvat koodausmallit, jotka luovat harvat vektoriupotukset: joukko <token: weight> parit, jotka edustavat tekstisyöttöä ja sitä vastaavaa painoa harvassa vektorissa. Lisätietoja esikoulutetuista malleista harvaan hermohakuun on kohdassa Harva koodausmallit.

Neuraalinen harvahaku vähentää kustannuksia, parantaa haun osuvuutta ja sillä on pienempi viive. Voit käyttää uusia OpenSearch-palvelun integrointiominaisuuksia aloittaaksesi nopeasti hermoston harvahaun.

OpenSearchin käsittelyn päivitykset

OpenSearchin käsittely on täysin hallittu ja automaattisesti skaalattu käsittelyputkisto, joka toimittaa tietosi OpenSearch-palvelun verkkotunnuksiin ja OpenSearch-palvelimettomiin kokoelmiin. Vuoden 2023 julkaisustaan ​​lähtien OpenSearch Ingestion on lisännyt jatkuvasti uusia ominaisuuksia, jotka tekevät tietojen muuttamisesta ja siirtämisestä helppoa tuetut lähteet loppupään kohteisiin, kuten OpenSearch Service, OpenSearch Serverless ja Amazon S3.

Uusia siirtoominaisuuksia OpenSearchin käsittelyssä

Marraskuussa 2023 OpenSearch Ingestion ilmoitti julkaisevansa uusia ominaisuuksia, jotka tukevat tietojen siirtoa itsehallituista Elasticsearch-version 7.x-verkkotunnuksista OpenSearch-palvelun uusimpiin versioihin.

OpenSearchin käsittely tukee myös tietojen siirtoa OpenSearch-palvelun hallinnoimista verkkotunnuksista, joissa on OpenSearch-versio 2.x, OpenSearch-palvelimettomiin kokoelmiin.

Opi käyttämään OpenSearchin käsittelyä siirtää tietosi OpenSearch-palveluun.

Paranna tietojen kestävyyttä OpenSearchin käsittelyn avulla

Marraskuussa 2023 OpenSearch Ingestion esitteli jatkuvan puskuroinnin push-pohjaisille lähteille, kuten HTTP-lähteille (HTTP, Fluentd, FluentBit) ja OpenTelemetry-keräilijöille.

OpenSearch Ingestion käyttää oletusarvoisesti muistin sisäistä puskurointia. Jatkuvalla puskuroinnilla OpenSearch Ingestion tallentaa tietosi kimmoisempaan levypohjaiseen varastoon. Jos sinulla on olemassa olevia käsittelyputkia, voit ottaa jatkuvan puskuroinnin käyttöön näille putkille seuraavan kuvakaappauksen mukaisesti.

Uusien laajennusten tuki

Vuoden 2023 alussa OpenSearch Ingestion lisäsi tuen Amazon hallinnoi suoratoistoa Apache Kafkalle (Amazon MSK). OpenSearch Ingestion käyttää Kafka-laajennus suoratoistaa tietoja Amazon MSK:sta OpenSearch Servicen hallinnoimiin verkkotunnuksiin tai OpenSearch Serverless -kokoelmiin. Lisätietoja Amazon MSK:n asettamisesta tietolähteeksi on kohdassa OpenSearch-syöttöputken käyttäminen Amazonin hallinnoiman suoratoiston kanssa Apache Kafkalle.

OpenSearch palvelimettomat päivitykset

OpenSearch Serverless jatkoi palvelimettoman kokemuksesi parantamista OpenSearchin avulla ottamalla käyttöön uuden tyyppisen vektorihaun kokoelman tuen upotusten tallentamiseen ja samankaltaisuushaun suorittamiseen. OpenSearch Serverless tukee nyt sirpaleiden replikoiden skaalausta kyselyn suorituskyvyn piikkien käsittelemiseksi. Ja jos käytät aikasarjakokoelmaa, voit nyt määrittää mukautetun tietojen säilytyskäytännön vastaamaan tietojen säilytysvaatimuksiasi.

Vector Engine OpenSearchin palvelimettomille

Marraskuussa 2023 lanseerasimme vektorimoottori Amazon OpenSearch Serverlessille. Vektorimoottorin avulla on yksinkertaista rakentaa nykyaikaisia ​​ML-lisättyjä hakukokemuksia ja generatiivisia tekoälysovelluksia (generative AI) ilman, että sinun tarvitsee hallita taustalla olevaa vektoritietokantainfrastruktuuria. Sen avulla voit myös suorittaa hybridihaun yhdistämällä vektorihaun ja kokotekstihaun samassa kyselyssä, mikä poistaa tarpeen hallita ja ylläpitää erillisiä tietovarastoja tai monimutkaista sovelluspinoa.

OpenSearch Palvelimettomat halvemmat kehitys- ja testiympäristöt

OpenSearch Serverless tukee nyt kehitys- ja testaustyökuormia antamalla sinun välttää replikan suorittamisen. Replikoiden poistaminen eliminoi tarpeen käyttää redundantteja OCU:ita toisella käytettävyysvyöhykkeellä vain käytettävyyden vuoksi. Jos käytät OpenSearch Serverless -sovellusta kehittämiseen ja testaukseen, jossa saatavuus ei ole huolenaihe, voit pudottaa OCU:t 4:stä 2:een.

OpenSearch Serverless tukee automaattista aikaperusteista tietojen poistamista tietojen elinkaarikäytäntöjen avulla

Joulukuussa 2023 OpenSearch Serverless ilmoitti tuesta aikasarjakokoelmien ja -indeksien tietojen säilyttämisen hallintaan. Uuden automaattisen aikaperusteisen tietojenpoistoominaisuuden avulla voit määrittää, kuinka kauan haluat säilyttää tietoja. OpenSearch Serverless hallitsee automaattisesti tietojen elinkaarta tämän kokoonpanon perusteella. Lisätietoja saat osoitteesta Amazon OpenSearch Serverless tukee nyt automaattista aikaperusteista tietojen poistamista.

OpenSearch Serverless ilmoitti tuesta replikoiden skaalaus sirpaletasolla

OpenSearch Serverless tuki julkaisun yhteydessä kapasiteetin lisäämistä automaattisesti vastauksena kasvavaan tietokoon. Kanssa uusi shard replikan skaalaus Ominaisuus, OpenSearch Serverless havaitsee automaattisesti sirpaleet pakotettuna äkillisten kyselytiheyspiikkien vuoksi ja lisää dynaamisesti uusia sirpalekopioita käsittelemään lisääntynyttä kyselyn suorituskykyä säilyttäen samalla nopeat vasteajat. Tämä lähestymistapa osoittautuu kustannustehokkaammaksi kuin pelkkä uusien hakemistokopioiden lisääminen.

AWS-käyttäjäilmoitukset OCU:n käytön seuraamiseksi

Tämän käynnistyksen avulla voit määrittää järjestelmän lähettämään ilmoituksia, kun OCU:n käyttö lähestyy tai on saavuttanut haun tai tiedonkeruun konfiguroidut enimmäisrajat. Uuden AWS User Notification -integroinnin avulla voit määrittää järjestelmän lähettämään ilmoituksia aina, kun kapasiteettikynnys ylitetään. Käyttäjän ilmoitustoiminto eliminoi tarpeen valvoa palvelua jatkuvasti. Katso lisätietoja Amazon OpenSearch Serverless -seuranta AWS-käyttäjien ilmoituksilla.

Paranna kokemustasi OpenSearchin hallintapaneeleilla

OpenSearch Servicen OpenSearch 2.9 esitteli uusia ominaisuuksia, jotka helpottavat tietojen nopeaa analysointia OpenSearch-hallintapaneeleissa. Näitä uusia ominaisuuksia ovat uudet käyttövalmiit, valmiiksi määritetyt hallintapaneelit OpenSearch-integraatioilla ja mahdollisuus luoda hälytyksiä ja poikkeamien havaitsemista kojelaudoissasi olevasta visualisoinnista.

OpenSearch Dashboard -integraatiot

OpenSearch 2.9 lisäsi OpenSearch-integraatioiden tuen OpenSearch-hallintapaneeleihin. OpenSearch-integraatiot sisältävät esikonfiguroidut hallintapaneelit, jotta voit nopeasti alkaa analysoida tietojasi, jotka tulevat suosituista lähteistä, kuten AWS CloudFront, AWS WAF, AWS CloudTrailja Amazonin virtuaalinen yksityinen pilvi (Amazon VPC) virtalokit.

Hälytykset ja poikkeamat OpenSearch-hallintapaneeleissa

OpenSearch Service 2.9:ssä voit luoda uuden hälytysmonitorin suoraan laitteeltasi viivakaavion visualisointi OpenSearchin hallintapaneeleissa. Voit myös liittää olemassa olevat näytöt tai ilmaisimet, jotka on luotu aiemmin OpenSearchissa, kojelaudan visualisointiin.

Tämä uusi ominaisuus auttaa vähentämään kontekstin vaihtamista kojetaulujen ja sekä hälytys- että poikkeamien havaitsemislaajennusten välillä. Katso seuraavasta kojelaudasta, jos haluat lisätä hälytysmonitorin, joka havaitsee palveluidesi keskimääräisen datamäärän putoamisen.

OpenSearch laajentaa geospatiaalisten aggregaatioiden tukea

OpenSearch-versiossa 2.9 OpenSearch Service lisäsi kolmen tyyppisen tuen geomuoto tietojen yhdistäminen API:n kautta: geo_bounds, geo_hashja geo_tile.

Geomuoto-kenttätyyppi tarjoaa mahdollisuuden indeksoida sijaintitietoja eri maantieteellisissä muodoissa, kuten pisteessä, polygonissa tai viivajonossa. Uusien aggregointityyppien ansiosta sinulla on enemmän joustavuutta koota asiakirjoja hakemistosta käyttämällä metrisiä ja usean ryhmän geospatiaalisia aggregaatioita.

OpenSearch-palvelun toimintapäivitykset

OpenSearch Service poisti tarpeen suorittaa sininen/vihreä käyttöönotto verkkotunnuksen hallittuja solmuja vaihdettaessa. Lisäksi palvelu paransi Auto-Tune-tapahtumia tukemalla uusia Auto-Tune-mittareita, joiden avulla voit seurata muutoksia OpenSearch-palvelun verkkotunnuksessasi.

OpenSearch Servicen avulla voit nyt päivittää verkkotunnuksen hallintasolmuja ilman sinistä/vihreää käyttöönottoa

Vuoden 2 toisesta puoliskosta lähtien OpenSearch Service antoi sinun muokata omistettujen klusterinhallintasolmujen ilmentymien tyyppiä tai ilmentymien määrää ilman sinistä/vihreää käyttöönottoa. Tämä parannus mahdollistaa nopeammat päivitykset minimaalisella häiriöllä verkkotunnuksesi toiminnassa, samalla kun vältetään tietojen liikkuminen.

Aikaisemmin omistettujen klusterinhallintasolmujen päivittäminen OpenSearch Servicessä tarkoitti sinisen/vihreän käyttöönoton käyttämistä muutoksen tekemiseen. Vaikka sininen/vihreä käyttöönottojen tarkoituksena on välttää häiriöt toimialueissasi, koska käyttöönotto käyttää toimialueen lisäresursseja, on suositeltavaa suorittaa ne vähäliikenteen aikoina. Nyt voit päivittää klusterinhallinnan ilmentymien tyyppejä tai ilmentymien lukumäärää ilman sinistä/vihreää käyttöönottoa, jotta nämä päivitykset voidaan suorittaa nopeammin ja välttää mahdolliset häiriöt verkkotunnuksesi toiminnassa. Tapauksissa, joissa muokkaat sekä toimialueen hallinnan ilmentymän tyyppiä että määrää, OpenSearch Service käyttää silti sinistä/vihreää käyttöönottoa muutoksen tekemiseen. Voit käyttää kuivaajo-vaihtoehtoa tarkistaaksesi, edellyttääkö muutos sinistä/vihreää käyttöönottoa.

Parannettu automaattinen virityskokemus

Syyskuussa 2023 OpenSearch Service lisäsi uusia Auto-Tune-mittareita ja parannettuja Auto-Tune-tapahtumia, jotka antavat sinulle paremman näkyvyyden Auto-Tunen tekemiin verkkotunnuksen suorituskyvyn optimointiin.

Auto-Tune on mukautuva resurssienhallintajärjestelmä, joka päivittää automaattisesti OpenSearch Service -verkkotunnuksen resurssit tehokkuuden ja suorituskyvyn parantamiseksi. Auto-Tune esimerkiksi optimoi muistiin liittyvät asetukset, kuten jonokoot, välimuistin koot ja Java-virtuaalikoneen (JVM) asetukset solmuissasi.

Tämän julkaisun avulla voit nyt tarkastaa muutoshistorian sekä seurata niitä reaaliajassa amazonin pilvikello konsoli.

Lisäksi OpenSearch Service julkaisee nyt tiedot muutoksista Amazon EventBridge kun automaattisen virityksen asetuksia suositellaan tai niitä sovelletaan OpenSearch-palvelun toimialueeseen. Nämä automaattisen virityksen tapahtumat näkyvät myös ilmoitukset -sivulla OpenSearch Service -konsolissa.

Nopeuta siirtymistäsi OpenSearch-palveluun uudella Migration Assistant -ratkaisulla

Marraskuussa 2023 OpenSearch-tiimi lanseerasi uuden avoimen lähdekoodin ratkaisun –Migration Assistant Amazon OpenSearch Servicelle. Ratkaisu tukee tiedonsiirtoa itsehallituista Elasticsearch- ja OpenSearch-verkkotunnuksista OpenSearch-palveluun tukemalla Elasticsearch 7.x (<=7.10), OpenSearch 1.x ja OpenSearch 2.x siirtolähteinä. Ratkaisu helpottaa olemassa olevan ja elävän tiedon siirtämistä lähteen ja kohteen välillä.

Yhteenveto

Tässä viestissä käsittelimme OpenSearch-palvelun uusia julkaisuja, joiden avulla voit innovoida yritystäsi haun, havainnoinnin, tietoturva-analytiikan ja migraatioiden avulla. Annoimme sinulle tietoja siitä, milloin kutakin uutta ominaisuutta tulee käyttää OpenSearch Servicessä, OpenSearch Ingestionissa ja OpenSearch Serverlessissä.

Lue lisää OpenSearch-hallintapaneeleista ja OpenSearch-laajennuksista sekä uudesta jännittävästä OpenSearch-avustajasta OpenSearch leikkipaikka.

Tutustu tässä viestissä kuvattuihin ominaisuuksiin, ja arvostamme arvokasta palautettasi.

Tietoja Tekijät

Jon Handler on vanhempi ratkaisuarkkitehti Amazon Web Servicesissä Palo Altossa, Kaliforniassa. Jon tekee tiivistä yhteistyötä OpenSearchin ja Amazon OpenSearch Servicen kanssa tarjoten apua ja opastusta laajalle joukolle asiakkaita, joilla on haku- ja lokianalyysityökuormia, jotka he haluavat siirtää AWS Cloudiin. Ennen AWS:ään liittymistä Jonin ura ohjelmistokehittäjänä sisälsi 4 vuotta laajan verkkokaupan hakukoneen koodauksen. Jon on suorittanut taiteiden kandidaatin tutkinnon Pennsylvanian yliopistosta ja maisterin tutkinnon tietojenkäsittelytieteestä ja tekoälystä Northwestern Universitystä.

Hajer Bouafif on Analytics-asiantuntijaratkaisujen arkkitehti Amazon Web Servicesissä. Hän keskittyy Amazon OpenSearch -palveluun ja auttaa asiakkaita suunnittelemaan ja rakentamaan hyvin suunniteltuja analytiikkatyökuormia eri toimialoilla. Hajer nauttii ulkoilusta ja uusien kulttuurien löytämisestä.

Aruna Govindaraju on Amazon OpenSearch Specialist Solutions Architect ja on työskennellyt monien kaupallisten ja avoimen lähdekoodin hakukoneiden kanssa. Hän on intohimoinen hakuun, osuvuuteen ja käyttökokemukseen. Hänen asiantuntemuksensa loppukäyttäjien signaalien korreloinnista hakukoneiden käyttäytymiseen on auttanut monia asiakkaita parantamaan hakukokemustaan.

Prashant Agrawal on vanhempi Search Specialist Solutions -arkkitehti Amazon OpenSearch Servicessä. Hän työskentelee läheisessä yhteistyössä asiakkaiden kanssa auttaakseen heitä siirtämään työkuormituksensa pilveen ja auttaa nykyisiä asiakkaita hienosäätämään klustereitaan paremman suorituskyvyn saavuttamiseksi ja kustannusten säästämiseksi. Ennen liittymistään AWS:ään hän auttoi useita asiakkaita käyttämään OpenSearchia ja Elasticsearchia haku- ja lokianalytiikan käyttötapauksissa. Kun et ole töissä, voit löytää hänet matkustamasta ja tutkimassa uusia paikkoja. Lyhyesti sanottuna hän tykkää tehdä Syö → Matka → Toista.

Muslimi Abu Taha on vanhempi OpenSearch Specialist Solutions -arkkitehti, joka on omistautunut ohjaamaan asiakkaita saumattomien hakutyökuormien siirroissa, hienosäätämään klustereita huippusuorituskykyä varten ja varmistamaan kustannustehokkuuden. Teknisen asiakaspäällikön (TAM) taustalla oleva Muslim tuo mukanaan runsaasti kokemusta auttamalla yritysasiakkaita pilvipalvelun käyttöönotossa ja optimoimaan heidän erilaisia ​​työkuormiaan. Muslim viettää aikaa perheensä kanssa, matkustaa ja tutkii uusia paikkoja.

• SEO-pohjainen sisällön ja PR-jakelu. Vahvista jo tänään.
• PlatoData.Network Vertical Generatiivinen Ai. Vahvista itseäsi. Pääsy tästä.
• PlatoAiStream. Web3 Intelligence. Tietoa laajennettu. Pääsy tästä.
• PlatoESG. hiili, CleanTech, energia, ympäristö, Aurinko, Jätehuolto. Pääsy tästä.
• PlatonHealth. Biotekniikan ja kliinisten kokeiden älykkyys. Pääsy tästä.
• Lähde: https://aws.amazon.com/blogs/big-data/amazon-opensearch-h2-2023-in-review/