2023 bizim için yoğun bir yıl oldu Amazon Açık Arama Hizmeti! OpenSearch Hizmetinin başlattığı sürümler hakkında daha fazla bilgi edinin. 2023 ilk yarısı.

2023'ün ikinci yarısında OpenSearch Hizmeti iki yeni desteği ekledi Aramayı Aç sürümler: 2.9 ve 2.11 Bu iki sürüm, arama alanı, makine öğrenimi (ML) arama alanı, geçişler ve hizmetin operasyonel tarafında yeni özellikler sunar.

Sıfır ETL entegrasyonunun piyasaya sürülmesiyle birlikte Amazon Basit Depolama Hizmeti (Amazon S3), verilerinizi Amazon S3'ten taşımanıza gerek kalmadan gösterge tabloları oluşturmak ve verileri sorgulamak için OpenSearch Hizmetini kullanarak veri gölünüzde bulunan verilerinizi analiz edebilirsiniz.

OpenSearch Hizmeti ayrıca yeni bir sıfır ETL entegrasyonunu da duyurdu. Amazon DinamoDB DynamoDB eklentisi aracılığıyla Amazon Açık Arama Alımı. OpenSearch Ingestion, önyükleme işlemini üstlenir ve DynamoDB kaynağınızdan sürekli olarak veri akışı sağlar.

OpenSearch Serverless genel kullanılabilirliğini duyurdu Amazon OpenSearch Sunucusuz için Vektör Motoru Zaman serisi koleksiyonları deneyiminizi geliştirmek, geliştirme ortamları için maliyetlerinizi yönetmek ve kaynaklarınızı iş yükü taleplerinize uyacak şekilde hızla ölçeklendirmek için diğer özelliklerin yanı sıra.

Bu yazıda işletmenizi arama, gözlemlenebilirlik, güvenlik analizi ve geçişlerle güçlendirmek için OpenSearch Hizmetinin yeni sürümlerini tartışıyoruz.

OpenSearch Hizmeti ile uygun maliyetli çözümler oluşturun

Amazon S3 için sıfır ETL entegrasyonuyla OpenSearch Hizmeti artık verilerinizi yerinde sorgulamanıza olanak tanıyarak depolama maliyetinden tasarruf etmenizi sağlar. Veri taşıma pahalı bir işlemdir çünkü verileri farklı veri depolarında çoğaltmanız gerekir. Bu, veri ayak izinizi artırır ve maliyeti artırır. Verilerin taşınması, verileri bir kaynaktan yeni bir hedefe taşımak için işlem hatlarını yönetme yükünü de artırır.

OpenSearch Hizmeti ayrıca altyapı maliyetinizi daha da optimize etmenize yardımcı olmak amacıyla veri düğümleri için yeni bulut sunucusu türleri (Im4gn ve OR1) ekledi. Maksimum 30 TB kalıcı bellek (NVMe) katı hal sürücüleri (SSD) ile Im4gn örneği, yoğun depolama ve daha iyi performans sağlar. OR1 bulut sunucuları, dizin oluşturma açısından ağır iş yüklerinde verimi büyük ölçüde artırmak amacıyla segment çoğaltmayı ve uzaktan destekli depolamayı kullanır.

DynamoDB'den OpenSearch Hizmetine Sıfır ETL

Kasım 2023'te DynamoDB ve OpenSearch Ingestion, OpenSearch Hizmeti için sıfır ETL entegrasyonunu tanıttı. OpenSearch Hizmeti etki alanları ve OpenSearch Sunucusuz koleksiyonları, DynamoDB verilerinizde tam metin ve vektör arama gibi gelişmiş arama yetenekleri sağlar. Birkaç tıklamayla AWS Yönetim Konsolusayesinde artık verilerinizi DynamoDB'den OpenSearch Service'e sorunsuz bir şekilde yükleyebilir ve senkronize edebilirsiniz; böylece verileri ayıklamak, dönüştürmek ve yüklemek için özel kod yazma ihtiyacını ortadan kaldırabilirsiniz.

Doğrudan sorgu (Amazon S3 verileri için sıfır ETL, önizlemede)

OpenSearch Hizmeti, operasyonel verileri analiz etmek için araçlar arasında geçiş yapmanıza gerek kalmadan Amazon S3 ve S3 tabanlı veri göllerindeki operasyonel günlükleri sorgulamanız için yeni bir yol duyurdu. Daha önce verilerinizi anlamak, anormallikleri belirlemek ve potansiyel tehditleri tespit etmek amacıyla OpenSearch'ün zengin analiz ve görselleştirme özelliklerinden yararlanmak için verileri Amazon S3'ten OpenSearch Hizmetine kopyalamanız gerekiyordu.

Ancak verilerin hizmetler arasında sürekli kopyalanması pahalı olabilir ve operasyonel çalışma gerektirir. OpenSearch Service doğrudan sorgulama özelliği sayesinde Amazon S3'te depolanan operasyonel günlük verilerine, verileri taşımanıza gerek kalmadan erişebilirsiniz. Artık herhangi bir veri hareketi olmadan verileriniz üzerinde karmaşık sorgular ve görselleştirmeler gerçekleştirebilirsiniz.

OpenSearch Hizmeti ile Im4gn Desteği

Im4gn bulut sunucuları, büyük veri kümelerini yöneten ve vCPU başına yüksek depolama yoğunluğuna ihtiyaç duyan iş yükleri için optimize edilmiştir. Im4gn bulut sunucuları, NVMe SSD disk boyutunda 16 TB'a kadar büyük, 30xlarge'a kadar boyutlarda mevcuttur. Im4gn örnekleri temel alınmıştır AWS Nitro Sistemi En iyi performans için yüksek verimli, düşük gecikmeli disk erişimi sunan SSD'ler. OpenSearch Hizmeti Im4gn örnekleri, tüm OpenSearch sürümlerini ve Elasticsearch 7.9 ve üzeri sürümlerini destekler. Daha fazla ayrıntı için bkz. Amazon OpenSearch Service'te desteklenen bulut sunucusu türleri.

Ağır iş yüklerini dizine eklemeye yönelik bir OpenSearch Optimize Edilmiş Örnek ailesi olan OR1 ile tanışın

Kasım 2023'te OpenSearch Hizmeti başlatıldı OR1, OpenSearch Optimize Edilmiş Örnek ailesiDahili karşılaştırmalarda mevcut bulut sunucularına göre %30'a varan fiyat-performans artışı sağlayan ve 3 11 saniyelik dayanıklılık sağlamak için Amazon S9'ü kullanan. OR1 örneklerine sahip bir etki alanı şunları kullanır: Amazon Elastik Blok Mağazası Veriler geldikçe Amazon S3'e eş zamanlı olarak kopyalanacak şekilde birincil depolama için (Amazon EBS) birimleri. OR1 örnekleri OpenSearch'ü kullanır segment çoğaltma özelliği replika parçalarının doğrudan Amazon S3'ten veri okumasını sağlayarak hem birincil hem de replika parçalarda dizin oluşturmanın kaynak maliyetini ortadan kaldırmak. OR1 bulut sunucusu ailesi aynı zamanda arıza durumunda otomatik veri kurtarmayı da destekler. OR1 bulut sunucusu türü seçenekleri hakkında daha fazla bilgi için bkz. Mevcut nesil bulut sunucusu türleri OpenSearch Hizmetinde.

Güvenlik analizi özellikleriyle işletmenizi etkinleştirin

OpenSearch Hizmeti'ndeki Güvenlik Analizi eklentisi, kullanıma hazır özellikleri destekler önceden paketlenmiş günlük türleri ve potansiyel güvenlik olaylarını tespit etmek için güvenlik tespit kuralları (SIGMA kuralları) sağlar.

OpenSearch 2.9'da Security Analytics eklentisi, müşteri günlük türleri için destek ve müşteri günlük türleri için yerel destek ekledi. Açık Siber Güvenlik Şema Çerçevesi (OCSF) veri formatı. Bu yeni destekle, OCSF verilerinin depolandığı dedektörler oluşturabilirsiniz. Amazon Güvenlik Gölü güvenlik bulgularını analiz etmek ve olası olayları azaltmak. Security Analytics eklentisi ayrıca kendi özel günlük türlerinizi oluşturma ve özel algılama kuralları oluşturma olanağını da ekledi.

Makine öğrenimi destekli arama çözümleri oluşturun

2023 yılında OpenSearch Service, yeni nesil arama uygulamaları oluşturmak için gereken ağır yükleri ortadan kaldırmak için yatırım yaptı. Arama ardışık düzenleri, arama işlemcileri ve AI/ML bağlayıcıları gibi özelliklerle OpenSearch Hizmeti, sinirsel arama, hibrit arama ve kişiselleştirilmiş sonuçlarla desteklenen arama uygulamalarının hızlı bir şekilde geliştirilmesine olanak sağladı. Ek olarak, kNN eklentisinde yapılan geliştirmeler, vektör verilerinin depolanmasını ve alınmasını iyileştirdi. OpenSearch Hizmeti için yeni başlatılan isteğe bağlı eklentiler, ek dil analizörleri ve Amazon Kişiselleştir.

İşlem hatlarını arayın

İşlem hatlarını arayın Arama sorgularını geliştirmek ve arama sonuçlarını iyileştirmek için yeni yollar sağlayın. Bir arama kanalı tanımlarsınız ve ardından sorgularınızı ona gönderirsiniz. Arama hattını tanımladığınızda şunları belirtirsiniz: işlemciler sorgularınızı dönüştürüp artıran ve sonuçlarınızı yeniden sıralayan. Önceden oluşturulmuş sorgu işlemcileri tarih dönüştürmeyi, toplamayı, dize işlemeyi ve veri türü dönüştürmeyi içerir. Arama hattındaki sonuç işlemcisi, bir sonraki aşamaya geçmeden önce sonuçları anında yakalar ve uyarlar. İşlem hattı için hem istek hem de yanıt işleme koordinatör düğümde gerçekleştirilir, dolayısıyla parça düzeyinde işleme yoktur.

İsteğe bağlı eklentiler

OpenSearch Hizmeti, önceden yüklenmiş yazılımları ilişkilendirmenize olanak tanır isteğe bağlı OpenSearch eklentileri alanınızla birlikte kullanmak için. İsteğe bağlı bir eklenti paketi, belirli bir OpenSearch sürümüyle uyumludur ve yalnızca bu sürüme sahip alanlarla ilişkilendirilebilir. Kullanılabilir eklentiler şu sayfada listelenmiştir: Paketler OpenSearch Hizmeti konsolundaki sayfa. İsteğe bağlı eklenti, OpenSearch Hizmetini Amazon Personalize ile entegre eden Amazon Personalize eklentisini ve Nori, Sudachi, STConvert ve Pinyin gibi yeni dil analizörlerini içerir.

Yeni dil analizörleri için destek

OpenSearch Hizmeti dört yeni özellik için destek ekledi dil analizörü eklentileri: Nori (Korece), Sudachi (Japonca), Pinyin (Çince) ve STConvert Analizi (Çince). Bunlar, tüm AWS Bölgelerinde, herhangi bir OpenSearch sürümünü çalıştıran alan adlarıyla ilişkilendirebileceğiniz isteğe bağlı eklentiler olarak mevcuttur. Şunu kullanabilirsiniz: Paketler Bu eklentileri alan adınızla ilişkilendirmek için OpenSearch Hizmeti konsolundaki sayfaya gidin veya Paket İlişkilendirme API'sini kullanın.

Sinirsel arama özelliği

Sinirsel arama Genellikle OpenSearch Service sürüm 2.9 ve sonraki sürümlerde mevcuttur. Nöral arama, model sunma çerçevesi kullanılarak uzaktan barındırılan makine öğrenimi modelleriyle entegrasyona olanak tanır. Arama sırasında bir sinirsel sorgu kullandığınızda, sinirsel arama sorgu metnini vektör yerleştirmelerine dönüştürür, sorgu ve belge yerleştirmeyi karşılaştırmak için vektör aramayı kullanır ve en yakın sonuçları döndürür. Besleme sırasında sinirsel arama, belge metnini vektör yerleştirmeye dönüştürür ve hem metni hem de vektör yerleştirmelerini bir vektör dizininde indeksler.

Amazon Personalize ile entegrasyon

OpenSearch Hizmeti, OpenSearch sürüm 2.9 veya sonraki sürümlerde Amazon Personalize ile entegre edilecek isteğe bağlı bir eklentiyi kullanıma sundu. Amazon Personalize Arama Sıralaması için OpenSearch Hizmeti eklentisi, Amazon Personalize tarafından sunulan derin öğrenme özelliklerinden yararlanarak web siteniz ve uygulama aramanızdan son kullanıcı etkileşimini ve dönüşümünü iyileştirmenize olanak tanır. İsteğe bağlı bir eklenti olarak, paket OpenSearch sürüm 2.9 veya üzeri ile uyumludurve yalnızca bu sürüme sahip alanlarla ilişkilendirilebilir.

OpenSearch'ün k-NN FAISS'ı ile verimli sorgu filtreleme

OpenSearch Hizmeti, OpenSearch'ün k-NN FAISS'ı ile sürüm 2.9 ve sonrasında etkili sorgu filtrelemeyi tanıttı. OpenSearch'ün verimli vektör sorgu filtreleri yeteneği, doğru ve düşük gecikmeli vektör arama sorguları sunmak için en iyi stratejiyi belirlemek üzere en uygun filtreleme stratejilerini (yaklaşık en yakın komşu (ANN) ile ön filtreleme veya tam k-en yakın komşu (k-NN) ile filtreleme) akıllıca değerlendirir. Daha önceki OpenSearch sürümlerinde, FAISS motorundaki vektör sorguları, filtreleme sonrası teknikleri kullanıyordu; bu, sorguların geniş ölçekte filtrelenmesini mümkün kılıyordu, ancak potansiyel olarak istenen "k" sayısından daha az sonuç döndürüyordu. Verimli vektör sorgu filtreleri düşük gecikme süresi ve doğru sonuçlar sunar, vektör ve sözcüksel teknikler arasında hibrit arama yapmanızı sağlar.

OpenSearch Hizmetinde baytla nicelenmiş vektörler

Yeni bayt nicemlenmiş vektör 2.9 ile birlikte sunulan bellek gereksinimlerini 4 kat azaltabilir ve minimum kalite kaybıyla (geri çağırma) arama gecikmesini önemli ölçüde azaltabilirsiniz. Bu özellikle, vektörler için kullanılan olağan 32 bitlik kayan noktalar kuantize edilir veya 8 bitlik işaretli tam sayılara dönüştürülür. Birçok uygulama için mevcut kayan vektör verileri, kaliteden çok az bir kayıpla nicelendirilebilir. Karşılaştırmaları karşılaştırdığınızda, 32 bitlik değişkenler yerine bayt vektörleri kullanmanın, depolama ve bellek kullanımında önemli bir azalma sağladığını, aynı zamanda indeksleme verimini artırdığını ve sorgu gecikmesini azalttığını göreceksiniz. Dahili kriter depolama kullanımının %78'e kadar, RAM kullanımının ise %59'a kadar azaldığını gösterdi (eldiven-200 açısal veri kümesi için). Açısal veri kümelerinin hatırlama değerleri Öklid veri kümelerininkinden daha düşüktü.

AI/ML konnektörleri

OpenSearch 2.9 ve üzeri destekler ML modelleriyle entegrasyonlar AWS hizmetlerinde veya üçüncü taraf platformlarda barındırılır. Bu, sistem yöneticilerinin ve veri bilimcilerinin makine öğrenimi iş yüklerini OpenSearch Hizmeti alanlarının dışında çalıştırmasına olanak tanır. ML bağlayıcıları, desteklenen bir ML planları (belirli bir bağlayıcıya API istekleri gönderirken sağlamanız gereken parametre kümesini tanımlayan şablonlar) kümesiyle birlikte gelir. OpenSearch Hizmeti, aşağıdakiler gibi çeşitli platformlar için bağlayıcılar sağlar: Amazon SageMaker, Amazon Ana Kayası, OpenAI ChatGPT, ve Tutarlı olun.

OpenSearch Hizmeti konsolu entegrasyonları

OpenSearch 2.9 ve üzeri, konsola yeni bir entegrasyon özelliği ekledi. Entegrasyonlar size şunları sağlar: AWS CloudFormation oluşturmak için şablon anlamsal arama SageMaker veya Amazon Bedrock'ta barındırılan ML modellerinize bağlanarak kullanım senaryosunu kullanın. CloudFormation şablonu, model uç noktasını oluşturur ve model kimliğini, şablona giriş olarak sağladığınız OpenSearch Hizmeti etki alanına kaydeder.

Hibrit arama ve aralık normalizasyonu

The normalleştirme işlemcisi ve karma sorgu 2023'ün başlarında yayınlanan iki özelliğin üzerine inşa edilmiştir:sinirsel arama ve arama boru hatları. Sözcüksel ve anlamsal sorgular farklı ölçeklerde alaka puanları döndürdüğü için, hibrit arama sorgularında ince ayar yapmak zordu.

OpenSearch Service 2.11 artık hibrit arama için bir kombinasyon ve normalleştirme işlemcisini destekliyor. Artık sözcüksel ve doğal dil tabanlı k-NN vektör arama sorgularını birleştirerek hibrit arama sorguları gerçekleştirebilirsiniz. OpenSearch Hizmeti ayrıca çoklu puanlama kombinasyonu ve normalleştirme tekniklerini kullanarak hibrit arama sonuçlarınızı maksimum alaka düzeyine göre ayarlamanıza olanak tanır.

Amazon Bedrock ile çok modlu arama

OpenSearch Service 2.11, çok modlu gömme modellerini kullanarak metin ve resim verilerini aramanıza olanak tanıyan çok modlu arama desteğini başlatır. Vektör yerleştirmeleri oluşturmak için, aşağıdakileri içeren bir alma ardışık düzeni oluşturmanız gerekir: text_image_embedding işlemcisi, bir belge alanındaki metin veya görüntü ikili dosyalarını vektör yerleştirmelerine dönüştürür. Nöral sorgu cümleciğini şu şekilde kullanabilirsiniz: k-NN eklenti API'si or DSL'i sorgula metin ve görsel aramalarının bir kombinasyonunu yapmak için sorgular. Çok modlu aramaya hızlı bir şekilde başlamak için yeni OpenSearch Hizmeti entegrasyon özelliklerini kullanabilirsiniz.

Sinir seyrek alımı

Anlamsal erişimin yeni ve etkili bir yöntemi olan sinirsel seyrek arama, OpenSearch Service 2.11'de mevcuttur. Sinirsel seyrek arama iki modda çalışır: iki kodlayıcı ve yalnızca belge. Çift kodlayıcı moduyla hem belgeler hem de arama sorguları derin kodlayıcılardan geçirilir. Yalnızca belge modunda, arama sorguları simgeleştirilirken yalnızca belgeler derin kodlayıcılardan geçirilir. Yalnızca belge seyrek kodlayıcı, yoğun kodlama dizininin boyutunun %10.4'ü kadar bir dizin oluşturur. İki kodlayıcı için indeks boyutu, yoğun kodlama indeksinin boyutunun %7.2'sidir. Nöral seyrek arama, seyrek vektör yerleştirmeleri oluşturan seyrek kodlama modelleri tarafından etkinleştirilir: <token: weight> metin girişini ve bunun seyrek vektördeki karşılık gelen ağırlığını temsil eden çiftler. Seyrek sinirsel aramaya yönelik önceden eğitilmiş modeller hakkında daha fazla bilgi edinmek için bkz. Seyrek kodlama modelleri.

Sinirsel seyrek arama maliyetleri azaltır, arama alaka düzeyini artırır ve gecikmeyi azaltır. Sinirsel seyrek aramaya hızlı bir şekilde başlamak için yeni OpenSearch Hizmeti entegrasyon özelliklerini kullanabilirsiniz.

OpenSearch Besleme güncellemeleri

OpenSearch Beslemesi verilerinizi OpenSearch Hizmeti etki alanlarına ve OpenSearch Sunucusuz koleksiyonlara ileten, tamamen yönetilen ve otomatik olarak ölçeklendirilen bir besleme hattıdır. OpenSearch Ingestion, 2023'te piyasaya sürülmesinden bu yana verilerinizi dönüştürmeyi ve taşımayı kolaylaştıracak yeni özellikler eklemeye devam ediyor. desteklenen kaynaklar OpenSearch Service, OpenSearch Serverless ve Amazon S3 gibi aşağı akışlı hedeflere.

OpenSearch Ingestion'daki yeni geçiş özellikleri

Kasım 2023'te OpenSearch Ingestion, kendi kendini yöneten Elasticsearch sürüm 7.x etki alanlarından OpenSearch Hizmetinin en son sürümlerine veri geçişini destekleyen yeni özelliklerin yayınlandığını duyurdu.

OpenSearch Ingestion ayrıca verilerin OpenSearch sürüm 2.x çalıştıran OpenSearch Hizmeti tarafından yönetilen etki alanlarından OpenSearch Sunucusuz koleksiyonlara geçişini de destekler.

OpenSearch Ingestion'ı şu amaçlarla nasıl kullanabileceğinizi öğrenin: verilerinizi OpenSearch Hizmetine taşıyın.

OpenSearch Ingestion ile veri dayanıklılığını artırın

Kasım 2023'te OpenSearch Ingestion, HTTP kaynakları (HTTP, Fluentd, FluentBit) ve OpenTelemetry toplayıcıları gibi push tabanlı kaynaklar için kalıcı ara belleğe almayı tanıttı.

OpenSearch Ingestion varsayılan olarak bellek içi arabelleğe almayı kullanır. Kalıcı ara belleğe alma özelliğiyle OpenSearch Ingestion, verilerinizi daha dayanıklı olan disk tabanlı bir depoda saklar. Mevcut besleme işlem hatlarınız varsa aşağıdaki ekran görüntüsünde gösterildiği gibi bu işlem hatları için kalıcı ara belleğe almayı etkinleştirebilirsiniz.

Yeni eklentilerin desteği

2023'ün başlarında OpenSearch Ingestion aşağıdakiler için destek ekledi: Apache Kafka için Amazon Tarafından Yönetilen Akış (Amazon MSK'da). OpenSearch Beslemesi şunları kullanır: Kafka eklentisi Amazon MSK'dan OpenSearch Hizmeti tarafından yönetilen etki alanlarına veya OpenSearch Sunucusuz koleksiyonlara veri akışı sağlamak için. Amazon MSK'yı veri kaynağı olarak ayarlama hakkında daha fazla bilgi edinmek için bkz. Apache Kafka için Amazon Managed Streaming ile OpenSearch Ingestion işlem hattını kullanma.

OpenSearch Sunucusuz güncellemeler

OpenSearch Serverless, yerleştirmeleri depolamak ve benzerlik aramasını çalıştırmak için yeni bir tür vektör arama koleksiyonunun desteğini sunarak OpenSearch ile sunucusuz deneyiminizi geliştirmeye devam etti. OpenSearch Serverless artık sorgu verimindeki ani artışları yönetmek için parça çoğaltma ölçeklendirmesini destekliyor. Zaman serisi koleksiyonu kullanıyorsanız artık özel veri saklama politikanızı veri saklama gereksinimlerinize uyacak şekilde ayarlayabilirsiniz.

OpenSearch Sunucusuz için Vektör Motoru

Kasım 2023'te lansmanımızı yaptık. Amazon OpenSearch Serverless için vektör motoru. Vektör motoru, temeldeki vektör veritabanı altyapısını yönetmeye gerek kalmadan modern makine öğrenimi destekli arama deneyimleri ve üretken yapay zeka (üretken yapay zeka) uygulamaları oluşturmayı kolaylaştırır. Aynı zamanda, vektör aramasını ve tam metin aramasını aynı sorguda birleştirerek, ayrı veri depolarını veya karmaşık bir uygulama yığınını yönetme ve sürdürme ihtiyacını ortadan kaldırarak hibrit arama çalıştırmanıza da olanak tanır.

OpenSearch Sunucusuz düşük maliyetli geliştirme ve test ortamları

OpenSearch Serverless artık bir kopya çalıştırmaktan kaçınmanıza olanak tanıyarak geliştirme ve test iş yüklerini destekliyor. Replikaların kaldırılması, yalnızca kullanılabilirlik amacıyla başka bir Erişilebilirlik Alanında yedek OCU'lara sahip olma ihtiyacını ortadan kaldırır. Kullanılabilirliğin sorun olmadığı geliştirme ve test için OpenSearch Sunucusuz kullanıyorsanız minimum OCU'larınızı 4'ten 2'ye düşürebilirsiniz.

OpenSearch Sunucusuz, veri yaşam döngüsü ilkelerini kullanarak otomatik, zamana dayalı veri silmeyi destekler

Aralık 2023'te OpenSearch Serverless, zaman serisi koleksiyonları ve dizinlerin veri saklama yönetimine yönelik desteği duyurdu. Yeni otomatik zamana dayalı veri silme özelliği ile verileri ne kadar süreyle saklamak istediğinizi belirtebilirsiniz. OpenSearch Serverless, bu yapılandırmaya göre verilerin yaşam döngüsünü otomatik olarak yönetir. Daha fazla bilgi edinmek için bkz. Amazon OpenSearch Serverless artık otomatik zamana dayalı veri silmeyi destekliyor.

OpenSearch Serverless, replikaların parça düzeyinde ölçeklendirilmesine yönelik desteği duyurdu

Başlangıçta OpenSearch Serverless, artan veri boyutlarına yanıt olarak kapasitenin otomatik olarak artırılmasını destekledi. İle yeni parça çoğaltma ölçeklendirmesi OpenSearch Serverless özelliği, sorgu oranlarındaki ani artışlar nedeniyle baskı altındaki parçaları otomatik olarak algılar ve hızlı yanıt sürelerini korurken artan sorgu verimini karşılamak için dinamik olarak yeni parça kopyaları ekler. Bu yaklaşımın, yalnızca yeni dizin kopyaları eklemekten daha uygun maliyetli olduğu kanıtlanmıştır.

OCU kullanımınızı izlemek için AWS kullanıcı bildirimleri

Bu lansmanla sistemi, OCU kullanımı yaklaştığında veya arama ya da alım için yapılandırılmış maksimum sınırlara ulaştığında bildirim gönderecek şekilde yapılandırabilirsiniz. Yeni AWS Kullanıcı Bildirimi entegrasyonuyla sistemi, kapasite eşiği aşıldığında bildirim gönderecek şekilde yapılandırabilirsiniz. Kullanıcı Bildirimi özelliği, hizmeti sürekli izleme ihtiyacını ortadan kaldırır. Daha fazla bilgi için bakınız AWS Kullanıcı Bildirimlerini kullanarak Amazon OpenSearch Serverless'ı İzleme.

OpenSearch Kontrol Panelleriyle deneyiminizi geliştirin

OpenSearch Hizmeti'ndeki OpenSearch 2.9, verilerinizi OpenSearch Kontrol Panellerinde hızlı bir şekilde analiz etmenizi kolaylaştıracak yeni özellikler sundu. Bu yeni özellikler arasında, kullanıma hazır yeni, OpenSearch Entegrasyonları ile önceden yapılandırılmış kontrol panelleri ve kontrol panellerinizdeki mevcut bir görselleştirmeden uyarı oluşturma ve anormallik algılama yeteneği yer alır.

OpenSearch Kontrol Paneli entegrasyonları

OpenSearch 2.9, OpenSearch Kontrol Panellerine OpenSearch entegrasyonlarının desteğini ekledi. OpenSearch entegrasyonları önceden yapılandırılmış kontrol panelleri içerir; böylece aşağıdakiler gibi popüler kaynaklardan gelen verilerinizi hızlı bir şekilde analiz etmeye başlayabilirsiniz: AWS CloudFront, AWS WAF'ı, AWS CloudTrail, ve Amazon Sanal Özel Bulut (Amazon VPC) akış günlükleri.

OpenSearch Kontrol Panellerindeki uyarılar ve anormallikler

OpenSearch Service 2.9'da, doğrudan cihazınızdan yeni bir uyarı monitörü oluşturabilirsiniz. çizgi grafiği görselleştirmesi OpenSearch Kontrol Panellerinde. Ayrıca OpenSearch'te önceden oluşturulmuş mevcut monitörleri veya algılayıcıları kontrol paneli görselleştirmesiyle ilişkilendirebilirsiniz.

Bu yeni özellik, kontrol panelleri ile Uyarı veya Anormallik Tespiti eklentileri arasında bağlam geçişini azaltmaya yardımcı olur. Hizmetlerinizdeki ortalama veri hacmindeki düşüşleri tespit etmek amacıyla bir uyarı izleyicisi eklemek için aşağıdaki kontrol paneline bakın.

OpenSearch coğrafi toplama desteğini genişletiyor

OpenSearch sürüm 2.9 ile OpenSearch Hizmeti üç tür desteği ekledi coğrafi şekil API aracılığıyla veri toplama: geo_bounds, geo_hash, ve geo_tile.

Geoshape alan türü, konum verilerini nokta, çokgen veya çizgi gibi farklı coğrafi formatlarda indeksleme olanağı sağlar. Yeni toplama türleriyle, metrik ve çok bölümlü coğrafi toplamaları kullanarak belgeleri bir dizinden toplama konusunda daha fazla esnekliğe sahip olursunuz.

OpenSearch Hizmeti operasyonel güncellemeleri

OpenSearch Hizmeti, etki alanı tarafından yönetilen düğümleri değiştirirken mavi/yeşil dağıtımı çalıştırma ihtiyacını ortadan kaldırdı. Ayrıca hizmet, OpenSearch Hizmeti etki alanınızdaki değişiklikleri izlemek için yeni Otomatik Ayarlama ölçümlerinin desteğiyle Otomatik Ayarlama olaylarını iyileştirdi.

OpenSearch Hizmeti artık mavi/yeşil dağıtım olmadan etki alanı yöneticisi düğümlerini güncellemenize olanak tanıyor

2'ün ikinci yarısından itibaren OpenSearch Hizmeti, mavi/yeşil dağıtıma ihtiyaç duymadan özel küme yöneticisi düğümlerinin örnek tipini veya örnek sayısını değiştirmenize olanak tanıdı. Bu geliştirme, alan adı operasyonlarınızda minimum kesintiyle daha hızlı güncellemeler yapılmasına olanak sağlarken herhangi bir veri hareketini de önler.

Önceden, OpenSearch Hizmetinde özel küme yöneticisi düğümlerinizi güncellemek, değişikliği yapmak için mavi/yeşil bir dağıtım kullanmak anlamına geliyordu. Mavi/yeşil dağıtımların amacı etki alanlarınızda herhangi bir kesintiyi önlemek olsa da, dağıtım etki alanındaki ek kaynakları kullandığından, bunları trafiğin düşük olduğu dönemlerde gerçekleştirmeniz önerilir. Artık mavi/yeşil dağıtım gerektirmeden küme yöneticisi örnek türlerini veya örnek sayılarını güncelleyebilirsiniz; böylece bu güncellemeler, etki alanı operasyonlarınızda herhangi bir olası kesintiyi önlerken daha hızlı tamamlanabilir. Hem etki alanı yöneticisi örnek tipini hem de sayısını değiştirdiğiniz durumlarda OpenSearch Hizmeti, değişikliği yapmak için yine de mavi/yeşil dağıtım kullanmaya devam edecektir. Değişikliğinizin mavi/yeşil dağıtım gerektirip gerektirmediğini kontrol etmek için prova seçeneğini kullanabilirsiniz.

Geliştirilmiş Otomatik Ayarlama deneyimi

Eylül 2023'te OpenSearch Hizmeti, Otomatik Ayarlama tarafından yapılan alan performansı optimizasyonlarını daha iyi görebilmenizi sağlayan yeni Otomatik Ayarlama metrikleri ve iyileştirilmiş Otomatik Ayarlama etkinlikleri ekledi.

Auto-Tune, verimliliği ve performansı artırmak için OpenSearch Hizmeti etki alanı kaynaklarını otomatik olarak güncelleyen uyarlanabilir bir kaynak yönetimi sistemidir. Örneğin, Otomatik Ayarlama, düğümlerinizdeki kuyruk boyutları, önbellek boyutları ve Java sanal makinesi (JVM) ayarları gibi bellekle ilgili yapılandırmaları optimize eder.

Bu lansmanla artık değişikliklerin geçmişini denetleyebilir ve bunları gerçek zamanlı olarak takip edebilirsiniz. Amazon Bulut İzleme konsol.

Ek olarak, OpenSearch Hizmeti artık değişikliklerin ayrıntılarını yayınlıyor Amazon EventBridge Otomatik Ayarlama ayarları önerildiğinde veya bir OpenSearch Hizmeti etki alanına uygulandığında. Bu Otomatik Ayarlama etkinlikleri aynı zamanda Bildirimler OpenSearch Hizmeti konsolundaki sayfa.

Yeni Geçiş Asistanı çözümüyle OpenSearch Hizmetine geçişinizi hızlandırın

Kasım 2023'te OpenSearch ekibi yeni bir açık kaynaklı çözüm başlattı:Amazon OpenSearch Hizmeti için Geçiş Asistanı. Çözüm, kendi kendini yöneten Elasticsearch ve OpenSearch etki alanlarından OpenSearch Hizmetine veri geçişini destekler ve geçiş kaynakları olarak Elasticsearch 7.x (<=7.10), OpenSearch 1.x ve OpenSearch 2.x'i destekler. Çözüm, mevcut ve canlı verilerin kaynak ve hedef arasında geçişini kolaylaştırır.

Sonuç

Bu yazıda, işletmenizde arama, gözlemlenebilirlik, güvenlik analizi ve geçişlerle yenilik yapmanıza yardımcı olmak için OpenSearch Hizmetinin yeni sürümlerini ele aldık. OpenSearch Service, OpenSearch Ingestion ve OpenSearch Serverless'taki her yeni özelliğin ne zaman kullanılacağı hakkında size bilgi verdik.

OpenSearch Kontrol Panelleri ve OpenSearch eklentileri ile yeni ve heyecan verici OpenSearch asistanı hakkında daha fazla bilgi edinin. OpenSearch oyun alanı.

Bu yazıda açıklanan özelliklere göz atın; bize değerli geri bildirimlerinizi sağladığınız için teşekkür ederiz.

Yazarlar Hakkında

Jon işleyici Palo Alto, CA merkezli Amazon Web Services'te Kıdemli Baş Çözüm Mimarıdır. Jon, OpenSearch ve Amazon OpenSearch Service ile yakın işbirliği içinde çalışarak AWS Bulut'a taşımak istedikleri arama ve günlük analizi iş yüklerine sahip çok çeşitli müşterilere yardım ve rehberlik sağlıyor. AWS'ye katılmadan önce Jon'un yazılım geliştiricisi olarak kariyeri, 4 yıllık büyük ölçekli bir e-ticaret arama motorunu kodlamayı içeriyordu. Jon, Pennsylvania Üniversitesi'nden Sanat Lisans derecesine ve Northwestern Üniversitesi'nden Bilgisayar Bilimi ve Yapay Zeka alanında Yüksek Lisans ve Doktora derecesine sahiptir.

Hacer Bouafif Amazon Web Services'te Analitik Uzmanı Çözüm Mimarıdır. Amazon OpenSearch Hizmetine odaklanıyor ve müşterilerin çeşitli sektörlerde iyi mimariye sahip analitik iş yükleri tasarlayıp oluşturmasına yardımcı oluyor. Hajer açık havada vakit geçirmekten ve yeni kültürler keşfetmekten hoşlanıyor.

Aruna Govindaraju Amazon OpenSearch Uzman Çözüm Mimarıdır ve birçok ticari ve açık kaynaklı arama motoruyla çalışmıştır. Arama, alaka düzeyi ve kullanıcı deneyimi konusunda tutkulu. Son kullanıcı sinyallerini arama motoru davranışıyla ilişkilendirme konusundaki uzmanlığı, birçok müşterinin arama deneyimlerini geliştirmesine yardımcı oldu.

Prashant Agrawal Amazon OpenSearch Hizmeti ile Kıdemli Arama Uzmanı Çözüm Mimarıdır. İş yüklerini buluta taşımalarına yardımcı olmak için müşterilerle yakın işbirliği içinde çalışır ve mevcut müşterilerin daha iyi performans elde etmeleri ve maliyetten tasarruf etmeleri için kümelerinde ince ayar yapmalarına yardımcı olur. AWS'ye katılmadan önce, çeşitli müşterilerin arama ve günlük analitiği kullanım durumları için OpenSearch ve Elasticsearch'ü kullanmalarına yardımcı oldu. Çalışmadığı zamanlarda onu seyahat ederken ve yeni yerler keşfederken bulabilirsiniz. Kısacası, Ye → Seyahat Et → Tekrarlamayı seviyor.

Müslüman Ebu Taha Kusursuz arama iş yükü geçişleri, en yüksek performans için kümelere ince ayar yapma ve maliyet etkinliği sağlama konusunda müşterilere rehberlik etmeye kendini adamış bir Kıdemli OpenSearch Uzman Çözüm Mimarıdır. Teknik Hesap Yöneticisi (TAM) geçmişine sahip Muslim, kurumsal müşterilere bulutu benimseme konusunda yardımcı olma ve farklı iş yüklerini optimize etme konusunda zengin bir deneyim sunuyor. Muslim ailesiyle vakit geçirmekten, seyahat etmekten ve yeni yerler keşfetmekten hoşlanıyor.

• SEO Destekli İçerik ve Halkla İlişkiler Dağıtımı. Bugün Gücünüzü Artırın.
• PlatoData.Network Dikey Üretken Yapay Zeka. Kendine güç ver. Buradan Erişin.
• PlatoAiStream. Web3 Zekası. Bilgi Genişletildi. Buradan Erişin.
• PlatoESG. karbon, temiz teknoloji, Enerji, Çevre, Güneş, Atık Yönetimi. Buradan Erişin.
• PlatoSağlık. Biyoteknoloji ve Klinik Araştırmalar Zekası. Buradan Erişin.
• Kaynak: https://aws.amazon.com/blogs/big-data/amazon-opensearch-h2-2023-in-review/