Azure 데이터 탐색기

Azure Data Explorer
Azure 데이터 탐색기
Windows Azure logo.png
개발자마이크로소프트
초기 릴리즈2018년, 4년 전(2018년)
플랫폼Microsoft Azure
유형클라우드 스토리지
면허증.독자 사양
웹 사이트docs.microsoft.com/en-us/azure/data-explorer/

Azure Data Explorer는 마이크로소프트가 [5][6]개발한 완전한 관리형[1] 빅데이터 분석 클라우드[2][3] 플랫폼 및 데이터 탐색 서비스로,[4] 정형, 반구조화(예: JSON) 및 비정형 데이터(예: 자유 텍스트)[7][8][9][10]를 수집합니다.그런 다음 이 데이터를 저장하고 분석용 애드혹 쿼리에 몇 초의 지연 시간으로 응답합니다.시계열 분석 기능[6][7], 정규 표현 평가 및 텍스트 [11]구문 분석을 포함한 전체 텍스트 인덱싱 및 검색 데이터베이스입니다.

Microsoft Azure 플랫폼의 일부로 Platform as a Service(PaaS)로 제공됩니다.이 제품은 마이크로소프트에 의해 2018년에 발표되었다.

역사

이 제품의 개발은 2014년 마이크로소프트의 [12]이스라엘 R&D 센터에서 풀뿌리 육성 프로젝트로 시작되었으며, 내부 코드명 '쿠스토[9][7]'(Jacques Cousto, "데이터의 바다를 탐험한다"는 의미로 "Kusto"로 명명되었다.이 프로젝트의 목적은 빠르고 확장 가능한 로그 및 원격 측정 분석에 대한 Azure 서비스의 요구를 해결하는 것이었습니다.

2016년에는 Application Insights [13]Analytics의 백엔드 빅데이터 및 분석 서비스가 되었습니다.

이 제품은 Microsoft Ignite 2018 [14]컨퍼런스에서 공개 프리뷰 제품으로 발표되었으며,[15] 2019년 2월 Microsoft Ignite 컨퍼런스에서 일반 제품으로 발표되었습니다.

2021년 3월, Azure Data Explorer의 차세대 스토리지 및 쿼리 엔진인 "Kusto Engine V3"가 일반에 공개되었습니다.원격 측정, 로그 및 시계열 데이터를 [16]수집하고 쿼리하는 데 탁월한 성능을 제공하도록 설계되었습니다.

특징들

Azure Data Explorer는 KQL(Kusto Query Language)[18][19][20][7][8]이라는 SQL과 유사한 언어를 사용하여 최적화된 쿼리 언어 및 데이터 시각화[17] 옵션을 제공합니다.

Azure Data Explorer는 [14]노드당 초당 200MB를 수집할 수 있습니다.데이터 수집 방법은 Azure Event Grid 또는 Azure Event [21]Hub와 같은 공통 서비스에 대한 파이프라인 및 커넥터 또는 SDK를 사용한 프로그램 수집입니다.

데이터 시각화는 네이티브 대시보드 제품 또는 Power 등의 툴을 사용하여 실현할 수 있습니다.BI[21][22] 또는 Grafana.[23][24]

설계.

Azure Data Explorer는 Microsoft Azure의 컴퓨팅 노드 클러스터에서 실행되는 분산 데이터베이스입니다.Relational Database Management System(RDBMS; 릴레이셔널 데이터베이스 관리 시스템)을 기반으로 데이터베이스, 테이블, 함수 및 열과 같은 엔티티를 지원합니다.계산된 열, 행 검색 및 필터링, 집계별 그룹화 및 [25]결합과 같은 복잡한 분석 쿼리 연산자를 지원합니다.

엔진 서비스는 다음과 같은 관계형 데이터 모델을 제공합니다.최상위 수준(클러스터)에는 데이터베이스 집합이 있으며, 각 데이터베이스에는 테이블 집합과 저장된 함수가 포함되어 있습니다.각 테이블은 스키마(입력된 필드의 순서 목록)를 정의합니다.

Azure Data Explorer에서는 일반적인 RDBMS(Relational Database Management System)와 달리 키 고유성, 기본 키 및 외부 [26]키와 같은 제약이 없습니다.쿼리 시 [27]필요한 관계가 설정됩니다.Azure Data Explorer의 데이터는 일반적으로 데이터베이스 생성, 데이터 수집, 데이터베이스 쿼리 등의 [28]패턴을 따릅니다.

레퍼런스

  1. ^ Serra, James (2019-03-14). "Azure Data Explorer". James Serra's Blog. Retrieved 2020-04-09.
  2. ^ "Microsoft Rolls Out Azure Data Lake Storage, Azure Data Explorer". eWEEK. Retrieved 2020-04-10.
  3. ^ Mogenis, Max. "What is Azure Data Explorer?". blog.pragmaticworks.com. Retrieved 2020-03-21.
  4. ^ "Creating An Azure Data Explorer Cluster And Database In Azure". www.c-sharpcorner.com. Retrieved 2020-04-09.
  5. ^ Mackie, Kurt (2019-09-20). "Updated Tools for Office 365 and Microsoft Azure Arriving Soon -- Redmondmag.com". Redmondmag. Retrieved 2020-04-10.
  6. ^ a b "Microsoft Azure Data Explorer vs. Microsoft Azure SQL Database Comparison". db-engines.com. Retrieved 2020-04-09.
  7. ^ a b c d Mahajan, Gauri (2020-02-27). "Azure Data Explorer for beginners". SQL Shack - articles about database auditing, server performance, data recovery, and more. Retrieved 2020-04-09.
  8. ^ a b "What is Azure Data Explorer". docs.microsoft.com. Retrieved 2019-12-06.
  9. ^ a b Mahajan, Gauri (2020-02-27). "Azure Data Explorer for beginners". SQL Shack - articles about database auditing, server performance, data recovery, and more. Retrieved 2020-03-21.
  10. ^ Lai, Alex (2019-01-14). "What is Azure Data Explorer and Kusto Querying Language (KQL)?". Adatis. Retrieved 2020-04-10.
  11. ^ "Azure Data Explorer - Digital Marketplace". www.digitalmarketplace.service.gov.uk. Retrieved 2020-03-21.
  12. ^ "Microsoft R&D". www.microsoftrnd.co.il. Retrieved 2019-12-06.
  13. ^ orspod. "Introducing Application Insights Analytics". devblogs.microsoft.com. Retrieved 2019-12-06.
  14. ^ a b "Introducing Azure Data Explorer". azure.microsoft.com. Retrieved 2019-12-06.
  15. ^ "General Availability: Azure Data Explorer Azure updates Microsoft Azure". azure.microsoft.com. Retrieved 2019-12-06.
  16. ^ orspod. "Azure Data Explorer Kusto EngineV3". docs.microsoft.com. Retrieved 2021-04-13.
  17. ^ Brust, Andrew. "Fastly, Microsoft partner on real-time analytics with Azure Data Explorer". ZDNet. Retrieved 2020-04-09.
  18. ^ Mackie, Kurt (2019-07-18). "Microsoft Previews Prometheus Data in Azure Monitor for Containers -- Redmondmag.com". Redmondmag. Retrieved 2020-04-09.
  19. ^ "Getting Started with the Kusto Query Language (KQL) – System.Blog.Martens.Ben". blogs.msdn.microsoft.com. Retrieved 2019-12-06.
  20. ^ "Exploring Data in Microsoft Azure Using Kusto Query Language and Azure Data Explorer". www.pluralsight.com. Retrieved 2020-03-21.
  21. ^ a b "Architecting Data and Analytics Pipelines in Azure". Gartner. Retrieved 2020-04-10.
  22. ^ Mahajan, Gauri (2020-02-27). "Azure Data Explorer for beginners". SQL Shack - articles about database auditing, server performance, data recovery, and more. Retrieved 2020-04-10.
  23. ^ "Grafana vs Azure Dashboards - Which One to Use & When?". CloudIQ Tech. 2018-12-10. Retrieved 2020-04-10.
  24. ^ "Azure Data Explorer Datasource plugin for Grafana". Grafana Labs. Retrieved 2020-04-10.
  25. ^ orspod. "Getting started with Kusto - Azure Data Explorer". docs.microsoft.com. Retrieved 2019-12-06.
  26. ^ "GraphDB vs. Microsoft Azure Data Explorer Comparison". db-engines.com. Retrieved 2020-04-10.
  27. ^ "Azure Data Explorer: a big data analytics cloud platform" (PDF). Archived (PDF) from the original on 2019-12-06.
  28. ^ Serra, James (2019-03-14). "Azure Data Explorer". James Serra's Blog. Retrieved 2020-03-21.