Tech
2021년 AI/ML/BD 업계 지도와 트렌드
1장의 Landscape 로 정리한 2021년 Bigdata & AI 업계 트렌드와 설명이 포스팅 되었네요.
다양한 관점에서 (기술,투자,M&A 등) 상세하게 설명되어있고 products 의 history 를 중심으로 풀어나갑니다.
Hot 키워드를 정리하자면,
- Data Mesh
- Real time Now (이제는 실시간)
- Reverse ETL
- Feature Store
- ModelOps 의 부상
- China AI Stack 의 발전
등인데,
Datawarehouse-> Data Lake -> Lakes on Everywhere 관련 아티클도 소개되어 있습니다.
Persistence infra 관련, Hadoop 이 Bigdata 에 대한 초석을 닦아놓았다면, 이제는 클라우드와 결합한
진정한 의미(?)의 Bigdata 솔루션들이 시장에 나오고 있고, 눈여겨볼 선두주자들은 Snowflake 와 Lakehouse 가 명시되어 있네요.
Lakehouse 는 Spark 를 인수한 Databricks 에서 야심차게 만든 솔루션입니다.
Databricks 는 불과 몇년전만 하더라도 Gartner's magic quadrant 에서 visionary 의 한부분을 차지하고 있었지만,
2021년은 IBM, SAS 등 전통적인 업계 리더들과 함께 Leaders 파트로 등재해 있지요. (참조)
그밖에 업계들간의 sharing 동향, friend and foe 전략등 눈여겨 볼만한 아티클이 많습니다.
전략기술 트렌드 2022 (가트너)
가트너가 2022년 전략 기술 트렌드를 포스팅 하였네요.앞서 포스팅 하였던 2021년 업계지도/트렌드와 함께 보면 참고할만한 글입니다.
눈여겨볼 만한것은 "Generative AI" 가 또다시 부상하고 있고, 하나의 트렌드가 될것이라는 것.이건 우리가 알고있는 "GAN" 과는 다른 개념의, 조금더 범용적인 내용입니다.
Metaflow UI (Netflix Opensource)
넷플릭스에서 만든 데이터사이언스용 Full stack python framework 입니다.
이걸 모니터링 하기 위한 GUI 도구를 오픈소스로 풀었네요.
Demo 화면은 여기 에서 참고 가능합니다.
MangoDB (MongoDB 오픈소스)
ElasticSearch 가 그랬듯, SSPL 라이센스로 변해버린 몽고DB를 대체하기 위한 프로젝트가 생겼네요.
Go로 만들어졌으며 PostgreSQL 을 DB 엔진으로 사용합니다.
Driver 수준에서 호환성을 제공하여 MongoDB 를 바로 대체할수 있도록 하는게 목표라는 군요.
이 프로젝트를 보면서 느껴지는건 PostgreSQL 은 정말 다방면으로 사용되는 엔진이라는거..
댓글 없음:
댓글 쓰기