본문 바로가기

aplatform19

Semantic Search 따라하기 with SingleStore 안녕하세요 에이플랫폼 입니다. 저번 싱글 스토리 4화의 내용인 Semantic Search를 SingleStore NoteBooks를 활용하여 직접 따라 해보는 시간을 가져보겠습니다. 싱글 스토리는 아래 링크의 카페에서 확인하실 수 있습니다.https://cafe.naver.com/aplatformbiz/30178 4화 - 시맨틱 검색(Semantic Search)안녕하세요, 에이플랫폼의 싱글스토리 시리즈입니다. 최근 생성형 AI 기술이 급격히 발전하면서, 단순한 키워드 기반 검색이 아닌 의미를 이해하는 검색(Semantic Searc...cafe.naver.com잠시 들어가기 전에 먼저 간단하게 소개를 드리자면SingleStore Notebooks는 Jupyter Notebook의 기능을 확장하여 데이.. 2025. 2. 24.
[Support Bulletin 05] - Red Hat 9.2 Memory 할당 에러 안녕하세요 에이플랫폼 입니다.이번 글에서는 RHEL 9.2 버전의 OS 커널에서 발견된 메모리 할당 관련 버그와 이로 인해 발생할 수 있는 문제를 소개해 드리겠습니다. 📌개요Red Hat Linux 9.2 버전에서 SingleStore를 사용하던 중 시스템의 가용 메모리가 충분함에도 불구하고 종종 다음과 같이 메모리를 할당할 수 없다는 에러가 발생하는 사례가 있었습니다.ERROR 1712 (HY000): Leaf Error (127.0.0.1:3307):The operating system failed to allocate memory (MemSQL memory use 8927.00 Mb) 해당 에러는 특정한 작업에서만 발생하는 것이 아니라 Select, Load Data 명령과 같은 데이터 처리 명령.. 2025. 2. 19.
SingleStore, 2025년 TrustRadius Buyer’s Choice Award 수상! 안녕하세요, 에이플랫폼의 ‘싱글스토리’ 시리즈입니다.이번에는 에이플랫폼 공식 카페의 특별편인 ‘싱글스토리’ 중 하나를 공유해 드리려합니다. SingleStore가 TrustRadius Buyer’s Choice Award를 수상하며, 2025년에도 뛰어난 제품으로 인정받았습니다. TrustRadius는 이전에도 SingleStore를 관계형 데이터베이스, 서비스형 데이터베이스, 운영 분석 및 인메모리 데이터베이스 부문에서 최고 등급으로 선정했지만, 2024년에는 벡터 데이터베이스 부문에서 첫 번째 수상이자 Buyer’s Choice Award 첫 수상이라는 특별한 기록을 세웠습니다.💡 고객이 인정한 SingleStore의 강점 TrustRadius는 고객이 실제 사용자 경험, 심층적인 리뷰, 그리고 동.. 2025. 2. 14.
[Support Bulletin 04] - SingleStore Pipeline을 활용한 고속 CDC 적용 – Kafka Sink Connector의 한계를 넘어서다 안녕하세요, 에이플랫폼의 Support Bulletin 시리즈입니다.오늘은 타 DB에서 SingleStore로 실시간 데이터를 연동하는 방법을 다뤄보겠습니다. 📌개요다양한 CDC(Change Data Capture) 솔루션은 Source Connector로 동작하며, 소스 데이터베이스의 변경 사항을 Kafka Topic으로 Publish할 수 있습니다. 이렇게 전달된 변경 정보는 일반적으로 Kafka Sink Connector를 사용해 타겟 데이터베이스에 적용됩니다.하지만, Kafka Sink Connector는 보통 단일 인스턴스로 동작하기 때문에 운영 시스템에서 병렬로 발생하는 수많은 변경 사항을 SQL을 통해 반영하는 과정에서 성능 저하가 발생할 수 있습니다. 결과적으로 Lag 증가를 피하기 어려.. 2025. 2. 10.
[Support Bulletin 03] - Kafka Pipeline 의 zstd 압축 포맷 지원 안녕하세요 에이플랫폼의 Support Bulletin 시리즈 입니다.벌써 세 번째 시간인데요 오늘은 조금은 색다르게 해볼 예정 입니다.앞서 올려드린 Kafka 클러스터와 SingleStore 클러스터 구축 글을 통해직접 따라서 해보실 수 있게끔 준비했습니다.그럼 SingleStore의 기능인 Kafka Pipeline에 대해서 설명 드리겠습니다.📌개요실시간 데이터 스트리밍 플랫폼인 Kafka 는 Topic 에 전달하는 메시지 포맷으로 비압축 일반 데이터를 포함하여 gzip, lz4, snappy, zstd 등 다양한 알고리즘에 의한 압축 형태를 지원합니다.Kafka 토픽에 전달되는 메시지를 실시간으로 테이블에 적재하는 기능인 SingleStore Kafka Pipeline 에서도 별도의 설정 없이 위의.. 2025. 2. 4.
SingleStore 클러스터 구축 안녕하세요 에이플랫폼 입니다.오늘은 후술할 Kafka 관련 테스트를 하기 위해 싱글스토 클러스터를 구축하는 방법을 소개해 드리겠습니다. 📌테스트 환경Virtual Machine을 사용했습니다.OS: Rocky 9.54 CPU / 8 GB RAM간단하게 설치 후 SingleStore Kafka Pipeline 실습을 위한 목적입니다.1 Host / 1MA + 1LF 구성 입니다.1. 사전 작업1.1. SELINUX 끄기# 아래와 같은 상태라면 OK~[jwy@kafka ~]$ sestatusSELinux status: disabled# 만일 아래와 같다면[jwy@kafka ~]$ sestatusSELinux status: enabledSELinuxf.. 2025. 2. 4.
SingleStore Vector DB에 관한 10문 10답 ​ ​ Q1. 요즘 DB 시장에서 특수 벡터 DB의 비중이 커지고 있는데, 이 특수 벡터 DB가 무엇인가요? ​ 요즘 DB 시장에서 이 특수 벡터 DB를 빼놓고 이야기할 수가 없죠. 특수 벡터 DB는 주로 고차원의 벡터를 저장하고 검색하는 데에 특화되어 있는데, 특히 최근접 이웃 검색(nearest-neighbor search)에 많이 이용되고 있어요. 그리고 이런 DB들은 "메타데이터"라고 불리는 다른 속성들에 대해서도 어느 정도 필터링이 되긴 하지만, 일반적인 DB 시스템에서 기대하는 모든 기능을 갖추고 있지는 않아요. ​ ​ Q2. 이것을 구매한 후 기존의 데이터 아키텍처에 합치면 어떤 일이 발생하나요? ​ 음.. 과도한 데이터 이동이나 데이터 중복 현상, 그리고 분산된 컴포넌트 간의 데이터 값 불.. 2023. 8. 4.
싱글스토어(SingleStore), 블록체인 프로젝트 플레타(FLETA) 메인넷 DB로 채택 코로나로 인해 국내외 기업환경의 변화는 예상했던 것보다 급진적으로 일어나고 있다. 이런 급변하는 환경에 대응하는 동시에 기업의 생존 활로를 찾기 위해 이미 수많은 빅데이터와 클라우드 전환 사업들이 진행이 되고 있어, 이제 디지털 전환은 개념이 아닌 기업의 필수불가결한 요소로 자리 매김하고 있는 것이 현실이다. ​ 디지털 전환의 한 영역인 블록체인 또한 무한 경쟁환경에 놓여 있다. 이런 환경에서 독보적인 포지션을 차지하고 있는 샌드스퀘어㈜는 블록체인 기술의 상용화를 선도하는 기업으로 2019년, 2020년 연속으로 정보통신산업진흥원(NIPA)의 블록체인 기술검증 지원사업에 선정된 바 있어 그 기술력을 인정받고 있다. 샌드스퀘어가 직접 개발, 운영하는 블록체인 플랫폼, 플레타(FLETA)는 빠른 거래 처리 .. 2021. 2. 19.
전자신문 - 아이티메세지, 싱글스토어 DB기반 마이데이터 모니터링 솔루션 '파인트레이스' 출시 디지털 전환 전문기업, 아이티메세지 (대표 이대영)는 최근 국내 최초로 마이데이터 전문 모니터링 솔루션인 '파인트레이스(FineTrace)'를 출시했다고 16일 밝혔다. 팬데믹으로 인해 최근 금융권을 중심으로 비대면 금융 서비스가 본격화되고, 작년 데이터 3법 통과 후에 많은 금융 기업들이 개인의 신용정보활용을 통해 다양한 맞춤형 서비스 제공을 위한 마이데이터 플랫폼 구축에 열을 올리고 있다. 이에 대한 반증으로 이미 선정된 28개 마이데이터 사업자 외에 2차로 사업자 인가 신청을 위해 많은 기업들이 준비하고 있다. 구축되는 마이데이터 시스템은 오픈 API 기반으로 개인의 금융 데이터를 마이데이터 사업자에게 제공해야 하고 동시에 제공받은 데이터를 기반으로 맞춤형 서비스를 제공한다. 이를 위해서는 마이데이.. 2021. 2. 17.