데브포유

MariaDB ColumnStore에 대용량 데이터를 적재하면 자동으로 파티셔닝 됩니다. TIP 1. 선두 컬럼이 중요한 역할을 하며, 숫자형이나 날짜형으로 하면 좋다고 이전 글에서 알려드린적이 있습니다. 오라클에서도 마찬가지이지만 파티셔닝된 테이블을 사용할 때는 왠만하면 파티셔키가 되는 컬럼 값을 조회 조건에 넣어 주는게 성능에 유리합니다. ex) 주문월(int(6))로 파티셔닝 된 테이블을 고객 번호로 주문 내역을 조회할 경우... -------------------------------------------------------------------------------------------------- select * from 주문 where 고객번호 = '100000' and 주문월 betwee..

​ 라이브 포토가 표현이 안되서 아쉽습니다. 산책하다 우연히 발견 .. 뭘 형상화 한 것인지 (생명력)

MariaDB ColumnStore 커뮤니티 버전에서도 "파티션 테이블"을 사용할 수 있습니다. CockroachDB에서는 엔터프라이즈 버전에서만 사용할 수 있습니다. 그럼 MariaDB ColumnStore에서 지원하는 "파티션 테이블" 특징은 나열해 보겠습니다. 1. MariaDB ColumnStore는 모든 열에서 논리적 수평 파티션을 자동으로 생성됨 2. 1개의 파티션은 2개의 익스텐트로 구성되며, 각각의 익스텐트에는 8백만 rows 가 저장됨. 3. 맨 앞에 위치한 컬럼이 파티션 키가 됨. 4. 파티션 키는 숫자(int), 날짜(date)를 사용할 때 파티션 Min, Max 값이 잘 구분되어 짐. 파티션 구성 조회 1) select calShowPartitions('테이블명','컬럼명'); 2)..

MariaDB ColumnStore에 Bulk로 데이터를 적재할 때 cpimport 를 사용하게 됩니다. 성능이 어떨까요? 60여개 필드(컬럼) 데이터 1000만건을 import하는 속도가 약 70~80초 정도 소요 됩니다. 대용량 데이터 적재시에 시간을 많이 절약할 수 있습니다. 적재하는 데이터의 종류에 따라서 cpimport 옵션을 적절히 사용해 주시면 효과적입니다. 저는 -s, -E, -C 옵션을 사용해서 "상품명"같이 문자가 마구 섞여 있어서 기본 설정으로 로딩 실패를 해결 했습니다. -s : 필드 구분 문자 (문자 1개로만 사용 가능), 보통 ",", "₩t"를 사용하지 싶습니다. -E: 필드를 완벽히 구분하기 위해서 값을 감싸 주는 문자를 지정할 수 있습니다. : 'A','B','C'

아이폰 5s를 사용하다가 2년 전쯤에 Essential Phone를 구입해서 사용 했었습니다. 제 기준으로 안드로이드 8.0 부터는 안정성도 좋고, 베터리 관리도 봐줄만 했었습니다. 아직까지 디자인이나 마감은 Essential Phone이 제 기준으로는 1위 입니다. 2년 정도 사용했기에 새로운 녀석으로 알아보다가 안드로이드는 사고 싶은 폰이 없어서 다시 아이폰으로 넘어 왔습니다. 제가 1년 전에 출시한 iphone xs를 구입한 이유는.. 1. 3D Touch가 되는 마지막 아이폰 => iphone 6s 때부터 사용해보고 싶은 기능이었는 데, iphone 11 pro에 없어짐. 2. 상대적으로 하락한 가격 => iphone xs 64GB: 106만원, iphone 11 pro 64GB: 139만원 33..

데이터(정보)를 사람이 쉽게 인식하기 위해서 데이터 시각화는 필수 입니다. 제플린이나 타블로등 많은 솔루션이 있지요. 시각화 솔루션 중에서 현재 사용하려고, 연구중인 "Metabase"를 소개해 드립니다. URL = https://www.metabase.com/ Metabase Ask your own questions Explore on your own Easily filter and group your data to find just what you’re looking for, all without ever writing a line of sql or having to wait on a co-worker. See connections It just takes a click to see individua..

지난 10월 12일 ~ 14일까지 2박 3일 일정으로 제주도 여행을 했습니다. [12일] 집 -> 김포공항(08:30) -> 제주공항 -> 차량 렌트-> 카트체험 -> 점심식사 -> 사려니숲길 -> 만장굴 -> 서귀포 숙소 -> 저녁식사 [13일] 숙소 -> 쇠소깍(조각배) -> 아침식사 -> 천지연폭포 -> 올레 7번길(외돌개) -> 용머리해안 -> 서귀포시장(저녁거리구입) -> 숙소 -> 저녁식사 [14일] 숙소 -> 우도 -> 아침식사 -> 우도(스쿠터 라이딩) -> 성산일출봉 -> 비자림 -> 저녁(제주시 횟집) -> 렌터카 반납 -> 제주공항 (19:30) -> 김포공항 -> 집 여행 경비를 정산해 보니 "태국 여행"과 거의 비슷하게 나왔습니다. ^^ 제주도 갈 돈이면 동남아 간다는 말이 실감이..

​ 컬럼 지향형 DB인 MariaDB ColumnStore에 데이터웨어하우스와 마트를 구성한 후에 메타베이스를 통해서 다양한 데이터를사람이 쉽게 인지할 수 있도록 시각화하고 있습니다.컬럼스토어와 메타베이스가 모두 오픈소스여서 어려운점이 많지만, 하나씩 해결해 나가는 즐거움도 큽니다.