티스토리

Data Story

검색하기

블로그 홈

Data Story

overoid.tistory.com/m

DA, Data Modeling, Tuning, Data Engineering 2022.10.20 ( from 2010.07.29 )

구독자: 1

방명록 방문하기

반응형

주요 글 목록

DB2 Script - Table Column Info DB2 테이블 및 컬럼 목록 정보 (통계정보) 포함 -- COLUMN INFO -- 실제 PK CONSTRAINT를 생성하지 않고 PK 이름으로 인덱스만 생성한 경우를 찾기 위한 로직이 포함되어 있음. SELECT C.TABSCHEMA, C.TABNAME, C.COLNAME, C.REMARKS, C.COLNO, C.TYPENAME, C."LENGTH", C."SCALE" , C."NULLS", C."DEFAULT", C.KEYSEQ, U.PK_IND_COL_SEQ, P.DATAPARTITIONKEYSEQ, C.COLCARD, C.HIGH2KEY, C.LOW2KEY, C.AVGCOLLEN, C.NUMNULLS FROM SYSCAT.COLUMNS C LEFT OUTER JOIN SYSCAT.DATAPARTI.. 공감수 0 댓글수 0 2023. 6. 5.
DB2 Script - Table Info DB2 테이블 목록 및 정보 출력 SELECT T.TABSCHEMA, T.TABNAME, T.REMARKS, CASE WHEN T.TYPE = 'A' THEN 'ALIAS' WHEN T.TYPE = 'T' THEN 'TABLE' WHEN T.TYPE = 'G' THEN 'Temporary Table' WHEN T.TYPE = 'V' THEN 'VIEW' END AS TABLE_TYPE, T.CREATE_TIME, T.STATS_TIME, T.COLCOUNT, T.CARD, T.TBSPACE, T.INDEX_TBSPACE, T.LONG_TBSPACE, T.AVGROWSIZE, PE.DATAPARTITIONEXPRESSION, P.PART_MIN_LOWVALUE, P.PART_MAX_LOWVALUE, PAR.. 공감수 0 댓글수 0 2023. 6. 5.
DB2 Script - Schema Size DB2 스키마별 용량 체크 SELECT TABSCHEMA ,ROUND(SUM(DATA_OBJECT_P_SIZE + INDEX_OBJECT_P_SITE + LONG_OBEJCT_P_SIZE + LOB_OBJECT_P_SIZE)/1024/1024,2) AS TOTAL_SIZE_GB ,ROUND(SUM(DATA_OBJECT_P_SIZE + LONG_OBJECT_P_SIZE + LOB_OBJECT_P_SIZE)/1024/1024,2) AS TABLE_SIZE_GB ,ROUND(SUM(INDEX_OBJECT_P_SIZE)/1024/1024,2) AS INDEX_SIZE_GB FROM SYSIBMADM.ADMINTABINFO WHERE TABSCHEMA NOT LIKE 'SYS%' GROUP BY ROLLUP(TA.. 공감수 0 댓글수 0 2023. 6. 5.
DB2 Scripts - Table Count By Schema 스키마별 테이블 건수 조회 스크립트 SELECT TABLE_SCHEMA , COUNT(*) AS TOTAL_COUNT , COUNT(CASE WHEN RIGHT(TABLE_NAME, 6) BETWEEN '000000' AND '999999' THEN 1 -- 숫자6자리로 끝나는 테이블명은 백업용 WHEN RIGHT(TABLE_NAME, 7) = '_BACKUP' THEN 1 WHEN RIGHT(TABLE_NAME,4) = '_TMP' THEN 1 WHEN RIGHT(TABLE_NAME,5) IN ('_TEST','_TEMP') THEN 1) AS UNUSED_GUESS FROM SYSIBM.TABLES GROUP BY ROLLUP(TABLE_SCHEMA) ORDER BY 2; 공감수 0 댓글수 0 2023. 6. 5.
[SQL] REGEXP_SUBSTR 구분자, 행, 열, 분리 (NULL 포함) 1. 문자열 SPLIT - 기본 형식 구분자로 연결된 문자열을 분리하는 경우 REGEXP_SUBSTR(문자열,'[^구분자]+'1,순번) 패턴을 사용하여 분리하는 예는 널리 알려졌다. 만일 중간에 NULL값이 포함된 경우라면? 오류가 발생한다. /* - 콤마(,)로 구분된 문자열 - 중간에 NULL값이 있는 경우 REGEXP_SUBSTR 함수는 엉뚱한 값을 리턴할 수 있음 (COL3, COL4) - 정규식 [^,]+ 의 의미는 콤마가 아닌 문자열 1개 이상을 뜻함. - 첫행의 ,, 부분은 선택되는 텍스트가 없기 때문에 잘못된 결과를 리턴한다. */ WITH SAMPLE_T AS ( SELECT 'A,BC,,EF' AS VAL FROM DUAL UNION ALL SELECT 'A,BC,D,EF' AS VAL.. 공감수 6 댓글수 0 2022. 10. 23.
values 절 (db2, postgresql) DB2와 PostgreSQL에서는 values 로 집합(레코드/컬럼)을 생성하는 유용한 구문이 있다. Insert문에서 활용하면 여러 레코드를 한번의 operation으로 처리 가능하여 성능 향상에 도움이 되며, values 항목에 컬럼이 올 수 있어서 행렬변환에도 유용, 임의 집합 생성시도 select ~ from dual union all ~~ (oracle 기준) 로 사용하는 긴 구문을 짧게 작성 가능함. values (1); --1row, 1col values 1; --1row, 1col => postgre에서는 에러 values 6,7,8; -- 1row, 3col => postgre에서는 에러 values (6),(7),(8); -- 3row, 1col values (6,6,6),(7,7,7).. 공감수 1 댓글수 0 2022. 10. 21.
SQL Fiddle Online SQL Test Tool 비교 "Fiddle"은 만지작거리다, 조작하다, 바이올린(명) 뜻을 가진 단어이다. 온라인 환경에서 간단히 언어를 테스트 할 수 있는 곳을 Fiddle이라고 하며, 다양한 언어별로 Fiddle이 있다. Online에서 SQL을 작성하고 테스트 할수 있는 SQL Fiddle 사이트 중 쓸만한 곳을 비교 하였음 별도로 DBMS 설치하지 않고도 간단한 SQL 테스트에 편리 1. dbfiddle Fiddle 지원 DBMS 지원 버전 특징 https://dbfiddle.uk/ Oracle 21c / 18c / 11gR2 가장 많은 DBMS를 지원 Jupeter Notebook과 유사한 UI를 지원하며, 여러 SQL문을 여러 섹션으로 나누어 테스트 가능 MySQL 8.0 / 5.7 / 5.6 / 5.5 PostgreSQ.. 공감수 1 댓글수 0 2022. 10. 21.
일반인을 위한 글쓰기 정석 - 요약정리 일반인을 위한 글쓰기 정석 - 요약정리 - 책 내용을 정리한 자료입니다.- 원본은 Edraw MindMaster로 작성한 마인드맵 입니다. (무료버전은 고급기능을 사용할 수 없지만, 사용 제한은 없음)- 웹페이지 확대해서 보세요. 공감수 0 댓글수 0 2018. 10. 10.
Temporary TableSpace Group Temporary Tablespace Group은 잘 알려지지 않는 오라클 기능 중 하나로, Oracle 10g에 추가된 기능이다. 일반적으로 temporary tablespace는 유저에게 지정하여, 특정 유저는 단 하나의 temporary tablespace만을 사용할 수 있었으나, Temporary Tablespace Group은 유저에게 임시 테이블스페이스 그룹을 지정하여 동시에 여러개의 임시 테이블스페이스를 사용하여 정렬 등의 작업 효율을 향상시키는 기능이다. 특징하나 이상의 temporary tablespace로 구성temporary tablespace로만 구성됨.명시적으로 생성하지 않고, 첫번째 temporary tablespace가 할당되면 암시적으로 그룹이 생성되고,마지막 temporar.. 공감수 0 댓글수 0 2018. 10. 10.
Real-Time SQL Monitoring - v$sql_plan_mointor 조회하기 (V2) 이전 글 Real-Time SQL Monitoring - v$sql_plan_mointor 조회하기 ( http://overoid.tistory.com/40?category=357137 ) 에서 사용된 SQL의 경우. LONG SQL 수행 후 문제가 있어 중지하고, 재 수행했다면... 이전에 수행했던 실행계획이 겹쳐서 나오는 단점이 있다.대신 쿼리가 심플하고 Version 2에 비해서 조회 성능이 더 우수하다. Version 1의 중복 이슈를 해결한 Ver2 - v$sql_plan_mointor 조회 쿼리. WITH SQL_PLAN_INF AS ( SELECT /*+ materialize ordered */ SQL_ID, PLAN_LINE_ID, STATUS, PROCESS_NAME, PLAN_DEPTH.. 공감수 0 댓글수 0 2018. 9. 8.
Real-Time SQL Monitoring - v$sql_plan_mointor 조회하기 오래동안 수행되는 SQL이 얼마나 진행되었는지 알 수 있을까?예상실행계획으로 확인된 실행계획 그대로 수행되고 있는지를 쿼리 수행중에 확인할 수 있을까? 수억에서 수십, 수백억 레코드를 조인하여 처리하는데.. 언제 끝날지 모른다면 정말로 답답하다. 수분에서 수십, 수백분이 소요되는 SQL 대량 작업의 경우 잘못된 실행계획으로 쿼리가 실행되고 있다는 것을 실행 초반에 알 수 있다면, SQL을 중지하고 수정하여 재실행함으로써 소중한 시간을 아끼고 일찍 퇴근할 수도 있을것이다. 다행히 오라클에서는 11g부터 Real-Time SQL Monitoring 기능을 제공한다.물론 쿼리가 수행완료된 이후 dbms_sqltune.report_sql_monitor 로 레포팅을 뽑아 결과를 확인할 수 도 있지만, 실행중에도 .. 공감수 1 댓글수 0 2018. 9. 8.
Real-Time SQL Monitoring 제한(limit) Real-Time SQL Monitoring(v$sql_mointor, v$sql_plan_mointor)은 Oracle 11g에서 추가된 기능으로 아래 조건에서 모니터링 된다. 실행시간이 5초 ( '_sqlmon_threshold' 히든 파라미터로 조정)이상 느린 쿼리의 실행이력병렬 쿼리의 실행 이력monitor 힌트를 사용한 쿼리에 대한 추적 위 조건을 만족하는데도 모니터링 되지 않는 다면????, v$sql_monitor에 나타나지 않는다면???? 만일, 모니터링 하는 SQL 문장의 실행계획 라인수가 300 라인이 넘는 복잡한 쿼리는 모니터링에서 누락된다. 오라클 히든 파라미터 중 '_sqlmon_max_planlines'=300 으로 초기 설정되어 있다.이 값을 늘리면 문제 해결!!! SQL> a.. 공감수 1 댓글수 0 2018. 9. 6.
Toad TeamCoding - Integration with SubVersion - part2 Toad TeamCoding part 1에 이어서... 이전 글을 못보신 분은 아래링크 클릭!! 2011/05/24 - [데이터베이스/Toad] - Toad TeamCoding - Integration with SubVersion - part1 4. Toad Team Configuration 자… 이제 필요한 SW는 모두 설치했으므로 Toad Team Coding을 위한 설정 작업만 하면 된다. 4-1. Toad Team configuration Server-side Object Install 과정에서 생성한 TOAD 계정으로 로그인 한다. TOAD 계정은 Team Coding에 필요한 Role을 모두 가지고 있기 때문이다. 상단 툴바에서 우측 마우스 클릭 > Team Coding 을 선택해 관련 툴바를.. 공감수 0 댓글수 0 2011. 5. 24.
Toad TeamCoding - Integration with SubVersion - part1 현대 프로그램 개발환경에서 CVS, SVN 같은 버전관리 툴은 필수 툴이 되어 버렸다. 그러나 DB 개발언어인 Oracle의 PL/SQL 언어로 함수나 패키지, 프로시저 등을 개발할 때 버전관리 툴을 사용할까? 대부분 잘 사용하지 않는다. 사용하지 않는 원인을 보면 거의 모든 버전관리시스템이 파일기준으로 동작을 하는데 비해 PL/SQL 개발은 따로 파일에 저장을 하지 않고 DB에 바로 저장을 하기 때문일 것이다. 물론 부지런한 개발자는 항상 PL/SQL 소스를 로컬 파일에 저장해 두고, 로컬 파일 정보를 별도의 버전관리 시스템의 클라이언트를 이용해서 버전관리를 할 수는 있을 것이다. 그렇지만, 그게 얼마나 귀찮은 일인가? 개발할 때 마다 수많은 PL/SQL 코드를 매번 파일로 저장하고, 별도로 COMMI.. 공감수 0 댓글수 0 2011. 5. 24.
실전 데이터모델링(비트컬럼으로 컬럼레벨 데이터통합) 기법 및 오라클 비트연산 가이드 비트컬럼으로 속성레벨의 데이터 통합 이번 포스트에서는 비트값으로 구성된 컬럼으로 컬럼 수준의 데이터 통합에 대한 가이드 및 비트 컬럼을 SQL로 조작하는 방안에 대해 살펴볼까 합니다. 먼저, 일반적인 샘플 ERD를 하나 보겠습니다. 좌측은 Logical 엔터티이며 우측은 Physical 테이블 설계안 입니다. 지극히 간단한 테이블입니다. 웹 화면을 구성하는 메뉴가 있고, 메뉴의 속성으로는 ID, 명, 그리고 화면을 제어하는 4개의 여부 컬럼이 있습니다. 간단하지만 전혀 문제가 없습니다. 요구사항도 명확히 반영했다고 한다면 정말 문제가 없는 모델링 입니다. 프로젝트팀이 프로젝트를 완료하고 난 후 운영팀에서 운영중에 새로운 고객 요구사항들이 나오기시작합니다. 메뉴ID를 화면에 무조건 보여주지 말고 사용자가 .. 공감수 1 댓글수 3 2011. 5. 16.
Toad의 강력한 기능을 eclipse 안에서 - Toad Extension for eclipse Toad의 강력한 기능을 Toad를 실행하지 않고 eclipse내에서 이용할 수 있다면 개발자들에게는 유용할 것이다. Quest사의 Toad Extension(freeware)를 이용하면 eclipse 뿐만 아니라, Visual Studio에서도 툴 환경 내에서 Toad의 강력함을 이용할 수 있다. Toad Extension for eclipse를 설치해보자. 1. Eclipse 실행 – Help > Install New Software 메뉴 선택 2. Install 대화상자의 Work with 부분에 다음의 주소를 입력 http://toaddownload.quest.com/toadextensions/eclipse/freeware/ 다음, 다음 눌러서 설치하시고 re-start 하면 설치가 끝납니다. T.. 공감수 0 댓글수 0 2011. 5. 11.
SQLite User Guide for Android, iPhone - Trigger SQLite Databae에 대한 일곱번째 포스트입니다. 이번 포스트에서는 SQLite의 Trigger에 대해서 다뤄보도록 하겠습니다. SQLite User Guide 포스트 목차 1. SQLite User Guide - 소개. GUI Tools 등 2. SQLite User Guide - PRAGMA, 시스템 카탈로그, DATA TYPE 3. SQLite User Guide - DDL(CREATE, DROP 등) 4. SQLite User Guide - DML (SELECT, INSERT, UPDATE, DELETE 등) 5. SQLite User Guide - Function (내장함수, Aggregation 함수) 6. SQLite User Guide - DateTime 함수, DateTime Fo.. 공감수 0 댓글수 0 2010. 8. 27.
SQLite User Guide for Android, iPhone - DateTime 함수, DateTime Formatting SQLite Databae에 대한 여섯번째 포스트입니다. 이번 포스트에서는 SQLite의 DateTime 관련 함수 및 Formatting 에 대해서 다뤄보도록 하겠습니다. 이 부분은 다른 DBMS와 많이 다르고 자주 사용하는 함수들이라 몇가지 표현법은 꼭 익혀야 될 점인것 같습니다. SQLite User Guide 포스트 목차 1. SQLite User Guide - 소개. GUI Tools 등 2. SQLite User Guide - PRAGMA, 시스템 카탈로그, DATA TYPE 3. SQLite User Guide - DDL(CREATE, DROP 등) 4. SQLite User Guide - DML (SELECT, INSERT, UPDATE, DELETE 등) 5. SQLite User Gui.. 공감수 0 댓글수 1 2010. 8. 27.
SQLite User Guide for Android, iPhone - 함수. Function (Core, Aggregation) SQLite Databae에 대한 다섯번째 포스트입니다. 이번 포스트에서는 SQLite의 Core 함수에 대해서 다뤄보도록 하겠습니다. SQLite User Guide 포스트 목차 1. SQLite User Guide - 소개. GUI Tools 등 2. SQLite User Guide - PRAGMA, 시스템 카탈로그, DATA TYPE 3. SQLite User Guide - DDL(CREATE, DROP 등) 4. SQLite User Guide - DML (SELECT, INSERT, UPDATE, DELETE 등) 5. SQLite User Guide - Function (내장함수, Aggregation 함수) 6. SQLite User Guide - DateTime 함수, DateTime Fo.. 공감수 0 댓글수 1 2010. 8. 27.
SQLite User Guide for Android, iPhone - DML (SELECT/INSERT/UPDATE/DELETE) 등 SQLite Databae에 대한 네번째 포스트입니다. DML은 대부분의 개발자들이 기본 SELECT/INSERT/UPDATE/DELETE에 대해서 워낙 잘 들 알고 계시므로 이번 포스트에서는 DML 관련하여 몇가지만 다루도록 하겠습니다. SQLite User Guide 포스트 목차 1. SQLite User Guide - 소개. GUI Tools 등 2. SQLite User Guide - PRAGMA, 시스템 카탈로그, DATA TYPE 3. SQLite User Guide - DDL(CREATE, DROP 등) 4. SQLite User Guide - DML (SELECT, INSERT, UPDATE, DELETE 등) 5. SQLite User Guide - Function (내장함수, Aggre.. 공감수 0 댓글수 0 2010. 8. 26.
SQLite User Guide for Android, iPhone - DDL(CREATE, DROP 등) SQLite User Guide 세번째 포스트입니다. 이번에는 CREATE TABLE, CREATE INDEX 등의 DDL 문에 대해 알아보도록 하겠습니다. SQLite User Guide 포스트 목차 1. SQLite User Guide - 소개. GUI Tools 등 2. SQLite User Guide - PRAGMA, 시스템 카탈로그, DATA TYPE 3. SQLite User Guide - DDL(CREATE, DROP 등) 4. SQLite User Guide - DML (SELECT, INSERT, UPDATE, DELETE 등) 5. SQLite User Guide - Function (내장함수, Aggregation 함수) 6. SQLite User Guide - DateTime 함수,.. 공감수 0 댓글수 1 2010. 8. 26.
SQLite User Guide for Android, iPhone - PRAGMA, Data Type 등. SQLite User Guide 두번째 포스트입니다. SQLite Document를 보다 보니 PRAGMA란 지시어(확장 명령어)가 나옵니다. 오라클에서도 PL/SQL 개발할 때 자율 트랜젝션이나 에러 정의 할 때 등 몇몇 부분에 PRAGMA 지시어를 사용할 수 있긴 합니다만 SQLite만의 독특한 기능들이라서 별도로 포스트를 구성했습니다. 전체 PRAGMA 지시어 (http://www.sqlite.org/pragma.html ) 중에서 자주 사용할 법한 몇가지만 살펴보도록 하겠습니다. SQLite User Guide 포스트 목차 1. SQLite User Guide - 소개. GUI Tools 등 2. SQLite User Guide - PRAGMA, DATA TYPE 3. SQLite User Gui.. 공감수 0 댓글수 0 2010. 8. 26.
SQLite User Guide for Android, iPhone - 소개, GUI Tools 등 SQLite는 Android 및 iPhone에 탑재되면서 많이들 사용하고 있는 파일베이스 RDB입니다. 공부를 하는데, 생각보다 많은 자료가 없더군요. 공부하면서 정리한 자료인데.. 많은 도움 되시면 좋겠습니다. 앞으로 제가 포스트할 User Guide의 목차는 다음과 같습니다. SQLite User Guide 포스트 목차 1. SQLite User Guide - 소개. GUI Tools 등 2. SQLite User Guide - PRAGMA, DATA TYPE 3. SQLite User Guide - DDL(CREATE, DROP 등) 4. SQLite User Guide - DML (SELECT, INSERT, UPDATE, DELETE 등) 5. SQLite User Guide - Function.. 공감수 0 댓글수 5 2010. 8. 26.
SQL & PL/SQL Naming Convention 본 내용은 이전에 작성된 SQL Style Guide에 이어진 문서입니다. 별도로 보셔도 상관없으나 함께 보시면 더 많은 도움이 되실 겁니다. Naming Conventions File Naming Conventions PL/SQL이나 SQL에서 코드를 저장할 때 다음과 같은 확장자를 사용한다. Oracle Object 타입별로 확장자를 사용함으로써 Toad 같은 툴에서 해당 에디터를 바로 실행시킬 수 있으며, 향후 Version Control 시스템과 연동하기도 유리하다. 또한, Object의 유지관리 및 editplus 같은 편집기에서 해당 확장자별로 Syntax Coloring 을 적용하기도 유리하다. File Type Extension Package (spec, and optionally body.. 공감수 1 댓글수 5 2010. 8. 6.
SQL Style Guide 아래 내용은 제가 2008년 프로젝트 당시에 작성한 문서입니다. 당시, 자바나 닷넷은 Code Style Guide 혹은 Code Convention등의 문서가 많았지만, SQL 및 PL/SQL에 대한 문서는 거의 없어서 제가 작성했던 문서입니다. 블로그 만든 기념으로 그 때 문서를 공유합니다. 문서가 길어서 Style Guide 와 Naming Convention 편을 분리해서 작성했습니다. 실제 내용은 프로젝트 개발자를 위한 가이드라서 좀 딱딱한 문체로 기술되었습니다. 프로젝트 팀간의 Formatting 공유를 위해 제가 사용중인 Toad용 Formatting 파일을 함께 첨부합니다. 첨부파일은 Toad Version별로 커스터마이징 되어 있습니다. 자신의 버전에 맞는것을 다운 받아 덮어쓰시면 됩니다.. 공감수 0 댓글수 1 2010. 8. 6.

반응형

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.