SQL 검색 결과
15 개의 검색 결과가 있습니다.
Data Science/DB+SQL

[MySQL] 대량의 테스트 데이터 생성 SQL

1. 테이블 생성먼저 생성할 데이터를 저장할 테이블을 생성합니다.-- 대상 테이블 생성CREATE TABLE IF NOT EXISTS performance_test ( id BIGINT UNSIGNED AUTO_INCREMENT PRIMARY KEY, name VARCHAR(50), age TINYINT UNSIGNED, city VARCHAR(50), salary INT UNSIGNED, created_at DATETIME);2. 순차 번호 테이블 생성.MariaDB에는 기본적으로 숫자 시퀀스를 생성하는 내장 기능이 없기 때문에, 순차 번호(1~1000만) 테이블을 만들어 사용할 수 있습니다. 다음 스크립트를 사용하여 연속된 숫자를 포함한 테이블을 만듭니다. -- 순차 ..

2024. 9. 26. 02:30
Data Science/DB+SQL

[SQL] 연승 연패 구하는 SQL

연승/연패 구하기 Player마다 게임 승패를 기록한 히스토리가 있다. 다음과 같이 각 플레이어의 최대 연승와 최대 연패를 구한다. player 최고 연승 최고 연패 carry 5 1 john 3 1 sam 4 2 1) 테스트용 게임 히스토리 데이터 -- Make test-data /* game_history table player : Play name. game_id : Game Identifier is_win : 1=Win, 0=Lose */ CREATE TABLE game_history AS SELECT 'john' player , 1 game_id , 1 is_win UNION ALL -- is_win : 1=Win, 0=Lose SELECT 'john' , 2 , 0 UNION ALL SELEC..

2023. 1. 11. 00:04
Data Science/DB+SQL

[SQL]시계열데이터 분석 : 불연속적인 상태 변화값 분석

시계열 분석에서 불연속적인 상태 변화 데이터에서 각 상태가 유지된 시간을 산출하는 쿼리 예를 들어, 다음과 같은 시계열 데이터에서 각 상태별 지속 시간 총합("결과 데이터")을 산출하고자 한다. Time (sec) State 1 Normal 2 Normal 5 Anomaly 6 Anomaly 7 Anomaly 8 Normal 15 Anomaly 16 Anomaly 17 Normal 결과 데이터. State Durations Time List Normal 11 1~4, 8~14, 17 Anomlay 5 5~7, 15~16 테스트 데이터 생성 DROP TABLE IF EXISTS log_events; create table log_events ( group_idINT , tsBIGINT , state INT..

2022. 10. 21. 02:19
Data Science/DB+SQL

[Mysql] Checking if a temporary table exists : 임시 테이블 존재여부 체크

MySQL은 임시 테이블이 존재하는지 확인하는 함수나 문장을 제공하지 않아 Stored Procedure를 만들었다 이 프로시저의 원리는 PREPARE 문을 통해서 select 1 from temp_table 구문을 실행하여 에러 발생여부를 체크하는 방식으로 임시 테이블 존재여부를 체크한다. DELIMITER // CREATE PROCEDURE check_table_exists(table_name VARCHAR(100)) BEGIN DECLARE CONTINUE HANDLER FOR SQLSTATE '42S02' SET @err = 1; SET @err = 0; SET @table_name = table_name; SET @sql_query = CONCAT('SELECT 1 FROM ',@table_na..

2022. 9. 6. 21:51
Data Science/DB+SQL

[MYSQL] 테이블의 인덱스 정보 조회 SQL

-- How to see indexes for a database or table in MySQL SELECT INDEX_NAME AS `Index Name` , GROUP_CONCAT(COLUMN_NAME ORDER BY SEQ_IN_INDEX SEPARATOR ', ') AS `Columns` , IF(MAX(NON_UNIQUE)=1, 'No', 'Yes') AS `Unique` FROM information_schema.`STATISTICS` AS C WHERE C.table_schema = DATABASE() AND C.TABLE_NAME = '#TableName#' -- 테이블 네임을 지정한다. GROUP BY INDEX_NAME ORDER BY IF(INDEX_NAME='PRIMARY', '1..

2021. 11. 3. 16:33
Data Science/DB+SQL

[MYSQL] 날짜 연산 함수 (DATEDIFF, DATE_ADD)

DATEDIFF두 날짜의 차이(일수)를 계산하는 함수SELECT DATEDIFF('2021-10-03','2021-10-01') AS diff;-- 결과 : 2 TIMESTAMPDIFF두 시간의 차이를 계산하는 함수.첫번째 인자에 Second, Minute, Day, Month, Year 를 지정하면 해당 단위로 차리를 계산한다.-- 시간 차이를 분단위로 계산SELECT TIMESTAMPDIFF(MINUTE, '2021-10-01 13:00:00','2021-10-01 14:00:00') AS TIMESTAMPDIFF;-- 결과 : 60 DATE_ADD시간이나 날짜를 더하는 함수SELECT DATE_ADD('2021-10-01', INTERVAL 1 DAY) added_date-- 2021-10-02SE..

2021. 10. 12. 11:16
Data Science/DB+SQL

[MYSQL] 3개 컬럼을 내림차순으로 3개의 컬럼으로 재배치하는 SQL

-- 테이블 생성 CREATE TEMPORARY TABLE t ( id1INT ,id2INT ,id3INT ,valint ) ; -- 테스트 데이터 입력 INSERT INTO t SELECT 1 AS id1, 2 as id2, 3 AS id3, 1 AS val UNION ALL SELECT 2 AS id1, 1 as id2, 3 AS id3, 1 AS val UNION ALL SELECT 3 AS id1, 2 as id2, 1 AS id3, 1 AS val UNION ALL SELECT 2 AS id1, 3 as id2, 1 AS id3, 1 AS val ; -- id1,id2,id3 값을 큰 값부터 max_id, mid_id, min_id로 재배치 한다. SELECT GREATEST(id1, id2, ..

2021. 9. 14. 18:51
Data Science/DB+SQL

[MYSQL] SQL - LIKE OR 를 정규식(REGEXP)으로 튜닝

-- col1 에 Hello 또는 World를 포함한 값 조회 SELECT * FROM table1 WHERE col1 LIKE '%Hello%' AND col1 LIKE '%World%' -- 위 쿼리와 동일한 결과를 조회. SELECT * FROM table1 WHERE col1 REGEXP ('Hello|World') -- col1 에 Hello 또는 World를 시작하는 결과 조회. SELECT * FROM table1 WHERE col1 LIKE 'Hello%' AND col1 LIKE 'World%' -- 위 쿼리와 동일한 결과를 조회. SELECT * FROM table1 WHERE col1 REGEXP ('^Hello|^World')

2021. 9. 1. 10:07
Data Science/DB+SQL

[MYSQL] Temporary Table Control (임시 테이블 다루기)

Mysql Temporary Table 개요.MySQL에서 임시테이블(Temporary table)은 단일 세션에서 여러 번 재사용할 수 있는 임시 결과 세트를 저장할 수 있는 특수한 유형의 테이블입니다.임시 테이블은 반복적인 SELECT 쿼리를 해야 하거나, 대량의 집계 쿼리와 같이 비용이 클 때 유용하게 활용할 수 있습니다.  Mysql temporary table의 특징1) Mysql 임시 테이블 생성되는 시점는?임시 테이블은 create temporary table 했을 때 테이블 생성됩니다.  2) Mysql 임시 테이블 제거되는 시점는?임시테이블은 세션이 종료 되거나, 연결이 종료될 때 자동으로 삭제됩니다. 물론, drop temporary table 문으로 명시적으로 실행했을 때 삭제됩니다...

2021. 8. 10. 01:36
Data Science/Python

[ETL실전] Python으로 CSV 파일을 DB(Mysql)에 임포트하기 #1

개요 웹에서 수집한 RAW-DATA(CSV)를 읽어서 가공하고 DB화하는 내용입니다. 데이터는 주식 정보를 제공하는 사이트인 finviz.com의 Screener 메뉴에서 제공하는 주식 데이터가 CSV로 존재한다는 전제로 CSV파일을 Python코드로 가공하여 DB(MYSQL)화하는 ETL(Extract-Transfer-Load) 실전 예제입니다. 특히, 데이터 가공을 Python의 Pandas가 아닌 테이블로 로드하여 SQL로 가공하는 기법을 소개하는 내용입니다. 예제에서 사용하는 RAW-DATA입니다. 다운로드 받어서 적절한 위치로 복사해주시면 됩니다. 샘플데이터 : 다음 Jupyter Notebook에서 샘플 데이터를 확인하는 코드입니다. 더보기 import os import sys import p..

2021. 8. 3. 06:49
반응형
반응형