Data Science 검색 결과
134 개의 검색 결과가 있습니다.
Data Science/DB+SQL

[MYSQL] SQL - LIKE OR 를 정규식(REGEXP)으로 튜닝

-- col1 에 Hello 또는 World를 포함한 값 조회 SELECT * FROM table1 WHERE col1 LIKE '%Hello%' AND col1 LIKE '%World%' -- 위 쿼리와 동일한 결과를 조회. SELECT * FROM table1 WHERE col1 REGEXP ('Hello|World') -- col1 에 Hello 또는 World를 시작하는 결과 조회. SELECT * FROM table1 WHERE col1 LIKE 'Hello%' AND col1 LIKE 'World%' -- 위 쿼리와 동일한 결과를 조회. SELECT * FROM table1 WHERE col1 REGEXP ('^Hello|^World')

2021. 9. 1. 10:07
Data Science/DB+SQL

[MYSQL] Temporary Table Control (임시 테이블 다루기)

Mysql Temporary Table 개요.MySQL에서 임시테이블(Temporary table)은 단일 세션에서 여러 번 재사용할 수 있는 임시 결과 세트를 저장할 수 있는 특수한 유형의 테이블입니다.임시 테이블은 반복적인 SELECT 쿼리를 해야 하거나, 대량의 집계 쿼리와 같이 비용이 클 때 유용하게 활용할 수 있습니다.  Mysql temporary table의 특징1) Mysql 임시 테이블 생성되는 시점는?임시 테이블은 create temporary table 했을 때 테이블 생성됩니다.  2) Mysql 임시 테이블 제거되는 시점는?임시테이블은 세션이 종료 되거나, 연결이 종료될 때 자동으로 삭제됩니다. 물론, drop temporary table 문으로 명시적으로 실행했을 때 삭제됩니다...

2021. 8. 10. 01:36
Data Science

데이터 레이크(Data Lake)란?

데이터 레이크(Data Lake)는 구조화/반구조화/구조화되지 않은 대량의 원시 데이터를 저장, 처리, 보호하기 위한 중앙 집중식 저장소입니다. 데이터 레이크는 데이터를 원본 형식으로 저장할 수 있으며, 크기 제한을 무시하고 다양한 데이터를 처리 할 수 있습니다. 데이터 레이크는 확장 가능하고 안전한 플랫폼을 제공하며, 기업에서는 이를 통해 온프레미스, 클라우드, 에지 컴퓨팅 시스템 등을 가리지 않고 모든 시스템의 데이터를 속도 제한 없이 수집할 수 있을 뿐 아니라, 유형이나 양에 상관없이 모든 데이터를 고품질로 저장하고, 실시간 모드나 일괄 처리 모드로 데이터를 처리하며, SQL, Python, R 등의 언어와 타사 데이터 또는 분석 애플리케이션을 사용하여 데이터를 분석할 수 있습니다. 데이터레이크 V..

2021. 8. 10. 01:21
Data Science/Python

[ETL실전] Python으로 CSV 파일을 DB(Mysql)에 임포트하기 #1

개요 웹에서 수집한 RAW-DATA(CSV)를 읽어서 가공하고 DB화하는 내용입니다. 데이터는 주식 정보를 제공하는 사이트인 finviz.com의 Screener 메뉴에서 제공하는 주식 데이터가 CSV로 존재한다는 전제로 CSV파일을 Python코드로 가공하여 DB(MYSQL)화하는 ETL(Extract-Transfer-Load) 실전 예제입니다. 특히, 데이터 가공을 Python의 Pandas가 아닌 테이블로 로드하여 SQL로 가공하는 기법을 소개하는 내용입니다. 예제에서 사용하는 RAW-DATA입니다. 다운로드 받어서 적절한 위치로 복사해주시면 됩니다. 샘플데이터 : 다음 Jupyter Notebook에서 샘플 데이터를 확인하는 코드입니다. 더보기 import os import sys import p..

2021. 8. 3. 06:49
Data Science/Python

[스크랩] opencv_tutorials

https://github.com/learncodebygaming/opencv_tutorials GitHub - learncodebygaming/opencv_tutorials: Tutorials for learning OpenCV by making a video game bot. Tutorials for learning OpenCV by making a video game bot. - GitHub - learncodebygaming/opencv_tutorials: Tutorials for learning OpenCV by making a video game bot. github.com https://www.learncodebygaming.com/blog/fast-window-capture Fast Win..

2021. 7. 21. 20:27
Data Science/DB+SQL

[MYSQL] SELECT 문에서 ORDER BY 조건 동적으로 설정

DELIMITER $$ CREATE DEFINER=`root`@`localhost` PROCEDURE `GetCustomers_Pager`( _PageIndex INT ,_PageSize INT ,_SortExpression VARCHAR(50) ,_SortDirection VARCHAR(50) ,OUT _RecordCount INT ) BEGIN SET @RowNumber:=0; CREATE TEMPORARY TABLE Results SELECT @RowNumber:=@RowNumber+1 RowNumber ,CustomerID ,ContactName ,CompanyName FROM Customers -- CASE WHEN THEN END 활용한 ORDER BY 조건 설정 ORDER BY CASE WH..

2021. 7. 21. 16:45
Data Science/Data Visualization

[JS] Javascript Visualization 라이브러리

https://socialcompare.com/en/comparison/javascript-graphs-and-charts-libraries 순수한 JavaScript 라이브러리 vis.js 는 다양한 유형의 네트워크 / 에지 그래프와 타임 라인 및 2D / 3D 차트를 지원합니다. 자동 레이아웃, 자동 클러스터링, 탄력 물리 엔진, 모바일 친화적, 키보드 네비게이션, 계층 레이아웃, 애니메이션 등 MIT는 라이센스 및 자기 조직화 네트워크에 대한 연구를 전문으로 네덜란드의 회사에 의해 개발. Cytoscape.js -jQuery 규칙에 따라 모바일 지원을 통한 대화식 그래프 분석 및 시각화. NIH 보조금을 통해 자금을 지원하고 @maxkfranz (아래 의 답변 참조 )가 여러 대학 및 기타 기관의 ..

2021. 7. 20. 15:37
Data Science/Data Visualization

[VUE] 22 Best VueJS Admin Dashboard Templates in 2020

https://vuejsexamples.com/22-best-vuejs-admin-dashboard-templates/ 22 Best VueJS Admin Dashboard Templates in 2020 Here is a list of top VueJS admin templates with a remarkable design. vuejsexamples.com

2021. 7. 20. 14:52
Data Science/DB+SQL

[MYSQL] 구분자로 파싱하여 특정 위치의 항목값 가져오기

-- SET GLOBAL log_bin_trust_function_creators=ON; DELIMITER $$ CREATE FUNCTION f_split_item( src VARCHAR(255), delim VARCHAR(12), position INT ) RETURNS VARCHAR(255) RETURN REPLACE(SUBSTRING(SUBSTRING_INDEX(src, delim, position), LENGTH(SUBSTRING_INDEX(src, delim, position -1)) + 1), delim, ''); $$ DELIMITER ; -- Example SELECT f_split_item(src, '|', 1)-- 1111 ,f_split_item(src, '|', 3)-- 33333 ..

2021. 7. 19. 23:26
Data Science/DB+SQL

[MYSQL] Amazon Aurora – MySQL에서 DB 부하에 대한 최적화 방법

Amazon Aurora – MySQL에서 DB 부하에 대한 최적화 방법 by AWS Korea | on 30 AUG 2018 | in Amazon Aurora, MySQL Compatible | Permalink | Share Amazon Aurora- MySQL은 데이터베이스 워크로드를 통합(Database consolidation)하려는 고객에게 인기 있는 옵션입니다. Aurora MySQL은 고성능 상용 데이터베이스의 속도와 안정성에 오픈 소스 데이터베이스의 간편성과 비용 효율성이 결합된 관계형 데이터베이스 엔진입니다. 또한, 표준 MySQL 커뮤니티 에디션과 비교하여 최대 5배의 처리량을 제공합니다. 이 블로그 게시물에서는 대규모 통합 데이터베이스 워크로드를 위해 Amazon Aurora를 최적..

2021. 6. 17. 15:37
반응형
반응형