Gyuhang Shimplto001.hashnode.dev·Oct 22, 2024Data Engineer 가 알아야 할 SQL Part 1 (Korean)전제 ANSI SQL 을 어느정도 알고 있음. ANSI SQL 의 모든 Syntax 를 다루지는 않음. ANSI SQL 에서 사용하는 기본적인 Function 들에 대해서 지식을 가지고 있음. ANSI SQL SELECT 데이터를 조회할 때 가장 기본적인 구문입니다. -- Syntax SELECT column1, column2 FROM table_name; -- Example: 직원들의 이름과 나이를 추출합니다. SE...ANSI SQL
Gyuhang Shimplto001.hashnode.dev·Oct 14, 2024Lambda vs Kappa Architecture in Data Pipeline (Korean)Lambda Architecture 구성 요소 Batch Layer 정기적으로 대량의 Historical Data 를 처리합니다. (예: Daily 또는 Hourly) 이를 통해 높은 정확도와 데이터 Completeness (완전성) 을 보장하며, 복잡한 Data 변환을 처리합니다. Speed Layer 실시간 Data 를 처리하여 low-latency 시간의 결과를 제공합니다. Batch Layer 가 동일한 Data 를 처리할...kappa architecture
Gyuhang Shimplto001.hashnode.dev·Oct 10, 2024Trino (TSF) Installation and ConfigurationUnderstanding the Clear Reasons for Using Trino Since the installation and configuration methods of Trino vary depending on how you use it, it's essential to first clearly understand the reasons for using it. Determine if you need to fetch data from...ZGC
Gyuhang Shimplto001.hashnode.dev·Sep 27, 2024Trino (TSF) Installation and Configuration (Korean)Trino 사용 이유를 명확하게 파악하기 Trino 는 사용하는 방법에 따라서 설치, 구성 방법이 다르기 때문에 사용하는 이유를 명확하게 파악하는 것을 먼저 수행되어야 합니다. 다양한 Data Source (MySQL, PostgreSQL, HDFS, Amazon S3, Cassandra, Kafka 등)로부터 데이터를 가져와 하나의 Query 로 통합하여 분석할 필요가 있는 지 파악 Business Intelligence Platform...ZGC
DbVisualizerthetable.hashnode.dev·Aug 26, 2024Mastering Trino and DbVisualizer IntegrationExplore how Trino and DbVisualizer can transform your data management and visualization. This guide provides essential steps and tips for using Trino's SQL query engine with DbVisualizer's interface. Trino and DbVisualizer Integration Trino is an ope...trino
StarRocks Engineeringstarrocks.hashnode.dev·May 24, 2024Comparison of the Open Source Query Engines: Trino and StarRocksIn this post, we want to compare Trino, the popular distributed query engine that runs analytical queries over big volumes of data with interactive latencies with StarRocks. Sources of Information We’ve consulted StarRocks committers (Heng Zhao, Star...Databases
DbVisualizerthetable.hashnode.dev·Oct 2, 2023Mastering the Trino Connection: Unleash the Power of DbVisualizer!Unlock the potential of Trino and DbVisualizer in our latest blog post. Explore Trino's distributed SQL query capabilities and harness DbVisualizer's intuitive interface for data exploration, visualization, and optimization. Read now to unleash the p...trino