Trino
Trino
  • 215
  • 210 064
Moving supplies into your Trino-powered lakehouse
Video for first session from SQL basecamps before Trino Summit 2024
See trino.io/blog/2024/10/07/sql-basecamps
Slides at trinodb.github.io/presentations/presentations/moving-supplies/index.html
0:00 Introduction
2:53 Moving supplies
4:14 What is a lakehouse
7:35 Components of a lakehouse
19:08 Metastore
25:13 Catalog concepts?
29:58 Table formats
38:06 Trino-powered lakehouse
41:07 Practical tips and tricks
57:20 Final thoughts
มุมมอง: 112

วีดีโอ

Trino contributor Call 2024-10-24
มุมมอง 13614 วันที่ผ่านมา
Details at github.com/trinodb/trino/wiki/Contributor-meetings#trino-contributor-call-24-oct-2024 0:00 Introduction 0:30 Trino Summit 2024 1:57 Contribution process doc update 3:12 Issues clean up 4:18 Accumulo connector removal, Kinesis connector 6:50 Java 23 and JDBC driver 10:15 k8s operator meeting 11:05 HTTP/2 12:10 Views, Iceberg views, Coral, different query engines, Substrait and more 30...
Trino Gateway: Because one Trino cluster is not enough
มุมมอง 418หลายเดือนก่อน
Presented by Will Morrison and Manfred Moser at Open Source Data Summit in October 2024. Slides available at trinodb.github.io/trino-gateway/assets/misc/trino-gateway-at-osds-2024.pdf More information at trinodb.github.io/trino-gateway/
Trino Contributor Call 2024-09-26
มุมมอง 256หลายเดือนก่อน
More details in github.com/trinodb/trino/wiki/Contributor-meetings
Trino Contributor Call 2024-08-22
มุมมอง 1042 หลายเดือนก่อน
- 0:00 Introduction and trino-js-client update - 2:15 Work on Preview Web UI in Trino - 16:25 Trino Gateway 10 and related updates - 18:44 Reviews, contributor learning, path to maintainership, issue and PR backlog, and more - 37:39 Details for upcoming switch for file system support (disable legacy) - 39:47 Slack, matrix, community chat and community knowledge More details at github.com/trinod...
Trino Contributor Call 2024-07-25
มุมมอง 1363 หลายเดือนก่อน
More details at github.com/trinodb/trino/wiki/Contributor-meetings#trino-contributor-call-25-jul-2024 0:00 Opening and misc shorter items 3:08 Legacy filesystem deprecation 5:20 Lateral column aliasing 15:07 Scheduling driver for workers 20:20 Query rewriting and changes 43:34 AI trained expert system for Trino
Trino Contributor Call 2024-06-27
มุมมอง 1924 หลายเดือนก่อน
Meeting notes at github.com/trinodb/trino/wiki/Contributor-meetings#trino-contributor-call-27-jun-2024 - 0:00 Intro with Trino Fest and Trino Contributor Congregation recap - 2:17 Project Swift - 6:07 pip install trino-server and related packaging - 17:21 Discussion around github.com/trinodb/trino/pull/22099 - 24:05 Trino connector
How FourKites runs a scalable and cost-effective log analytics solution to handle petabytes of logs
มุมมอง 1974 หลายเดือนก่อน
How FourKites runs a scalable and cost-effective log analytics solution to handle petabytes of logs
Observing Trino
มุมมอง 3844 หลายเดือนก่อน
Starburst has built a comprehensive observability platform around Trino. In this talk, Matt Stephenson will explore all the components of that, including how to integrate with Jaeger, Prometheus, and ELK. By following along, you'll be running Trino in Kubernetes with all the bells and whistles by the end.
Trino Engineering @ Microsoft
มุมมอง 4624 หลายเดือนก่อน
Trino Engineering @ Microsoft
The open source journey of the Trino Delta Lake Connector
มุมมอง 1824 หลายเดือนก่อน
The open source journey of the Trino Delta Lake Connector
Bridging the divide: running Trino SQL on a vector data lake powered by Lance
มุมมอง 3604 หลายเดือนก่อน
Bridging the divide: running Trino SQL on a vector data lake powered by Lance
Trino Fest 2024 Keynote - What’s new in Trino this summer
มุมมอง 4924 หลายเดือนก่อน
Trino Fest 2024 Keynote - What’s new in Trino this summer
Best practices and insights when migrating to Apache Iceberg for data engineers
มุมมอง 1.2K4 หลายเดือนก่อน
Best practices and insights when migrating to Apache Iceberg for data engineers
Accelerate performance at scale: Best practices for Trino with Amazon S3
มุมมอง 8074 หลายเดือนก่อน
Accelerate performance at scale: Best practices for Trino with Amazon S3
Tiny Trino; new perspectives in small data
มุมมอง 2054 หลายเดือนก่อน
Tiny Trino; new perspectives in small data
Enhancing Trino's query performance and data management with Hudi: innovations and future
มุมมอง 2484 หลายเดือนก่อน
Enhancing Trino's query performance and data management with Hudi: innovations and future
Trino query intelligence: insights, recommendations, and predictions
มุมมอง 3844 หลายเดือนก่อน
Trino query intelligence: insights, recommendations, and predictions
Enhancing data governance in Trino with the OpenLineage integration
มุมมอง 5184 หลายเดือนก่อน
Enhancing data governance in Trino with the OpenLineage integration
Reducing query cost and query runtimes of Trino powered analytics platforms
มุมมอง 5434 หลายเดือนก่อน
Reducing query cost and query runtimes of Trino powered analytics platforms
Trino Contributor Call 2024-05-23
มุมมอง 2415 หลายเดือนก่อน
Trino Contributor Call 2024-05-23
Trino Contributor Call 2024-04-24
มุมมอง 1296 หลายเดือนก่อน
Trino Contributor Call 2024-04-24
Powering Bazaar's business operations with Trino - Bazaar at Trino Summit 2023
มุมมอง 41710 หลายเดือนก่อน
Powering Bazaar's business operations with Trino - Bazaar at Trino Summit 2023
Visualizing Trino with Superset - Preset at Trino Summit 2023
มุมมอง 1.3K10 หลายเดือนก่อน
Visualizing Trino with Superset - Preset at Trino Summit 2023
Keynote - The mountains Trino climbed in 2023 - Trino Summit 2023
มุมมอง 43610 หลายเดือนก่อน
Keynote - The mountains Trino climbed in 2023 - Trino Summit 2023
Trino workload management - Airbnb at Trino Summit 2023
มุมมอง 90810 หลายเดือนก่อน
Trino workload management - Airbnb at Trino Summit 2023
Secure exchange SQL - Treasure Data at Trino Summit 2023
มุมมอง 20210 หลายเดือนก่อน
Secure exchange SQL - Treasure Data at Trino Summit 2023
Efficient Kappa architecture with Trino - SK Telecom at Trino Summit 2023
มุมมอง 44110 หลายเดือนก่อน
Efficient Kappa architecture with Trino - SK Telecom at Trino Summit 2023
Trino upgrades at exabytes scale - LinkedIn at Trino Summit 2023
มุมมอง 24810 หลายเดือนก่อน
Trino upgrades at exabytes scale - LinkedIn at Trino Summit 2023
Powering data marts through Trino's Iceberg connector - Zomato and Blinkit at Trino Summit 2023
มุมมอง 27610 หลายเดือนก่อน
Powering data marts through Trino's Iceberg connector - Zomato and Blinkit at Trino Summit 2023

ความคิดเห็น

  • @jyothiramadevi5988
    @jyothiramadevi5988 17 วันที่ผ่านมา

    Hi , I am purely SQL database administrator, is it easy for me to learn the trino or else any other technologies need to add for this in order to learn the trino?

  • @PiyushKumar-v7r2i
    @PiyushKumar-v7r2i หลายเดือนก่อน

    where to add these properties in kubernetes helm file? because i'm not able to run create function, getting error of access denied using admin user.

  • @yuriy.gavrilov
    @yuriy.gavrilov หลายเดือนก่อน

    🚀 Thanks 🙏 for taking in account merge column issue

  • @SharonLavie_1981
    @SharonLavie_1981 หลายเดือนก่อน

    great presentation! inspired me a lot. thanks!

  • @rembautimes8808
    @rembautimes8808 2 หลายเดือนก่อน

    Well presented talk

  • @rembautimes8808
    @rembautimes8808 2 หลายเดือนก่อน

    Trino has a very cute mascot. On par with Bun

  • @neeraajsharma
    @neeraajsharma 2 หลายเดือนก่อน

    Save time click here 14:30

  • @mitzu-analytics
    @mitzu-analytics 4 หลายเดือนก่อน

    Thank you for mentioning Mitzu Vincenzo!

  • @tratkotratkov126
    @tratkotratkov126 4 หลายเดือนก่อน

    Maaan what was this 14min pre talk - is it about you or about your guest ?

  • @28neeraj
    @28neeraj 5 หลายเดือนก่อน

    Where is the GitHub repo link for the example

  • @BishalKarki-pe8hs
    @BishalKarki-pe8hs 6 หลายเดือนก่อน

    one suggestion for you you should need make one playlist how it work it seems very good

  • @blakeshelton4422
    @blakeshelton4422 7 หลายเดือนก่อน

    I'm new to this! Very helpful starter pack, much appreciated

  • @RussellChristopher-p7d
    @RussellChristopher-p7d 10 หลายเดือนก่อน

    Nice work here. Great solve for a challenging problem.

  • @rahulsharmaoist
    @rahulsharmaoist 10 หลายเดือนก่อน

    Great Presentation. Do you also mind creating a presentation on how OPA setup is one in your infrastructure?

  • @ChongruiDuan
    @ChongruiDuan 10 หลายเดือนก่อน

    Great presentation Tingting and Jinyang!

  • @SvenTeresniak
    @SvenTeresniak 11 หลายเดือนก่อน

    What about 2-tier caching, MEM+SSD? Is this still possible with the new caching code?

  • @Feuille-x9s
    @Feuille-x9s 11 หลายเดือนก่อน

    非常渴求于学长的联系方式!!!

  • @shekharsidagam9797
    @shekharsidagam9797 11 หลายเดือนก่อน

    How do I query on data prent in an excel, is some function readily available like openrowset for MyS

  • @MNRCRTZ
    @MNRCRTZ ปีที่แล้ว

    Just wondering. How do i use properties with EKS? I mean, where do i need to set my postgress config? thanks

    • @TrinoDB
      @TrinoDB 11 หลายเดือนก่อน

      You configure it all with the Trino Helm chart and the YAML file for your specific cluster and deployment

  • @balamaheshjampani9074
    @balamaheshjampani9074 ปีที่แล้ว

    I think this recording lacks clarity on connector part.

  • @stavetx
    @stavetx ปีที่แล้ว

    Hmmm. But may be such great difference between json+gzip vs iceberg+parquet is not point of the iceberg. Binary parquet (with metadata in it) vs text json...

  • @gw1284
    @gw1284 ปีที่แล้ว

    Great Talk! I have done tutorials, will keep learning Fugue, esp the datawarehouse docs,

  • @simhadrig1552
    @simhadrig1552 ปีที่แล้ว

    WOW

  • @lhxperimental
    @lhxperimental ปีที่แล้ว

    Great talk but this should have been a 4K video, the text is hard to read.

  • @arundhingra4536
    @arundhingra4536 ปีที่แล้ว

    Looking forward to the PR merge!

  • @arturocdb
    @arturocdb ปีที่แล้ว

    use malloy to avoid sql

  • @heinousmule
    @heinousmule ปีที่แล้ว

    Great talk from Seth Rogen

  • @patrizioblackburn1583
    @patrizioblackburn1583 ปีที่แล้ว

    Promo-SM 🌺

  • @pascalpoindrelle
    @pascalpoindrelle ปีที่แล้ว

    Did PuppyGraph storage could be a s3 or trino throught an apache iceberg connector

  • @istvandarvas3372
    @istvandarvas3372 ปีที่แล้ว

    This is going to be something amazing that I'm really looking forward to testing and using :D - awesome presentation! Thanks, guys!

  • @istvandarvas3372
    @istvandarvas3372 ปีที่แล้ว

    Whoa, this was awesome, guys! Loved how you showed off Hudi's multi-modal indexing. But first, I've got to upgrade my current Hudi 0.10.1 lakehouse setup. After that, I'm super excited to try this out with Trino. Really looking forward to it. Great stuff! Thanks!

  • @brunogasparotto4284
    @brunogasparotto4284 ปีที่แล้ว

    Awesome content guys! Just managed to enable querying my partitioned data on S3 thanks to this! :)

  • @YevgenSh
    @YevgenSh ปีที่แล้ว

    Is there any connector for querying Vertica Analytics DB or at least generic JDBC connector? Thank you.

  • @alpesh12212
    @alpesh12212 ปีที่แล้ว

    Is there a way to configure auditing using elasticsearch or solr when deploying Trino using this helm chart?

  • @thanhtrancung3920
    @thanhtrancung3920 ปีที่แล้ว

    🎉

  • @SpiritOfIndiaaa
    @SpiritOfIndiaaa ปีที่แล้ว

    thanks a lot , where can I get Trino set up videos?

  • @Mentaloow
    @Mentaloow ปีที่แล้ว

    Rather than considering writing your own task scheduler/runner, consider using the open-source HPC tools out there.. Slurm with auto-scaling is an absolute beast, as it was designed, and is used, to schedule millions of jobs daily for thousands of users against extremely busy/constrained super-computers around the world (over 60% of the supercomputers use it) - job runtimes ranging from sub-second to months. And you benefit from a massive set of other features such as user/team management, quotas, accounting/budgeting, flexible scheduler resources/constraints..

  • @atifiu
    @atifiu ปีที่แล้ว

    I have a question about difference between physical Input size and Input size in explain plan generated from Trino.

  • @YusufSaidCANBAZ
    @YusufSaidCANBAZ ปีที่แล้ว

    20:32 Is PuppyGraph Storage a graph database?

    • @WeimoLiu-hp3vz
      @WeimoLiu-hp3vz ปีที่แล้ว

      No, it is more like a data warehouse.

  • @righthorse
    @righthorse ปีที่แล้ว

    Wasn't Manfred on "Sprockets" on Saturday Night Live?

  • @firstlast4165
    @firstlast4165 ปีที่แล้ว

    Nice

  • @arseniy762
    @arseniy762 ปีที่แล้ว

    1080p please?

  • @TheSimpGatsby
    @TheSimpGatsby ปีที่แล้ว

    Can AirByte communicate with SMB or NFS? Or just simply connect to a window ec2 and get data from it moving to S3, Redshift. Thanks

  • @gabrielpreciado5699
    @gabrielpreciado5699 ปีที่แล้ว

    I want a remake as Trino being pokemon evolution of presto

    • @TrinoDB
      @TrinoDB ปีที่แล้ว

      It would be like Magikarp evolving into Gyrados.

  • @YuriNiitsuma
    @YuriNiitsuma ปีที่แล้ว

    What the.... f.... .... 🐰

  • @niufei8888
    @niufei8888 ปีที่แล้ว

    The PoochFitness example is very helpful for understand the motivation.

  • @wikkerfly
    @wikkerfly ปีที่แล้ว

    wonderful talk, benefit a lot.

  • @w0406400
    @w0406400 ปีที่แล้ว

    Can airbyte do some form of transformation/aggregation as part T of ETL ? Because I just see 100s of demos of Source-to-Sink - but not enough on Transformation.

    • @TrinoDB
      @TrinoDB ปีที่แล้ว

      Airbyte is mainly focused on EL. T is left to tools like Trino and dbt.

  • @jotarada
    @jotarada ปีที่แล้ว

    Nice demo. Do you think it is possible to have a read only cluster pointing to alluxio as there is another write cluster pointing to minIO?

  • @mark-w6s5p
    @mark-w6s5p ปีที่แล้ว

    Trino is much faster than Hive or Spark on read queries.