首页
/ Table-Computing 框架快速入门教程

Table-Computing 框架快速入门教程

2024-08-07 09:25:12作者:贡沫苏Truman
table-computing
Table-Computing (Simplified as TC) is a high performance and low latency computing framework, 10x faster than Flink for complicated use cases, distributed and light weighted, relational operation, simple to use, write less and do more.

1. 项目目录结构及介绍

Table-Computing 的目录结构如下:

.
├── src           # 源代码目录
│   ├── src       # Java 代码源文件
│   │   └── ...   # 包含核心库、示例程序等代码
└── README.md     # 项目简介文件
└── pom.xml       # Maven 构建文件
└── ...            # 其他支持文件(如 .gitignore 和/LICENSE)
  • src: 存放项目的所有源代码,包括核心组件和示例程序。
  • README.md: 提供项目的基本信息、特性以及如何开始使用的简要指南。
  • pom.xml: Maven 项目对象模型文件,用于构建和依赖管理。

2. 项目启动文件介绍

由于 Table-Computing 是一个计算框架,而非独立的服务应用,其启动方式取决于具体的应用场景。通常,你需要在自己的应用程序中集成 Table-Computing 库,并创建相应的流处理或批处理作业。这涉及到以下步骤:

  1. 引入依赖: 在你的 pom.xml 文件中添加 Table-Computing 的依赖,例如:

    <dependency>
        <groupId>com.alibaba</groupId>
        <artifactId>table-computing</artifactId>
        <version>1.0.0</version>
    </dependency>
    
  2. 编写计算逻辑: 创建 MysqlDimensionTableKafkaStreamTable 等数据源,然后使用 StreamProcessing API 来定义滑动窗口、重分区等操作。

  3. 执行计算任务: 调用相关方法启动计算任务,例如:

    kafkaStreamTable.start();
    // 启动你的 StreamProcessing 作业
    StreamProcessing sp = new StreamProcessing();
    ...
    slideWindow.setWatermark(Duration.ofSeconds(2));
    // 开始执行
    sp.execute();
    

请根据实际需求调整这些例子,并确保正确地设置配置参数。

3. 项目的配置文件介绍

Table-Computing 配置主要通过编程方式进行,这意味着你可以在代码中指定连接数据库的 URL、认证信息、超时设置、并行度等参数。例如,设置 MySQL 数据库连接:

MysqlDimensionTable mysqlDimensionTable = new MysqlDimensionTable(
    "jdbc:mysql://localhost:3306/e-commerce",
    "commodity",
    "userName",
    "password",
    Duration.ofHours(1),
    new ColumnTypeBuilder()
        .column("id", Type.INT)
        .column("name", Type.VARCHAR)
        .column("price", Type.INT)
        .build(),
    "id"
);

对于更复杂的配置项,可能需要自定义实现特定的配置类。一般来说,大部分配置可以通过 StreamProcessing 的构造函数或者相关的设置方法进行。

请注意,Table-Computing 没有提供标准的外部配置文件格式(如 .properties 或 YAML),而是鼓励将配置集成到应用程序代码中,以保持简洁和灵活性。如果你需要更加动态或中心化的配置管理,可以考虑结合 Spring Boot 这样的框架来实现。

table-computing
Table-Computing (Simplified as TC) is a high performance and low latency computing framework, 10x faster than Flink for complicated use cases, distributed and light weighted, relational operation, simple to use, write less and do more.
热门项目推荐
相关项目推荐

项目优选

收起
CangjieCommunity
为仓颉编程语言开发者打造活跃、开放、高质量的社区环境
Markdown
671
0
RuoYi-Vue
🎉 基于SpringBoot,Spring Security,JWT,Vue & Element 的前后端分离权限管理系统,同时提供了 Vue3 的版本
Java
136
18
openHiTLS
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
12
8
redis-sdk
仓颉语言实现的Redis客户端SDK。已适配仓颉0.53.4 Beta版本。接口设计兼容jedis接口语义,支持RESP2和RESP3协议,支持发布订阅模式,支持哨兵模式和集群模式。
Cangjie
322
26
advanced-java
Advanced-Java是一个Java进阶教程,适合用于学习Java高级特性和编程技巧。特点:内容深入、实例丰富、适合进阶学习。
JavaScript
75.83 K
19.04 K
qwerty-learner
为键盘工作者设计的单词记忆与英语肌肉记忆锻炼软件 / Words learning and English muscle memory training software designed for keyboard workers
TSX
15.56 K
1.44 K
Jpom
🚀简而轻的低侵入式在线构建、自动部署、日常运维、项目监控软件
Java
1.41 K
292
Yi-Coder
Yi Coder 编程模型,小而强大的编程助手
HTML
30
5
easy-es
Elasticsearch 国内Top1 elasticsearch搜索引擎框架es ORM框架,索引全自动智能托管,如丝般顺滑,与Mybatis-plus一致的API,屏蔽语言差异,开发者只需要会MySQL语法即可完成对Es的相关操作,零额外学习成本.底层采用RestHighLevelClient,兼具低码,易用,易拓展等特性,支持es独有的高亮,权重,分词,Geo,嵌套,父子类型等功能...
Java
1.42 K
231
taro
开放式跨端跨框架解决方案,支持使用 React/Vue/Nerv 等框架来开发微信/京东/百度/支付宝/字节跳动/ QQ 小程序/H5/React Native 等应用。 https://taro.zone/
TypeScript
35.34 K
4.77 K