2024-01-24 websql导入功能开发

news/2025/3/20 20:30:01/文章来源:https://www.cnblogs.com/route/p/18783889

1.测试入库

（1）从0开发insert语句，适配各种数据源
（2）借助seatunnel，实现数据集成功能
A. 使用DS，直接解决调度问题
B. 使用seatunnel-web，只能解决部分调度
（3）寻找其他开源方案

2.在现有项目里开发

3.Seatunnel测试

3.1excel2mysql

132.151.7.7
# 编写配置文件
./config/v2.excel2mysql.config# 服务器上运行任务
./bin/seatunnel.sh --config ./config/v2.excel2mysql.config -e local

3.2excel2gbase

132.151.6.9
# 编写配置文件
./config/v2.excel2gbase.config# 服务器上运行任务
./bin/seatunnel.sh --config ./config/v2.excel2gbase.config -e local

4.接口列表

4.1文件上传接口

/di/dataSetDef/importExcel

4.2服务器文件入库（参考3.Seatunnel测试）

4.3返回结果

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.hqwc.cn/news/902199.html

如若内容造成侵权/违法违规/事实不符，请联系编程知识网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

入门Dify平台：如何根据需求选择与创建最合适的应用

入门Dify平台：如何根据需求选择与创建最合适的应用

今天我们将继续深入讲解Dify，重点介绍如何创建应用。具体来说，我们将探讨如何根据不同的需求来决定选择什么类型的应用最为合适，帮助大家更好地理解在Dify平台上构建应用的最佳实践。 创建空白应用 首先，我们需要进入Dify的首页选择工作室，并创建空白应用。如图所示：点击…
阅读更多...
月暗推出音频模型 AudioX：任意内容生成音频和配乐；开源 TTS 模型 Orpheus，可生成叹息、笑声等非文本线索丨日报

月暗推出音频模型 AudioX：任意内容生成音频和配乐；开源 TTS 模型 Orpheus，可生成叹息、笑声等非文本线索丨日报

开发者朋友们大家好：这里是 「RTE 开发者日报」 ，每天和大家一起看新闻、聊八卦。我们的社区编辑团队会整理分享 RTE（Real-Time Engagement） 领域内「有话题的 技术 」、「有亮点的 产品 」、「有思考的 文章 」、「有态度的 观点 」、「有看点的 活动 」，但内容仅代表编辑…
阅读更多...
202110211215 - IT项目管理笔记

202110211215 - IT项目管理笔记

IT项目管理中的百慕大 资源 、范围、进度 三角平衡 项目管理 -- 做事 启动、规划、执行、控制、收尾 项目管理 -- 四个层次： 复杂的事情简单化：分解 简单的事情量化：临界值 量化的事情专业化：规律 专业的事情模板化：框架模板 项目： 为创造特定产品或服务的一项有时限的任…
阅读更多...
k8s拉取私有镜像的2种方式

k8s拉取私有镜像的2种方式

k8s 在拉取私有镜像时 ，传递认证信息目录通过secret通过ServiceAccount 通过secret01-image-pull.yamlkind: Pod apiVersion: v1 metadata:name: imagepull-nginxlabels:group: imagepull spec:containers:- name: nginximage: registry.cn-beijing.aliyuncs.com/hkui_dev/ngi…
阅读更多...
202110111235 - 软件工程笔记

202110111235 - 软件工程笔记

1. 概述 1.1 开发只占冰山一角 1.2 计算机科学、数学，工程，管理 1.3 软件开发的本质：实现问题域中的概念和处理逻辑 到 运行平台的概念和处理逻辑的映射。系统建模 需求 -> 设计 -> 实现1.4 软件工程的目标：生产具有正确性、可用性、以及开销合宜的产品。 1.5 软件工…
阅读更多...
202109060657 - hadoop架构和读写流程

202109060657 - hadoop架构和读写流程

1. 整体架构 hdfs架构zkmonode高可用。HA的工作原理？是否需要每个datanode监听zk？namenodeNameNode(nn):Hdfs集群的管理者，Master 管理Hdfs的名称空间（NameSpace） 维护副本策略 记录文件块（Block）的映射信息 负责处理客户端读写请求datanodeDataNode:NameNode下达命令，…
阅读更多...
基于风险的完整性和检查建模(RBIIM)MATLAB仿真

基于风险的完整性和检查建模(RBIIM)MATLAB仿真

1.程序功能描述 基于风险的完整性和检查建模(Risk-Based Integrity and Inspection Modeling ,RBIIM)MATLAB仿真，对比prior density，posterior perfect inspection，posterior imp inpection，cummulative posterior imperfect inspection四个指标。 2.测试软件版本以及…
阅读更多...
202108151156 - kafka消费积压案例

202108151156 - kafka消费积压案例

0. 背景 上游厂家生产信令数据，我方消费kafka数据，过滤后插入HBase。 上游生产的信令数据分了4个主题，每个主题有若干分区，这4个主题的数据消费后都插入同一张HBase表。 问题：kafka消息积压达到百亿。 以下以topic1为例，有6个分区。 1. 查看消费滞后情况 kafka-consumer-…
阅读更多...
mysql 多表怎么连接的

mysql 多表怎么连接的

前言 简单描述一下多表怎么连接的。 正文 首先，我们得抛开我们一些自以为是的想法。 我想过这个问题，就是为什么我们背乘法口诀的时候，我们总是背： 22 = 4， 99=81 这样背下去，似乎这是口诀。然而这是缓存，不是计算，既然不是计算那么就不是逻辑学。 我们理所当然的想9*9…
阅读更多...
202108120808 - 类加载器及双亲委派机制

202108120808 - 类加载器及双亲委派机制

Bootstrap ClassLoader 这是加载器中的大 Boss，任何类的加载行为，都要经它过问。它的作用是加载核心类库，也就是 rt.jar、resources.jar、charsets.jar 等。当然这些 jar 包的路径是可以指定的，-Xbootclasspath 参数可以完成指定操作。 这个加载器是 C++ 编写的，随着 JVM …
阅读更多...
keil仿真时导出数据操作

keil仿真时导出数据操作

keil仿真时导出数据操作 save D:\savedata.txt 0x20001013,0x20001035
阅读更多...
spring-boot-starter-validation

spring-boot-starter-validation

官方提供的注解 spring-boot-starter-validation 是 Spring Boot 提供的一个 starter，是一个用于验证 Java Bean 的标准，它提供了一套注解和相应的运行时 API 来定义和执行校验规则。 具体来说，当你在项目中引入 spring-boot-starter-validation 后，你可以使用一系列预定义…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023