备案控制台

小小杳杳杳_个人页

个人头像照片 小小杳杳杳
个人头像照片
文章
0
问答
2033
视频
0

个人介绍

暂无个人介绍

擅长的技术

获得更多能力
通用技术能力：

暂时未有相关通用技术能力~

云产品技术能力：

暂时未有相关云产品技术能力~

阿里云技能认证

详细说明
暂无更多信息

2024年05月

2024年04月

正在加载, 请稍后...
暂无更多信息
  • 回答了问题 2024-05-20

    Flink CDC里为什么这个文档中的dataStreamAPI打包吗？

    你需要打依赖包。参考链接：
    https://help.aliyun.com/zh/flink/user-guide/develop-a-jar-draft?spm=a2c4g.11186623.0.0.6cec4b9a7GZwcR
    。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里一般如何解决CDC数据过多的问题？

    用增量快照， 加并行度。历史数据可以考虑走个snaphot同步，然后起来一个cdc只做增量。定位问题，定制化优化索引。你sql server开一下审计，看看那个表都做了啥，ssms里面可以开，然后根据审计去优化那张表，里面监控一下你那些表相关的sql语句。03d83c44f413291266f7d821bc9c04fe.png此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    flinkcdc是否支持瀚高数据库？

    不支持。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里我mysql-cdc写了个输出到控制台输出的测试脚本后续怎么办？

    yaml才能捕获吧，sql作业source ddl都把读取的结构固定了。参考链接：官方文档，
    https://nightlies.apache.org/flink/flink-cdc-docs-master/docs/connectors/pipeline-connectors/mysql/
    。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    flink-sql-oracle-cdc 同步出现下面这个错误，是什么原因导致的呢？

    参考链接：
    https://tapdata.blog.csdn.net/article/details/120138074?spm=1001.2014.3001.5502
    。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    flinkcdc3.0.1同步数据从mysql到starrocks中，运行过程中报这个错误怎么办？

    pdu太大了。7607f562f1d8e85d36297ac1155bf0cf.png此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    flink cdc官方现在支持同步全库吗？MySQL到flink的，支持吗？

    mysql支持到doris/starrocks。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里按照文檔搞了這個yaml東東，報了這個錯是为什么？

    不支持的呀，现在只支持mysql-doris，mysql-starrocks 。是包冲突的，把mysql那个jdbc移除就好了。多放一个这个a4e9a6e95a17c4fdc717672b3adb4e71.png此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    flink cdc报错，这个是因为什么资源不够了。内存吗？

    资源不够，slot没了，看你自己怎么配置一个任务jm，tm。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里请教下这个问题会有影响么 ？不知道是什么导致的。

    不会oracle，从字面意思看是默认值无法转换。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    flinkcdc mysql到doris 会自动建表吗？

    支持自动建表，目前不支持自动建库，还是需要在doris端手动建下db。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里这是啥问题？

    common包是不需要单独加上的。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里有用过cdc+doris实时更新，增删改的业务场景吗？

    paimon可以做到 业务库原表增加或者删除 字段 paimon表会自动增加或删除字段。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里pipline doris sink 怎么指定库，文档没看到呢？

    配置下 route 就行了，可以看社区文档，等等3.1 支持简写。有个pr 改下代码重新编一下就行，
    https://github.com/apache/flink-cdc/pull/2908
    。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里mysql-cdc 做全量历史数据同步的时候如何控制同步速度么？

    减少点并行度可以，scan.snapshot.fetch.size 读取表快照时每次读取数据的最大条数。scan.snapshot.fetch.size 你调小点。目前确实没有限速的功能，需要 Flink 来支持，Flink 社区目前也没有限速功能。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里我们业务库在PolarDB1.0上，flinkcdc监控的话有什么好的办法吗？

    云上的推荐直接买厂商的服务。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里这种binlog问题大家遇到过吗，为什么时不时会出现这种情况失败？

    mysql协议包最大16mb，你这条数据太大了吧。f1aba5cb5cedc1c9bbea80226e3830b3.png此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里sqlserver开了cdc后，为什么有一个存储图片的字段在图片较大时就报超长？

    sql cdc写 cdc table的问题，建议把大图片拆出去。是sql server的问题，sql server就开启cdc，对应的cdc左右会在system table下有一张对应的cdc table，记录数据的变化，出问题的是在那个地方路路。93d9c53eebffb35179650b30a008d09a.png放oss或者别的文件存储，然后这里存地址，Tp库这种稀缺资源拿来当文件服务器用本身就是不合理的。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    Flink CDC里当使用flink mysql cdc进行数据同步时，出现了数字转换异常为啥？

    重写序列化方法，然后里面对数据做轻加工，我们涉及到跨大量的异构数据源的数据同步，很多特殊的数据类型都不支持。最简单的办法就是字符串接，然后该咋cast咋cast。6d00e8e038f7ea6a319fab9f929d70fb.png此回答来自钉群Flink CDC 社区 。

    踩0 评论0
  • 回答了问题 2024-05-20

    现在 flink-cdc 独立服务，支持 savepoint 吗？

    flink-cdc架在flink上，flink支持的啊，增量快照连接器全阶段支持断点续传。此回答来自钉群Flink CDC 社区 。

    踩0 评论0
正在加载, 请稍后...
滑动查看更多
正在加载, 请稍后...
暂无更多信息
http://www.vxiaotou.com