New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom

MySQL同步到Elasticsearch的支持Nested及大宽表 #190

Open

jsrgqinbin opened this issue Mar 17, 2023 · 2 comments

jsrgqinbin commented Mar 17, 2023 •

edited by baisui1981

Loading

MySQL中的
订单表
订单明细
产品表

订单表发生变化后，可以更新Elasticsearch中的数据同步更新Nested订单明细和产品信息表；

MySQL中的
产品表
产品属性
同步到Elasticsearch形成一张表格，在产品表中附加把属性列加进来同步；

产品表更新，更新宽表；

希望支持如上两个产场 @秦彬

Member

baisui1981 commented Mar 17, 2023 •

edited

Loading

问题

产品表更新，更新宽表；===> 这种情况可能会引起更新风暴，可以接受？
Nested是啥意思？
打宽表可以使用hive，或者odps不？

Author

jsrgqinbin commented Mar 28, 2023

产品表更新，更新宽表；===> 这种情况可能会引起更新风暴，可以接受？
可不可以引入一个配置？
Nested是啥意思？
Elasticsearch Nested类型，如订单头表，订单明细用Elasticsearch Nested类型
打宽表可以使用hive，或者odps不？
有些宽表希望打到Elasticsearch里

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment