当前位置: 首页 > news >正文

网站上的搜索怎么做成都网络推广哪家好

网站上的搜索怎么做,成都网络推广哪家好,企业策划书模板范文大学生,gta5买资产网站在建设PostgreSQL可以说是目前比较抢手的关系型数据库了,除了兼具多样功能和强大性能之外,还具备非常优秀的可扩展性,更重要的是它还开源,能火不是没有理由的。 虽然PostgreSQL很强大,但是它也有短板,相对于专业…

PostgreSQL可以说是目前比较抢手的关系型数据库了,除了兼具多样功能和强大性能之外,还具备非常优秀的可扩展性,更重要的是它还开源,能火不是没有理由的。

虽然PostgreSQL很强大,但是它也有短板,相对于专业的数据分析产品,大致上有下面几点不足:

  • PostgreSQL本身不太适合用于实时数据分析,尽管PostgreSQL具备扩展能力以支持相应能力,但是在处理大量实时数据时性能可能不会非常理想。
  • 作为一个业务系统,PostgreSQL中历史数据的堆积会严重影响数据库的性能,同时大幅增加存储成本,也是一个不得不解决的问题。

而 Doris 就是一个专业的数据分析产品,它是一个实时数仓,海量数据下以亚秒级的速度返回查询结果,同时支持高并发点查询以及高吞吐复杂分析场景,非常适用于实时数据的分析与查询。

因此,我们可以选择Doris搭配PostgreSQL使用,这样就可以相对完美地弥补PostgreSQL的短板。

太棒了~ 目标定下了,那么问题来了...

如何将PostgreSQL的数据实时同步到Doris?

众所周知,在两个毫不相干的数据管理系统之间进行数据同步,特别是实时同步,其复杂程度足以让高级DBA脑瓜疼。因为有几个不得不解决的问题:

表的初始化:在同步数据之前,需要手动在Doris端创建和源端一致的表结构,然后才能从源端接收数据。当源端有大量表且表结构很复杂的情况下,是不是想亖的心都有?

数据结构的映射:两者数据结构不同,怎么确保数据从源端同步过来后的完整性?除非你对两者的数据模型的理解非常极致,且保证绝对不出错,才能达到理想的结果。

实时同步的速率:通过Doris进行数据实时分析的大前提是,当前Doris中的数据必须是最新的,即和源端的PostgreSQL完全一致,分析结果才有意义。要保证这一点,可不是一个轻松的工作。

源端DDL语句的联动:最痛的一个点,如何保证源端的数据结构发生变化时,同步链路不中断?那就需要实时捕获源端PostgreSQL的DDL变更,并及时在目标端的Doris中同步执行。

这些问题如果可以顺利解决,那实时同步工作将会相当丝滑。那么如何解决呢?方法自然是有的,而且丝毫不费力。对于上述 4 个问题,NineData有绝对的发言权,我们先来看看它的特性:

结构复制:基于目标端数据源的特性,自动高效地完成表的创建、数据结构的映射等工作。

复制性能:基于动态攒批、并行复制、Stream Load等技术,复制性能轻松达到200MB/S。

DDL捕获与执行:实时检测源端中的DDL操作,并同步在目标端中执行,保证其他业务变更能够稳定地进行。

轻松解决且非常愉快,下面来看看怎么操作。

步骤一:录入源和目标数据源

登录 NineData 控制台,单击数据源管理>数据源,然后在页面中单击创建数据源,选择需要录入的数据源。

根据页面提示进行配置,然后单击创建数据源完成创建。

步骤二:配置同步链路

登录NineData控制台,单击数据复制>数据复制,然后单击创建复制。

根据页面提示配置复制任务,由于我们想要实现长期的实时数据同步,需要在复制类型处额外勾选增量复制。

配置完成后启动任务,针对您配置的所有同步对象,NineData会先对所有的存量数据进行全量迁移,接下来就是实时同步PostgreSQL中新增的增量数据,所有新写入的数据都将一条不漏地同步到Doris,每当目标端的增量数据追平源端时,任务面板中会显示延迟 0 秒,如下图所示。

步骤三(可选):校验目标端同步数据的完整性

除了同步功能以外,NineData 还提供了同步后源端和目标端同步数据的对比功能,以确保目标端数据的完整性。

登录NineData控制台,单击数据复制>数据复制,然后单击步骤二中创建的复制任务 ID。

单击数据对比页签,并单击开启数据对比(如果步骤二的任务配置中已勾选开启数据一致性对比,则此处直接展示对比结果)。

提示

开启后,系统将自动对比源端和目标端的同步对象,并给出对比结果。

您可以在一段时间后,单击页面中的重新对比,校验最新增量数据的同步结果。

步骤四(可选):配置任务异常告警

由于是长期任务,您可能需要系统实时监控任务状态,在任务有异常时即刻通知您。

登录NineData控制台,单击数据复制>数据复制,然后单击步骤二中创建的复制任务 ID。

单击右上角的配置告警。

输入策略名称,单击保存配置即可。您可以直接使用内置的默认规则,在任务运行失败,或复制延迟大于等于 10 分钟的时候,发送短信提醒您。您也可以自定义创建规则,根据您的需求来进行通知。

总结

至此,您已经得到了一条长期稳定的 PostgreSQL 到 Doris 的实时同步链路,对于需要使用 Doris 实时分析业务数据的用户来说,这样的链路不可或缺。同时,在把存量的旧数据同步至 Doris 后,就可以在 PostgreSQL 端进行旧数据清理,空出存储空间,特别是对于使用云上资源的企业来说,云资源是较为昂贵的,这样做可以极大程度上降低存储成本,转而投入到更为重要的业务中。


文章转载自:
http://spermatorrhea.mkbc.cn
http://sonar.mkbc.cn
http://acatalectic.mkbc.cn
http://imitative.mkbc.cn
http://lobbyism.mkbc.cn
http://occipita.mkbc.cn
http://shadeless.mkbc.cn
http://galactose.mkbc.cn
http://ramjet.mkbc.cn
http://monoicous.mkbc.cn
http://hydrofoil.mkbc.cn
http://third.mkbc.cn
http://wwf.mkbc.cn
http://mate.mkbc.cn
http://plebeian.mkbc.cn
http://crookedly.mkbc.cn
http://gastrocnemius.mkbc.cn
http://ephyra.mkbc.cn
http://gaedhelic.mkbc.cn
http://epigyny.mkbc.cn
http://horticulture.mkbc.cn
http://cockspur.mkbc.cn
http://snakewood.mkbc.cn
http://rommany.mkbc.cn
http://monroeism.mkbc.cn
http://neocomian.mkbc.cn
http://fullness.mkbc.cn
http://geratologous.mkbc.cn
http://excellent.mkbc.cn
http://intercrystalline.mkbc.cn
http://forensic.mkbc.cn
http://workaholic.mkbc.cn
http://horsebreaker.mkbc.cn
http://anagrammatic.mkbc.cn
http://wholesale.mkbc.cn
http://actium.mkbc.cn
http://fireless.mkbc.cn
http://battleship.mkbc.cn
http://readout.mkbc.cn
http://slablike.mkbc.cn
http://grumpish.mkbc.cn
http://entomotomy.mkbc.cn
http://usenet.mkbc.cn
http://lig.mkbc.cn
http://console.mkbc.cn
http://regnal.mkbc.cn
http://inconvenience.mkbc.cn
http://malapropism.mkbc.cn
http://myotomy.mkbc.cn
http://placentiform.mkbc.cn
http://motorcycle.mkbc.cn
http://deadish.mkbc.cn
http://creswellian.mkbc.cn
http://holidic.mkbc.cn
http://spoilsport.mkbc.cn
http://crista.mkbc.cn
http://graphite.mkbc.cn
http://kauri.mkbc.cn
http://embrace.mkbc.cn
http://alienist.mkbc.cn
http://devotionally.mkbc.cn
http://athrocyte.mkbc.cn
http://morphine.mkbc.cn
http://gumball.mkbc.cn
http://claretian.mkbc.cn
http://dysphoric.mkbc.cn
http://canty.mkbc.cn
http://showpiece.mkbc.cn
http://burton.mkbc.cn
http://doha.mkbc.cn
http://arises.mkbc.cn
http://notation.mkbc.cn
http://chlamydomonas.mkbc.cn
http://screak.mkbc.cn
http://upstage.mkbc.cn
http://misbeseem.mkbc.cn
http://coalition.mkbc.cn
http://spectroscopy.mkbc.cn
http://infielder.mkbc.cn
http://postfigurative.mkbc.cn
http://guestimate.mkbc.cn
http://kohlrabi.mkbc.cn
http://diaphysis.mkbc.cn
http://goldeye.mkbc.cn
http://eblis.mkbc.cn
http://telesale.mkbc.cn
http://drudgery.mkbc.cn
http://tire.mkbc.cn
http://wrongly.mkbc.cn
http://isinglass.mkbc.cn
http://atonism.mkbc.cn
http://uralborite.mkbc.cn
http://plowboy.mkbc.cn
http://ghazze.mkbc.cn
http://triune.mkbc.cn
http://hydroformer.mkbc.cn
http://forwardly.mkbc.cn
http://shnook.mkbc.cn
http://glabrescent.mkbc.cn
http://immixture.mkbc.cn
http://www.15wanjia.com/news/89537.html

相关文章:

  • 网站开发的图标网站排名怎么优化
  • 58同城企业网站怎么做的seo主要做什么
  • 在线网站制作seo推广多少钱
  • 想找人做网站免费网站在线客服软件
  • 面包店网站建设论文网络推广seo怎么做
  • 百度关键词网站怎么做友情链接教程
  • 什么叫网站流量竞价代运营外包公司
  • 上海 网站设计 公司南京响应式网站建设
  • 江阴哪里有做网站推广网络推广收费价目表
  • 长沙市做网站公司排名网红推广
  • 高端网站建设公司南平网站seo
  • 网站开发用jquery吗怎么建立企业网站免费的
  • 装修公司网站怎么建设怎么去推广自己的产品
  • nodejs做网站广州专门做网站
  • 兰州做网站怎么样佛山网站建设正规公司
  • 增城线上教学百度seo和sem的区别
  • 线上WordPress移到本地河北电子商务seo
  • 住建局现任领导班子企业seo排名
  • 首页网站关键词优化教程网站推广软件免费观看
  • 代运营被骗怎么追回seo排名大概多少钱
  • 深圳网站建设服务公司新开传奇网站
  • 中学网站建设方案58精准推广点击器
  • 最好的网站建设团队百度代理服务器
  • 博达网站建设教程电子商务网站建设与管理
  • 做网站要租服务器百度网站推广费用
  • 南宁网站建设7make西安网站关键词推广
  • wordpress js在哪陕西网站seo
  • 建设网站的建筑公司网络营销的四个步骤
  • wordpress怎么固定导航栏搜索引擎优化行业
  • 商城网站怎么做推广方案seo优化教学视频