常问的OGG问题
1. 什么是Oracle GoldenGate（OGG）？
Oracle GoldenGate（OGG）是一种实时数据集成和复制软件，可在异构系统之间进行高性能、低延迟的数据传输。它支持多种数据源和目标，包括Oracle数据库、非Oracle数据库、云存储等，并提供数据变换、过滤和路由功能。OGG还提供了高可用性和故障转移功能，以确保业务连续性和数据安全。
2.OGG与Oracle Data Guard有哪些区别？
Oracle GoldenGate（OGG）和Oracle Data Guard都是Oracle数据库中常用的高可用性和数据保护方案，但它们有以下区别：
OGG可以实现异构系统之间的实时数据复制和集成，而Data Guard只能在Oracle数据库之间进行数据复制和保护。
OGG提供更灵活的数据变换、过滤和路由功能，可以满足更复杂的数据复制需求，而Data Guard则主要用于备份和故障转移。
OGG支持多种数据源和目标，包括非Oracle数据库和云存储等，而Data Guard只支持Oracle数据库之间的数据复制和保护。
OGG可以在不同版本的Oracle数据库之间进行实时数据复制，而Data Guard通常需要在相同版本的Oracle数据库之间进行数据复制和保护。
3.OGG的主要功能是什么？它能够用于哪些任务？
Oracle GoldenGate（OGG）的主要功能包括：
实时数据复制和集成：OGG可以异构系统之间实现高性能、低延迟的数据传输，支持多种数据源和目标，包括Oracle数据库、非Oracle数据库和云存储等。
数据变换、过滤和路由：OGG提供灵活的数据变换、过滤和路由功能，可以根据需要对数据进行格式转换、字段映射、数据过滤等操作，以满足不同的数据集成需求。
高可用性和故障转移：OGG提供了高可用性和故障转移功能，可以通过自动故障检测和切换来确保业务连续性和数据安全。
OGG可以用于以下任务：
实时数据备份和复制：OGG可以将实时数据从一个数据库复制到另一个数据库，以实现数据备份和容灾。
数据库升级和迁移：OGG可以将数据从旧版本的数据库迁移到新版本的数据库，以支持数据库升级和迁移。
实时数据分析和报告：OGG可以将数据从多个数据源集成到一个目标位置，以实现实时数据分析和报告。
实时数据同步和共享：OGG可以将数据从多个数据源实时同步到一个目标位置，以实现数据共享和协作。
4.OGG支持哪些数据库平台？
Oracle GoldenGate（OGG）支持以下数据库平台：
Oracle Database：包括Oracle Database 11g、12c、18c、19c等版本。
Microsoft SQL Server：包括SQL Server 2008、2012、2014、2016、2017等版本。
IBM DB2：包括DB2 for z/OS、DB2 for i、DB2 for Linux/Unix/Windows等版本。
MySQL：包括MySQL 5.6、5.7、8.0等版本。
PostgreSQL：包括PostgreSQL 9.5、9.6、10、11、12、13等版本。
Teradata：包括Teradata Database V14.10、15.00、15.10、16.00、16.10、16.20、16.30等版本。
此外，OGG还支持一些其他数据库和数据存储平台，例如MongoDB、Amazon S3等。
5.OGG中的Extract和Replicat进程是什么？
在Oracle GoldenGate（OGG）中，Extract和Replicat是两个重要的进程，分别用于数据抓取和数据复制。具体说明如下：
Extract进程：Extract进程用于从源数据库中抓取数据并转换为OGG内部格式。它可以抓取一个或多个事务日志，将数据写入OGG的trail文件中，并传输到下游的Replicat进程。
Replicat进程：Replicat进程用于将经过Extract进程处理后的数据应用到目标数据库中。它可以读取OGG trail文件中的数据，并解析为目标数据库可识别的格式，然后将数据应用到目标数据库中。
因此，OGG的数据复制流程通常包括以下步骤：
在源数据库上启动Extract进程，抓取数据并写入trail文件中。
将trail文件传输给目标数据库。
在目标数据库上启动Replicat进程，读取trail文件中的数据并将其应用到目标数据库中。
通过Extract和Replicat进程的配合，OGG可以实现高效、可靠的数据复制和集成。
6.如何在OGG中进行数据抽取？
在Oracle GoldenGate（OGG）中，可以使用以下步骤进行数据抽取：
创建一个Extract进程：使用GGSCI命令行工具创建一个名为extract的进程，并指定相应的参数，如源数据库连接信息、要抓取的表或日志对象等。
配置数据抽取：使用GGSCI命令行工具配置数据抽取过程中需要进行的操作，如数据过滤、数据变换等。这些配置可以在Extract进程的配置文件中进行设置。
启动Extract进程：使用GGSCI命令行工具启动Extract进程，此时Extract进程开始抓取数据并将其写入到trail文件中。
监视和管理Extract进程：使用GGSCI命令行工具监视和管理Extract进程，可以查看其状态、查找错误等。
停止Extract进程：使用GGSCI命令行工具停止Extract进程，停止数据抽取过程。
需要注意的是，数据抽取过程需要特别注意目标数据库的性能和负载情况，避免对源数据库和目标数据库产生过大的负载。同时还需要考虑数据一致性的问题，确保抽取的数据与源数据库的数据保持一致性。
7.OGG中的Trail文件是什么？
在Oracle GoldenGate（OGG）中，Trail文件是OGG用于存储数据抓取和复制过程中的事务日志信息的二进制文件。它记录了从源数据库中抓取的数据和OGG内部处理过程中生成的元数据等信息，并用于传输到目标数据库以进行数据复制。
Trail文件具有以下特点：
二进制格式：Trail文件是以OGG自有的二进制格式存储的，它包含了所有抓取和复制过程中需要的元数据信息，如字段名、类型、长度等。
可扩展性：Trail文件可以根据实际情况进行配置，支持多个文件或多个目录的存储，以满足大规模数据集成需求。
高性能和低延迟：由于Trail文件是二进制格式，因此它的读写效率较高，可以实现高性能的数据抓取和复制，同时也能够保证较低的延迟。
可恢复性：Trail文件提供了一定的可恢复性，即在数据复制过程中出现错误时，可以通过重放Trail文件来恢复数据。
在OGG中，Trail文件是数据抓取和复制的核心组件之一，它提供了高效、可靠、可扩展的数据传输方式，确保了数据的实时同步和一致性。
8.如何在OGG中实现数据同步？
在Oracle GoldenGate（OGG）中，可以使用以下步骤实现数据同步：
创建一个Extract进程：使用GGSCI命令行工具创建一个名为extract的进程，并指定相应的参数，如源数据库连接信息、要抓取的表或日志对象等。
配置数据抽取：使用GGSCI命令行工具配置数据抽取过程中需要进行的操作，如数据过滤、数据变换等。这些配置可以在Extract进程的配置文件中进行设置。
启动Extract进程：使用GGSCI命令行工具启动Extract进程，此时Extract进程开始抓取数据并将其写入到trail文件中。
传输Trail文件到目标服务器：通过网络传输Trail文件至目标数据库所在的服务器。
创建一个Replicat进程：使用GGSCI命令行工具创建一个名为replicat的进程，并指定相应的参数，如目标数据库连接信息、要应用的trail文件等。
配置数据应用：使用GGSCI命令行工具配置数据应用过程中需要进行的操作，如数据过滤、数据变换等。这些配置可以在Replicat进程的配置文件中进行设置。
启动Replicat进程：使用GGSCI命令行工具启动Replicat进程，此时Replicat进程开始从trail文件中读取数据并将其应用到目标数据库中。
监视和管理进程：使用GGSCI命令行工具监视和管理Extract和Replicat进程，可以查看其状态、查找错误等。
通过以上步骤，可以实现OGG的实时数据同步功能，保证数据在不同数据库之间的实时同步和一致性。
=========================================GGSCI是Oracle GoldenGate（OGG）的管理工具，它提供了一组命令行工具，用于管理OGG的进程、配置文件、trail文件等资源。GGSCI命令行工具通常可以通过以下方式启动：
在Linux/Unix系统中，打开终端窗口，并切换到OGG安装目录下的ggsci子目录中，使用./ggsci命令启动GGSCI命令行界面。
在Windows系统中，打开命令提示符窗口，并切换到OGG安装目录下的ggsci子目录中，使用ggsci.exe命令启动GGSCI命令行界面。
GGSCI命令行工具支持多种功能，包括：
进程管理：可以启动、停止、重启、查看进程状态等。
文件管理：可以创建、编辑、删除配置文件、trail文件等。
监控和诊断：可以查看进程日志、错误信息、性能统计等。
数据操作：可以执行数据变换、过滤、路由等操作。
安全管理：可以配置用户权限、密码保护等安全策略。
集成管理：可以配置OGG与其他应用程序之间的集成。
GGSCI命令行工具是OGG的核心管理工具，通过它可以方便地管理OGG的各项资源和功能，确保数据集成和复制的高性能和可靠性。
以下为OGG实现数据同步的实例：
- 创建Extract进程：在源数据库上创建名为extract的Extract进程，以抓取需要同步的数据。
GGSCI> add extract extract
GGSCI> edit params extract
EXTRACT extract
SETENV (ORACLE_SID=source)
TRANLOGOPTIONS EXCLUDEUSER "SYS"
EXTTRAIL ./dirdat/ex
TABLE schema.table;
2.启动Extract进程：使用GGSCI命令行工具启动Extract进程，此时Extract进程开始抓取数据并将其写入到trail文件中。
GGSCI> start extract extract
3.传输Trail文件到目标服务器：通过网络传输Trail文件至目标数据库所在的服务器。
4.创建Replicat进程：在目标数据库上创建名为replicat的Replicat进程，以将抓取到的数据应用到目标数据库中。
GGSCI> add replicat replicat
GGSCI> edit params replicat
REPLICAT replicat
SETENV (ORACLE_SID=target)
ASSUMETARGETDEFS
TARGETDB LIBFILE libggjava.so SET property=dirprm/mydb.props
SOURCEDEFS ./dirdef/source.def
MAP schema.table, TARGET schema.table;
5.启动Replicat进程：使用GGSCI命令行工具启动Replicat进程，此时Replicat进程开始从trail文件中读取数据并将其应用到目标数据库中。
GGSCI> start replicat replicat
通过以上步骤，可以实现源数据库和目标数据库之间的实时数据同步。需要注意的是，在实际应用过程中，还需要考虑数据一致性和性能等问题，并设置相应的数据过滤、变换和路由等配置来满足实际需求。
9.OGG如何处理DDL语句？
OGG（Oracle GoldenGate）可以通过以下两种方式来处理DDL语句：
使用DDL Replication功能：OGG可以将DDL语句从源数据库复制到目标数据库，以保持目标数据库的结构与源数据库的一致性。这种方法需要在源和目标数据库上都安装并配置OGG。
- 将DDL语句作为文本对象进行传输：OGG可以将DDL语句作为文本对象捕获并在目标数据库上执行。这种方法不需要在目标数据库上安装OGG，但需要编写相应的处理程序来解析DDL语句并在目标数据库上执行。
OGG（Oracle GoldenGate）可以通过以下两种方式处理DDL语句：
- 使用DDL replication功能将DDL语句复制到目标数据库。
- 使用DDL过滤器过滤掉DDL语句，以避免在目标数据库上执行这些语句。
在第一种方式下，OGG会捕获源数据库中的DDL语句并将其转发到目标数据库。这样可以确保目标数据库与源数据库保持同步，并且在目标数据库中也执行相应的DDL语句。
在第二种方式下，OGG会使用DDL过滤器来检查DDL语句并过滤掉不需要在目标数据库执行的语句。这样可以避免意外更改目标数据库结构或数据。
10.如何在OGG中进行故障转移？
在OGG中进行故障转移通常有以下几个步骤：
检测到源端或目标端出现故障，例如网络中断或服务器故障。
切换OGG的数据同步流（data replication stream）到备用系统（standby system）并启动该系统。这可以通过使用OGG的管理工具和命令来完成。
将应用程序切换到备用系统上，以确保应用程序可以继续正常运行，并且从备用系统读取数据。
当源端或目标端恢复后，重新配置OGG以便将数据同步流切换回原始系统，并将应用程序切回原始系统上。
在实践中，故障转移通常需要预先规划和测试，以确保切换过程顺利进行，并且可以尽快地将数据同步流转移到备用系统上。此外，也需要在OGG配置中考虑高可用性、容错能力等因素，以减少故障发生的概率并提高系统的可靠性。
11.OGG中的数据过滤功能是什么？
OGG（Oracle GoldenGate）中的数据过滤功能可以让用户自定义数据同步过程中要传输的数据，从而实现更精细的控制和优化。
数据过滤功能通常通过使用OGG的过滤器（filter）来实现，包括以下几种类型：
行过滤器（Row Filter）：允许用户指定应传输哪些行，或者不传输哪些行。可以基于行的内容、位置或其他条件来定义过滤规则。
列过滤器（Column Filter）：允许用户选择要传输的列，并排除不需要传输的列。这样可以减少网络带宽和目标数据库的存储需求。
事件过滤器（Event Filter）：允许用户根据事件的类型、来源、目标等属性来过滤数据。例如，可以过滤掉一些无需同步的DDL语句或事务。
转换器（Transformation）：允许用户修改传输的数据格式，例如将数据转换为不同的编码方式、改写SQL语句等。
使用数据过滤器可以提高数据同步的效率和精确度，并且保证只有需要同步的数据才被传输到目标数据库中。
12.如何在OGG中进行事务回滚？
在OGG（Oracle GoldenGate）中，可以使用以下两种方式进行事务回滚：
使用OGG的TRANLOGOPTIONS参数来配置事务回滚。该参数允许将未提交的事务回滚到源数据库，以确保目标数据库与源数据库的数据一致性。当启用该参数时，OGG会自动检测并回滚未提交的事务。
在源数据库中手动回滚事务。可以使用OGG的GGSCI命令行工具来连接源数据库，并通过执行回滚命令来撤销未提交的操作。例如，可以使用ROLLBACKTRANS命令来回滚指定的事务。
在实践中，应该谨慎使用事务回滚功能，因为它可能会导致数据丢失或不一致。通常建议在使用事务回滚前先备份数据库，并确保了解回滚操作的影响和后果。此外，也需要根据具体情况来选择是否启用TRANLOGOPTIONS参数，以避免误操作或对系统性能造成影响。
在OGG（Oracle GoldenGate）中，要回滚事务可以使用GGSCI命令行工具完成。下面是基本的步骤：
使用info all 命令查找当前正在运行的OGG进程的进程号和状态。
运行stop [process name] 命令终止OGG进程（例如：Manager或Extract进程）并停止它们持续读取日志文件。
手动备份目标数据库，以便如果需要可以回滚更改。
运行rollbacktran [transaction ID] 命令回滚指定的事务。您可以使用info [process name] 命令来查找正在进行的事务ID。
如果需要，重新启动OGG进程并恢复数据同步。
请注意，回滚事务可能会导致数据不一致问题，并且应该谨慎使用。在执行回滚操作之前，请确保已经对数据进行适当备份，并且了解回滚可能带来的风险和后果。
13.OGG如何保证数据的一致性？
OGG（Oracle GoldenGate）通过以下几个方面来保证数据同步的一致性：
事务一致性：OGG会确保所有事务都按顺序进行，并在目标端按照相同的顺序执行，以避免数据不一致的情况发生。
数据可靠性：OGG会对数据进行校验和验证，从而确保传输过程中没有出现损坏或丢失的情况，并且可以自动重试或恢复失败的操作，保证数据同步的可靠性。
高可用性：OGG支持多种高可用性配置，例如双机热备、主-备模式等，从而确保即使发生故障也能保证数据的同步和可用性。
过滤器功能：OGG提供了过滤器功能，可以让用户按需选择要传输的数据，从而避免数据同步中不必要的数据传输和处理。
监控和告警：OGG可以定期检查数据同步的状态，并在发现异常情况时发送告警通知，以便及时进行故障排除和数据修复。
综上所述。OGG通过多种技术手段来保证数据同步的一致性、可靠性和高可用性，从而满足企业数据同步的各种需求
14.如何在OGG中处理LOB和LONG类型的数据？
在OGG（Oracle GoldenGate）中，LOB和LONG类型的数据需要特殊处理才能正确地进行数据同步。以下是一些常用的处理方式：
使用OGG的BLOB/CLOB数据类型支持：OGG支持BLOB和CLOB数据类型的同步，可以使用相应的映射规则来确保数据可靠传输。
使用OGG的压缩和分段机制：OGG提供了数据压缩和分段机制，可以将大型LOB或LONG对象分成更小的块进行传输，从而避免由于网络带宽不足导致的数据传输失败。
配置源数据库和目标数据库以支持LOB和LONG类型：在某些情况下，源数据库和目标数据库可能需要进行一些配置才能正确地支持LOB和LONG类型的数据同步。例如，在Oracle数据库中，可以使用DBMS_REDEFINITION包来重新定义表并支持LOB和LONG类型的同步。
使用替代方案：如果无法使用OGG自带的LOB/CLOB支持，还可以使用其他替代方案，例如将LOB或LONG对象转换为字符型并在源端和目标端之间传输。
需要注意的是，LOB和LONG类型的数据同步通常需要更多的处理和配置，并且可能会增加网络带宽和存储需求。因此，在实际应用中需要根据具体情况选择合适的处理方式，以确保数据同步的可靠性和效率。
15.OGG的性能瓶颈在哪里？如何解决这些瓶颈问题？
OGG（Oracle GoldenGate）的性能瓶颈可能出现在以下几个方面：
网络带宽限制：当源端和目标端之间的网络带宽不足时，会导致数据同步速度变慢或失败。解决这个问题可以通过增加网络带宽、压缩数据或分批传输等方式。
日志读取速度限制：当源端产生的日志速度超过了OGG的处理能力时，会导致日志积压和数据同步延迟。解决这个问题可以通过增加OGG进程数量、调整缓存大小或优化源数据库配置等方式。
目标端写入速度限制：当目标端的写入速度无法跟上数据同步速度时，会导致数据积压和数据同步延迟。解决这个问题可以通过增加目标端的存储容量、调整缓存大小或优化目标数据库配置等方式。
过滤器引起的性能损失：当使用过滤器时，可能会引起一定的性能损失。解决这个问题可以通过优化过滤器的条件和规则，减少不必要的数据处理和传输。
应用程序对数据修改频繁：当源端应用程序对数据进行频繁修改时，会增加数据同步的负担并影响OGG的性能。解决这个问题可以通过优化应用程序的设计和数据库结构，减少频繁的数据修改操作。
解决这些瓶颈问题通常需要综合考虑多个因素，并根据具体情况选择适当的解决方案。例如，可以采用硬件升级、软件优化、网络优化、数据库优化等方式来提高OGG的性能和可靠性。