如何创建Logtail采集配置来采集SQLServer查询结果 - 日志服务

前提条件

已在服务器上安装Linux Logtail 0.16.0及以上版本或Windows Logtail 1.0.0.8及以上版本。具体操作，请参见安装Logtail（Linux系统）或安装Logtail（Windows系统）。

{
  "inputs": [
      "type": "service_mssql",
      "detail": {
        "Address": "rm-****.sqlserver.rds.aliyuncs.com",
        "User": "****",
        "Password": "*******",
        "DataBase": "****",
        "Limit": true,
        "PageSize": 100,
        "StateMent": "select * from LogtailTestTable where id > ? order by id",
        "CheckPoint": true,
        "CheckPointColumn": "id",
        "CheckPointStart": "0",
        "CheckPointSavePerPage": true,
        "CheckPointColumnType": "int",
        "IntervalMs": 1000
}

参数	类型	是否必选	说明
type	string	是	数据源类型，固定为 service_mssql 。
Address	string	否	SQL Server地址。例如 `rm-****.sqlserver.rds.aliyuncs.com` 。不配置时，默认使用 127.0.0.1:1433 。
User	string	否	用于登录SQL Server数据库的账号名称。不配置时，默认使用 root 。
Password	string	否	用于登录SQL Server数据库的账号密码。不配置时，默认为空。如果安全需求较高，建议将用户名和密码配置为 `xxx` ，待采集配置同步至本地机器后，在本地文件 /usr/local/ilogtail/user_log_config.json 找到对应配置进行修改。具体操作，请参见修改本地配置。
DataBase	string	否	SQL Server数据库名称。
DialTimeOutMs	int	否	连接SQL Server数据库的超时时间，单位：ms。不配置时，默认使用5000 ms。
ReadTimeOutMs	int	否	读取SQL Server查询结果的超时时间，单位：ms。不配置时，默认使用5000 ms。
StateMent	string	否	SELECT语句。设置 CheckPoint 为 true 时， StateMent 中SELECT语句的where条件中必须包含CheckPoint列（ CheckPointColumn 参数），并将该列的值设置为 ? 。例如：设置 CheckPointColumn 为 id ，设置 StateMent 为 `SELECT * from ... where id > ?` 。
Limit	boolean	否	是否使用Limit分页。不配置时，默认使用 false ，表示不使用Limit分页。建议使用 Limit 进行分页。设置 Limit 为 true 后，进行SQL查询时，会自动在 StateMent 中追加LIMIT语句。
PageSize	int	否	分页大小， Limit 为 true 时必须配置。
MaxSyncSize	int	否	每次同步最大记录数。不配置时，默认使用 0 ，表示无限制。
CheckPoint	boolean	否	是否使用CheckPoint。不配置时，默认使用 false ，表示不使用CheckPoint。
CheckPointColumn	string	否	CheckPoint列名称。 CheckPoint 为 true 时必须配置。
CheckPointColumnType	string	否	CheckPoint列类型，支持int和time两种类型。int类型的内部存储为int64，time类型支持SQL Server的date、datetime、time。 CheckPoint 为 true 时必须配置。
CheckPointStart	string	否	CheckPoint列的初始值。 CheckPoint 为 true 时必须配置。
CheckPointSavePerPage	boolean	否	是否每次分页时保存一次CheckPoint。 true ：每次分页时保存一次CheckPoint。 false ：每次同步完成后保存一次CheckPoint。
IntervalMs	int	是	同步间隔，单位：ms。

sudo /etc/init.d/ilogtaild stop; sudo /etc/init.d/ilogtaild start

IF NOT EXISTS(SELECT * FROM sys.databases WHERE name = 'LogtailTest')
BEGIN
CREATE DATABASE [LogtailTest]
USE [LogtailTest]
IF NOT EXISTS (SELECT * FROM sysobjects WHERE name='LogtailTestTable' and xtype='U')
BEGIN
CREATE TABLE LogtailTestTable (
      id INT PRIMARY KEY IDENTITY (1, 1),
      name NVARCHAR(50),
      quantity INT
INSERT INTO LogtailTestTable (name, quantity) values('banana', 1);
INSERT INTO LogtailTestTable (name, quantity) values('banana', 2);
INSERT INTO LogtailTestTable (name, quantity) values('banana', 3);
INSERT INTO LogtailTestTable (name, quantity) values('banana', 4);
SELECT * FROM LogtailTestTable;
GO

前提条件

原理

功能

应用场景

操作步骤

已有机器组

没有可用机器组

修改本地配置

Linux系统

Windows系统

问题排查

数据库表和日志样例