{ "MemoryThreshold": 8, "GCIntervalMilliseconds": -1, "UnsafeVariable": false, "Logging": { "LogLevel": { "Default": "Debug" } }, "Input":{ "InputDir": "D:\\Dump\\NewMockData", // Csv数据输入目录 "UseMock": false, // 使用模拟数据进行测试 "MockCountMultiplier": 1, // 模拟数据量级的乘数 "TableOrder": ["order", "order_data_parts"], // 按顺序输入的表 "TableIgnoreList": [] // 忽略输入的表 }, "Transform":{ "StrictMode": false, // 设为true时如果数据转换发生错误,立刻停止程序 "EnableFilter": true, // 启用数据过滤 "EnableReplacer": true, // 启用数据修改 "EnableReBuilder": true, // 启用数据重建 "CleanDate": "202301" // 当数据过滤开启时,删除这个时间之前的数据 }, "Output":{ "ConnectionString": "Server=127.0.0.1;Port=3306;UserId=root;Password=cfmes123456;", // 要分库,不用加'Database='了 "MaxAllowedPacket": 67108864, "FlushCount": 10000, // 每次提交记录条数 "MaxDatabaseOutputTask" : 4, // 每个数据库最大提交任务数 "TreatJsonAsHex": false, // 将json列作为16进制格式输出(0x前缀),生产库是没有json列的 "NoOutput": ["order"], "ForUpdate": { "order_data_parts": "CompanyID = new.CompanyID" } }, "RecordQueue":{ "ProducerQueueLength": 50000, // 输入队列最大长度 "ConsumerQueueLength": 10000, // 每个输出队列最大长度 "MaxByteCount": 3221225472 // 队列最大字节数 }, "RedisCache": { "Configuration": "192.168.1.246:6380", "InstanceName" : "mes-etl:" }, "TenantDb": // 分库配置 { "TenantKey" : "CompanyID", "UseDbGroup": "prod", "DbGroups": { "test": { "cferp_test_1": 1000, "cferp_test_2": 2000, "cferp_test_3": 2147483647 }, "prod":{ "mesdb_1": 5000, "mesdb_2": 10000, "mesdb_3": 15000, "mesdb_4": 20000, "mesdb_5": 2147483647 } } } }