Сбой режима метки времени соединителя источника JDBC Kafka для sqlite3

Question

Я попытался создать базу данных с двумя таблицами в sqlite. Однажды в моей таблице есть столбец метки времени. Я пытаюсь реализовать режим отметки времени для захвата постепенных изменений в БД. Соединение Kafka завершается с ошибкой ниже:

 ERROR Failed to get current time from DB using Sqlite and query 'SELECT 
CURRENT_TIMESTAMP' 
(io.confluent.connect.jdbc.dialect.SqliteDatabaseDialect:471)
java.sql.SQLException: Error parsing time stamp

Caused by: java.text.ParseException: Unparseable date: "2019-02-05 02:05:29" 
does not match (\p{Nd}++)\Q-\E(\p{Nd}++)\Q-\E(\p{Nd}++)\Q 
\E(\p{Nd}++)\Q:\E(\p{Nd}++)\Q:\E(\p{Nd}++)\Q.\E(\p{Nd}++)

Большое спасибо за помощь

Config:

name=test-query-sqlite-jdbc-autoincrement 
connector.class=io.confluent.connect.jdbc.JdbcSourceConnector 
tasks.max=1 
connection.url=jdbc:sqlite:employee.db 
query=SELECT users.id, users.name, transactions.timestamp, transactions.payment_type FROM users JOIN transactions ON (users.id = transactions.user_id) 
mode=timestamp 
timestamp.column.name=timestamp 
topic.prefix=test-joined

DDL:

CREATE TABLE transactions(id integer primary key not null,
                          payment_type text not null,
                          timestamp DATETIME DEFAULT(STRFTIME('%Y-%m-%d %H:%M:%f', 'NOW')),
                          user_id int not null, 
                          constraint fk foreign key(user_id) references users(id)
); 

CREATE TABLE users (id integer primary key not null,name text not null);

Answer 1

Коннектор jdbc kafka connect легко обнаруживает изменения в метке времени, если значения столбца "метка времени" имеют формат "метка времени UNIX".

sqlite> CREATE TABLE transact(timestamp TIMESTAMP DEFAULT (STRFTIME('%s', 'now')) not null,
   ...> id integer primary key not null,
   ...> payment_type text not null);
sqlite>

Значения можно вставить как:

sqlite> INSERT INTO transact(timestamp,payment_type,id) VALUES (STRFTIME('%s', 'now'),'cash',1);

Изменения, связанные с меткой времени, затем обнаруживаются коннектором источника kafka jdbc, и их можно использовать следующим образом:

kafka-console-consumer  --bootstrap-server localhost:9092 --topic jdbc-transact --from-beginning
{"timestamp":1562321516,"id":2,"payment_type":"card"}
{"timestamp":1562321790,"id":1,"payment_type":"online"}

Answer 2

Я воспроизвел это, и это уже зарегистрировано как проблема для Соединителя Источника JDBC. Вы можете следить за этим здесь: https://github.com/confluentinc/kafka-connect-jdbc/issues/219