それは正しいですが、エポックからのナノ秒単位です (例: 19700101 00:00:00)
In [3]: pd.to_datetime('03:00:00.017158433')
Out[3]: Timestamp('2013-10-22 03:00:00.017158', tz=None)
In [4]: pd.to_datetime('03:00:00.017158433').value
Out[4]: 1382410800017158000
In [5]: pd.to_datetime(1382410800017158000,unit='ns')
Out[5]: Timestamp('2013-10-22 03:00:00.017158', tz=None)
10800017158433はどこから
有効なエポックタイムスタンプではありません (そうですが、おそらくあなたが望むものではありません)
これは真夜中からだとおっしゃっていたので、これを行うことができます。
In [2]: Timestamp(Timestamp('20131022').value+10800017158433)
Out[2]: Timestamp('2013-10-22 03:00:00.017158433', tz=None)