Django Rest Framework を使ってAPI開発をしています。 その中でpytestを実装する時など、APIのレスポンス内容をJSONで出力したいケースがあったので、方法をメモしておきます。 DRFでは、APIサーバーをテストするためのAPIクライアントモジュールである「APIClient」が ...

もっといい方法があるよとChatGPTに教わったので、教わった内容を共有します。 私はデータ分析業務に携わってますが、たま～に変なデータ形式のファイルに遭遇します。こういう変なデータにあたってしまうとデータの成型に時間を要してしまうんですよね。

RealTimeIncrementalSync is a real-time data streaming system that fetches product updates from a MySQL database, serializes the data in Avro format, and streams it to Kafka. Kafka consumers ...

Rdbtools is a parser for Redis' dump.rdb files. The parser generates events similar to an xml sax parser, and is very efficient memory wise. python-lzf is optional but highly recommended to speed up ...