Theo điều tra, ông By được UBND xã Tân Phú rút từ cán bộ Tài chính ấp Long Trị 1 về làm thủ quỹ ngân sách xã từ năm 2007. Sau đó, ông này tiếp tục được UBND xã Tân Phú phân công làm kế toán thu kiêm thủ quỹ ngân sách. Trong năm 2013, lợi dụng chức vụ, quyền hạn được giao, ông By đã nhận tổng cộng gần 117,5 triệu đồng tiền thu ngân sách do các cán bộ khác trong xã chuyển giao để nộp vào kho bạc Nhà nước nhưng ông này không nộp lại mà chiếm đoạt tiêu xài.
Ngoài ra, ông By còn làm chứng từ, rút và chiếm đoạt hơn 83 triệu đồng tiền cấp cho hoạt động các ngành của xã. Đến cuối năm 2013, biết việc làm của mình bị bại lộ, ông By đã bỏ trốn lên TP.Hồ Chí Minh làm bảo vệ và bị bắt vào rạng sáng 26/9