การลบข้อมูลซ้ำซ้อน (การเชื่อมโยงระเบียน)

เหตุใดจึงสำคัญ

ข้อมูลซ้ำซ้อนเป็นเรื่องปกติในข้อมูลต้นทาง เกษตรกรถูกลงทะเบียนโดยผู้ซื้อหลายราย ชื่อถูกสะกดต่างกัน หรือมีการลงทะเบียนใหม่ทุกฤดูกาล สิ่งเหล่านี้ทำให้จำนวนเกษตรกรและพื้นที่แปลงเพาะปลูกดูมากเกินจริง ซ่อนการขายข้ามช่องทาง และเปิดช่องให้มีการแจ้งปริมาณซ้ำซ้อน การลบข้อมูลซ้ำซ้อนจึงเป็นเงื่อนไขพื้นฐานสำหรับการจ่ายเงินพรีเมียมอย่างเป็นธรรมและการกำหนดกลุ่มเป้าหมายของโครงการ

กระบวนการทำงานเป็นอย่างไร

1. ปรับให้เป็นมาตรฐาน: ทำความสะอาดชื่อ วันที่ รูปแบบหมายเลขโทรศัพท์ และชื่อสถานที่
2. จัดกลุ่ม: จำกัดการเปรียบเทียบเฉพาะคู่ที่มีความเป็นไปได้ เช่น อยู่ในอำเภอเดียวกัน
3. เปรียบเทียบ: คำนวณความคล้ายคลึงจากคุณลักษณะหลายด้าน รวมถึงการซ้อนทับของแปลงเพาะปลูก
4. ให้คะแนนและตัดสินใจ: รวมอัตโนมัติเมื่อตรงกันชัดเจน และให้เจ้าหน้าที่ตรวจสอบกรณีที่ไม่แน่ชัด
5. เชื่อมโยง: เก็บบันทึกรหัสที่ถูกรวมไว้ เพื่อไม่ให้ประวัติข้อมูลสูญหาย

ข้อผิดพลาดที่พบบ่อย

• รวมบุคคลต่างกันที่มีชื่อซ้ำกันในหมู่บ้านเดียวกันเข้าด้วยกันโดยผิดพลาด เช่น ญาติพี่น้อง
• ลบระเบียนทิ้งแทนที่จะเชื่อมโยงไว้ ซึ่งทำให้เส้นทางการตรวจสอบขาดหาย
• ลบข้อมูลซ้ำซ้อนเฉพาะภายในชุดข้อมูลเดียว ทั้งที่ความซ้ำซ้อนเกิดขึ้นข้ามผู้ซื้อหลายราย
• พึ่งพาหมายเลขโทรศัพท์ ซึ่งมีการใช้ร่วมกันและเปลี่ยนแปลงได้

การลบข้อมูลซ้ำซ้อนข้ามชุดข้อมูลเป็นหนึ่งในการตรวจสอบระดับก่อนการแข่งขันในบริการตรวจจับการทุจริตของ Farmer1st