ການຄົ້ນຄວ້າກໍລະນີ: ວິທີການກໍ່ສ້າງລະບົບ moderation AI-based

ໃນບົດຄວາມນີ້, Aleksandr Karabatov, Project Manager ໃນ Social Discovery Gລະຫັດ QRການຄົ້ນຄວ້າແລະການນໍາໃຊ້ຂອງລະບົບ moderation AI ທີ່ຖືກອອກແບບມາເພື່ອປິ່ນປົວຄອມພິວເຕີແລະອຸປະກອນທີ່ຜະລິດໂດຍຜູ້ໃຊ້ໃນອຸປະກອນການຄົ້ນຄວ້າຂະຫນາດໃຫຍ່. ກາຕູນນີ້ກວດສອບຄວາມປອດໄພທີ່ແຕກຕ່າງກັນ, ຄຸນນະສົມບັດເຕັກໂນໂລຊີທີ່ເຮັດໄດ້, ແລະຜົນປະໂຫຍດທີ່ສໍາຄັນຂອງທຸລະກິດຂອງການປ່ຽນແປງຈາກ manual ກັບ moderation AI.

ໃນໄລຍະ 9 ເດືອນ, ຂອງພວກເຮົາລະຫັດ QRທີມງານໄດ້ປັບປຸງລະບົບການຄວບຄຸມ AI ອັດຕະໂນມັດຢ່າງກວ້າງຂວາງສໍາລັບຄອມພິວເຕີແລະອຸປະກອນທີ່ຜະລິດໂດຍຜູ້ໃຊ້ໃນອິນເຕີເນັດທີ່ມີຫຼາຍກ່ວາ 1 ລ້ານຜູ້ໃຊ້ມືອາຊີບໃນມື້ນີ້, ສະຫນັບສະຫນູນ 5 ລ້ານຄໍາສັ່ງແລະອັບໂຫລດຫຼາຍກ່ວາ 100,000 ຮູບພາບ.

ການຄົ້ນຄວ້າທີ່ສໍາຄັນນີ້ໄດ້ຖືກສ້າງຕັ້ງຂຶ້ນໃນຖານະການຄົ້ນຄວ້າທີ່ສໍາຄັນ, ໃນຖານະເປັນການທົດສອບຂະຫນາດໃຫຍ່ທີ່ສະຫນອງຄວາມຮູ້ສຶກທີ່ສໍາຄັນ. ໃນບົດຄວາມນີ້, ຂໍຂອບໃຈວ່າພວກເຮົາມີການຄົ້ນຄວ້າທີ່ສໍາຄັນແລະຜົນກະທົບຂອງພວກເຮົາມີ.

ຄວາມຄິດເຫັນທີ່ Moderators System

Speedພາສາລາວ

ໃນຖານະເປັນຜູ້ໃຊ້, ການປະມວນຜົນການປະມວນຜົນໃນໄລຍະການລົງທະບຽນຂອງເວັບໄຊທ໌ສົນທະນາສາມາດສະແດງໃຫ້ເຫັນໄດ້ຢ່າງງ່າຍດາຍ - ການຄາດຄະເນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນຍິນ

ປະເພດທີ່ຜ່ານມາແມ່ນການຕັດສິນໃຈຂອງ SLA (Service Level Agreement) ແລະ CR2 (Conversion Rate to Registration). ໃນລະບົບການ moderators ຄູ່ມື, ທຸກ ວິນາທີທີ່ໄດ້ຮັບການເກັບຮັກສາເປັນຫນຶ່ງຜູ້ຊ່ຽວຊານເພີ່ມເຕີມທີ່ຢູ່. ຜູ້ moderators ຂອງມະນຸດມີລະດັບການເຮັດວຽກ, ສະຖານທີ່ເຮັດວຽກ, ແລະສາມາດປິ່ນປົວ.

ຂໍຂອບໃຈວ່າທ່ານກໍາລັງຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບການເຮັດວຽກຂອງພວກເຮົາ. ຖ້າຫາກວ່າທ່ານກໍາລັງຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບການເຮັດວຽກຂອງພວກເຮົາ, ກະລຸນາຕິດຕໍ່ຂໍ້ມູນເພີ່ມເຕີມ.

Qualityລະຫັດ QR
ລະບົບທີ່ທັນສະໄຫມຍັງບໍ່ມີຄວາມຖືກຕ້ອງ 100%. ຄວາມຖືກຕ້ອງຂອງການເຮັດວຽກທີ່ແຕກຕ່າງກັນແມ່ນອະນຸຍາດໃຫ້ປະເພດຕ່າງໆ, ລວມທັງຄວາມຖືກຕ້ອງຂອງການເຮັດວຽກ. ໂດຍສະເພາະ, ຖ້າຫາກວ່າທ່ານບໍ່ມີຜູ້ໃຊ້ທີ່ມີຊື່ທີ່ເລີ່ມຕົ້ນດ້ວຍລະຫັດ "A" ທ່ານຈະໄດ້ຮັບລະດັບຄວາມຖືກຕ້ອງຕ່ໍາກວ່າ. ແຕ່ພວກເຮົາມີຄວາມສາມາດໃນການ "Alex"? ຫຼື "mr.Alex"? ລະບົບ heuristic ຈະທັນສະໄຫມຂ້ອຍ, ຜູ້ຊາຍຈະທັນສະໄຫມຂ້ອຍ. ເປັນ AI ຈະປິ່ນປົວການເຮັດວຽກນີ້ດ້ວຍການປິ່ນປົວທີ່ດີທີ່ສຸດ.

ການຄາດຄະເນດິນດີຕ້ອນຮັບຂອງພວກເຮົາແມ່ນການຄາດຄະເນດິນດີຕ້ອນຮັບຂອງພວກເຮົາ. ການຄາດຄະເນດິນດີຕ້ອນຮັບຂອງພວກເຮົາແມ່ນການຄາດຄະເນດິນດີຕ້ອນຮັບຂອງພວກເຮົາ. ການຄາດຄະເນດິນດີຕ້ອນຮັບຂອງພວກເຮົາແມ່ນການຄາດຄະເນດິນດີຕ້ອນຮັບຂອງພວກເຮົາ.

ການທົດສອບຊອບແວການ moderation ສາມາດຊ່ວຍ ✅, ແຕ່ຄວາມຜິດພາດຈະຍັງເກີດຂຶ້ນ. Plus, ຄວາມຮູ້ສຶກສາມາດບໍ່ພຽງແຕ່ຖືກຂົນສົ່ງໂດຍອີເມວ via cloud; ການເກັບຮັກສາຄຸນນະພາບໃຊ້ເວລາທີ່ດີເລີດ. ຄວາມປອດໄພສາມາດເຮັດໃຫ້ຄຸນນະພາບການປະສິດທິພາບຕ່ໍາ, ເຮັດໃຫ້ພວກເຮົາມີຄວາມປອດໄພເພີ່ມເຕີມແລະຄ່າໃຊ້ຈ່າຍເພີ່ມເຕີມ. ນອກເຫນືອໄປຈາກນີ້, ມີຄວາມປອດໄພຂອງຄວາມປອດໄພຢ່າງວ່ອງໄວ.

Conclusionລະຫັດ QR

ລະບົບການ moderators ດໍາ ເນື່ອງຈາກການຄົ້ນຄວ້າ slow, ການຄົ້ນຄວ້າທີ່ສົມບູນແບບ, ແລະການສົ່ງເສີມຄວາມຮູ້ທີ່ເຂັ້ມແຂງ - ເຮັດໃຫ້ເຂົາເຈົ້າຢ່າງງ່າຍດາຍ, ຄ່າໃຊ້ຈ່າຍ, ແລະບໍ່ແມ່ນການຮັບປະກັນຢ່າງງ່າຍດາຍ.

ການເລືອກຂອງເຕັກໂນໂລຊີ

We decided to add AI elements to our moderation system.ການຄົ້ນຄວ້າທີ່ໄດ້ຮັບການຄົ້ນຄວ້າທີ່ແຕກຕ່າງກັນໄດ້ຖືກນໍາໃຊ້ໂດຍການຄົ້ນຄວ້າແລະການຄົ້ນຄວ້າທີ່ແຕກຕ່າງກັນ. ໃນຂະນະທີ່ພວກເຮົາມີຄວາມຕ້ອງການທີ່ຈະເຮັດວຽກຮ່ວມກັບເອກະສານແລະຮູບພາບ, ພວກເຮົາມີຄວາມຕ້ອງການຂອງມາດຕະຖານທີ່ມີຄຸນນະພາບທີ່ເຂັ້ມແຂງ.

ພວກເຮົາມີການທົບທວນຄືນບໍລິການທີ່ຊ່ຽວຊານໃນການ moderators ອັດຕະໂນມັດ, ໄດ້ຖືກນໍາໃຊ້ໃນຮູບແບບ open-source finishing, ແຕ່ຫຼັງຈາກນັ້ນໄດ້ດໍາເນີນການໃນ ChatGPT. ໂດຍແນ່ໃຈວ່າຮູບແບບໄດ້ຢ່າງງ່າຍດາຍ - ເຊັ່ນດຽວກັນກັບ "You're a moderator on a dating site," - ມັນສາມາດຊອກຫາການເຄື່ອນໄຫວເງິນ, ຜູ້ຊ່ຽວຊານແລະບັນຫາທີ່ສົມບູນແບບອື່ນໆທີ່ມີປະສິດທິພາບຫຼາຍກ່ວາ 80%.

ການແປພາສາ

ນໍາ ເວັບ ໄຊ ທ ໌ ອອນ ໄລ ນ ໌ ວັນ ທີ ການ ສ້າງ ຕັ້ງ ສະ ເພາະ ສໍາ ລັບ lovers ສັດ ລ້ຽງ. ບໍ່ ວ່າ ຈະ ເປັນ ທ່ານ ກໍາ ລັງ ຊອກ ຫາ ຄູ່ ຮ່ວມ ງານ ຂອງ ຊີ ວິດ, buddy ສໍາ ລັບ ສັດ ລ້ຽງ ຫຼື ພຽງ ແຕ່ ຜູ້ ຫນຶ່ງ ຂອງ ທ່ານ ທີ່ ຈະ ວາງ ສາຍ ອອກ ກັບ, ທີ່ ນີ້ ທ່ານ ຈະ ສາ ມາດ ຊອກ ຫາ ໄດ້ ຜູ້ ທີ່ ທ່ານ ກໍາ ລັງ ຊອກ ຫາ ສໍາ ລັບ - pet lovers ຄື ຕົວ ທ່ານ ເອງ.

ຖ້າຫາກວ່າທ່ານກໍາລັງຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບວິທີການນີ້, ທ່ານສາມາດຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບວິທີການນີ້. ຖ້າຫາກວ່າທ່ານກໍາລັງຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບວິທີການນີ້, ຖ້າຫາກວ່າທ່ານກໍາລັງຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບວິທີການນີ້, ຖ້າຫາກວ່າທ່ານກໍາລັງຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບວິທີການນີ້, ທ່ານສາມາດຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບວິທີການນີ້.

ຂໍຂອບໃຈວ່າທ່ານກໍາລັງຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບ prompt:

ຂໍຂອບໃຈວ່າທ່ານກໍາລັງຊອກຫາຂໍ້ມູນເພີ່ມເຕີມກ່ຽວກັບ prompt:

• ຊື່ຫຍໍ້ຂອງ : ຊື່ຫຍໍ້ຂອງ : Briefly explain the task and purpose to the model
• ຄໍາຮ້ອງສະຫມັກ: ມັນເປັນສິ່ງທີ່ຈໍາເປັນເພື່ອໃຫ້ມາດຕະຖານກ່ຽວກັບສິ່ງທີ່ປະກອບດ້ວຍອຸປະກອນ problematic ແລະແນະນໍາການປິ່ນປົວທີ່ເຫມາະສົມເພື່ອປິ່ນປົວໃນເວລາທີ່ຊອກຫາຫຼືບໍ່ມີອຸປະກອນນີ້;
• ຊື່ຫຍໍ້ຂອງ : It is extremely important to provide several examples for each type of issue, showing what we consider acceptable and what we do not.
• ** ຊື່ຫຍໍ້ຂອງ : ** ເງື່ອນໄຂທີ່ສໍາຄັນສໍາລັບມາດຕະຖານເພື່ອບັນລຸຄໍາຮ້ອງສະຫມັກທີ່ຖືກຕ້ອງ; ຢ່າງໃດກໍຕາມ, ຊື່ຫຍໍ້ຂອງຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍກ່ວາຫຼາຍ.

ລະຫັດ QR

ການພັດທະນາຢ່າງງ່າຍດາຍທີ່ມີປະສິດທິພາບຈໍາເປັນຕ້ອງມີບັນຊີລາຍລະອຽດທີ່ຖືກຕ້ອງ. ຄຸນນະພາບຂອງລາຍລະອຽດທີ່ຖືກບັນຊີລາຍລະອຽດມີປະສິດທິພາບໂດຍທົ່ວໄປ. ໃນຂະນະທີ່ມີຫຼາຍບໍລິການ crowd-sourcing, ພວກເຮົາມີຄວາມຕ້ອງການທີ່ຈະສ້າງທີມງານບັນຊີລາຍລະອຽດຂອງພວກເຮົາ.

You can find lots of guides online on how to set up a data labeling pipeline, ແລະນີ້ແມ່ນສິ່ງທີ່ສໍາຄັນທີ່ຂ້າພະເຈົ້າຫວັງວ່າສໍາຄັນທີ່ສຸດ:

• ລະບົບການເຄື່ອນໄຫວທີ່ສວຍງາມ: ກະລຸນາສະຫນອງບັນຊີລາຍລະອຽດຢ່າງກວ້າງຂວາງຂອງບັນຊີລາຍລະອຽດທັງຫມົດທີ່ສາມາດໄດ້ຮັບ, ລວມທັງບັນຊີລາຍລະອຽດແລະປະເພດຕ່າງໆ.
• ທີມງານ: ທັງຫມົດຂອງບັນຊີລາຍລະອຽດຈໍາເປັນຕ້ອງໄດ້ຮັບການປະມວນຜົນໂດຍການປະມວນຜົນປະມວນຜົນປະມວນຜົນປະມວນຜົນປະມວນຜົນປະມວນຜົນປະມວນຜົນປະມວນຜົນປະມວນຜົນປະມວນຜົນປະມວນຜົນ
• ການສື່ຫຍໍ້ຂອງ: ເຮັດໃຫ້ sessions onboarding, ຂ້າງລຸ່ມຕົວຢ່າງ cases ທັງຫມົດ, ແລະອະນຸຍາດໃຫ້ຜູ້ຊ່ຽວຊານທີ່ຈະກວດສອບສິ່ງທີ່ເປັນ "unclear" ໃນຂະນະທີ່ຈໍາເປັນ.
• ການປັບປຸງ: ຫຼັງຈາກແຕ່ລະຊົ່ວໂມງຂອງການປະມວນຜົນ, ການປັບປຸງ taxonomy ແລະປັບປຸງທີມງານ, ຖ້າຫາກວ່າບັນຫາຄຸນນະພາບເກີດຂຶ້ນ.

ຫນຶ່ງໃນຄຸນນະສົມບັດທີ່ສໍາຄັນທີ່ສຸດສໍາລັບຊຸດຂໍ້ມູນທີ່ສົມບູນແບບແມ່ນການລວມເອົາຈໍານວນປະສິດທິພາບຂອງຜົນປະໂຫຍດທີ່ແຕກຕ່າງກັນແລະຜົນປະໂຫຍດທີ່ແຕກຕ່າງກັນໃນທຸກປະເພດອຸປະກອນທີ່ຄາດຄະເນ. ລັກສະນະທີ່ຖືກປັບປຸງສໍາລັບອຸປະກອນທີ່ກ່ຽວຂ້ອງກັບຜູ້ໃຫຍ່ອາດຈະບໍ່ໄດ້ຮັບຜົນປະໂຫຍດທີ່ຖືກຕ້ອງໃນເວລາທີ່ໃຊ້ກັບອຸປະກອນທີ່ກ່ຽວຂ້ອງກັບເດັກນ້ອຍ.

ລະບົບ Architecture

ໃນປັດຈຸບັນ, ພວກເຮົາມີການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມການຝຶກອົບຮົມພວກເຮົາ ກໍາ ລັງເຮົາມີຄວາມຊ່ຽວຊານໃນການຄົ້ນຄວ້າແລະການປິ່ນປົວຂອງພວກເຮົາ.

• ລະບົບເຫຼົ່ານີ້ຈໍາເປັນຕ້ອງໄດ້ຮັບການຢັ້ງຢືນແລະການປັບປຸງຢ່າງຕໍ່ເນື່ອງ. ມັນເປັນສິ່ງທີ່ສໍາຄັນທີ່ຈະສ້າງໂຄງການສໍາລັບການ annotating ທັນສະໄຫມ परिणामໃຫມ່ແລະຄວບຄຸມຄວາມຖືກຕ້ອງໃນປະເພດອຸປະກອນທີ່ແຕກຕ່າງກັນ.
• ວິທີການຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດຂອງມະນຸດ.

ຜົນປະໂຫຍດການຄ້າ

The initial integration significantly improved user registration efficiency, reducing processing time by a factor of 60 while maintaining moderation quality. Additionally, automation helped us standardize the objectivity of decisions, enabling us to quickly identify new issues and needs and improve the process. The system is already reducing costs for the company, and further optimization lies ahead.

ໃນປັດຈຸບັນ, ພວກເຮົາໄດ້ນໍາໃຊ້ການແກ້ໄຂທີ່ດີທີ່ສຸດແລະປະສິດທິພາບທີ່ສຸດໃນຕະຫຼາດ. ຢ່າງໃດກໍຕາມ, ເນື່ອງຈາກການຂະຫຍາຍຕົວຢ່າງໄວ້ວາງໃຈຂອງ AI, ພວກເຮົາມີການເຂົ້າເຖິງການບໍລິການທີ່ຍິ່ງໃຫຍ່ຂອງຜູ້ສະຫນອງ. ນອກຈາກນີ້, OpenAI ໄດ້ຈັດການການປັບປຸງຂະຫນາດນ້ອຍທີ່ສໍາຄັນໃນໄລຍະການພັດທະນາໂຄງການຂອງພວກເຮົາ.

ພວກເຮົາໄດ້ອອກແບບແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແຜ່ນແ

ລະຫັດ QR

Startup ຂອງພວກເຮົາໄດ້ຖືກພັດທະນາໂດຍກຸ່ມຜູ້ຊ່ຽວຊານທີ່ມີພຽງແຕ່ 6 ຜູ້ຊ່ຽວຊານ.ພວກເຮົາມີຄວາມຊ່ຽວຊານເພີ່ມເຕີມຈາກລູກຄ້າຂອງພວກເຮົາກໍາລັງເຮັດວຽກຮ່ວມກັບພວກເຮົາກໍາລັງເຮັດວຽກຮ່ວມກັບພວກເຮົາກໍາລັງເຮັດວຽກຮ່ວມກັບພວກເຮົາກໍາລັງເຮັດວຽກຮ່ວມກັບພວກເຮົາກໍາລັງເຮັດວຽກຮ່ວມກັບພວກເຮົາກໍາລັງເຮັດວຽກຮ່ວມກັບພວກເຮົາກໍາລັງເຮັດວຽກຮ່ວມກັບພວກເຂົາ

✅ ລະບົບໄດ້ເລີ່ມຕົ້ນຢ່າງໄວ້ວາງໃຈ, ປະສິດທິພາບສູງ, ແລະຄຸນນະພາບເພີ່ມເຕີມ, ເຮັດໃຫ້ຂໍຂອບໃຈວ່າຈຸດປະສົງຂອງລະດັບຄັ້ງທໍາອິດໄດ້ເລີ່ມຕົ້ນ.