Serbisyo at Mga Resulta ng AB Testing hanggang Ngayon

Serbisyo ng AB Testing Workshop

Nag-aalok ang DataSF ng mga workshop sa disenyo ng AB testing sa mga departamentong interesadong ihambing ang bisa ng iba't ibang anyo ng komunikasyon tulad ng mga liham o email.

Ang muling pagdidisenyo ng iyong komunikasyon ay nakasalalay sa paggamit ng mga prinsipyo ng Gawing Madali, Kaakit-akit, Panlipunan at Napapanahon o EAST, isang balangkas na binuo ng Behavioral Insights Team .

Kapag nakadisenyo kami ng bagong liham o komunikasyon gamit ang mga prinsipyo ng EAST, nagsasagawa kami ng eksperimento (subok ito ng AB). Ang paraan ng paggana nito ay:

• Tinutukoy namin ang target na populasyon
• Hatiin ito nang random sa dalawang grupo: paggamot at kontrol
• Patakbuhin ang teksto
• Ihambing ang mga resulta

 

Kung interesado ka sa isang AB Testing Design Workshop, makipag-ugnayan sa amin para sa higit pang mga detalye.

Sa page na ito magdaragdag kami ng mga eksperimento sa AB habang kumpleto na ang mga ito.

Treasurer at Tax Collector: Isang mas magandang sulat

Kinokolekta ng Office of the Treasurer & Tax Collector (TTX) ang mga buwis sa Lungsod sa iba't ibang bagay, kabilang ang

• Mga buwis sa lupa at mga gusali (real property) at
• Mga buwis sa mga kasangkapan sa opisina, mga bangka, kagamitan, atbp. (personal na ari-arian)

Ang pangunahing pagkakaiba sa pagitan ng tunay at personal na ari-arian ay ang Lungsod ay may karapatan na agawin ang lupa at mga gusali kung ang mga buwis ay hindi nababayaran. Nagbibigay ito sa Lungsod ng kaunti pang pagkilos. Ngunit pagdating sa personal na ari-arian, ang Lungsod ay umaasa sa mga self-reported na halaga at hindi maaaring basta-basta kunin ang ari-arian kung ang mga buwis ay hindi binabayaran. Ito ang pagkakaiba sa pagitan ng "secured" at "unsecured" na buwis.

Iyon ang dahilan kung bakit naisip ng Opisina na ang mga insight sa agham sa pag-uugali ay maaaring makatulong na gawing mas nakakahimok ang kanilang liham sa pagbabayad ng buwis.

Mas mahirap mangolekta ng mga buwis sa hindi secure na ari-arian tulad ng mga kasangkapan sa opisina, bangka, o kagamitan. Hindi tulad ng lupa o mga istruktura, tulad ng secured na ari-arian, hindi maaaring agawin ng Lungsod ang hindi secure na ari-arian kung sakaling hindi magbayad.

Bago / Pagkatapos

Upang mapabuti ang sulat, nakipagtulungan ang Tanggapan sa DataSF upang magsagawa ng workshop kung saan limang koponan ang nagpaligsahan upang magdisenyo ng isang mas mahusay na liham. Ginamit ng panalong disenyo ng liham ang mga pangunahing konsepto ng paggawa nitong madali, kaakit-akit, panlipunan, at napapanahon.

Ang larawan sa ibaba ay nagbibigay ng bago at pagkatapos ng mga insight sa pag-uugali na ginamit. Sa partikular, ginamit namin ang mga konsepto ng pagpapadali nito, gamit ang paghahambing sa lipunan at mga pamantayan at ginagawang mas kaakit-akit ang mga item ng aksyon.

Kasama sa bagong liham, sa kanang bahagi ang mga prinsipyo ng EAST.

Eksperimento at Resulta

Upang subukan ang bagong liham, random na hinati ng Opisina ang 3,495 na delingkwenteng nagbabayad ng buwis sa 2 grupo:

• 1,732 ang nakatanggap ng lumang paunawa (kontrol)
• 1,763 ang nakatanggap ng bagong paunawa (paggamot)

Nakatakda ang mga tugon noong Disyembre 15, 2017. Batay sa rate ng pagtugon na 16.3% para sa paggamot at 14.0% para sa kontrol, masasabi nating may 90% na kumpiyansa na pinahusay ng bagong liham ang rate ng pagtugon. Sa kasong ito, napabuti ito ng 17%.

Naghahanap na ngayon ang TTX na magpatakbo ng mga eksperimento sa lahat ng mga liham ng buwis nito!

Ang rate ng pagtugon sa bagong liham (paggamot) ay 17% na mas mataas kaysa sa rate ng pagtugon para sa lumang liham. Kami ay 90% kumpiyansa na ang aming bagong sulat ay nagpabuti ng mga rate ng pagtugon sa p=.0515

Mga Detalye ng Kliyente

Client Team

• Gilbert Jeung, IT, Treasurer at Kolektor ng Buwis
• Greg Kato, Compliance Director, Treasurer at Tax Collector
• John Krump, Bureau of Delingquent Revenue, Treasurer at Tax Collector
• Lauren Philibosian, Buwis sa Ari-arian, Ingat-yaman at Kolektor ng Buwis
• Margarita Rodriguez, Bureau of Delinquent Revenue, Treasurer at Tax Collector
• Darryl Yee, IT, Treasurer at Kolektor ng Buwis

Testimonial

"Ang pagsasagawa ng A/B Test sa DataScienceSF ay isang magandang karanasan para sa Office of the Treasurer & Tax Collector. Ikinonekta nila kami sa Behavioral Insights Team sa pamamagitan ng What Works Cities initiative. Nagkaroon kami ng pagsasanay mula sa estado ng industriya sa paggamit ng behavioral Mga insight para sa gawain ng pamahalaan na dalubhasa nilang pinadali ang isang proseso kung saan mabilis na natutunan ng aming team ang mga pangunahing elemento ng mga prinsipyo ng EAST at mabilis na isinasabuhay ang mga ito A/B testing at behavioral insights sa aming mga komunikasyon sa hinaharap sa mga nagbabayad ng buwis at umaasa sa paggawa ng higit pang mga desisyong batay sa ebidensya."

Greg Kato, Compliance Director, Treasurer at Tax Collector