1experimenter/jetstream/tests/test_tasks.py:1084: in test_results_data_with_zeros_parsed_and_stored 2 self.assertEqual(experiment.results_data, FULL_DATA) 3E AssertionError: {'v3': {'errors': {'experiment': []}, 'weekly': {'[16544 chars]lse}} != {'v3': {'weekly': {'enrollments': {'all': {'contro[16454 chars][]}}} 4E {'v3': {'errors': {'experiment': []}, 5E 'metadata': {}, 6E 'other_metrics': {'other_metrics': {'another_count': 'Another Count', 7E 'some_count': 'Some Count'}}, 8E 'overall': {'enrollments': {'all': {'control': {'branch_data': {'other_metrics': {'another_count': {'absolute': {'all': [], 9E 'first': {}}, 10E 'difference': {'control': {'all': [], 11E 'first': {}}, 12E 'variant': {'all': [], 13E 'first': {}}}, 14E 'relative_uplift': {'control': {'all': [], 15E 'first': {}}, 16E 'variant': {'all': [], 17E 'first': {}}}, 18E 'significance': {'control': {'overall': {}, 19E 'weekly': {}}, 20E 'variant': {'overall': {}, 21E 'weekly': {}}}}, 22E 'custom_metric': {'absolute': {'all': [], 23E 'first': {}}, 24E 'difference': {'control': {'all': [], 25E 'first': {}}, 26E 'variant': {'all': [], 27E 'first': {}}}, 28E 'relative_uplift': {'control': {'all': [], 29E 'first': {}}, 30E 'variant': {'all': [], 31E 'first': {}}}, 32E 'significance': {'control': {'overall': {}, 33E 'weekly': {}}, 34E 'variant': {'overall': {}, 35E 'weekly': {}}}}, 36E 'default_browser_action': {'absolute': {'all': [{'count': 0.0, 37E 'lower': 0.0, 38E 'point': 0.0, 39E 'upper': 0.0}], 40E 'first': {'count': 0.0, 41E 'lower': 0.0, 42E 'point': 0.0, 43E 'upper': 0.0}}, 44E 'difference': {'control': {'all': [], 45E 'first': {}}, 46E 'variant': {'all': [], 47E 'first': {}}}, 48E 'relative_uplift': {'control': {'all': [], 49E 'first': {}}, 50E 'variant': {'all': [], 51E 'first': {}}}, 52E 'significance': {'control': {'overall': {}, 53E 'weekly': {}}, 54E 'variant': {'overall': {}, 55E 'weekly': {}}}}, 56E 'identity': {'absolute': {'all': [{'lower': 0.0, 57E 'point': 0.0, 58E 'upper': 0.0}], 59E 'first': {'lower': 0.0, 60E 'point': 0.0, 61E 'upper': 0.0}}, 62E 'difference': {'control': {'all': [], 63E 'first': {}}, 64E 'variant': {'all': [], 65E 'first': {}}}, 66E 'percent': 0.0, 67E 'relative_uplift': {'control': {'all': [], 68E 'first': {}}, 69E 'variant': {'all': [], 70E 'first': {}}}, 71E 'significance': {'control': {'overall': {}, 72E 'weekly': {}}, 73E 'variant': {'overall': {}, 74E 'weekly': {}}}}, 75E 'mozilla_default_browser': {'absolute': {'all': [{'count': 0.0, 76E 'lower': 0.0, 77E 'point': 0.0, 78E 'upper': 0.0}], 79E 'first': {'count': 0.0, 80E 'lower': 0.0, 81E 'point': 0.0, 82E 'upper': 0.0}}, 83E 'difference': {'control': {'all': [], 84E 'first': {}}, 85E 'variant': {'all': [], 86E 'first': {}}}, 87E 'relative_uplift': {'control': {'all': [], 88E 'first': {}}, 89E 'variant': {'all': [], 90E 'first': {}}}, 91E 'significance': {'control': {'overall': {}, 92E 'weekly': {}}, 93E 'variant': {'overall': {}, 94E 'weekly': {}}}}, 95E 'retained': {'absolute': {'all': [], 96E 'first': {}}, 97E 'difference': {'control': {'all': [], 98E 'first': {}}, 99E 'variant': {'all': [{'lower': 0.0,100E 'point': 0.0,101E 'upper': 0.0},102E {'lower': 0.0,103E 'point': 0.0,104E 'upper': 0.0}],105E 'first': {'lower': 0.0,106E 'point': 0.0,107E 'upper': 0.0}}},108E 'relative_uplift': {'control': {'all': [],109E 'first': {}},110E 'variant': {'all': [],111E 'first': {}}},112E 'significance': {'control': {'overall': {},113E 'weekly': {}},114E - 'variant': {'overall': {'1': 'negative'},115E ? ---------------116E 117E + 'variant': {'overall': {},118E 'weekly': {}}}},119E 'some_count': {'absolute': {'all': [],120E 'first': {}},121E 'difference': {'control': {'all': [],122E 'first': {}},123E 'variant': {'all': [],124E 'first': {}}},125E 'relative_uplift': {'control': {'all': [],126E 'first': {}},127E 'variant': {'all': [],128E 'first': {}}},129E 'significance': {'control': {'overall': {},130E 'weekly': {}},131E 'variant': {'overall': {},132E 'weekly': {}}}}},133E 'search_metrics': {'search_count': {'absolute': {'all': [],134E 'first': {}},135E 'difference': {'control': {'all': [],136E 'first': {}},137E 'variant': {'all': [],138E 'first': {}}},139E 'relative_uplift': {'control': {'all': [],140E 'first': {}},141E 'variant': {'all': [],142E 'first': {}}},143E 'significance': {'control': {'overall': {},144E 'weekly': {}},145E 'variant': {'overall': {},146E 'weekly': {}}}}},147E 'usage_metrics': {}},148E 'is_control': True},149E 'variant': {'branch_data': {'other_metrics': {'another_count': {'absolute': {'all': [{'lower': 0.0,150E 'point': 0.0,151E 'upper': 0.0}],152E 'first': {'lower': 0.0,153E 'point': 0.0,154E 'upper': 0.0}},155E 'difference': {'control': {'all': [],156E 'first': {}},157E 'variant': {'all': [],158E 'first': {}}},159E 'relative_uplift': {'control': {'all': [],160E 'first': {}},161E 'variant': {'all': [],162E 'first': {}}},163E 'significance': {'control': {'overall': {},164E 'weekly': {}},165E 'variant': {'overall': {},166E 'weekly': {}}}},167E 'custom_metric': {'absolute': {'all': [],168E 'first': {}},169E 'difference': {'control': {'all': [],170E 'first': {}},171E 'variant': {'all': [],172E 'first': {}}},173E 'relative_uplift': {'control': {'all': [],174E 'first': {}},175E 'variant': {'all': [],176E 'first': {}}},177E 'significance': {'control': {'overall': {},178E 'weekly': {}},179E 'variant': {'overall': {},180E 'weekly': {}}}},181E 'default_browser_action': {'absolute': {'all': [{'count': 0.0,182E 'lower': 0.0,183E 'point': 0.0,184E 'upper': 0.0}],185E 'first': {'count': 0.0,186E 'lower': 0.0,187E 'point': 0.0,188E 'upper': 0.0}},189E 'difference': {'control': {'all': [],190E 'first': {}},191E 'variant': {'all': [],192E 'first': {}}},193E 'relative_uplift': {'control': {'all': [],194E 'first': {}},195E 'variant': {'all': [],196E 'first': {}}},197E 'significance': {'control': {'overall': {},198E 'weekly': {}},199E 'variant': {'overall': {},200E 'weekly': {}}}},201E 'identity': {'absolute': {'all': [{'lower': 0.0,202E 'point': 0.0,203E 'upper': 0.0}],204E 'first': {'lower': 0.0,205E 'point': 0.0,206E 'upper': 0.0}},207E 'difference': {'control': {'all': [],208E 'first': {}},209E 'variant': {'all': [],210E 'first': {}}},211E 'percent': 0.0,212E 'relative_uplift': {'control': {'all': [],213E 'first': {}},214E 'variant': {'all': [],215E 'first': {}}},216E 'significance': {'control': {'overall': {},217E 'weekly': {}},218E 'variant': {'overall': {},219E 'weekly': {}}}},220E 'mozilla_default_browser': {'absolute': {'all': [{'count': 0.0,221E 'lower': 0.0,222E 'point': 0.0,223E 'upper': 0.0}],224E 'first': {'count': 0.0,225E 'lower': 0.0,226E 'point': 0.0,227E 'upper': 0.0}},228E 'difference': {'control': {'all': [],229E 'first': {}},230E 'variant': {'all': [],231E 'first': {}}},232E 'relative_uplift': {'control': {'all': [],233E 'first': {}},234E 'variant': {'all': [],235E 'first': {}}},236E 'significance': {'control': {'overall': {},237E 'weekly': {}},238E 'variant': {'overall': {},239E 'weekly': {}}}},240E 'retained': {'absolute': {'all': [],241E 'first': {}},242E 'difference': {'control': {'all': [{'lower': 0.0,243E 'point': 0.0,244E 'upper': 0.0},245E {'lower': 0.0,246E 'point': 0.0,247E 'upper': 0.0}],248E 'first': {'lower': 0.0,249E 'point': 0.0,250E 'upper': 0.0}},251E 'variant': {'all': [],252E 'first': {}}},253E 'relative_uplift': {'control': {'all': [],254E 'first': {}},255E 'variant': {'all': [],256E 'first': {}}},257E - 'significance': {'control': {'overall': {'1': 'negative'},258E ? ---------------259E 260E + 'significance': {'control': {'overall': {},261E 'weekly': {}},262E 'variant': {'overall': {},263E 'weekly': {}}}},264E 'some_count': {'absolute': {'all': [{'lower': 0.0,265E 'point': 0.0,266E 'upper': 0.0}],267E 'first': {'lower': 0.0,268E 'point': 0.0,269E 'upper': 0.0}},270E 'difference': {'control': {'all': [],271E 'first': {}},272E 'variant': {'all': [],273E 'first': {}}},274E 'relative_uplift': {'control': {'all': [],275E 'first': {}},276E 'variant': {'all': [],277E 'first': {}}},278E 'significance': {'control': {'overall': {},279E 'weekly': {}},280E 'variant': {'overall': {},281E 'weekly': {}}}}},282E 'search_metrics': {'search_count': {'absolute': {'all': [],283E 'first': {}},284E 'difference': {'control': {'all': [{'lower': 0.0,285E 'point': 0.0,286E 'upper': 0.0}],287E 'first': {'lower': 0.0,288E 'point': 0.0,289E 'upper': 0.0}},290E 'variant': {'all': [],291E 'first': {}}},292E 'relative_uplift': {'control': {'all': [],293E 'first': {}},294E 'variant': {'all': [],295E 'first': {}}},296E - 'significance': {'control': {'overall': {'1': 'negative'},297E ? ---------------298E 299E + 'significance': {'control': {'overall': {},300E 'weekly': {}},301E 'variant': {'overall': {},302E 'weekly': {}}}}},303E 'usage_metrics': {}},304E 'is_control': False}},305E 'some_segment': {'control': {'branch_data': {'other_metrics': {'identity': {'absolute': {'all': [{'lower': 0.0,306E 'point': 0.0,307E 'upper': 0.0}],308E 'first': {'lower': 0.0,309E 'point': 0.0,310E 'upper': 0.0}},311E 'difference': {'control': {'all': [],312E 'first': {}},313E 'variant': {'all': [],314E 'first': {}}},315E 'percent': 0.0,316E 'relative_uplift': {'control': {'all': [],317E 'first': {}},318E 'variant': {'all': [],319E 'first': {}}},320E 'significance': {'control': {'overall': {},321E 'weekly': {}},322E 'variant': {'overall': {},323E 'weekly': {}}}}},324E 'search_metrics': {},325E 'usage_metrics': {}},326E 'is_control': True},327E 'variant': {'branch_data': {'other_metrics': {'identity': {'absolute': {'all': [{'lower': 0.0,328E 'point': 0.0,329E 'upper': 0.0}],330E 'first': {'lower': 0.0,331E 'point': 0.0,332E 'upper': 0.0}},333E 'difference': {'control': {'all': [],334E 'first': {}},335E 'variant': {'all': [],336E 'first': {}}},337E 'percent': 0.0,338E 'relative_uplift': {'control': {'all': [],339E 'first': {}},340E 'variant': {'all': [],341E 'first': {}}},342E 'significance': {'control': {'overall': {},343E 'weekly': {}},344E 'variant': {'overall': {},345E 'weekly': {}}}}},346E 'search_metrics': {},347E 'usage_metrics': {}},348E 'is_control': False}}}},349E 'show_analysis': False,350E 'weekly': {'enrollments': {'all': {'control': {'branch_data': {'other_metrics': {'another_count': {'absolute': {'all': [],351E 'first': {}},352E 'difference': {'control': {'all': [],353E 'first': {}},354E 'variant': {'all': [],355E 'first': {}}},356E 'relative_uplift': {'control': {'all': [],357E 'first': {}},358E 'variant': {'all': [],359E 'first': {}}},360E 'significance': {'control': {'overall': {},361E 'weekly': {}},362E 'variant': {'overall': {},363E 'weekly': {}}}},364E 'custom_metric': {'absolute': {'all': [],365E 'first': {}},366E 'difference': {'control': {'all': [],367E 'first': {}},368E 'variant': {'all': [],369E 'first': {}}},370E 'relative_uplift': {'control': {'all': [],371E 'first': {}},372E 'variant': {'all': [],373E 'first': {}}},374E 'significance': {'control': {'overall': {},375E 'weekly': {}},376E 'variant': {'overall': {},377E 'weekly': {}}}},378E 'default_browser_action': {'absolute': {'all': [{'lower': 0.0,379E 'point': 0.0,380E 'upper': 0.0,381E 'window_index': '1'}],382E 'first': {'lower': 0.0,383E 'point': 0.0,384E 'upper': 0.0,385E 'window_index': '1'}},386E 'difference': {'control': {'all': [],387E 'first': {}},388E 'variant': {'all': [],389E 'first': {}}},390E 'relative_uplift': {'control': {'all': [],391E 'first': {}},392E 'variant': {'all': [],393E 'first': {}}},394E 'significance': {'control': {'overall': {},395E 'weekly': {}},396E 'variant': {'overall': {},397E 'weekly': {}}}},398E 'identity': {'absolute': {'all': [{'lower': 0.0,399E 'point': 0.0,400E 'upper': 0.0,401E 'window_index': '1'}],402E 'first': {'lower': 0.0,403E 'point': 0.0,404E 'upper': 0.0,405E 'window_index': '1'}},406E 'difference': {'control': {'all': [],407E 'first': {}},408E 'variant': {'all': [],409E 'first': {}}},410E 'relative_uplift': {'control': {'all': [],411E 'first': {}},412E 'variant': {'all': [],413E 'first': {}}},414E 'significance': {'control': {'overall': {},415E 'weekly': {}},416E 'variant': {'overall': {},417E 'weekly': {}}}},418E 'mozilla_default_browser': {'absolute': {'all': [{'lower': 0.0,419E 'point': 0.0,420E 'upper': 0.0,421E 'window_index': '1'}],422E 'first': {'lower': 0.0,423E 'point': 0.0,424E 'upper': 0.0,425E 'window_index': '1'}},426E 'difference': {'control': {'all': [],427E 'first': {}},428E 'variant': {'all': [],429E 'first': {}}},430E 'relative_uplift': {'control': {'all': [],431E 'first': {}},432E 'variant': {'all': [],433E 'first': {}}},434E 'significance': {'control': {'overall': {},435E 'weekly': {}},436E 'variant': {'overall': {},437E 'weekly': {}}}},438E 'retained': {'absolute': {'all': [],439E 'first': {}},440E 'difference': {'control': {'all': [],441E 'first': {}},442E 'variant': {'all': [{'lower': 0.0,443E 'point': 0.0,444E 'upper': 0.0,445E 'window_index': '1'}],446E 'first': {'lower': 0.0,447E 'point': 0.0,448E 'upper': 0.0,449E 'window_index': '1'}}},450E 'relative_uplift': {'control': {'all': [],451E 'first': {}},452E 'variant': {'all': [],453E 'first': {}}},454E 'significance': {'control': {'overall': {},455E 'weekly': {}},456E 'variant': {'overall': {},457E - 'weekly': {'1': 'negative'}}}},458E ? ---------------459E 460E + 'weekly': {}}}},461E 'some_count': {'absolute': {'all': [],462E 'first': {}},463E 'difference': {'control': {'all': [],464E 'first': {}},465E 'variant': {'all': [],466E 'first': {}}},467E 'relative_uplift': {'control': {'all': [],468E 'first': {}},469E 'variant': {'all': [],470E 'first': {}}},471E 'significance': {'control': {'overall': {},472E 'weekly': {}},473E 'variant': {'overall': {},474E 'weekly': {}}}}},475E 'search_metrics': {'search_count': {'absolute': {'all': [],476E 'first': {}},477E 'difference': {'control': {'all': [],478E 'first': {}},479E 'variant': {'all': [],480E 'first': {}}},481E 'relative_uplift': {'control': {'all': [],482E 'first': {}},483E 'variant': {'all': [],484E 'first': {}}},485E 'significance': {'control': {'overall': {},486E 'weekly': {}},487E 'variant': {'overall': {},488E 'weekly': {}}}}},489E 'usage_metrics': {}},490E 'is_control': True},491E 'variant': {'branch_data': {'other_metrics': {'another_count': {'absolute': {'all': [{'lower': 0.0,492E 'point': 0.0,493E 'upper': 0.0,494E 'window_index': '1'}],495E 'first': {'lower': 0.0,496E 'point': 0.0,497E 'upper': 0.0,498E 'window_index': '1'}},499E 'difference': {'control': {'all': [],500E 'first': {}},501E 'variant': {'all': [],502E 'first': {}}},503E 'relative_uplift': {'control': {'all': [],504E 'first': {}},505E 'variant': {'all': [],506E 'first': {}}},507E 'significance': {'control': {'overall': {},508E 'weekly': {}},509E 'variant': {'overall': {},510E 'weekly': {}}}},511E 'custom_metric': {'absolute': {'all': [],512E 'first': {}},513E 'difference': {'control': {'all': [],514E 'first': {}},515E 'variant': {'all': [],516E 'first': {}}},517E 'relative_uplift': {'control': {'all': [],518E 'first': {}},519E 'variant': {'all': [],520E 'first': {}}},521E 'significance': {'control': {'overall': {},522E 'weekly': {}},523E 'variant': {'overall': {},524E 'weekly': {}}}},525E 'default_browser_action': {'absolute': {'all': [{'lower': 0.0,526E 'point': 0.0,527E 'upper': 0.0,528E 'window_index': '1'}],529E 'first': {'lower': 0.0,530E 'point': 0.0,531E 'upper': 0.0,532E 'window_index': '1'}},533E 'difference': {'control': {'all': [],534E 'first': {}},535E 'variant': {'all': [],536E 'first': {}}},537E 'relative_uplift': {'control': {'all': [],538E 'first': {}},539E 'variant': {'all': [],540E 'first': {}}},541E 'significance': {'control': {'overall': {},542E 'weekly': {}},543E 'variant': {'overall': {},544E 'weekly': {}}}},545E 'identity': {'absolute': {'all': [{'lower': 0.0,546E 'point': 0.0,547E 'upper': 0.0,548E 'window_index': '1'}],549E 'first': {'lower': 0.0,550E 'point': 0.0,551E 'upper': 0.0,552E 'window_index': '1'}},553E 'difference': {'control': {'all': [],554E 'first': {}},555E 'variant': {'all': [],556E 'first': {}}},557E 'relative_uplift': {'control': {'all': [],558E 'first': {}},559E 'variant': {'all': [],560E 'first': {}}},561E 'significance': {'control': {'overall': {},562E 'weekly': {}},563E 'variant': {'overall': {},564E 'weekly': {}}}},565E 'mozilla_default_browser': {'absolute': {'all': [{'lower': 0.0,566E 'point': 0.0,567E 'upper': 0.0,568E 'window_index': '1'}],569E 'first': {'lower': 0.0,570E 'point': 0.0,571E 'upper': 0.0,572E 'window_index': '1'}},573E 'difference': {'control': {'all': [],574E 'first': {}},575E 'variant': {'all': [],576E 'first': {}}},577E 'relative_uplift': {'control': {'all': [],578E 'first': {}},579E 'variant': {'all': [],580E 'first': {}}},581E 'significance': {'control': {'overall': {},582E 'weekly': {}},583E 'variant': {'overall': {},584E 'weekly': {}}}},585E 'retained': {'absolute': {'all': [],586E 'first': {}},587E 'difference': {'control': {'all': [{'lower': 0.0,588E 'point': 0.0,589E 'upper': 0.0,590E 'window_index': '1'}],591E 'first': {'lower': 0.0,592E 'point': 0.0,593E 'upper': 0.0,594E 'window_index': '1'}},595E 'variant': {'all': [],596E 'first': {}}},597E 'relative_uplift': {'control': {'all': [],598E 'first': {}},599E 'variant': {'all': [],600E 'first': {}}},601E 'significance': {'control': {'overall': {},602E - 'weekly': {'1': 'negative'}},603E ? ---------------604E 605E + 'weekly': {}},606E 'variant': {'overall': {},607E 'weekly': {}}}},608E 'some_count': {'absolute': {'all': [{'lower': 0.0,609E 'point': 0.0,610E 'upper': 0.0,611E 'window_index': '1'}],612E 'first': {'lower': 0.0,613E 'point': 0.0,614E 'upper': 0.0,615E 'window_index': '1'}},616E 'difference': {'control': {'all': [],617E 'first': {}},618E 'variant': {'all': [],619E 'first': {}}},620E 'relative_uplift': {'control': {'all': [],621E 'first': {}},622E 'variant': {'all': [],623E 'first': {}}},624E 'significance': {'control': {'overall': {},625E 'weekly': {}},626E 'variant': {'overall': {},627E 'weekly': {}}}}},628E 'search_metrics': {'search_count': {'absolute': {'all': [],629E 'first': {}},630E 'difference': {'control': {'all': [{'lower': 0.0,631E 'point': 0.0,632E 'upper': 0.0,633E 'window_index': '1'}],634E 'first': {'lower': 0.0,635E 'point': 0.0,636E 'upper': 0.0,637E 'window_index': '1'}},638E 'variant': {'all': [],639E 'first': {}}},640E 'relative_uplift': {'control': {'all': [],641E 'first': {}},642E 'variant': {'all': [],643E 'first': {}}},644E 'significance': {'control': {'overall': {},645E - 'weekly': {'1': 'negative'}},646E ? ---------------647E 648E + 'weekly': {}},649E 'variant': {'overall': {},650E 'weekly': {}}}}},651E 'usage_metrics': {}},652E 'is_control': False}},653E 'some_segment': {'control': {'branch_data': {'other_metrics': {'identity': {'absolute': {'all': [{'lower': 0.0,654E 'point': 0.0,655E 'upper': 0.0,656E 'window_index': '1'}],657E 'first': {'lower': 0.0,658E 'point': 0.0,659E 'upper': 0.0,660E 'window_index': '1'}},661E 'difference': {'control': {'all': [],662E 'first': {}},663E 'variant': {'all': [],664E 'first': {}}},665E 'relative_uplift': {'control': {'all': [],666E 'first': {}},667E 'variant': {'all': [],668E 'first': {}}},669E 'significance': {'control': {'overall': {},670E 'weekly': {}},671E 'variant': {'overall': {},672E 'weekly': {}}}}},673E 'search_metrics': {},674E 'usage_metrics': {}},675E 'is_control': True},676E 'variant': {'branch_data': {'other_metrics': {'identity': {'absolute': {'all': [{'lower': 0.0,677E 'point': 0.0,678E 'upper': 0.0,679E 'window_index': '1'}],680E 'first': {'lower': 0.0,681E 'point': 0.0,682E 'upper': 0.0,683E 'window_index': '1'}},684E 'difference': {'control': {'all': [],685E 'first': {}},686E 'variant': {'all': [],687E 'first': {}}},688E 'relative_uplift': {'control': {'all': [],689E 'first': {}},690E 'variant': {'all': [],691E 'first': {}}},692E 'significance': {'control': {'overall': {},693E 'weekly': {}},694E 'variant': {'overall': {},695E 'weekly': {}}}}},696E 'search_metrics': {},697E 'usage_metrics': {}},698E 'is_control': False}}}}}}