[Wikidata-bugs] [Maniphest] [Commented On] T187296: Increase kafka event retention to 14 or 21 days

[Ottomata]

Ottomata added a comment.

Doing the following for all main-eqiad and main-codfw:

for t in \
    mediawiki.page-create                    \
    mediawiki.page-delete                    \
    mediawiki.page-edit                      \
    mediawiki.page-move                      \
    mediawiki.page-properties-change         \
    mediawiki.page-restrictions-change       \
    mediawiki.page-undelete                  \
    mediawiki.page_delete                    \
    mediawiki.page_move                      \
    mediawiki.page_restore                   \
    mediawiki.recentchange                   \
    mediawiki.resource-change                \
    mediawiki.resource_change                \
    mediawiki.resourcechange                 \
    mediawiki.revision-create                \
    mediawiki.revision-score                 \
    mediawiki.revision-visibility-change     \
    mediawiki.revision_create                \
    mediawiki.revision_visibility_set        \
    mediawiki.user-blocks-change             \
    mediawiki.user_block                     ; do
    for dc in eqiad codfw; do
        topic="${dc}.${t}"
        echo kafka configs --alter --entity-type topics --entity-name $topic --add-config retention.ms=2678400000
    done
done



kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page-create --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page-create --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page-delete --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page-delete --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page-edit --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page-edit --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page-move --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page-move --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page-properties-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page-properties-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page-restrictions-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page-restrictions-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page-undelete --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page-undelete --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page_delete --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page_delete --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page_move --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page_move --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.page_restore --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.page_restore --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.recentchange --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.recentchange --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.resource-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.resource-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.resource_change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.resource_change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.resourcechange --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.resourcechange --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.revision-create --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.revision-create --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.revision-score --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.revision-score --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.revision-visibility-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.revision-visibility-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.revision_create --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.revision_create --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.revision_visibility_set --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.revision_visibility_set --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.user-blocks-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.user-blocks-change --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name eqiad.mediawiki.user_block --add-config retention.ms=2678400000
kafka configs --alter --entity-type topics --entity-name codfw.mediawiki.user_block --add-config retention.ms=2678400000

TASK DETAIL

https://phabricator.wikimedia.org/T187296

EMAIL PREFERENCES

https://phabricator.wikimedia.org/settings/panel/emailpreferences/

To: Ottomata
Cc: mforns, elukey, Ottomata, Aklapper, Nuria, Ladsgroup, Pchelolo, JAllemandou, Smalyshev, Lahi, Gq86, Vacio, Darkminds3113, Lucas_Werkmeister_WMDE, GoranSMilovanovic, QZanden, EBjune, merbst, LawExplorer, Avner, Gehel, Jonas, FloNight, Xmlizer, Nirmos, jkroll, Wikidata-bugs, Jdouglas, aude, Tobias1984, Manybubbles, Mbch331, Krenair, jeremyb

_______________________________________________
Wikidata-bugs mailing list
Wikidata-bugs@lists.wikimedia.org
https://lists.wikimedia.org/mailman/listinfo/wikidata-bugs