Code erroné depuis plusieurs années (is_user_in_followers?(page['next_page'])

[thbar]

Comme relevé par @AntoineAugusti ici:

• https://github.com/etalab/transport-site/pull/3429/files/fdcdb682d3f3710a38ab859014c6e49e9aad2212#diff-4d4888522b02752cabd07d027f229fb4b98b0c7d0ca8775663e65404a3d1c6ed

Le reformattage apporté par Elixir 1.15 permet de voir qu'on accède à une clé de payload datagouv par 'next_page' et non "next_page".

Du coup cela retourne nil systématiquement.

J'allais corriger dans la PR #3429 mais j'ai eu un doute en lisant le code.

Je préfère éviter de modifier là-bas, car il n'y a pas de tests, et le bug étant ancien, je préfère éviter de modifier sans vérification plus précise (éviter une boucle infinie, des lenteurs ou autre, car il y a des requêtes HTTP supplémentaires).

Je pense qu'il vaut mieux ajouter des tests tranquillement, le bug étant par ailleurs très ancien (plus de 5 ans)

Voir aussi:

• Rendre l'application datagouvfr reloadable #3430.

transport-site/apps/datagouvfr/lib/datagouvfr/client/datasets.ex

Lines 156 to 171 in 85282f8

	# Check if user_id is in followers, if it's not, check in next page if there's one
	@spec is_user_in_followers?({:ok, map()} | binary(), binary(), Plug.Conn.t()) :: boolean()
	defp is_user_in_followers?({:ok, %{"data" => followers} = page}, user_id, conn) when is_list(followers) do
	Enum.any?(
	followers,
	&(&1["follower"]["id"] == user_id)
	) or is_user_in_followers?(page['next_page'], user_id, conn)
	end
	defp is_user_in_followers?(page_url, user_id, conn) when is_binary(page_url) do
	conn
	|> OAuthClient.get(page_url)
	|> is_user_in_followers?(user_id, conn)
	end
	defp is_user_in_followers?(_, _, _), do: false

[AntoineAugusti]

Peut-être qu'on peut avoir un per_page pour cette requête plus grand pour éviter de faire trop de requêtes pour voir si la personne est abonnée ou pas. Je sais pas s'il y a des JDD avec beaucoup de followers

[thbar]

J'irai regarder un peu la data pour comprendre, mais vu que c'est vieux j'ai préféré ne pas hâter les choses et me planter un jeudi :-)

[thbar]

Différent et sans le même impact mais surprenant quand même:

• Mises à jour techniques (Elixir 1.15, packages Hex...) #3429 (review)

[AntoineAugusti]

Je vais le traiter

[thbar]

@AntoineAugusti un point auquel j'avais pensé c'est qu'il faut faire un peu gaffe aux effets de bords du type "volume retourné beaucoup plus importants" potentiellement

[AntoineAugusti]

Ouais je vais regarder le temps de réponse et s'il vaut mieux avoir plus d'éléments par page (per_page) pour éviter qu'on fasse 3-4 requêtes si il y a beaucoup de résultats

[thbar]

☕ 😄

• Exemples d'usage de Stream.resource/3 et Stream.unfold pour paginer des ressources #3486