Finding car owners on Instagram: from whale tails to cars

Dentsu Aegis Network - . . , , , , , – , «» . , . 2,5 ? ? -?

. , , , “” . , , data science.

. , .

, . « /» « », . , , .
, : , , , . 2,5 .
,

, , .

, .

, , . ? , , . 100 . .

, 100 – . , - . , , «-».

? 50-100 ? , , , – . . , , .

,

- , : , . – . , , .

:

, «» :

, , , , .

, :

– , , . , . , , .

Object detection – , , .

retinanet, , . CVAT ( pycon’19) . , mAP ~ 0.97.

? , – , - , , . Lexus RX Lexus NX.

, , . , . Chevrolet Spark Ravon R2:

Autoencoder

. , – .

– , : , .

(latent space).
.

, . .

Trading Card Game , , Magic the Gathering, . , : , . .

Semantic Embeddings

. , .

: , , .. , ..

:

$G = (V, E)$ $V$ $E⊆V×V$ , . , $(u,v)∈E$ $v$ $u$ . $C={c_{1},...,c_{n}}⊆V$ . :

$d_{G}:C×C →R$ , $d_{G}(u,v) =\frac{height(lcs(u,v))}{max_{w∈V}height(w)}$ , . $lcs$ – . $d_{G}$ 0 1, $s_{G}(u,v) = 1 − d_{G}(u,v)$ .

, 3, $lcs("dog","cat")="mammal"$ , $lcs("dog","trout")="animal"$ , $s_{G}("dog","cat") = 1 − d_{G}("dog","cat")=1-1/3=2/3$ , $s_{G}("dog","trout")=1-2/3=1/3$ . , , .

– $φ(c_{i})∈Ｒ^n$ $c_{i}, i=1,...,n$ , , :

\forall_{1 \leq i, j \leq n} : φ (c_{i})^{T} φ (c_{j}) = s_{G} (c_{i}, c_{j})

$∀_{1 ≤ i,j ≤ n}:φ(c_{i})^Tφ(c_{j}) =s_{G}(c_{i},c_{j})$

\forall_{1 \leq i \leq n} : φ (c_{i}) = 1

$∀_{1 ≤ i ≤ n}:φ(c_{i})= 1$

, . , Stanford Cars, 196 80 ( , , ?). stanford cars , , . . , – , - – , , .

:

Siamese Networks

9 . , . , , , . metric learning , , c triplet loss.

kaggle, , : , . . .

, , , kaggle. , : 3 RGB . 5122564.

mAP = 0.89. . «» .

:

, . .

:

, :

, - . , . albumentations. bounding box’ mask’, : flip-crop-rotate distortion’.

. detectron. , COCO, . , . facebookresearch.

, mAP ~ 0.81. , .

, , , . , :

.
.
. , .
, .
...
.

, ? . , . , , . retinanet 16 .

, , , , , . .

. : ; 5 , ; ; ; . ?

BMW :

BMW M5. .

BMW M5 . .

BMW 3 . .

BMW M3. .

BMW , ? , .

, , , , . Audi:

.

.

.

- . , . , . :

:

:

-10 :

“ ”:

, Audi . 57% ? brand analytics, 25:75. , Audi. .

?

, :

:

?

: . :

. , , .
Mixup . , . . , . albumentation . .

:

. — . , , . kaggle, .
. , , .

: , . . .

, !

, .

R&D Dentsu Aegis Network Russia.

All Articles