Dimensi VC polinomial (dalam satu variabel) derajat d

Fungsi linear dalam satu variabel memiliki dimensi VC = 3 dan saya ingat pernah membaca bahwa VC untuk polinomial derajat adalah . $d$ $(d^2 + 3d + 2)/2$

Saya mencari ide yang dapat membuktikan klaim di atas (dan mungkin menggeneralisasi ke banyak variabel juga, meskipun itu tampaknya terlalu banyak harapan).

Setiap pendekatan, bahkan yang tidak lengkap, akan dihargai.

Untuk mendefinisikan masalah dengan benar: Diberikan bidang (koordinat 2D, x dan y) berapa ukuran set maksimum yang dapat dihancurkan jika Anda dapat menggunakan fungsi klasifikasi yang polinomial ( ) derajat pada mode , dan Anda bebas memilih sisi kurva mana yang ingin Anda beri label positif. $y=p(x)$ $d$

Misalnya, beri label (x, y) sebagai positif jika . $y > x^2 +5x +9$

cg.comp-geom vc-dimension Karan
sumber

Saya tidak bekerja di daerah itu, tetapi saya ingin memahami pertanyaannya. Apa domain dan rentang fungsi-fungsi ini? Bisakah Anda menjelaskan sedikit bagaimana fungsi linear dalam satu variabel memiliki VC dimensi 3?

Robin Kothari

Pernyataan lebih baik diulang sebagai: ruang rentang didefinisikan oleh rentang yang dapat dinyatakan sebagai ketidaksetaraan mana f (x) adalah fungsi linier memiliki VC dimensi 3 (ini karena ruang rentang ini adalah ruang rentang setengah spasi dalam 2D)

f (x) \leq 0

$f(x) \le 0$

Suresh Venkat

@ Suresh: Terima kasih atas klarifikasi. Dari jawaban Anda, saya kira pertanyaan umum yang diajukan adalah apa dimensi VC dari ruang rentang yang didefinisikan oleh fungsi derajat-d (bukan linier)

mana

, bukan

f (x) \leq 0

$f(x) \leq 0$

x \in R^{n}

$x \in \mathbb{R}^n$

R^{2}

$\mathbb{R}^2$

Robin Kothari

Jawaban:

Metode dasar bekerja seperti ini: Asumsikan ketidaksetaraan Anda berbentuk

\sum_{saya \leq d} {Sebuah}_{saya} x^{saya} \leq 0

$\sum_{i \le d} a_i x^i \le 0$

Kemudian Anda membangun peta pengangkat ke ruang dimensi yang lebih tinggi di mana masing-masing monomial sesuai dengan satu dimensi. Sekarang polinomial dapat dinyatakan sebagai kombinasi linear dari dimensi baru dan Anda dapat meminta hasil yang biasa untuk setengah ruang di ruang yang dihasilkan.

Saya tidak yakin dari mana Anda mendapatkan ikatan: ekspresi yang benar untuk dimensi VC polinomial dalam variabel d derajat D adalah , yang merupakan jumlah monomial derajat paling banyak D dibentuk dari variabel d. $\binom{d + D}{d}$

Suresh Venkat
sumber

Baik. Tetapi OP tidak mengatakan berapa banyak variabel yang ada.

Suresh Venkat

Ketidaksetaraan saya melibatkan y dan polinomial dalam x. Saya telah membuat beberapa perubahan dalam masalah, berharap untuk mendefinisikan masalah dengan lebih tepat.

Karan

Dan mnrt. untuk masalah yang telah saya nyatakan, kuadrat di x harus menghancurkan setidaknya 4 poin (yang bisa saya lihat) dan mnrt. ke formula yang saya berikan, itu harus menghancurkan 6 poin! (tidak yakin apakah itu berlaku)

Karan

Rumusnya adalah batas atas.

Suresh Venkat

Dalam masalah Anda yang dimodifikasi, jawabannya adalah D + 1

Suresh Venkat

Berikut ini didasarkan pada buku Geometric Discrepancy Jiri Matousek .

Mendefinisikan ruang kisaran di parametrized oleh sebagai berikut. Biarkan menjadi derajat polinomial dalam variabel . Untuk setiap , set didefinisikan sebagai $\mathbb{R}^d$ $a_1, \ldots, a_p$ $f$ $D$ $d + p$ $a \in \mathbb{R}^p$ $S(a)$ $S(a) = \{x \in \mathbb{R}^d: f(x, a) \leq 0\}$ . Misalnya, lingkaran didefinisikan sebagai . $(x_1 - a_1)^2 + (x_2 - a_2)^2 - 1 \leq 0$

Kita bisa mendapatkan batasan pada kuantitas yang lebih halus daripada dimensi VC dalam model ini. Tentukan sebagai jumlah maksimum dari set berbeda yang diinduksi oleh pada setiap set poin , yaitu Di mana max diambil alih set dari poin. Ini adalah $\pi(m)$ $\{S(a)\}$ $m$

π (m) = \underset{X \subseteq R^{d}}{maks} | {S (Sebuah) \cap X} |,

$\pi(m) = \max_{X \subseteq \mathbb{R}^d}{|\{S(a) \cap X\}|},$

X

$X$

m

$m$ fungsi penghancur primal dari ruang rentang

. Perhatikan bahwa dimensi VC dari ruang jangkauan adalah maksimum

sedemikian rupa sehingga

. Juga, jika VC-dimensi ruang rentang

, maka fungsi pecah nya dibatasi oleh

{S (a)}

$\{S(a)\}$

m

$m$

π (m) = 2^{m}

$\pi(m) = 2^m$

k

$k$

O (m^{k})

$O(m^k)$

Untuk polinomial , adalah pola tanda jika ada beberapa sehingga untuk semua yang tanda adalah $m$ $f_1(a), \ldots, f_m(a)$ $\sigma = (\sigma_1, \ldots, \sigma_m) \in \{-, +\}^m$ $a$ $i$ $f_i(a)$ $\sigma_i$ . Hasil dari aljabar geometri adalah bahwa jumlah maksimum pola tanda yang berbeda dari gelar polinomial di variabel dibatasi oleh . $m$ $D$ $p$ $2^{O(p)}(Dm/p)^p$

$f_i(a) = f(x^i, a)$ $|\{S(a) \cap X\}|$ $f_1, \ldots, f_m$ $p$ $O(m^p)$

Sasho Nikolov
sumber