From 0e4d876ef27331ce8b61b7ce279868128c118fa6 Mon Sep 17 00:00:00 2001
From: SebastianCB <sebastian.carrillob01@gmail.com>
Date: Wed, 12 Oct 2022 20:28:43 -0500
Subject: [PATCH] Feat: Added data

---
 .DS_Store                    | Bin 0 -> 6148 bytes
 BECK/.DS_Store               | Bin 0 -> 8196 bytes
 BECK/coseno_vs_euclidian.csv |   1 -
 BECK/coseno_vs_euclidian.py  |   4 +-
 BECK/get_item_dataset.py     |  70 +++++++++++++++++++++++++++++++++++
 README.md                    |   9 ++++-
 6 files changed, 81 insertions(+), 3 deletions(-)
 create mode 100644 .DS_Store
 create mode 100644 BECK/.DS_Store
 delete mode 100644 BECK/coseno_vs_euclidian.csv
 create mode 100644 BECK/get_item_dataset.py

diff --git a/.DS_Store b/.DS_Store
new file mode 100644
index 0000000000000000000000000000000000000000..b6c0e6ce74f9958a530ade312522dbc346e16679
GIT binary patch
literal 6148
zcmeHKQESvd5T3oBc5@=$gP{177r}=jms-IhLQJm@MFcUT4=Qb94jV|b<u2Dl&y)NQ
z{R93Me}F$nzu8?6+v=+xG6TEc%<Rl2`)%0G5RpozMMTsmB8|q_3DEsUc%0ig>3B~U
zsCbUO%Dl-dlf&i-MOL2y-n%X(v`ahm=*<4z$Jnj!R_sESarta=?DzR=eq5E4W-$1s
zI&0kv7uU7!>E7ku>-5mf(k5%BlO!9zWa~-R9OhnsW=yrzv;28En(g<m?wGpC%6c@m
z$z?G@$g3A+U6@&7rgbr~^Q3M->p%zl{TuW7=GOMzjd1JUoyA5tj|R~ujA(nY2=uj^
z(SyB%qj&G;9~K`!x!q9sRIOa`_!B-uSuXJ;9oLnq-@?c70X+pp4{1n`fw$?1iZf(=
zLDa8g!4we&gaKh-RT=OHp}w@LFDUON3<v}Ni~&9$LNvzMW9!f!9q4Qc0Oa3DE70w)
zKQLqmF!tCwga@KrD$u1WUt%a<IVhKo@z}?=4qZAa`((`HpR9a^qI}_@LK{vhb|}3t
zAPk&lV9l9*zW;asT>qa=5=$5m2L3AsRCkyT6D-N!t>+fUcWsDvfX2dct;1ys6nhmT
fmapRLXjb44Spmi#TZiyK<VV2LAe}JqR~h&L9~Ne0

literal 0
HcmV?d00001

diff --git a/BECK/.DS_Store b/BECK/.DS_Store
new file mode 100644
index 0000000000000000000000000000000000000000..0b79e0ce958cfa96ab2c0f6317af1b56a911b154
GIT binary patch
literal 8196
zcmeHMPj3=I6o1oVyKSR3Y17ig!(L205CXIa#F!AQhk8&Gj2_g`rK~Lp>=JeXD`L3#
z9sKhN{3v?y=m+rw)Zd%k(q$JSiKdb`vzd7_v+uo``OTX*`+$f<sZ&c6#feBmX1czH
zVnX8goFi$$@7V$skS97K1NnqZszkU|heALhpb$_9C<GJ&^MC;EY);ygd*6GjN`-(z
z;J-wG{ezCowCK~JN2TjPAwvMr7`kOb9dUq^(S2I<>CmH66gs`=LHMG=4>5!%j`upV
zgBE={^r$CJ!V@Rqk1YHMMaa=1r%QGcMUSddA)pY5BEYfx8lv?Iwdiy#ey<!f?4xSK
zu7ZOP)g9zpXELEiw1il{g(u09A>J<`-c4w>sfphOEOH^&raIaVMs?BWpiCmaCU;zq
z*beF0mU<ki$A)xQ>M*H;{swf`kPVEHMBAZmNZb36wyl}9MOG+&hIDBd+mLJH*}3G5
zkG)|0j=$P-T0Yv}s;x%daZ{-uVqr0MWocQ{R<+fut1rtZcCYLjZpSGZ?dRNjY`7;?
zzy8Fw8>6~WeOfnrmG#Ygw&fai%WO;Gdd&pOi)VGKX7@^V$ErC}PuY8+X)D@FWqqgL
z&*riTeK(yQB=mkdmC7gdY(6&_tZ3Ue({~RJo2PI3ZwK!_VO2=Ncgl3#Ymds$s6~+J
zmfKdtwvJg4d5!k5Ye#t4CaiPo2;uh~oI&fGA{9XK>%T@Z-tX`2r4o83RbUhgc_5n2
z<s%?|#L|$ag2*6GS#Ai*4LX*_R{@lKu$nj`<7PSGu!``p$j_z)hb&LGDNPwFfEF;`
z9v*I0ku#LSR&viPw6oyIqQ}HG7i1sH@}X~1Yr<B42soM;J)kl@qKD&r(jiUcn=>QW
z&1GN&ne-nU!3c=Zw(kH$8yjuH2Ue(udK;|_yd%S1fhRQ4)0L;p1n3cOM(nSHP{zU2
zh7^}Jbg++hAaB7mX3!`7c2M69sm+0(Zm@5J4!#dA{P>I>Tzb)<-eqa#-u)3-l{D-i
z_r{3(d?mcbi&;&)H6mkPiy)l5z<=CC<t-7M0iW~vNsHc8;vE0qpZ@#*{7hKQL?NIM
z`0EIW*nWAx1hwa%ap4g-*4B{^kvTEn(4$fWg$&0*WjGEx`oj=)9jq)<^y$!}=s~*l
X9|A7-QyL$E>i#En|DQ=?pQGXz9b1<W

literal 0
HcmV?d00001

diff --git a/BECK/coseno_vs_euclidian.csv b/BECK/coseno_vs_euclidian.csv
deleted file mode 100644
index 6551aa1..0000000
--- a/BECK/coseno_vs_euclidian.csv
+++ /dev/null
@@ -1 +0,0 @@
-Comentario,Comentario Preprocesado,Tristeza R0 Coseno,Tristeza R0 Euclidiana,Tristeza R1 Coseno,Tristeza R1 Euclidiana,Tristeza R2 Coseno,Tristeza R2 Euclidiana,Tristeza R3 Coseno,Tristeza R3 Euclidiana,Pesimismo R0 Coseno,Pesimismo R0 Euclidiana,Pesimismo R1 Coseno,Pesimismo R1 Euclidiana,Pesimismo R2 Coseno,Pesimismo R2 Euclidiana,Pesimismo R3 Coseno,Pesimismo R3 Euclidiana,Fracaso R0 Coseno,Fracaso R0 Euclidiana,Fracaso R1 Coseno,Fracaso R1 Euclidiana,Fracaso R2 Coseno,Fracaso R2 Euclidiana,Fracaso R3 Coseno,Fracaso R3 Euclidiana,Perdida de placer R0 Coseno,Perdida de placer R0 Euclidiana,Perdida de placer R1 Coseno,Perdida de placer R1 Euclidiana,Perdida de placer R2 Coseno,Perdida de placer R2 Euclidiana,Perdida de placer R3 Coseno,Perdida de placer R3 Euclidiana,Sentimiento de culpa R0 Coseno,Sentimiento de culpa R0 Euclidiana,Sentimiento de culpa R1 Coseno,Sentimiento de culpa R1 Euclidiana,Sentimiento de culpa R2 Coseno,Sentimiento de culpa R2 Euclidiana,Sentimiento de culpa R3 Coseno,Sentimiento de culpa R3 Euclidiana,Sentimiento de castigo R0 Coseno,Sentimiento de castigo R0 Euclidiana,Sentimiento de castigo R1 Coseno,Sentimiento de castigo R1 Euclidiana,Sentimiento de castigo R2 Coseno,Sentimiento de castigo R2 Euclidiana,Sentimiento de castigo R3 Coseno,Sentimiento de castigo R3 Euclidiana,Disconformidad con uno mismo R0 Coseno,Disconformidad con uno mismo R0 Euclidiana,Disconformidad con uno mismo R1 Coseno,Disconformidad con uno mismo R1 Euclidiana,Disconformidad con uno mismo R2 Coseno,Disconformidad con uno mismo R2 Euclidiana,Disconformidad con uno mismo R3 Coseno,Disconformidad con uno mismo R3 Euclidiana,Autocritica R0 Coseno,Autocritica R0 Euclidiana,Autocritica R1 Coseno,Autocritica R1 Euclidiana,Autocritica R2 Coseno,Autocritica R2 Euclidiana,Autocritica R3 Coseno,Autocritica R3 Euclidiana,Pensamiento o deseos suicidas R0 Coseno,Pensamiento o deseos suicidas R0 Euclidiana,Pensamiento o deseos suicidas R1 Coseno,Pensamiento o deseos suicidas R1 Euclidiana,Pensamiento o deseos suicidas R2 Coseno,Pensamiento o deseos suicidas R2 Euclidiana,Pensamiento o deseos suicidas R3 Coseno,Pensamiento o deseos suicidas R3 Euclidiana,Llanto R0 Coseno,Llanto R0 Euclidiana,Llanto R1 Coseno,Llanto R1 Euclidiana,Llanto R2 Coseno,Llanto R2 Euclidiana,Llanto R3 Coseno,Llanto R3 Euclidiana,Agitacion R0 Coseno,Agitacion R0 Euclidiana,Agitacion R1 Coseno,Agitacion R1 Euclidiana,Agitacion R2 Coseno,Agitacion R2 Euclidiana,Agitacion R3 Coseno,Agitacion R3 Euclidiana,Perdida de interes R0 Coseno,Perdida de interes R0 Euclidiana,Perdida de interes R1 Coseno,Perdida de interes R1 Euclidiana,Perdida de interes R2 Coseno,Perdida de interes R2 Euclidiana,Perdida de interes R3 Coseno,Perdida de interes R3 Euclidiana,Indecision R0 Coseno,Indecision R0 Euclidiana,Indecision R1 Coseno,Indecision R1 Euclidiana,Indecision R2 Coseno,Indecision R2 Euclidiana,Indecision R3 Coseno,Indecision R3 Euclidiana,Desvalorizacion R0 Coseno,Desvalorizacion R0 Euclidiana,Desvalorizacion R1 Coseno,Desvalorizacion R1 Euclidiana,Desvalorizacion R2 Coseno,Desvalorizacion R2 Euclidiana,Desvalorizacion R3 Coseno,Desvalorizacion R3 Euclidiana,Perdida de energia R0 Coseno,Perdida de energia R0 Euclidiana,Perdida de energia R1 Coseno,Perdida de energia R1 Euclidiana,Perdida de energia R2 Coseno,Perdida de energia R2 Euclidiana,Perdida de energia R3 Coseno,Perdida de energia R3 Euclidiana,Cambio en los habitos de sueño R0 Coseno,Cambio en los habitos de sueño R0 Euclidiana,Cambio en los habitos de sueño R1a Coseno,Cambio en los habitos de sueño R1a Euclidiana,Cambio en los habitos de sueño R1b Coseno,Cambio en los habitos de sueño R1b Euclidiana,Cambio en los habitos de sueño R2a Coseno,Cambio en los habitos de sueño R2a Euclidiana,Cambio en los habitos de sueño R2b Coseno,Cambio en los habitos de sueño R2b Euclidiana,Cambio en los habitos de sueño R3a Coseno,Cambio en los habitos de sueño R3a Euclidiana,Cambio en los habitos de sueño R3b Coseno,Cambio en los habitos de sueño R3b Euclidiana,Irritabilidad R0 Coseno,Irritabilidad R0 Euclidiana,Irritabilidad R1 Coseno,Irritabilidad R1 Euclidiana,Irritabilidad R2 Coseno,Irritabilidad R2 Euclidiana,Irritabilidad R3 Coseno,Irritabilidad R3 Euclidiana,Cambios en el apetito R0 Coseno,Cambios en el apetito R0 Euclidiana,Cambios en el apetito R1a Coseno,Cambios en el apetito R1a Euclidiana,Cambios en el apetito R1b Coseno,Cambios en el apetito R1b Euclidiana,Cambios en el apetito R2a Coseno,Cambios en el apetito R2a Euclidiana,Cambios en el apetito R2b Coseno,Cambios en el apetito R2b Euclidiana,Cambios en el apetito R3a Coseno,Cambios en el apetito R3a Euclidiana,Cambios en el apetito R3b Coseno,Cambios en el apetito R3b Euclidiana,Dificultad de concentracion R0 Coseno,Dificultad de concentracion R0 Euclidiana,Dificultad de concentracion R1 Coseno,Dificultad de concentracion R1 Euclidiana,Dificultad de concentracion R2 Coseno,Dificultad de concentracion R2 Euclidiana,Dificultad de concentracion R3 Coseno,Dificultad de concentracion R3 Euclidiana,Cansancio o fatiga R0 Coseno,Cansancio o fatiga R0 Euclidiana,Cansancio o fatiga R1 Coseno,Cansancio o fatiga R1 Euclidiana,Cansancio o fatiga R2 Coseno,Cansancio o fatiga R2 Euclidiana,Cansancio o fatiga R3 Coseno,Cansancio o fatiga R3 Euclidiana,Perdida de interes en el sexo R0 Coseno,Perdida de interes en el sexo R0 Euclidiana,Perdida de interes en el sexo R1 Coseno,Perdida de interes en el sexo R1 Euclidiana,Perdida de interes en el sexo R2 Coseno,Perdida de interes en el sexo R2 Euclidiana,Perdida de interes en el sexo R3 Coseno,Perdida de interes en el sexo R3 Euclidiana,Clase
\ No newline at end of file
diff --git a/BECK/coseno_vs_euclidian.py b/BECK/coseno_vs_euclidian.py
index 8143028..67091a0 100644
--- a/BECK/coseno_vs_euclidian.py
+++ b/BECK/coseno_vs_euclidian.py
@@ -3,6 +3,7 @@
 import json
 import pprint
 from model_word2vec_service import ModelWord2Vec
+
 df = pd.read_excel("./datasets/DATASET_ENTRENAMIENTO.xlsx",index_col=[1,2]).reset_index()
 comments = list(df["text"])
 classes =  list(df["class"])
@@ -48,8 +49,9 @@
     new_comment["Clase"] =  classes[class_comment]
     df_cve = df_cve.append(new_comment, ignore_index=True)
     class_comment += 1
-  except Exception: 
+  except Exception as e: 
     print(f'Error en el comentario {class_comment} omitiendo...')
+    print(e)
     class_comment += 1
     continue
 
diff --git a/BECK/get_item_dataset.py b/BECK/get_item_dataset.py
new file mode 100644
index 0000000..af30c65
--- /dev/null
+++ b/BECK/get_item_dataset.py
@@ -0,0 +1,70 @@
+from cmath import inf
+import pandas as pd
+from pprint import pprint
+
+df = pd.read_csv('./datasets/coseno_vs_euclidian.csv')
+values_items_largos = [0, 1, 1, 2, 2, 3, 3]
+df_results = pd.read_csv('./results.csv')
+classes = list(df['Clase'])
+class_idx = 0
+columns = list(df_results.columns)[2:]
+for i in range(0, 7068):
+  column = 0
+  comment = list(df.iloc[i])
+  result = {}
+  result['Comentario'] = comment[0]
+  result['Comentario Preprocesado'] = comment[1]
+  rest_comment = comment[-29:-1]
+  comment = comment[2:-29]
+  for i in range(0, len(comment), 8):
+    data = comment[i:(i+8)]
+    # Euclidian
+    menor_euclidian = inf
+    menor_euclidian_idx = 0
+    #Coseno
+    menor_coseno = inf
+    menor_coseno_idx = 0
+    # Coseno
+    for idx, i2 in enumerate(range(0, len(data), 2)):
+      if data[i2] < menor_coseno:
+        menor_coseno = data[i2]
+        menor_coseno_idx = idx
+    # Euclidian
+    for idx, i3 in enumerate(range(1, len(data), 2)):
+      if data[i3] < menor_euclidian:
+        menor_euclidian = data[i3]
+        menor_euclidian_idx = idx
+    result[columns[column]] = menor_coseno_idx
+    column += 1
+    result[columns[column]] = menor_euclidian_idx
+    column += 1
+  # Anormal items
+  for i in range(0, len(rest_comment), 14):
+    data = rest_comment[i:(i+14)]
+    # Euclidian
+    menor_euclidian = inf
+    menor_euclidian_idx = 0
+    #Coseno
+    menor_coseno = inf
+    menor_coseno_idx = 0
+    # Coseno
+    for idx, i2 in enumerate(range(0, len(data), 2)):
+      if data[i2] < menor_coseno:
+        menor_coseno = data[i2]
+        menor_coseno_idx = idx
+    # Euclidian
+    for idx, i3 in enumerate(range(1, len(data), 2)):
+      if data[i3] < menor_euclidian:
+        menor_euclidian = data[i3]
+        menor_euclidian_idx = idx
+    result[columns[column]] = values_items_largos[menor_coseno_idx]
+    column += 1
+    result[columns[column]] = values_items_largos[menor_euclidian_idx]
+    column += 1
+
+  result['Clase'] = classes[class_idx]
+  class_idx += 1
+  df_results = df_results.append(result, ignore_index=True)
+
+
+df_results.to_csv('results_coseno_euclidian.csv', index=False)
\ No newline at end of file
diff --git a/README.md b/README.md
index fecbad5..d9dabd3 100644
--- a/README.md
+++ b/README.md
@@ -26,4 +26,11 @@ model.save('word2vec.model')
 Para distancia de coseno entre dos textos convertidos a arreglos.
 ```
 coseno = model.wv.wmdistance(first_array, second_array)
-```
\ No newline at end of file
+```
+
+## Citations
+Ofir Pele and Michael Werman "A linear time histogram metric for improved SIFT matching" &lt;http://www.cs.huji.ac.il/\~werman/Papers/ECCV2008.pdf&gt;_
+
+Ofir Pele and Michael Werman "Fast and robust earth mover's distances" &lt;https://ieeexplore.ieee.org/document/5459199/&gt;_
+
+Matt Kusner et al. "From Word Embeddings To Document Distances" &lt;http://proceedings.mlr.press/v37/kusnerb15.pdf&gt;
\ No newline at end of file