Motivación y Metodología

Antes de la creación de Numbeo (abril de 2009), no existían otras bases de datos gratuitas sobre coste de vida con datos e índices estructurados.

Existían otros informes sobre coste de vida, pero su metodología era secreta o bien se pedía mucho dinero para poder acceder a ella. Su ámbito era muy limitado en el número de ciudades incluidas. Era difícil aumentar la escala de los estudios sin incurrir en gastos significativos, ya que dependían de datos recogidos manualmente. Además, no existían análisis sobre el porcentaje de error en los datos recogidos. Los datos sobre coste de vida recogidos manualmente pueden tender a errores porque:

• se dan precios distintos y oscilaciones de precios a lo largo del año (ej. frutas y verduras más baratas durante el verano; o grandes variaciones en el precio de las patatas por falta de almacenamiento y humedad alta)
• los precios de los productos suelen variar entre supermercados, bares y restaurantes distintos
• existen distintos tipos de leche, quesos, etc. con precios diferentes incluso en el mismo supermercado
• el país puede estar sufriendo escasez o carestías temporales de un determinado producto que pueden hacer que suba de precio (ej. escasez de arroz)
• si solo una persona está recogiendo los datos, la posibilidad de fallos humanos es mayor

Los estudios disponibles anteriores al año 2009 por lo general incluyen un solo índice, lo que no es suficiente para establecer una valoración a nivel individual, dado que una persona no supone la persona media, debido a variaciones en el estilo de vida como:

• el tamaño de cada familia (número de personas a su cargo)
• preferencia por comer en casa o en la calle
• alquilar un apartamento o tenerlo en propiedad
• conducir o usar el transporte público
• Beber alcohol y fumar o ausencia de dichos hábitos

Otros recursos disponibles sobre el coste de vida no proporcionaban una forma sistematizada de extraer índices personalizados. Numbeo ofrece un software global para extraer varios indicadores económicos de forma gratuita (ej. utilizando nuestra herramienta "Bolsa de bienes y servicios" ).

Antes de la Gran Recesión (Crisis Económica Mundial de 2007-2009) los precios de las propiedades de todo el mundo le parecían totalmente descabellados al fundador de esta página. El precio de un apartamento pequeño en un país del tercer mundo en el que actualmente vive costaba lo mismo que 310 monitores TFT, ultramodernos en aquel tiempo. La especulación descontrolada de los precios hacía entender que la gente realmente necesitaba una herramienta para poder controlar o rebajar la especulación inmobiliaria.

Y así fue como nació Numbeo. Numbeo:

• proporciona información gratuita sobre precios
• permite a la persona calcular sus propios gastos
• usa el conocimiento de la calle para conseguir los datos más fiables posibles
• proporciona un sistema con el que poder establecer diversas investigaciones sistematizadas sobre nuestra base de datos

 

Metodología

Recogida y procesado de datos

Para recopilar sus datos, Numbeo depende de datos introducidos por usuarios y datos recogidos manualmente de fuentes autorizadas (páginas web de supermercados, compañías de taxis, instituciones gubernamentales, artículos de periódico, otros estudios y fuentes, etc.). Los datos recogidos manualmente de estas fuentes autorizadas se renuevan dos veces al año.

Llevamos a cabo filtros automáticos y semi-automáticos para descartar datos incorrectos o “ruido”. El filtro más simple funciona de la siguiente manera: si para un precio determinado en una ciudad, se han introducido recientemente los valores 5, 6, 20 y 4, el valor 20 se descarta como “ruido” (ya que es más de 4 veces el valor medio)

Otro filtro descarta ¼ (un cuarto) de los valores introducidos más bajos y más altos, ya que los casos en los extremos del intervalo tienen una probabilidad más alta de ser incorrectos. De los datos que permanecen, se calculan y muestran el valor más alto, más bajo y promedio.

También utilizamos otros filtros más sofisticados. Estos filtros funcionan mejor cuando se introducen más datos.

Uno de nuestros filtros avanzados trata de eliminar datos de “entrenamiento” erróneos. Mina los datos descartados (datos spam) y si detecta irregularidades los reintroduce de nuevo en el cómputo.

En resumen, Numbeo utiliza tecnología heurística en sus filtros para asegurar la calidad de sus datos. En base a los datos que ya tiene, Numbeo descarta periódicamente los que estadísticamente tienen más probabilidad de ser incorrectos.

Numbeo también archiva los valores de datos antiguos (nuestra política de depreciación de datos por defecto es de 12 meses, aunque utilizamos datos con hasta 18 meses de antigüedad cuando no recibimos datos nuevos y los indicadores sugieren que la inflación es baja en el país). Los valores de los datos antiguos se preservan para utilizarse en registros históricos.

Incorporación de datos para un país

Para añadir datos para un país, utilizamos todas las entradas (de todas las ciudades) para calcular la media de datos de dicho país. Ten en cuenta que esto se diferencia del proceso de añadir datos para todas las ciudades del país (para las que tenemos datos en el sistema). Debido al funcionamiento de las fórmulas (descartando el 25% de los extremos alto y bajo de los datos recogidos antes de calcular los valores mostrados), a veces los valores máximos y mínimos de un producto en una ciudad pueden no corresponder con los máximos y mínimos del país en que se encuentra. Esta anomalía aparece por el modo de aplicación de las fórmulas. Por lo tanto, en cálculos a nivel nacional estamos baremando una ciudad por el número de contribuciones. Ya que hay un número mayor de entradas para un país que para una ciudad, los datos a nivel nacional suelen contener menos “ruido” que los que se muestran sobre las ciudades.

Monedas y Divisas

Consultamos varias fuentes especializadas como el Banco Central Europeo para actualizar nuestras tasas de cambio de divisas prácticamente cada hora. Para cada contribución, guardamos en nuestra base de datos los valores introducidos en EUR, USD y la moneda utilizada en la entrada (utilizando las tasas de cambio actuales). Para calcular medias, reutilizamos una de esas entradas basándonos en la estabilidad monetaria y la moneda predominante en el país para intentar minimizar errores en la relación de divisas.

Para mostrar datos históricos, usamos tasas de cambio mensuales previas para calcular los datos (tasa de cambio quincenal). Si el usuario final elige una configuración de moneda personalizada para desplegar los datos históricos de un año, se utiliza la tasa de cambio semestral para calcular los datos mostrados.

Impuestos

Nuestros datos sobre precios deben incluir el valor de impuestos como el IVA. Nuestros datos sobre salario medio deben incluir el valor resultante tras las retenciones de la renta, de modo que podamos utilizarlos directamente para calcular el poder adquisitivo local.

Cálculo de índices

El Índice de Costo de Vida está construido basándose en nuestra mejor estimación de los gastos medios de una familia de cuatro personas para una ciudad determinada. Los baremos están sujetos a cambios con el tiempo. Pero dado que nuestra metodología es pública, en el momento de publicar esta guía los baremos eran los siguientes:

Other cost of living reports had the data behind their research hidden or expensive to purchase. Their research was very limited in the number of cities included. It is difficult to scale up without a significant increase in expenses since they relied on manually collected data. Also, there were no insight about the error rate in their manually collected data. Manual collection of cost of living data is error prone:

• there is a different price during the year - price oscillation (i.e. cheaper fruits and vegetables during the summer; or high fluctuation of potato price because of lack of storage and high moisture)
• in different supermarkets, bars and restaurants prices of items are usually different
• there are different types of milk, cheese, etc. with different prices even in the same supermarket
• the country could face temporary shortages of a given item which could drive the price temporary up (i.e. rice shortages)
• if only one person collects the price, possibility of human error is higher

Reports available before the year 2009 usually include just an index, which is not enough for a personal estimate since a person is not an average person due to different lifestyles such as:

• the size of a family (number of dependent persons)
• dining out or eating at home
• renting or owning an apartment
• driving or using a public transport
• drinking alcoholic drinks and smoking or not

Other available cost of living sources didn't provide a systematic way to extract custom indices. Numbeo provides a world-class software for extracting various economic indicators for free (i.e. using our "Basket of goods and services" tool).

Before the Great Recession (World Economic Crysis of 2007-2009) price of properties worldwide tended to look like a crazy to the founder of this website. The price of a small apartment in a third world country he currently lives in was same as 310 ultra modern TFT monitors at that time. The wild speculation in property prices suggested that people really needed a tool for a speculation or to turn their speculation down.

So, that's how Numbeo was born. Numbeo:

• provides free information about prices
• allows a person to estimate their own expenses
• uses the wisdom of the crowd to get as reliable data as possible
• provides a system for various systematic research on our big dataset

 

Methodology

Collecting and processing data

To collect data Numbeo relies on user inputs and manually collected data from authoritative sources (websites of supermarkets, taxi company websites, governmental institutions, newspaper articles, other surveys, etc.). Manually collected data from established sources are reentered twice per year.

We perform automatic and semi-automatic filters to filter out noise data. The simplest filter is working as follows: if, for a particular price in a city, values are 5, 6, 20 and 4 in a recent time span, the value 20 is discarded as a noise (as it value is more than 4 times than the average value)

Another filter discards ¼ (one quarter) of lowest and highest inputs as borderline cases have a higher probability to be incorrect. Out of remaining entries, the lowest, highest and mean value are calculated and displayed.

There are more sophisticated filters in use. The filters are performing better when there are more inputs.

One of the advanced filters tries to eliminate bad training data. It digs into discarded data (spam data) and if notices irregularities, it moves them back into the calculation.

To summarize our filters, Numbeo uses heuristic technology to get the data quality. Using the existing data Numbeo periodically discards data which most likely are incorrect statistically.

Numbeo also archives the values of old data (our default data deprecation policy is 12 months, although we use data up to 18 months old when we don't have fresh data and indicators suggest that inflation is low in a particular country). The values of old data are preserved to be used for historical purposes.

Aggregating data for a country

To aggregate data for a country, we use all entries (for all cities) to calculate country average data. Note that it is different from the aggregating calculated data for all cities in that country (for which we have data in the database). Due to underlying formulas used (discarding top and bottom 25% of the data before calculating display values), sometimes low and high price of an item in one city might look not on par with low and high values of that country. That anomaly appears due to underlying formulas used. So, in calculations for the country, we are weighting a city by the number of contributors. Since they are the higher number of inputs for a country than for a city, data showed on a country level, in general, contains lower noise than data showed on a city level.

Currencies

We do use multiple currency feeds including European Central Bank feed to update our internal currency exchange rates almost every hour. For each entry of the contributors, we do save in our database the value in EUR, USD and currency of the input (using current exchange rate). When calculating averages, we do reuse one of those entries based on currency stability and predominant currency in the country to try to minimize cross currency comparison errors.

To show historical data, we do use monthly historical exchange rates to calculate data (mid-month currency exchange rate). If end users choose a custom display currency for displaying historical data in a year, the mid-year currency exchange rate is used to calculate displayed data.

Taxes

Our data about prices shall have GST and VAT included. Our average salary data shall contain the value after income taxes. So we can use these data directly to estimate local purchases power.

Calculating indices

Cost of Living Index is built based on our best guess of average expenses in a given city for a four-person family. Weights are subject to change over time. But since the methodology is not hidden, as the moment of writing these weights are as follows:

    
mysql> select name, category, cpi_factor as cost_of_living_factor, rent_factor from item where cpi_factor > 0 or rent_factor > 0 order by category, relative_id;
+-----------------------------------------------------------------+---------------------+-----------------------+-------------+
| name                                                            | category            | cost_of_living_factor | rent_factor |
+-----------------------------------------------------------------+---------------------+-----------------------+-------------+
| 1 Pair of Jeans (Levis 501 Or Similar)                          | Clothing And Shoes  |                  0.35 |           0 |
| 1 Summer Dress in a Chain Store (Zara, H&M, ...)                | Clothing And Shoes  |                  0.35 |           0 |
| 1 Pair of Nike Running Shoes (Mid-Range)                        | Clothing And Shoes  |                  0.35 |           0 |
| 1 Pair of Men Leather Business Shoes                            | Clothing And Shoes  |                  0.35 |           0 |
| Milk (regular), (1 liter)                                       | Markets             |                    25 |           0 |
| Loaf of Fresh White Bread (500g)                                | Markets             |                    31 |           0 |
| Rice (white), (1kg)                                             | Markets             |                    14 |           0 |
| Eggs (12)                                                       | Markets             |                    20 |           0 |
| Local Cheese (1kg)                                              | Markets             |                    12 |           0 |
| Chicken Breasts (Boneless, Skinless), (1kg)                     | Markets             |                    15 |           0 |
| Beef Round (1kg) (or Equivalent Back Leg Red Meat)              | Markets             |                    15 |           0 |
| Apples (1kg)                                                    | Markets             |                    31 |           0 |
| Banana (1kg)                                                    | Markets             |                    25 |           0 |
| Oranges (1kg)                                                   | Markets             |                    30 |           0 |
| Tomato (1kg)                                                    | Markets             |                    22 |           0 |
| Potato (1kg)                                                    | Markets             |                    24 |           0 |
| Onion (1kg)                                                     | Markets             |                    10 |           0 |
| Lettuce (1 head)                                                | Markets             |                    18 |           0 |
| Water (1.5 liter bottle)                                        | Markets             |                    30 |           0 |
| Bottle of Wine (Mid-Range)                                      | Markets             |                     4 |           0 |
| Domestic Beer (0.5 liter bottle)                                | Markets             |                     6 |           0 |
| Imported Beer (0.33 liter bottle)                               | Markets             |                     6 |           0 |
| Cigarettes 20 Pack (Marlboro)                                   | Markets             |                    15 |           0 |
| Apartment (1 bedroom) in City Centre                            | Rent Per Month      |                     0 |        0.25 |
| Apartment (1 bedroom) Outside of Centre                         | Rent Per Month      |                     0 |        0.25 |
| Apartment (3 bedrooms) in City Centre                           | Rent Per Month      |                     0 |        0.25 |
| Apartment (3 bedrooms) Outside of Centre                        | Rent Per Month      |                     0 |        0.25 |
| Meal, Inexpensive Restaurant                                    | Restaurants         |                    16 |           0 |
| Meal for 2 People, Mid-range Restaurant, Three-course           | Restaurants         |                   3.5 |           0 |
| McMeal at McDonalds (or Equivalent Combo Meal)                  | Restaurants         |                     6 |           0 |
| Domestic Beer (0.5 liter draught)                               | Restaurants         |                     5 |           0 |
| Imported Beer (0.33 liter bottle)                               | Restaurants         |                     5 |           0 |
| Cappuccino (regular)                                            | Restaurants         |                    15 |           0 |
| Coke/Pepsi (0.33 liter bottle)                                  | Restaurants         |                     6 |           0 |
| Water (0.33 liter bottle)                                       | Restaurants         |                     6 |           0 |
| Fitness Club, Monthly Fee for 1 Adult                           | Sports And Leisure  |                   2.3 |           0 |
| Tennis Court Rent (1 Hour on Weekend)                           | Sports And Leisure  |                     3 |           0 |
| Cinema, International Release, 1 Seat                           | Sports And Leisure  |                     6 |           0 |
| One-way Ticket (Local Transport)                                | Transportation      |                    20 |           0 |
| Monthly Pass (Regular Price)                                    | Transportation      |                   1.5 |           0 |
| Taxi Start (Normal Tariff)                                      | Transportation      |                     5 |           0 |
| Taxi 1km (Normal Tariff)                                        | Transportation      |                    20 |           0 |
| Taxi 1hour Waiting (Normal Tariff)                              | Transportation      |                   0.7 |           0 |
| Gasoline (1 liter)                                              | Transportation      |                    60 |           0 |
| Volkswagen Golf 1.4 90 KW Trendline (Or Equivalent New Car)     | Transportation      |                0.0035 |           0 |
| Toyota Corolla 1.6l 97kW Comfort (Or Equivalent New Car)        | Transportation      |                0.0035 |           0 |
| Basic (Electricity, Heating, Water, Garbage) for 85m2 Apartment | Utilities (Monthly) |                     1 |           0 |
| 1 min. of Prepaid Mobile Tariff Local (No Discounts or Plans)   | Utilities (Monthly) |                   320 |           0 |
| Internet (10 Mbps, Unlimited Data, Cable/ADSL)                  | Utilities (Monthly) |                     1 |           0 |
+-----------------------------------------------------------------+---------------------+-----------------------+-------------+

      Local_Puchasing_Power_Index = (Average_Disposable_Salary(This_City) / BasketConsumerPlusRent(This_City)) / (Average_Disposable_Salary(New_York) / BasketConsumerPlusRent(New_York))
      
      BasketConsumerPlusRent(City) = sum_of (Price_in_the_city * (cost_of_living_factor + rent_factor))
    

Política de Conservación de Datos

La sección de coste de vida utiliza datos introducidos en los últimos 12 meses (en casos excepcionales, cuando existe un número muy bajo de entradas para una ciudad y los indicadores sugieren que la inflación del país es baja, utilizamos entradas de hasta 18 meses de antigüedad al considerar que estos datos pueden no haber cambiado al no haber recibido actualizaciones de los datos existentes. Otras secciones que utilizan los mismos datos también emplean la misma política.

No todas las secciones de la página utilizan la misma política de conservación de datos. Los datos antiguos se trasladan cada mes a nuestros archivos y pueden ser retirados por nuestra API.

Política de Cartografía

Nuestra política de cartografía se basa en mostrar el mundo desde una perspectiva de facto; esto es, representar la realidad actual en la manera más precisa que podamos. Nuestros socios pueden tener una política distinta que podría verse reflejada en el software de nuestra página. Cost of living section uses data entered in the last 12 months ago (in a special case, when there are very low number of entries in a city and the indicators suggest that inflation in a country is low, we use entries as old as 18 months because we think that those data might not be changed if no one did edit existing data). Other sections which use the same data set uses the same data archiving policy.

Note that some other sections of the website use different data archiving policies. Each month, old data are moved to archives and can be pulled with our API.

Cartographic Policy

Our cartographic policy is of portraying the world from a de facto point of view; that is, to portray to the best of our judgment the current reality. Our partners might have different cartographic policy which could be reflected in software at our website.

 

Esta página ha sido traducida del inglés. Improve translation of this page