Merge branch 'master' of https://github.com/puppetlabs/puppetlabs-apt into f3792625...
[puppet-modules/puppetlabs-apt.git] / README.md
1 # apt
2
3 [![Build Status](https://travis-ci.org/puppetlabs/puppetlabs-apt.png?branch=master)](https://travis-ci.org/puppetlabs/puppetlabs-apt)
4
5 ## Overview
6
7 The apt module provides a simple interface for managing Apt source, key, and definitions with Puppet.
8
9 ## Module Description
10
11 The apt module automates obtaining and installing software packages on \*nix systems.
12
13 **Note**: While this module allows the use of short keys, **we urge you NOT to use short keys**, as they pose a serious security issue by opening you up to collision attacks.
14
15 ## Setup
16
17 ### What apt affects:
18
19 * Package/service/configuration files for Apt
20 * Your system's `sources.list` file and `sources.list.d` directory
21 * System repositories
22 * Authentication keys
23
24 **Note**: Setting the apt module's `purge_sources_list` and `purge_sources_list_d` parameters to 'true' will **destroy** any existing content that was not declared with Puppet. The default for these parameters is 'false'.
25
26 ### Beginning with apt
27
28 To begin using the apt module with default parameters, declare the class with `include apt`.
29
30 Any Puppet code that uses anything from the apt module requires that the core apt class be declared.
31
32 ## Usage
33
34 Using the apt module consists predominantly of declaring classes and defined types that provide the desired functionality and features. This module provides common resources and options that are shared by the various defined types in the apt module, so you **must always** include this class in your manifests.
35
36 ```
37 class { 'apt':
38   always_apt_update    => false,
39   apt_update_frequency => undef,
40   disable_keys         => undef,
41   proxy_host           => false,
42   proxy_port           => '8080',
43   purge_sources_list   => false,
44   purge_sources_list_d => false,
45   purge_preferences_d  => false,
46   update_timeout       => undef,
47   fancy_progress       => undef
48 }
49 ```
50
51 ## Reference
52
53 ### Classes
54
55 * `apt`: Main class, provides common resources and options. Allows Puppet to manage your system's sources.list file and sources.list.d directory, but it does its best to respect existing content.
56
57   If you declare your apt class with `purge_sources_list`, `purge_sources_list_d`, `purge_preferences` and `purge_preferences_d` set to 'true', Puppet will unapologetically purge any existing content it finds that wasn't declared with Puppet.
58   
59 * `apt::backports`: This class adds the necessary components to get backports for Ubuntu and Debian. The release name defaults to `$lsbdistcodename`. Setting this manually can cause undefined and potentially serious behavior.
60
61   By default, this class drops a pin-file for backports, pinning it to a priority of 200. This is lower than the normal Debian archive, which gets a priority of 500 to ensure that packages with `ensure => latest` don't get magically upgraded from backports without your explicit permission.
62
63   If you raise the priority through the `pin_priority` parameter to 500---identical to the rest of the Debian mirrors---normal policy goes into effect, and Apt installs or upgrades to the newest version. This means that if a package is available from backports, it and its dependencies are pulled in from backports unless you explicitly set the `ensure` attribute of the `package` resource to `installed`/`present` or a specific version.
64
65 * `apt::params`: Sets defaults for the apt module parameters.
66
67 * `apt::release`: Sets the default Apt release. This class is particularly useful when using repositories that are unstable in Ubuntu, such as Debian.
68
69   ```
70   class { 'apt::release':
71     release_id => 'precise',
72   }
73   ```  
74
75 * `apt::unattended_updates`: This class manages the unattended-upgrades package and related configuration files for Ubuntu and Debian systems. You can configure the class to automatically upgrade all new package releases or just security releases.
76
77   ```
78   apt::unattended_upgrades {
79     origins             = $::apt::params::origins,
80     blacklist           = [],
81     update              = '1',
82     download            = '1',
83     upgrade             = '1',
84     autoclean           = '7',
85   }
86   ```
87   
88 * `apt::update`: Runs `apt-get update`, updating the list of available packages and their versions without installing or upgrading any packages. The update runs on the first Puppet run after you include the class, then whenever `notify  => Exec['apt_update']` occurs; i.e., whenever config files get updated or other relevant changes occur. If you set the `always_apt_update` parameter to 'true', the update runs on every Puppet run.
89
90 ### Types
91
92 * `apt_key`
93
94   A native Puppet type and provider for managing GPG keys for Apt is provided by this module.
95
96   ```
97   apt_key { 'puppetlabs':
98     ensure => 'present',
99     id     => '1054B7A24BD6EC30',
100   }
101   ```
102
103   You can additionally set the following attributes:
104
105    * `source`: HTTP, HTTPS or FTP location of a GPG key or path to a file on the target host.
106    * `content`: Instead of pointing to a file, pass the key in as a string.
107    * `server`: The GPG key server to use. It defaults to *keyserver.ubuntu.com*.
108    * `keyserver_options`: Additional options to pass to `--keyserver`.
109
110   Because apt_key is a native type, you can use it and query for it with MCollective. 
111
112 ### Defined Types
113
114 * `apt::builddep`: Installs the build dependencies of a specified package.
115
116   `apt::builddep { 'glusterfs-server': }`
117     
118 * `apt::conf`: Specifies a custom configuration file. The priority defaults to 50, but you can set the priority parameter to load the file earlier or later. The content parameter passes specified content, if any, into the file resource.
119
120 * `apt::hold`: Holds a specific version of a package. You can hold a package to a full version or a partial version.
121
122   To set a package's ensure attribute to 'latest' but get the version specified by `apt::hold`:
123
124   ```
125   apt::hold { 'vim':
126     version => '2:7.3.547-7',
127   }
128   ```
129
130   Alternatively, if you want to hold your package at a partial version, you can use a wildcard. For example, you can hold Vim at version 7.3.*:
131
132
133   ```
134   apt::hold { 'vim':
135     version => '2:7.3.*',
136   }
137   ```
138
139 * `apt::force`: Forces a package to be installed from a specific release. This is particularly useful when using repositories that are unstable in Ubuntu, such as Debian.
140
141   ```
142   apt::force { 'glusterfs-server':
143     release     => 'unstable',
144     version     => '3.0.3',
145     cfg_files   => 'unchanged',
146     cfg_missing => true,
147     require => Apt::Source['debian_unstable'],
148   }
149   ```
150
151   Valid values for `cfg_files` are:
152     * 'new': Overwrites all existing configuration files with newer ones.
153     * 'old': Forces usage of all old files.
154     * 'unchanged: Updates only unchanged config files.
155     * 'none': Provides backward-compatibility with existing Puppet manifests.
156    
157   Valid values for `cfg_missing` are 'true', 'false'. Setting this to 'false' provides backward compatability; setting it to 'true' checks for and installs missing configuration files for the selected package.
158
159 * `apt::key`: Adds a key to the list of keys used by Apt to authenticate packages. This type uses the aforementioned `apt_key` native type. As such, it no longer requires the `wget` command on which the old implementation depended.
160
161   ```
162   apt::key { 'puppetlabs':
163     key        => '1054B7A24BD6EC30',
164     key_server => 'pgp.mit.edu',
165   }
166
167   apt::key { 'jenkins':
168     key        => '9B7D32F2D50582E6',
169     key_source => 'http://pkg.jenkins-ci.org/debian/jenkins-ci.org.key',
170   }
171   ```
172
173 * `apt::pin`: Defined type that adds an Apt pin for a certain release.
174
175   ```
176   apt::pin { 'karmic': priority => 700 }
177   apt::pin { 'karmic-updates': priority => 700 }
178   apt::pin { 'karmic-security': priority => 700 }
179   ```
180
181   Note that you can also specify more complex pins using distribution properties.
182
183   ```
184   apt::pin { 'stable':
185     priority        => -10,
186     originator      => 'Debian',
187     release_version => '3.0',
188     component       => 'main',
189     label           => 'Debian'
190   }
191   ```  
192
193   If you want to pin a number of packages, you can specify the packages as a space-delimited string using the `packages` attribute, or you can pass in an array of package names.
194
195 * `apt::ppa`: Adds a PPA repository using `add-apt-repository`. For example, `apt::ppa { 'ppa:drizzle-developers/ppa': }`.
196
197 * `apt::source`: Adds an Apt source to `/etc/apt/sources.list.d/`. For example:
198
199   ```
200   apt::source { 'debian_unstable':
201     comment           => 'This is the iWeb Debian unstable mirror',
202     location          => 'http://debian.mirror.iweb.ca/debian/',
203     release           => 'unstable',
204     repos             => 'main contrib non-free',
205     required_packages => 'debian-keyring debian-archive-keyring',
206     key               => '8B48AD6246925553',
207     key_server        => 'subkeys.pgp.net',
208     pin               => '-10',
209     include_src       => true,
210     include_deb       => true
211   }
212   ```  
213
214   For example, to configure your system so the source is the Puppet Labs Apt repository:
215
216   ```
217   apt::source { 'puppetlabs':
218     location   => 'http://apt.puppetlabs.com',
219     repos      => 'main',
220     key        => '1054B7A24BD6EC30',
221     key_server => 'pgp.mit.edu',
222     }
223   ```
224
225 ### Facts
226
227 The apt module includes a few facts to describe the state of the Apt system:
228
229 * `apt_updates`: The number of updates available on the system
230 * `apt_security_updates`: The number of updates which are security updates
231 * `apt_package_updates`: The package names that are available for update. In Facter 2.0 and later, this will be a list type; in earlier versions, it is a comma-delimited string.
232 * `apt_update_last_success`: The date, in epochtime, of the most recent successful `apt-get update` run. This is determined by reading the mtime of  /var/lib/apt/periodic/update-success-stamp.
233
234 **Note:** The facts depend on 'update-notifier' being installed on your system. Though this is a GNOME daemon only the support files are needed so the package 'update-notifier-common' is enough to enable this functionality.
235
236 #### Hiera example
237
238 ```
239 <pre>
240 apt::sources:
241   'debian_unstable':
242     location: 'http://debian.mirror.iweb.ca/debian/'
243     release: 'unstable'
244     repos: 'main contrib non-free'
245     required_packages: 'debian-keyring debian-archive-keyring'
246     key: '9AA38DCD55BE302B'
247     key_server: 'subkeys.pgp.net'
248     pin: '-10'
249     include_src: 'true'
250     include_deb: 'true'
251
252   'puppetlabs':
253     location: 'http://apt.puppetlabs.com'
254     repos: 'main'
255     key: '1054B7A24BD6EC30'
256     key_server: 'pgp.mit.edu'
257 </pre>
258 ```
259
260 ### Parameters
261
262 #### apt
263
264 * `always_apt_update`: Set to 'true' to update Apt on every run. This setting is intended for development environments where package updates are frequent. Defaults to 'false'. 
265 * `apt_update_frequency`: Sets the run frequency for `apt-get update`. Defaults to 'reluctantly'. Accepts the following values:
266   * 'always': Runs update at every Puppet run.
267   * 'daily': Runs update daily; that is, `apt-get update` runs if the value of `apt_update_last_success` is less than current epoch time - 86400. If the exec resource `apt_update` is notified, `apt-get update` runs regardless of this value. 
268   * 'weekly': Runs update weekly; that is, `apt-get update` runs if the value of `apt_update_last_success` is less than current epoch time - 604800. If the exec resource `apt_update` is notified, `apt-get update` runs regardless of this value. 
269   * 'reluctantly': Only runs `apt-get update` if the exec resource `apt_update` is notified. This is the default setting.  
270 * `disable_keys`: Disables the requirement for all packages to be signed.
271 * `proxy_host`: Configures a proxy host and stores the configuration in /etc/apt/apt.conf.d/01proxy.
272 * `proxy_port`: Configures a proxy port and stores the configuration in /etc/apt/apt.conf.d/01proxy.
273 * `purge_sources_list`: If set to 'true', Puppet purges all unmanaged entries from sources.list. Accepts 'true' or 'false'. Defaults to 'false'.
274 * `purge_sources_list_d`: If set to 'true', Puppet purges all unmanaged entries from sources.list.d. Accepts 'true' or 'false'. Defaults to 'false'.
275 * `update_timeout`: Overrides the exec timeout in seconds for `apt-get update`. Defaults to exec default (300).
276 * `update_tries`: Sets how many times to attempt running `apt-get update`. Use this to work around transient DNS and HTTP errors. By default, the command runs only once.
277 * `sources`: Passes a hash to create_resource to make new `apt::source` resources.
278 * `fancy_progress`: Enables fancy progress bars for apt. Accepts 'true', 'false'. Defaults to 'false'.
279
280 ####apt::unattended_upgrades
281
282 * `origins`: The repositories from which to automatically upgrade included packages.
283 * `blacklist`: A list of packages to **not** automatically upgrade.
284 * `update`: How often, in days, to run `apt-get update`.
285 * `download`: How often, in days, to run `apt-get upgrade --download-only`.
286 * `upgrade`: How often, in days, to upgrade packages included in the origins list.
287 * `autoclean`: How often, in days, to run `apt-get autoclean`.
288 * `randomsleep`: How long, in seconds, to randomly wait before applying upgrades.
289
290 ####apt::source
291
292 * `comment`: Add a comment to the apt source file.
293 * `ensure`: Allows you to remove the apt source file. Can be 'present' or 'absent'.
294 * `location`: The URL of the apt repository.
295 * `release`: The distribution of the apt repository. Defaults to fact 'lsbdistcodename'.
296 * `repos`: The component of the apt repository. This defaults to 'main'.
297 * `include_deb`: References a Debian distribution's binary package.
298 * `include_src`: Enable the deb-src type, references a Debian distribution's source code in the same form as the include_deb type. A deb-src line is required to fetch source indexes.
299 * `required_packages`: todo
300 * `key`: See apt::key
301 * `key_server`: See apt::key
302 * `key_content`: See apt::key
303 * `key_source`: See apt::key
304 * `pin`: See apt::pin
305 * `architecture`: can be used to specify for which architectures information should be downloaded. If this option is not set all architectures defined by the APT::Architectures option will be downloaded. Defaults to 'undef' which means all. Example values can be 'i386' or 'i386,alpha,powerpc'
306 * `trusted` can be set to indicate that packages from this source are always authenticated even if the Release file is not signed or the signature can't be checked. Defaults to false. Can be 'true' or 'false'.
307
308 ### Testing
309
310 The apt module is mostly a collection of defined resource types, which provide reusable logic for managing Apt. It provides smoke tests for testing functionality on a target system, as well as spec tests for checking a compiled catalog against an expected set of resources.
311
312 #### Example Test
313
314 This test sets up a Puppet Labs Apt repository. Start by creating a new smoke test, called puppetlabs-apt.pp, in the apt module's test folder. In this test, declare a single resource representing the Puppet Labs Apt source and GPG key:
315
316 ```
317 apt::source { 'puppetlabs':
318   location   => 'http://apt.puppetlabs.com',
319   repos      => 'main',
320   key        => '1054B7A24BD6EC30',
321   key_server => 'pgp.mit.edu',
322 }
323 ```    
324
325 This resource creates an Apt source named puppetlabs and gives Puppet information about the repository's location and the key used to sign its packages. Puppet leverages Facter to determine the appropriate release, but you can set this directly by adding the release type.
326
327 Check your smoke test for syntax errors:
328
329 `$ puppet parser validate tests/puppetlabs-apt.pp`
330
331 If you receive no output from that command, it means nothing is wrong. Then, apply the code:
332
333 ```
334 $ puppet apply --verbose tests/puppetlabs-apt.pp
335 notice: /Stage[main]//Apt::Source[puppetlabs]/File[puppetlabs.list]/ensure: defined content as '{md5}3be1da4923fb910f1102a233b77e982e'
336 info: /Stage[main]//Apt::Source[puppetlabs]/File[puppetlabs.list]: Scheduling refresh of Exec[puppetlabs apt update]
337 notice: /Stage[main]//Apt::Source[puppetlabs]/Exec[puppetlabs apt update]: Triggered 'refresh' from 1 events>
338 ```    
339
340 The above example uses a smoke test to lay out a resource declaration and apply it on your system. In production, you might want to declare your Apt sources inside the classes where they’re needed.
341
342 Limitations
343 -----------
344
345 This module should work across all versions of Debian/Ubuntu and support all major Apt repository management features.
346
347 Development
348 ------------
349
350 Puppet Labs modules on the Puppet Forge are open projects, and community contributions are essential for keeping them great. We can’t access the huge number of platforms and myriad of hardware, software, and deployment configurations that Puppet is intended to serve.
351
352 We want to keep it as easy as possible to contribute changes so that our modules work in your environment. There are a few guidelines that we need contributors to follow so that we can have a chance of keeping on top of things.
353
354 You can read the complete module contribution guide [on the Puppet Labs wiki.](http://projects.puppetlabs.com/projects/module-site/wiki/Module_contributing)
355
356 License
357 -------
358
359 The original code for this module comes from Evolving Web and was licensed under the MIT license. Code added since the fork of this module is licensed under the Apache 2.0 License like the rest of the Puppet Labs products.
360
361 The LICENSE contains both licenses.
362
363 Contributors
364 ------------
365
366 A lot of great people have contributed to this module. A somewhat current list follows:
367
368 * Ben Godfrey <ben.godfrey@wonga.com>
369 * Branan Purvine-Riley <branan@puppetlabs.com>
370 * Christian G. Warden <cwarden@xerus.org>
371 * Dan Bode <bodepd@gmail.com> <dan@puppetlabs.com>
372 * Daniel Tremblay <github@danieltremblay.ca>
373 * Garrett Honeycutt <github@garretthoneycutt.com>
374 * Jeff Wallace <jeff@evolvingweb.ca> <jeff@tjwallace.ca>
375 * Ken Barber <ken@bob.sh>
376 * Matthaus Litteken <matthaus@puppetlabs.com> <mlitteken@gmail.com>
377 * Matthias Pigulla <mp@webfactory.de>
378 * Monty Taylor <mordred@inaugust.com>
379 * Peter Drake <pdrake@allplayers.com>
380 * Reid Vandewiele <marut@cat.pdx.edu>
381 * Robert Navarro <rnavarro@phiivo.com>
382 * Ryan Coleman <ryan@puppetlabs.com>
383 * Scott McLeod <scott.mcleod@theice.com>
384 * Spencer Krum <spencer@puppetlabs.com>
385 * William Van Hevelingen <blkperl@cat.pdx.edu> <wvan13@gmail.com>
386 * Zach Leslie <zach@puppetlabs.com>
387 * Daniele Sluijters <github@daenney.net>
388 * Daniel Paulus <daniel@inuits.eu>
389 * Wolf Noble <wolf@wolfspyre.com>