Merge pull request #463 from mhaskel/toggle-legacy-origin
[puppet-modules/puppetlabs-apt.git] / README.md
1 # apt
2
3 ## Overview
4
5 The apt module provides a simple interface for managing Apt source, key, and definitions with Puppet.
6
7 ## Module Description
8
9 The apt module automates obtaining and installing software packages on \*nix systems.
10
11 **Note**: While this module allows the use of short keys, **warnings are thrown if a full fingerprint is not used**, as they pose a serious security issue by opening you up to collision attacks.
12
13 ## Setup
14
15 ### What apt affects:
16
17 * Package/service/configuration files for Apt
18 * Your system's `sources.list` file and `sources.list.d` directory
19 * System repositories
20 * Authentication keys
21
22 **Note**: Setting the apt module's `purge_sources_list` and `purge_sources_list_d` parameters to 'true' will **destroy** any existing content that was not declared with Puppet. The default for these parameters is 'false'.
23
24 ### Beginning with apt
25
26 To begin using the apt module with default parameters, declare the class with `include apt`.
27
28 Any Puppet code that uses anything from the apt module requires that the core apt class be declared.
29
30 ## Usage
31
32 Using the apt module consists predominantly of declaring classes and defined types that provide the desired functionality and features. This module provides common resources and options that are shared by the various defined types in the apt module, so you **must always** include this class in your manifests.
33
34 ```
35 class { 'apt':
36   always_apt_update    => false,
37   apt_update_frequency => undef,
38   disable_keys         => undef,
39   proxy_host           => false,
40   proxy_port           => '8080',
41   purge_sources_list   => false,
42   purge_sources_list_d => false,
43   purge_preferences_d  => false,
44   update_timeout       => undef,
45   fancy_progress       => undef
46 }
47 ```
48
49 ## Reference
50
51 ### Classes
52
53 * `apt`: Main class, provides common resources and options. Allows Puppet to manage your system's sources.list file and sources.list.d directory, but it does its best to respect existing content.
54
55   If you declare your apt class with `purge_sources_list`, `purge_sources_list_d`, `purge_preferences` and `purge_preferences_d` set to 'true', Puppet will unapologetically purge any existing content it finds that wasn't declared with Puppet.
56   
57 * `apt::backports`: This class adds the necessary components to get backports for Ubuntu and Debian. The release name defaults to `$lsbdistcodename`. Setting this manually can cause undefined and potentially serious behavior.
58
59   By default, this class drops a pin-file for backports, pinning it to a priority of 200. This is lower than the normal Debian archive, which gets a priority of 500 to ensure that packages with `ensure => latest` don't get magically upgraded from backports without your explicit permission.
60
61   If you raise the priority through the `pin_priority` parameter to 500---identical to the rest of the Debian mirrors---normal policy goes into effect, and Apt installs or upgrades to the newest version. This means that if a package is available from backports, it and its dependencies are pulled in from backports unless you explicitly set the `ensure` attribute of the `package` resource to `installed`/`present` or a specific version.
62
63 * `apt::params`: Sets defaults for the apt module parameters.
64
65 * `apt::release`: Sets the default Apt release. This class is particularly useful when using repositories that are unstable in Ubuntu, such as Debian.
66
67   ```
68   class { 'apt::release':
69     release_id => 'precise',
70   }
71   ```  
72
73 * `apt::unattended_upgrades`: This class manages the unattended-upgrades package and related configuration files for Ubuntu and Debian systems. You can configure the class to automatically upgrade all new package releases or just security releases.
74
75   ```
76   class { 'apt::unattended_upgrades':
77     legacy_origin => $::apt::params::legacy_origin,
78     origins       => $::apt::params::origins,
79     blacklist     => [],
80     update        => '1',
81     download      => '1',
82     upgrade       => '1',
83     autoclean     => '7',
84   }
85   ```
86   
87 * `apt::update`: Runs `apt-get update`, updating the list of available packages and their versions without installing or upgrading any packages. The update runs on the first Puppet run after you include the class, then whenever `notify  => Exec['apt_update']` occurs; i.e., whenever config files get updated or other relevant changes occur. If you set the `always_apt_update` parameter to 'true', the update runs on every Puppet run.
88
89 ### Types
90
91 * `apt_key`
92
93   A native Puppet type and provider for managing GPG keys for Apt is provided by this module.
94
95   ```
96   apt_key { 'puppetlabs':
97     ensure => 'present',
98     id     => '1054B7A24BD6EC30',
99   }
100   ```
101
102   You can additionally set the following attributes:
103
104    * `source`: HTTP, HTTPS or FTP location of a GPG key or path to a file on the target host.
105    * `content`: Instead of pointing to a file, pass the key in as a string.
106    * `server`: The GPG key server to use. It defaults to *keyserver.ubuntu.com*.
107    * `keyserver_options`: Additional options to pass to `--keyserver`.
108
109   Because apt_key is a native type, you can use it and query for it with MCollective. 
110
111 ### Defined Types
112
113 * `apt::builddep`: Installs the build dependencies of a specified package.
114
115   `apt::builddep { 'glusterfs-server': }`
116     
117 * `apt::conf`: Specifies a custom configuration file. The priority defaults to 50, but you can set the priority parameter to load the file earlier or later. The content parameter passes specified content, if any, into the file resource.
118
119 * `apt::hold`: Holds a specific version of a package. You can hold a package to a full version or a partial version.
120
121   To set a package's ensure attribute to 'latest' but get the version specified by `apt::hold`:
122
123   ```
124   apt::hold { 'vim':
125     version => '2:7.3.547-7',
126   }
127   ```
128
129   Alternatively, if you want to hold your package at a partial version, you can use a wildcard. For example, you can hold Vim at version 7.3.*:
130
131
132   ```
133   apt::hold { 'vim':
134     version => '2:7.3.*',
135   }
136   ```
137
138 * `apt::force`: Forces a package to be installed from a specific release. This is particularly useful when using repositories that are unstable in Ubuntu, such as Debian.
139
140   ```
141   apt::force { 'glusterfs-server':
142     release     => 'unstable',
143     version     => '3.0.3',
144     cfg_files   => 'unchanged',
145     cfg_missing => true,
146     require => Apt::Source['debian_unstable'],
147   }
148   ```
149
150   Valid values for `cfg_files` are:
151     * 'new': Overwrites all existing configuration files with newer ones.
152     * 'old': Forces usage of all old files.
153     * 'unchanged: Updates only unchanged config files.
154     * 'none': Provides backward-compatibility with existing Puppet manifests.
155    
156   Valid values for `cfg_missing` are 'true', 'false'. Setting this to 'false' provides backward compatibility; setting it to 'true' checks for and installs missing configuration files for the selected package.
157
158 * `apt::key`: Adds a key to the list of keys used by Apt to authenticate packages. This type uses the aforementioned `apt_key` native type. As such, it no longer requires the `wget` command on which the old implementation depended.
159
160   ```
161   apt::key { 'puppetlabs':
162     key        => '1054B7A24BD6EC30',
163     key_server => 'pgp.mit.edu',
164   }
165
166   apt::key { 'jenkins':
167     key        => '9B7D32F2D50582E6',
168     key_source => 'http://pkg.jenkins-ci.org/debian/jenkins-ci.org.key',
169   }
170   ```
171
172 * `apt::pin`: Defined type that adds an Apt pin for a certain release.
173
174   ```
175   apt::pin { 'karmic': priority => 700 }
176   apt::pin { 'karmic-updates': priority => 700 }
177   apt::pin { 'karmic-security': priority => 700 }
178   ```
179
180   Note that you can also specify more complex pins using distribution properties.
181
182   ```
183   apt::pin { 'stable':
184     priority        => -10,
185     originator      => 'Debian',
186     release_version => '3.0',
187     component       => 'main',
188     label           => 'Debian'
189   }
190   ```  
191
192   If you want to pin a number of packages, you can specify the packages as a space-delimited string using the `packages` attribute, or you can pass in an array of package names.
193
194 * `apt::ppa`: Adds a PPA repository using `add-apt-repository`. For example, `apt::ppa { 'ppa:drizzle-developers/ppa': }`.
195
196 * `apt::source`: Adds an Apt source to `/etc/apt/sources.list.d/`. For example:
197
198   ```
199   apt::source { 'debian_unstable':
200     comment           => 'This is the iWeb Debian unstable mirror',
201     location          => 'http://debian.mirror.iweb.ca/debian/',
202     release           => 'unstable',
203     repos             => 'main contrib non-free',
204     required_packages => 'debian-keyring debian-archive-keyring',
205     key               => '8B48AD6246925553',
206     key_server        => 'subkeys.pgp.net',
207     pin               => '-10',
208     include_src       => true,
209     include_deb       => true
210   }
211   ```  
212
213   For example, to configure your system so the source is the Puppet Labs Apt repository:
214
215   ```
216   apt::source { 'puppetlabs':
217     location   => 'http://apt.puppetlabs.com',
218     repos      => 'main',
219     key        => '1054B7A24BD6EC30',
220     key_server => 'pgp.mit.edu',
221     }
222   ```
223
224 ### Facts
225
226 The apt module includes a few facts to describe the state of the Apt system:
227
228 * `apt_updates`: The number of updates available on the system
229 * `apt_security_updates`: The number of updates which are security updates
230 * `apt_package_updates`: The package names that are available for update. In Facter 2.0 and later, this will be a list type; in earlier versions, it is a comma-delimited string.
231 * `apt_update_last_success`: The date, in epochtime, of the most recent successful `apt-get update` run. This is determined by reading the mtime of  /var/lib/apt/periodic/update-success-stamp.
232
233 **Note:** The facts depend on 'update-notifier' being installed on your system. Though this is a GNOME daemon only the support files are needed so the package 'update-notifier-common' is enough to enable this functionality.
234
235 #### Hiera example
236
237 ```
238 <pre>
239 apt::sources:
240   'debian_unstable':
241     location: 'http://debian.mirror.iweb.ca/debian/'
242     release: 'unstable'
243     repos: 'main contrib non-free'
244     required_packages: 'debian-keyring debian-archive-keyring'
245     key: '9AA38DCD55BE302B'
246     key_server: 'subkeys.pgp.net'
247     pin: '-10'
248     include_src: true
249     include_deb: true
250
251   'puppetlabs':
252     location: 'http://apt.puppetlabs.com'
253     repos: 'main'
254     key: '1054B7A24BD6EC30'
255     key_server: 'pgp.mit.edu'
256 </pre>
257 ```
258
259 ### Parameters
260
261 #### apt
262
263 * `always_apt_update`: Set to 'true' to update Apt on every run. This setting is intended for development environments where package updates are frequent. Defaults to 'false'. 
264 * `apt_update_frequency`: Sets the run frequency for `apt-get update`. Defaults to 'reluctantly'. Accepts the following values:
265   * 'always': Runs update at every Puppet run.
266   * 'daily': Runs update daily; that is, `apt-get update` runs if the value of `apt_update_last_success` is less than current epoch time - 86400. If the exec resource `apt_update` is notified, `apt-get update` runs regardless of this value. 
267   * 'weekly': Runs update weekly; that is, `apt-get update` runs if the value of `apt_update_last_success` is less than current epoch time - 604800. If the exec resource `apt_update` is notified, `apt-get update` runs regardless of this value. 
268   * 'reluctantly': Only runs `apt-get update` if the exec resource `apt_update` is notified. This is the default setting.  
269 * `disable_keys`: Disables the requirement for all packages to be signed.
270 * `proxy_host`: Configures a proxy host and stores the configuration in /etc/apt/apt.conf.d/01proxy.
271 * `proxy_port`: Configures a proxy port and stores the configuration in /etc/apt/apt.conf.d/01proxy.
272 * `purge_sources_list`: If set to 'true', Puppet purges all unmanaged entries from sources.list. Accepts 'true' or 'false'. Defaults to 'false'.
273 * `purge_sources_list_d`: If set to 'true', Puppet purges all unmanaged entries from sources.list.d. Accepts 'true' or 'false'. Defaults to 'false'.
274 * `update_timeout`: Overrides the exec timeout in seconds for `apt-get update`. Defaults to exec default (300).
275 * `update_tries`: Sets how many times to attempt running `apt-get update`. Use this to work around transient DNS and HTTP errors. By default, the command runs only once.
276 * `sources`: Passes a hash to create_resource to make new `apt::source` resources.
277 * `fancy_progress`: Enables fancy progress bars for apt. Accepts 'true', 'false'. Defaults to 'false'.
278
279 ####apt::unattended_upgrades
280
281 * `legacy_origin`: If set to true, use the old `Unattended-Upgrade::Allowed-Origins` variable. If false, use `Unattended-Upgrade::Origins-Pattern`. OS-dependent defaults are defined in `apt::params`.
282 * `origins`: The repositories from which to automatically upgrade included packages.
283 * `blacklist`: A list of packages to **not** automatically upgrade.
284 * `update`: How often, in days, to run `apt-get update`.
285 * `download`: How often, in days, to run `apt-get upgrade --download-only`.
286 * `upgrade`: How often, in days, to upgrade packages included in the origins list.
287 * `autoclean`: How often, in days, to run `apt-get autoclean`.
288 * `randomsleep`: How long, in seconds, to randomly wait before applying upgrades.
289
290 ####apt::source
291
292 * `comment`: Add a comment to the apt source file.
293 * `ensure`: Allows you to remove the apt source file. Can be 'present' or 'absent'.
294 * `location`: The URL of the apt repository.
295 * `release`: The distribution of the apt repository. Defaults to fact 'lsbdistcodename'.
296 * `repos`: The component of the apt repository. This defaults to 'main'.
297 * `include_deb`: References a Debian distribution's binary package.
298 * `include_src`: Enable the deb-src type, references a Debian distribution's source code in the same form as the include_deb type. A deb-src line is required to fetch source indexes.
299 * `required_packages`: install required packages via an exec. defaults to 'false'.
300 * `key`: See apt::key
301 * `key_server`: See apt::key
302 * `key_content`: See apt::key
303 * `key_source`: See apt::key
304 * `pin`: See apt::pin
305 * `architecture`: can be used to specify for which architectures information should be downloaded. If this option is not set all architectures defined by the APT::Architectures option will be downloaded. Defaults to 'undef' which means all. Example values can be 'i386' or 'i386,alpha,powerpc'.
306 * `trusted_source` can be set to indicate that packages from this source are always authenticated even if the Release file is not signed or the signature can't be checked. Defaults to false. Can be 'true' or 'false'.
307
308 ####apt::key
309
310 * `ensure`: The state we want this key in. Can be 'present' or 'absent'.
311 * `key`: Is a GPG key ID or full key fingerprint. This value is validated with a regex enforcing it to only contain valid hexadecimal characters, be precisely 8 or 16 hexadecimal characters long and optionally prefixed with 0x for key IDs, or 40 hexadecimal characters long for key fingerprints.
312 * `key_content`: This parameter can be used to pass in a GPG key as a string in case it cannot be fetched from a remote location and using a file resource is for other reasons inconvenient.
313 * `key_source`: This parameter can be used to pass in the location of a GPG key. This URI can take the form of a `URL` (ftp, http or https) and a `path` (absolute path to a file on the target system).
314 * `key_server`: The keyserver from where to fetch our GPG key. It can either be a domain name or URL. It defaults to undef which results in apt_key's default keyserver being used, currently `keyserver.ubuntu.com`.
315 * `key_options`: Additional options to pass on to `apt-key adv --keyserver-options`.
316
317 ####apt::pin
318
319 * `ensure`: The state we want this pin in. Can be 'present' or 'absent'.
320 * `explanation`: Add a comment. Defaults to `${caller_module_name}: ${name}`.
321 * `order`: The order of the file name. Defaults to '', otherwise must be an integer.
322 * `packages`: The list of packages to pin. Defaults to '\*'. Can be an array or string. 
323 * `priority`: Several versions of a package may be available for installation when the sources.list(5) file contains references to more than one distribution (for example, stable and testing). APT assigns a priority to each version that is available. Subject to dependency constraints, apt-get selects the version with the highest priority for installation.
324 * `release`: The Debian release. Defaults to ''. Typical values can be 'stable', 'testing' and 'unstable'.
325 * `origin`: Can be used to match a hostname. The following record will assign a high priority to all versions available from the server identified by the hostname. Defaults to ''.
326 * `version`: The specific form assigns a priority (a "Pin-Priority") to one or more specified packages with a specified version or version range.
327 * `codename`: The distribution (lsbdistcodename) of the apt repository. Defaults to ''.
328 * `release_version`: Names the release version. For example, the packages in the tree might belong to Debian release version 7. Defaults to ''.
329 * `component`: Names the licensing component associated with the packages in the directory tree of the Release file. defaults to ''. Typical values can be 'main', 'dependencies' and 'restricted'
330 * `originator`: Names the originator of the packages in the directory tree of the Release file. Defaults to ''. Most commonly, this is Debian.
331 * `label`: Names the label of the packages in the directory tree of the Release file. Defaults to ''. Most commonly, this is Debian.
332
333 **Note**: Parameters release, origin, and version are mutually exclusive.
334
335 It is recommended to read the manpage 'apt_preferences(5)'
336
337 ####apt::ppa
338
339 * `ensure`: Whether we are adding or removing the PPA. Can be 'present' or 'absent'. Defaults to 'present'.
340 * `release`: The codename for the operating system you're running. Defaults to `$lsbdistcodename`. Required if lsb-release is not installed.
341 * `options`: Options to be passed to the `apt-add-repository` command. OS-dependent defaults are set in `apt::params`.
342 * `package_name`: The package that provides the `apt-add-repository` command. OS-dependent defaults are set in `apt::params`.
343 * `package_manage`: Whether or not to manage the package providing `apt-add-repository`. Defaults to true.
344
345 ### Testing
346
347 The apt module is mostly a collection of defined resource types, which provide reusable logic for managing Apt. It provides smoke tests for testing functionality on a target system, as well as spec tests for checking a compiled catalog against an expected set of resources.
348
349 #### Example Test
350
351 This test sets up a Puppet Labs Apt repository. Start by creating a new smoke test, called puppetlabs-apt.pp, in the apt module's test folder. In this test, declare a single resource representing the Puppet Labs Apt source and GPG key:
352
353 ```
354 apt::source { 'puppetlabs':
355   location   => 'http://apt.puppetlabs.com',
356   repos      => 'main',
357   key        => '1054B7A24BD6EC30',
358   key_server => 'pgp.mit.edu',
359 }
360 ```    
361
362 This resource creates an Apt source named puppetlabs and gives Puppet information about the repository's location and the key used to sign its packages. Puppet leverages Facter to determine the appropriate release, but you can set this directly by adding the release type.
363
364 Check your smoke test for syntax errors:
365
366 `$ puppet parser validate tests/puppetlabs-apt.pp`
367
368 If you receive no output from that command, it means nothing is wrong. Then, apply the code:
369
370 ```
371 $ puppet apply --verbose tests/puppetlabs-apt.pp
372 notice: /Stage[main]//Apt::Source[puppetlabs]/File[puppetlabs.list]/ensure: defined content as '{md5}3be1da4923fb910f1102a233b77e982e'
373 info: /Stage[main]//Apt::Source[puppetlabs]/File[puppetlabs.list]: Scheduling refresh of Exec[puppetlabs apt update]
374 notice: /Stage[main]//Apt::Source[puppetlabs]/Exec[puppetlabs apt update]: Triggered 'refresh' from 1 events>
375 ```    
376
377 The above example uses a smoke test to lay out a resource declaration and apply it on your system. In production, you might want to declare your Apt sources inside the classes where they’re needed.
378
379 Limitations
380 -----------
381
382 This module should work across all versions of Debian/Ubuntu and support all major Apt repository management features.
383
384 Development
385 ------------
386
387 Puppet Labs modules on the Puppet Forge are open projects, and community contributions are essential for keeping them great. We can’t access the huge number of platforms and myriad of hardware, software, and deployment configurations that Puppet is intended to serve.
388
389 We want to keep it as easy as possible to contribute changes so that our modules work in your environment. There are a few guidelines that we need contributors to follow so that we can have a chance of keeping on top of things.
390
391 You can read the complete module contribution guide [on the Puppet Labs wiki.](http://projects.puppetlabs.com/projects/module-site/wiki/Module_contributing)
392
393 License
394 -------
395
396 The original code for this module comes from Evolving Web and was licensed under the MIT license. Code added since the fork of this module is licensed under the Apache 2.0 License like the rest of the Puppet Labs products.
397
398 The LICENSE contains both licenses.
399
400 Contributors
401 ------------
402
403 A lot of great people have contributed to this module. A somewhat current list follows:
404
405 * Ben Godfrey <ben.godfrey@wonga.com>
406 * Branan Purvine-Riley <branan@puppetlabs.com>
407 * Christian G. Warden <cwarden@xerus.org>
408 * Dan Bode <bodepd@gmail.com> <dan@puppetlabs.com>
409 * Daniel Tremblay <github@danieltremblay.ca>
410 * Garrett Honeycutt <github@garretthoneycutt.com>
411 * Jeff Wallace <jeff@evolvingweb.ca> <jeff@tjwallace.ca>
412 * Ken Barber <ken@bob.sh>
413 * Matthaus Litteken <matthaus@puppetlabs.com> <mlitteken@gmail.com>
414 * Matthias Pigulla <mp@webfactory.de>
415 * Monty Taylor <mordred@inaugust.com>
416 * Peter Drake <pdrake@allplayers.com>
417 * Reid Vandewiele <marut@cat.pdx.edu>
418 * Robert Navarro <rnavarro@phiivo.com>
419 * Ryan Coleman <ryan@puppetlabs.com>
420 * Scott McLeod <scott.mcleod@theice.com>
421 * Spencer Krum <spencer@puppetlabs.com>
422 * William Van Hevelingen <blkperl@cat.pdx.edu> <wvan13@gmail.com>
423 * Zach Leslie <zach@puppetlabs.com>
424 * Daniele Sluijters <github@daenney.net>
425 * Daniel Paulus <daniel@inuits.eu>
426 * Wolf Noble <wolf@wolfspyre.com>