~bzr-pqm/bzr/bzr.dev

« back to all changes in this revision

Viewing changes to bzrlib/config.py

  • Committer: Vincent Ladeuil
  • Date: 2010-10-08 10:50:51 UTC
  • mfrom: (5050.17.31 2.2.2-dev)
  • mto: This revision was merged to the branch mainline in revision 5474.
  • Revision ID: v.ladeuil+lp@free.fr-20101008105051-xd4knkrohzclffic
Merge 2.2 into trunk including fixes for bug #651706 and bug #646133

Show diffs side-by-side

added added

removed removed

Lines of Context:
65
65
import os
66
66
import sys
67
67
 
 
68
from bzrlib.decorators import needs_write_lock
68
69
from bzrlib.lazy_import import lazy_import
69
70
lazy_import(globals(), """
70
71
import errno
74
75
 
75
76
import bzrlib
76
77
from bzrlib import (
 
78
    atomicfile,
77
79
    debug,
78
80
    errors,
 
81
    lockdir,
79
82
    mail_client,
80
83
    osutils,
81
84
    registry,
82
85
    symbol_versioning,
83
86
    trace,
 
87
    transport,
84
88
    ui,
85
89
    urlutils,
86
90
    win32utils,
257
261
 
258
262
        Something similar to 'Martin Pool <mbp@sourcefrog.net>'
259
263
 
260
 
        $BZR_EMAIL can be set to override this (as well as the
261
 
        deprecated $BZREMAIL), then
 
264
        $BZR_EMAIL can be set to override this, then
262
265
        the concrete policy type is checked, and finally
263
266
        $EMAIL is examined.
264
 
        If none is found, a reasonable default is (hopefully)
265
 
        created.
 
267
        If no username can be found, errors.NoWhoami exception is raised.
266
268
 
267
269
        TODO: Check it's reasonably well-formed.
268
270
        """
278
280
        if v:
279
281
            return v.decode(osutils.get_user_encoding())
280
282
 
281
 
        name, email = _auto_user_id()
282
 
        if name:
283
 
            return '%s <%s>' % (name, email)
284
 
        else:
285
 
            return email
 
283
        raise errors.NoWhoami()
 
284
 
 
285
    def ensure_username(self):
 
286
        """Raise errors.NoWhoami if username is not set.
 
287
 
 
288
        This method relies on the username() function raising the error.
 
289
        """
 
290
        self.username()
286
291
 
287
292
    def signature_checking(self):
288
293
        """What is the current policy for signature checking?."""
350
355
class IniBasedConfig(Config):
351
356
    """A configuration policy that draws from ini files."""
352
357
 
353
 
    def __init__(self, get_filename):
 
358
    def __init__(self, get_filename=symbol_versioning.DEPRECATED_PARAMETER,
 
359
                 file_name=None):
 
360
        """Base class for configuration files using an ini-like syntax.
 
361
 
 
362
        :param file_name: The configuration file path.
 
363
        """
354
364
        super(IniBasedConfig, self).__init__()
355
 
        self._get_filename = get_filename
 
365
        self.file_name = file_name
 
366
        if symbol_versioning.deprecated_passed(get_filename):
 
367
            symbol_versioning.warn(
 
368
                'IniBasedConfig.__init__(get_filename) was deprecated in 2.3.'
 
369
                ' Use file_name instead.',
 
370
                DeprecationWarning,
 
371
                stacklevel=2)
 
372
            if get_filename is not None:
 
373
                self.file_name = get_filename()
 
374
        else:
 
375
            self.file_name = file_name
 
376
        self._content = None
356
377
        self._parser = None
357
378
 
358
 
    def _get_parser(self, file=None):
 
379
    @classmethod
 
380
    def from_string(cls, str_or_unicode, file_name=None, save=False):
 
381
        """Create a config object from a string.
 
382
 
 
383
        :param str_or_unicode: A string representing the file content. This will
 
384
            be utf-8 encoded.
 
385
 
 
386
        :param file_name: The configuration file path.
 
387
 
 
388
        :param _save: Whether the file should be saved upon creation.
 
389
        """
 
390
        conf = cls(file_name=file_name)
 
391
        conf._create_from_string(str_or_unicode, save)
 
392
        return conf
 
393
 
 
394
    def _create_from_string(self, str_or_unicode, save):
 
395
        self._content = StringIO(str_or_unicode.encode('utf-8'))
 
396
        # Some tests use in-memory configs, some other always need the config
 
397
        # file to exist on disk.
 
398
        if save:
 
399
            self._write_config_file()
 
400
 
 
401
    def _get_parser(self, file=symbol_versioning.DEPRECATED_PARAMETER):
359
402
        if self._parser is not None:
360
403
            return self._parser
361
 
        if file is None:
362
 
            input = self._get_filename()
 
404
        if symbol_versioning.deprecated_passed(file):
 
405
            symbol_versioning.warn(
 
406
                'IniBasedConfig._get_parser(file=xxx) was deprecated in 2.3.'
 
407
                ' Use IniBasedConfig(_content=xxx) instead.',
 
408
                DeprecationWarning,
 
409
                stacklevel=2)
 
410
        if self._content is not None:
 
411
            co_input = self._content
 
412
        elif self.file_name is None:
 
413
            raise AssertionError('We have no content to create the config')
363
414
        else:
364
 
            input = file
 
415
            co_input = self.file_name
365
416
        try:
366
 
            self._parser = ConfigObj(input, encoding='utf-8')
 
417
            self._parser = ConfigObj(co_input, encoding='utf-8')
367
418
        except configobj.ConfigObjError, e:
368
419
            raise errors.ParseConfigError(e.errors, e.config.filename)
 
420
        # Make sure self.reload() will use the right file name
 
421
        self._parser.filename = self.file_name
369
422
        return self._parser
370
423
 
 
424
    def reload(self):
 
425
        """Reload the config file from disk."""
 
426
        if self.file_name is None:
 
427
            raise AssertionError('We need a file name to reload the config')
 
428
        if self._parser is not None:
 
429
            self._parser.reload()
 
430
 
371
431
    def _get_matching_sections(self):
372
432
        """Return an ordered list of (section_name, extra_path) pairs.
373
433
 
476
536
    def _get_nickname(self):
477
537
        return self.get_user_option('nickname')
478
538
 
479
 
 
480
 
class GlobalConfig(IniBasedConfig):
 
539
    def _write_config_file(self):
 
540
        if self.file_name is None:
 
541
            raise AssertionError('We cannot save, self.file_name is None')
 
542
        conf_dir = os.path.dirname(self.file_name)
 
543
        ensure_config_dir_exists(conf_dir)
 
544
        atomic_file = atomicfile.AtomicFile(self.file_name)
 
545
        self._get_parser().write(atomic_file)
 
546
        atomic_file.commit()
 
547
        atomic_file.close()
 
548
        osutils.copy_ownership_from_path(self.file_name)
 
549
 
 
550
 
 
551
class LockableConfig(IniBasedConfig):
 
552
    """A configuration needing explicit locking for access.
 
553
 
 
554
    If several processes try to write the config file, the accesses need to be
 
555
    serialized.
 
556
 
 
557
    Daughter classes should decorate all methods that update a config with the
 
558
    ``@needs_write_lock`` decorator (they call, directly or indirectly, the
 
559
    ``_write_config_file()`` method. These methods (typically ``set_option()``
 
560
    and variants must reload the config file from disk before calling
 
561
    ``_write_config_file()``), this can be achieved by calling the
 
562
    ``self.reload()`` method. Note that the lock scope should cover both the
 
563
    reading and the writing of the config file which is why the decorator can't
 
564
    be applied to ``_write_config_file()`` only.
 
565
 
 
566
    This should be enough to implement the following logic:
 
567
    - lock for exclusive write access,
 
568
    - reload the config file from disk,
 
569
    - set the new value
 
570
    - unlock
 
571
 
 
572
    This logic guarantees that a writer can update a value without erasing an
 
573
    update made by another writer.
 
574
    """
 
575
 
 
576
    lock_name = 'lock'
 
577
 
 
578
    def __init__(self, file_name):
 
579
        super(LockableConfig, self).__init__(file_name=file_name)
 
580
        self.dir = osutils.dirname(osutils.safe_unicode(self.file_name))
 
581
        self.transport = transport.get_transport(self.dir)
 
582
        self._lock = lockdir.LockDir(self.transport, 'lock')
 
583
 
 
584
    def _create_from_string(self, unicode_bytes, save):
 
585
        super(LockableConfig, self)._create_from_string(unicode_bytes, False)
 
586
        if save:
 
587
            # We need to handle the saving here (as opposed to IniBasedConfig)
 
588
            # to be able to lock
 
589
            self.lock_write()
 
590
            self._write_config_file()
 
591
            self.unlock()
 
592
 
 
593
    def lock_write(self, token=None):
 
594
        """Takes a write lock in the directory containing the config file.
 
595
 
 
596
        If the directory doesn't exist it is created.
 
597
        """
 
598
        ensure_config_dir_exists(self.dir)
 
599
        return self._lock.lock_write(token)
 
600
 
 
601
    def unlock(self):
 
602
        self._lock.unlock()
 
603
 
 
604
    def break_lock(self):
 
605
        self._lock.break_lock()
 
606
 
 
607
    def _write_config_file(self):
 
608
        if self._lock is None or not self._lock.is_held:
 
609
            # NB: if the following exception is raised it probably means a
 
610
            # missing @needs_write_lock decorator on one of the callers.
 
611
            raise errors.ObjectNotLocked(self)
 
612
        super(LockableConfig, self)._write_config_file()
 
613
 
 
614
 
 
615
class GlobalConfig(LockableConfig):
481
616
    """The configuration that should be used for a specific location."""
482
617
 
 
618
    def __init__(self):
 
619
        super(GlobalConfig, self).__init__(file_name=config_filename())
 
620
 
 
621
    @classmethod
 
622
    def from_string(cls, str_or_unicode, save=False):
 
623
        """Create a config object from a string.
 
624
 
 
625
        :param str_or_unicode: A string representing the file content. This
 
626
            will be utf-8 encoded.
 
627
 
 
628
        :param save: Whether the file should be saved upon creation.
 
629
        """
 
630
        conf = cls()
 
631
        conf._create_from_string(str_or_unicode, save)
 
632
        return conf
 
633
 
483
634
    def get_editor(self):
484
635
        return self._get_user_option('editor')
485
636
 
486
 
    def __init__(self):
487
 
        super(GlobalConfig, self).__init__(config_filename)
488
 
 
 
637
    @needs_write_lock
489
638
    def set_user_option(self, option, value):
490
639
        """Save option and its value in the configuration."""
491
640
        self._set_option(option, value, 'DEFAULT')
497
646
        else:
498
647
            return {}
499
648
 
 
649
    @needs_write_lock
500
650
    def set_alias(self, alias_name, alias_command):
501
651
        """Save the alias in the configuration."""
502
652
        self._set_option(alias_name, alias_command, 'ALIASES')
503
653
 
 
654
    @needs_write_lock
504
655
    def unset_alias(self, alias_name):
505
656
        """Unset an existing alias."""
 
657
        self.reload()
506
658
        aliases = self._get_parser().get('ALIASES')
507
659
        if not aliases or alias_name not in aliases:
508
660
            raise errors.NoSuchAlias(alias_name)
510
662
        self._write_config_file()
511
663
 
512
664
    def _set_option(self, option, value, section):
513
 
        # FIXME: RBC 20051029 This should refresh the parser and also take a
514
 
        # file lock on bazaar.conf.
515
 
        conf_dir = os.path.dirname(self._get_filename())
516
 
        ensure_config_dir_exists(conf_dir)
 
665
        self.reload()
517
666
        self._get_parser().setdefault(section, {})[option] = value
518
667
        self._write_config_file()
519
668
 
520
 
    def _write_config_file(self):
521
 
        path = self._get_filename()
522
 
        f = open(path, 'wb')
523
 
        osutils.copy_ownership_from_path(path)
524
 
        self._get_parser().write(f)
525
 
        f.close()
526
 
 
527
 
 
528
 
class LocationConfig(IniBasedConfig):
 
669
 
 
670
class LocationConfig(LockableConfig):
529
671
    """A configuration object that gives the policy for a location."""
530
672
 
531
673
    def __init__(self, location):
532
 
        name_generator = locations_config_filename
533
 
        if (not os.path.exists(name_generator()) and
534
 
                os.path.exists(branches_config_filename())):
535
 
            if sys.platform == 'win32':
536
 
                trace.warning('Please rename %s to %s'
537
 
                              % (branches_config_filename(),
538
 
                                 locations_config_filename()))
539
 
            else:
540
 
                trace.warning('Please rename ~/.bazaar/branches.conf'
541
 
                              ' to ~/.bazaar/locations.conf')
542
 
            name_generator = branches_config_filename
543
 
        super(LocationConfig, self).__init__(name_generator)
 
674
        super(LocationConfig, self).__init__(
 
675
            file_name=locations_config_filename())
544
676
        # local file locations are looked up by local path, rather than
545
677
        # by file url. This is because the config file is a user
546
678
        # file, and we would rather not expose the user to file urls.
548
680
            location = urlutils.local_path_from_url(location)
549
681
        self.location = location
550
682
 
 
683
    @classmethod
 
684
    def from_string(cls, str_or_unicode, location, save=False):
 
685
        """Create a config object from a string.
 
686
 
 
687
        :param str_or_unicode: A string representing the file content. This will
 
688
            be utf-8 encoded.
 
689
 
 
690
        :param location: The location url to filter the configuration.
 
691
 
 
692
        :param save: Whether the file should be saved upon creation.
 
693
        """
 
694
        conf = cls(location)
 
695
        conf._create_from_string(str_or_unicode, save)
 
696
        return conf
 
697
 
551
698
    def _get_matching_sections(self):
552
699
        """Return an ordered list of section names matching this location."""
553
700
        sections = self._get_parser()
641
788
            if policy_key in self._get_parser()[section]:
642
789
                del self._get_parser()[section][policy_key]
643
790
 
 
791
    @needs_write_lock
644
792
    def set_user_option(self, option, value, store=STORE_LOCATION):
645
793
        """Save option and its value in the configuration."""
646
794
        if store not in [STORE_LOCATION,
648
796
                         STORE_LOCATION_APPENDPATH]:
649
797
            raise ValueError('bad storage policy %r for %r' %
650
798
                (store, option))
651
 
        # FIXME: RBC 20051029 This should refresh the parser and also take a
652
 
        # file lock on locations.conf.
653
 
        conf_dir = os.path.dirname(self._get_filename())
654
 
        ensure_config_dir_exists(conf_dir)
 
799
        self.reload()
655
800
        location = self.location
656
801
        if location.endswith('/'):
657
802
            location = location[:-1]
658
 
        if (not location in self._get_parser() and
659
 
            not location + '/' in self._get_parser()):
660
 
            self._get_parser()[location]={}
661
 
        elif location + '/' in self._get_parser():
 
803
        parser = self._get_parser()
 
804
        if not location in parser and not location + '/' in parser:
 
805
            parser[location] = {}
 
806
        elif location + '/' in parser:
662
807
            location = location + '/'
663
 
        self._get_parser()[location][option]=value
 
808
        parser[location][option]=value
664
809
        # the allowed values of store match the config policies
665
810
        self._set_option_policy(location, option, store)
666
 
        self._get_parser().write(file(self._get_filename(), 'wb'))
 
811
        self._write_config_file()
667
812
 
668
813
 
669
814
class BranchConfig(Config):
670
815
    """A configuration object giving the policy for a branch."""
671
816
 
 
817
    def __init__(self, branch):
 
818
        super(BranchConfig, self).__init__()
 
819
        self._location_config = None
 
820
        self._branch_data_config = None
 
821
        self._global_config = None
 
822
        self.branch = branch
 
823
        self.option_sources = (self._get_location_config,
 
824
                               self._get_branch_data_config,
 
825
                               self._get_global_config)
 
826
 
672
827
    def _get_branch_data_config(self):
673
828
        if self._branch_data_config is None:
674
829
            self._branch_data_config = TreeConfig(self.branch)
772
927
        """See Config.gpg_signing_command."""
773
928
        return self._get_safe_value('_gpg_signing_command')
774
929
 
775
 
    def __init__(self, branch):
776
 
        super(BranchConfig, self).__init__()
777
 
        self._location_config = None
778
 
        self._branch_data_config = None
779
 
        self._global_config = None
780
 
        self.branch = branch
781
 
        self.option_sources = (self._get_location_config,
782
 
                               self._get_branch_data_config,
783
 
                               self._get_global_config)
784
 
 
785
930
    def _post_commit(self):
786
931
        """See Config.post_commit."""
787
932
        return self._get_safe_value('_post_commit')
841
986
                                  ' or HOME set')
842
987
        return osutils.pathjoin(base, 'bazaar', '2.0')
843
988
    else:
844
 
        # cygwin, linux, and darwin all have a $HOME directory
845
989
        if base is None:
846
990
            base = os.path.expanduser("~")
847
991
        return osutils.pathjoin(base, ".bazaar")
852
996
    return osutils.pathjoin(config_dir(), 'bazaar.conf')
853
997
 
854
998
 
855
 
def branches_config_filename():
856
 
    """Return per-user configuration ini file filename."""
857
 
    return osutils.pathjoin(config_dir(), 'branches.conf')
858
 
 
859
 
 
860
999
def locations_config_filename():
861
1000
    """Return per-user configuration ini file filename."""
862
1001
    return osutils.pathjoin(config_dir(), 'locations.conf')
899
1038
        return os.path.expanduser('~/.cache')
900
1039
 
901
1040
 
902
 
def _auto_user_id():
903
 
    """Calculate automatic user identification.
904
 
 
905
 
    Returns (realname, email).
906
 
 
907
 
    Only used when none is set in the environment or the id file.
908
 
 
909
 
    This previously used the FQDN as the default domain, but that can
910
 
    be very slow on machines where DNS is broken.  So now we simply
911
 
    use the hostname.
912
 
    """
913
 
    import socket
914
 
 
915
 
    if sys.platform == 'win32':
916
 
        name = win32utils.get_user_name_unicode()
917
 
        if name is None:
918
 
            raise errors.BzrError("Cannot autodetect user name.\n"
919
 
                                  "Please, set your name with command like:\n"
920
 
                                  'bzr whoami "Your Name <name@domain.com>"')
921
 
        host = win32utils.get_host_name_unicode()
922
 
        if host is None:
923
 
            host = socket.gethostname()
924
 
        return name, (name + '@' + host)
925
 
 
926
 
    try:
927
 
        import pwd
928
 
        uid = os.getuid()
929
 
        try:
930
 
            w = pwd.getpwuid(uid)
931
 
        except KeyError:
932
 
            raise errors.BzrCommandError('Unable to determine your name.  '
933
 
                'Please use "bzr whoami" to set it.')
934
 
 
935
 
        # we try utf-8 first, because on many variants (like Linux),
936
 
        # /etc/passwd "should" be in utf-8, and because it's unlikely to give
937
 
        # false positives.  (many users will have their user encoding set to
938
 
        # latin-1, which cannot raise UnicodeError.)
939
 
        try:
940
 
            gecos = w.pw_gecos.decode('utf-8')
941
 
            encoding = 'utf-8'
942
 
        except UnicodeError:
943
 
            try:
944
 
                encoding = osutils.get_user_encoding()
945
 
                gecos = w.pw_gecos.decode(encoding)
946
 
            except UnicodeError:
947
 
                raise errors.BzrCommandError('Unable to determine your name.  '
948
 
                   'Use "bzr whoami" to set it.')
949
 
        try:
950
 
            username = w.pw_name.decode(encoding)
951
 
        except UnicodeError:
952
 
            raise errors.BzrCommandError('Unable to determine your name.  '
953
 
                'Use "bzr whoami" to set it.')
954
 
 
955
 
        comma = gecos.find(',')
956
 
        if comma == -1:
957
 
            realname = gecos
958
 
        else:
959
 
            realname = gecos[:comma]
960
 
        if not realname:
961
 
            realname = username
962
 
 
963
 
    except ImportError:
964
 
        import getpass
965
 
        try:
966
 
            user_encoding = osutils.get_user_encoding()
967
 
            realname = username = getpass.getuser().decode(user_encoding)
968
 
        except UnicodeDecodeError:
969
 
            raise errors.BzrError("Can't decode username as %s." % \
970
 
                    user_encoding)
971
 
 
972
 
    return realname, (username + '@' + socket.gethostname())
973
 
 
974
 
 
975
1041
def parse_username(username):
976
1042
    """Parse e-mail username and return a (name, address) tuple."""
977
1043
    match = re.match(r'(.*?)\s*<?([\w+.-]+@[\w+.-]+)>?', username)
1063
1129
        """Save the config file, only tests should use it for now."""
1064
1130
        conf_dir = os.path.dirname(self._filename)
1065
1131
        ensure_config_dir_exists(conf_dir)
1066
 
        self._get_config().write(file(self._filename, 'wb'))
 
1132
        f = file(self._filename, 'wb')
 
1133
        try:
 
1134
            self._get_config().write(f)
 
1135
        finally:
 
1136
            f.close()
1067
1137
 
1068
1138
    def _set_option(self, section_name, option_name, value):
1069
1139
        """Set an authentication configuration option"""
1517
1587
            return StringIO()
1518
1588
 
1519
1589
    def _get_configobj(self):
1520
 
        return ConfigObj(self._get_config_file(), encoding='utf-8')
 
1590
        f = self._get_config_file()
 
1591
        try:
 
1592
            return ConfigObj(f, encoding='utf-8')
 
1593
        finally:
 
1594
            f.close()
1521
1595
 
1522
1596
    def _set_configobj(self, configobj):
1523
1597
        out_file = StringIO()